【飛天存儲服務月報】2018年6月刊

08-11

【飛天存儲服務月報】2018年6月刊

【重點新聞】

1、產品降價：阿里雲對象存儲OSS刷新行業最低價

6月7日，在2018雲棲大會·上海峰會上，阿里雲宣布雲存儲產品開啟新一輪降價，其中對象存儲OSS產品價格下調了18.9%，刷新了雲存儲的全網最低價，表格存儲TableStore按量讀寫及資源包最高下調50%。調價後，對象存儲OSS標準型的最低售價為0.12元/GB/月，購買500TB存儲資源包相當於用戶每月最多可節省7000多元。此番調價將進一步擴大雲存儲對線下存儲的競爭優勢。

2、耗時僅45天！全球互聯網史上規模最大的公共雲數據遷移完成

在2018雲棲大會上海峰會上，阿里雲和115科技共同宣布完成全球互聯網史上規模最大的公共雲數據遷移，總量超過100PB。同時，整個過程僅耗時45天，刷新了百PB級數據公共雲遷移的新紀錄，打破AWS用時3個月完成70PB數據遷移記錄，成為全球唯一。大會現場還原了用閃電立方遷移115數據中心的全過程：2分鐘內就完成了2TB數據的安全傳輸過程。與此同時，阿里雲推出了閃電立方Mini版，可提供單台40TB的數據遷移能力，圖形化界面，引導式服務體驗。

3、Workshop實操小課堂：小微金融業務跨平台數據共享與處理

近年來，各類小微金融創新背後是各種複雜的數據採集、交換以及構建的過程。在雲棲大會上海峰會上，阿里雲函數計算、對象存儲OSS、表格存儲TableStore、日誌服務團隊共同以一個第三方支付業務的風控場景為案例，演示如何通過阿里雲產品解決核心數據互通的痛點，通過Serverless架構應對業務增長，與各計算分析引擎支持建立風控平台對機構和用戶進行服務。

4、線下活動：LC3大會—開源數據湖存儲專場

6月25日，由Linux 基金會舉辦的LC3開源技術大會在北京國家會議中心舉辦，LC3分別是指：LinuxCon、ContainerCon 及 CloudOpen 。在此次大會上的飛天技術匯專場，阿里雲存儲團隊以開源數據湖為專場議題，貢獻了《基於飛天的Lustre高可用高性能架構解析》《高性能網路技術下的阿里雲盤古分散式存儲技術變革》、《大規模無伺服器計算平台的挑戰與實踐》、《Kubernetes下日誌採集、存儲與處理技術實踐》、《開源大數據生態下的高性能分散式文件系統DFS》等五個主題分享。

【新品集合】

1、混合雲備份服務商業化

阿里雲混合雲備份（HBR）是一種簡單且具有成本效益的備份即服務 (BaaS)。它可以為用戶在數據中心、遠程和分支機構、以及雲上ECS主機的數據提供保護。混合雲備份採用集成的全局客戶端重複數據消除技術，能夠有效降低網路帶寬使用，快速完成數據全備份，壓縮備份數據所需存儲空間，確保用戶數據能快速安全高效地備份到雲上。

混合雲備份支持VMware虛擬機鏡像備份，用戶可以在VMware平台上方便地部署HBR for VMware，將虛擬機鏡像備份上雲，避免了傳統備份方案複雜的備份軟體部署，存儲資源規劃，異地備份保護等難點。

混合雲備份已經正式開始對用戶提供商業化服務，收費項目包括保護終端授權費，雲備份庫空間使用費和備份數據恢復下行流量費，與傳統備份方案相比，能為用戶節約高達70%的總體方案成本。

2、中國首個混合雲大數據雙活容災(HDR for Hadoop)發布

Hadoop集群的數據容災一直以來是數據保護的一個難點，傳統的基於快照+distcp複製技術，RPO都在小時到天級別，無法稱為真正意義上的容災。同時，災備集群的資源閑置會產生極大浪費。HDR For Big Data是國內首個支持混合雲架構下Hadoop集群雙活容災的方案，用戶可以在部署於兩個數據中心的Hadoop集群之間建立雙向複製。在實現數據容災的同時，兩個集群可以獨立運行不同的業務，實現集群雙活，避免資源浪費。另外，HDR for Big Data還可以允許用戶直接將Hadoop集群數據實時遷移至阿里雲對象存儲OSS，實現秒級RPO的數據備份和遷移。

3、函數計算髮布CDN觸發器功能，提高用戶開發效率

阿里雲函數計算正式推出 CDN 觸發器，允許用戶編寫函數快速處理 CDN 的各類事件，解決了 CDN 用戶在數據預熱、數據刷新、數據封禁、訪問日誌處理等高需求場景下的痛點，大大提高了用戶的開發效率。利用該功能，CDN 在預熱和刷新用戶數據後，會立即觸發用戶函數處理相關事件，避免用戶不斷輪詢列表查詢最新狀態；當在 CDN 上發現違禁內容時，會立即觸發用戶函數刪除源站資源，不需要等待 CDN 後台響應；日誌文件生成後，會立即觸發函數及時轉存或者下載日誌處理，相比之前，減少了 70% 日誌下載的時間。

4、對象存儲OSS Python SDK支持客戶端加密，充分保障數據安全

阿里雲對象存儲OSS在支持Https、服務端加密的基礎之上，最新發布了客戶端加密功能，提供更豐富的數據安全保護能力。

首先，用戶可以在數據發送至對象存儲OSS前，先在本地通過OSS SDK將數據加密，再通過Https傳輸到OSS。同時，用戶將數據從對象存儲OSS下載到本地後，再通過OSS SDK進行解密，確保數據在傳輸過程、持久化階段都處於加密狀態。

此外，對象存儲OSS客戶端加密支持信封加密技術，並支持KMS託管用戶主密鑰和用戶自主管理密鑰兩種密鑰管理模式，滿足用戶對數據安全的更高要求。

5、日誌查詢分析支持MySQL數據源聯合查詢功能發布

在遊戲運營、用戶行為、網路等分析場景中，都會需要涉及到靜態數據（例如道具屬性、人員信息、硬體信息等），在過去離線計算方案下，需要複雜同步且至少分鐘級以上的分析查詢延時。通過阿里雲日誌服務查詢分析功能（LogSearch/Analytics），提供MySQL這種存儲與計算分離的外部數據源，解決了實時關聯查詢問題，該功能除了能將延時從分鐘降為秒級外，還能解決異構數據源依賴性問題，靈活便捷，減少用戶使用負擔。

【技術實踐】

1、《MySQL執行計劃解析》

本文從MySQL的邏輯結構講解、MySQL查詢過程、執行計劃的案例三部分重點介紹執行計劃的輸出參數，幫助用戶選擇最佳方案。

2、《函數計算中使用Puppeteer的過程分析》

函數計算中使用Puppeteer的過程遇到了代碼包太大、依賴動態鏈接庫等問題，文章給出函數計算解決類似問題的通用解決方案。

3、《三分鐘學會如何在函數計算中使用Puppeteer》

Puppeteer是一個node庫，提供了一組用來操縱Chrome的API，Puppeteer結合函數計算使用，可以快速地構建彈性服務。文章對在函數計算中使用Puppeteer的過程和步驟進行了詳細介紹。

4、《10分鐘上線-函數計算實現Serverless圖片處理服務》

阿里雲函數計算是事件驅動的全託管服務，開發者只需編寫代碼就能快速地開發出彈性高可用的後端系統。文章介紹使用函數計算快速實現圖片處理服務的示例，為圖片處理提供新思路方案。

5、《Kubernetes中Logtail日誌採集CRD配置詳解》

日誌採集配置默認支持控制台配置方式，同時針對Kubernetes微服務開發模式，提供CRD的配置方式，本文將介紹如何使用kubectl對配置進行管理。

6、《日誌服務支持Shard自動分裂》

日誌服務的數據模型中，通常使用Shard來控制Logstore吞吐能力。數據量隨時會突增，如果不能及時處理，將造成丟失的風險。本文介紹阿里雲日誌服務提供的Shard自動分裂功能技術實踐。

>>>>閱讀全文