大數據計算服務MaxCompute 5月新功能發布一覽

大數據計算服務MaxCompute 5月新功能發布一覽

來自專欄阿里大數據玩家

摘要： 5月，MaxCompute提供全表掃描的設置操作，可允許或禁止全表掃描；支持OSS上的Hive文件格式；支持OSS壓縮格式GZIP。。。更多新功能新體驗，歡迎閱讀本文了解。

5月MaxCompute又發布哪些新功能，優化了哪些產品體驗呢？小編帶你一起看~

【新功能】 MaxCompute提供全表掃描的設置操作

以開關的形式，通過設置允許或禁止全表掃描。true為允許，false為禁止 項目級別控制：setproject odps.sql.allow.fullscan=false/true Session級別控制：set odps.sql.allow.fullscan=false/true 參考文檔

【體驗優化】MaxCompute Optimizer - Join Grouping優化

用戶query有多個連續的join時，並且這些join有共同的join key，MaxCompute Optimizer會將這些join合併成multi-way join，多路join的輸入數據直接shuffle到同一個stage，在做multi-way join時直接將多路的數據來做join，能減少不需要的中間join的數據量，減少整個query的stage，加速query執行。

【新功能】MaxCompute非結構化功能支持RAM子賬號

MaxCompute非結構化處理框架，新增支持RAM子賬號創建外部表 參考文檔

【新功能】MaxCompute支持OSS上的Hive文件格式

MaxCompute非結構化，新增支持讀取OSS上的開源數據格式：PARQUET、RCFILE 參考文檔

【新功能】MaxCompute支持OSS壓縮格式GZIP

MaxCompute支持OSS壓縮格式-內置StorageHandler支持gzip的讀/寫壓縮 參考文檔

【新功能】MaxCompute SQL支持STRUCT複雜類型的排序與比較

MaxCompute SQL支持 STRUCT類型，並且可以任意嵌套使用，同時Java UDF也同樣支持STRUCT，用戶可以直接將複雜類型傳入UDF中 參考文檔

【新功能】MaxCompute SQL 新語法 SEMI JOIN

MaxCompute SQL 新語法 SEMI JOIN，包括：LEFT SEMI JOIN，LEFT ANTI JOIN 參考文檔

【新功能】MaxCompute SQL 支持 CASE/WHEN的隱式類型轉換

新增MaxCompute SQL：CASE/WHEN 表達式的隱式轉換規則 參考文檔

【新功能】MaxCompute SQL支持更多的內置函數

聚合函數：VARIANCE/VAR_POP、VAR_SAMP、COVAR_POP、COVAR_SAMP、PERCENTILE 字元函數：TRANSLATE 窗口函數：NTILE 其他函數：NVL 參考文檔

【新功能】MaxCompute SQL支持Select Transform語言功能

SELECT TRANSFORM 功能允許用戶指定啟動一個子進程，將輸入數據按照一定的格式通過stdin輸入子進程，並且通過parse子進程的stdout輸出，來獲取輸出數據。適合實現MaxCompute SQL沒有的功能又不想寫UDF的情況。

【價格調整】MaxCompute 2.0 NewSQL新特性商業化收費

MaxCompute2.0 NewSQL 採用的計費標準為：一次 SQL 計算費用 = 計算輸入數據量 SQL 複雜度 SQL 價格。當天的所有計量信息在第二天做一次性匯總收費，並直接體現在您的賬戶賬單中。NewSQL範圍：涉及MaxCompute2.0新的基本數據類型與內建函數、複雜類型的擴充、CTE，VALUES，SEMIJOIN 、腳本模式與參數化視圖、SELECT TRANSFORM 等。

價格調整內容

涉及2.0新的基本數據類型與內建函數、複雜類型的擴充、CTE，VALUES，SEMIJOIN 、腳本模式與參數化視圖、SELECT TRANSFORM 等。

文章作者：晉恆

原文鏈接

推薦閱讀：