Quick BI----讓每個人都是數據分析師
摘要: 阿里雲的龐都從數據分析著手,介紹了目前在數據分析領域的現狀與困難,通過對比系統的闡述了基於阿里雲的Quick BI在成本,安全、穩定以及速度上的優勢;Quick BI讓每個使用者成為了數據分析師,讓企業實現數據化運營。
原文
直播視頻:https://yq.aliyun.com/video/play/1294
以下是精彩內容整理: 為什麼要進行Quick BI開發研究?
今天的阿里巴巴的業務複雜,交錯網狀性強。對於每一項工作、任務都需要大量的數據、報表等進行相應的支持,而對海量數據的分析,離不開腳本的編寫;此外,在獲得獲取海量數據後如何甄別數據是工作的重點也是難點。為了保證數據的精確性、專一性以及準確性,從數據提出著手,通過數據介面對於相關數據進行快速相應分析並與相關部門進行確認,最終確定專人執行,做到數據的精確化。
數據分析現狀與困難
通過上述講述,可以看出,在阿里的日常工作中會面對大量的數據分析,那麼今天的數據分析的現狀與困難又有哪些呢?
1.臨時需求多,時間緊
在阿里巴巴每天的要處理超過10個雲的數據,往往每個事件具有十萬級甚至百萬級別的數據量,此外常常也會面臨某些突發事件的處理。
2.數據相應流程長、口徑不統一
在前面提到,為保證最終數據的可靠性與精確性,往往需要與提供數據或者需要最終數據的各部門進行溝通。如果僅僅進行單一的數據分析,會面臨口徑不統一的現象,使最終數據不可用。上述過程往往有耗費大量人力物力和時間,工作效率也相應的降低。
通常來說,在各方確認了數據後,留給數據分析人員的工作時間已經不多,數據分析部門面臨多時間、高工作量的工作情形。
3.數據」本地化「現象嚴重
經過漫長的確認階段後,需要將數據導出,套入到EXCEL進行數據的透視、關聯、加工的處理,最終形成一個完整的報告模式並靜郵件進行發放。但是該過程也存在著諸多難點,首先是過多的依賴EXCEL,失誤率較高;其次,數據處理過程中人員的流動帶來了不便;還有就是很多的分析化工作重複化嚴重,如日報、周報、月報、專報等。
4.專業人才緊缺
由於數據處理的繁雜性,需要大量的人員參與其中。每一個環節都要有相應的專業人員進行系統的工作協調。諸如:需要研發工程師來實現數據結構設計、保證數據存儲質量;需要數據工程師進行數據的同步、梳理、清洗以及模型的設計;需要分析師從事數據獲取及數據分析報告的製作;需要數據產品經理來進行整體業務需求的梳理,在了解業務數據後對其進行相應轉化。
可以看出從業務需求、業務產品、業務資料庫設計、數據管理、數據提供分析全體系統化的過程都需要大量的技術人才參與,而現在相關人才的缺失也是數據分析不得不面對的一個難題。
Quick BI定位與使命
Quick BI可以提供海量數據的即席分析,可實現拖拽式操作並且豐富了可視化效果,能夠更加有效的幫助使用者輕鬆自如的完成數據的分析、業務數據的洞察。Quick BI目前都是網頁化,使用的入門要求低,可以說是一種人人都能用並且行之有效的工具,實現了人人都是數據分析師的目標。
那麼Quick BI具有哪些模塊並且相應的功能有哪些?
1. Quick BI的核心能力
Quick BI的在數據分析中主要具有以下5個方面的突出能力:
1)豐富的數據源投入。Quick BI支持多樣的數據源,可以適應阿里雲上的絕大多數數據;
2)專業的分析報告製作。形成一個中國式的電子表格,具有操作便利、函數豐富、數據獲取便利等優點;
3)高性能的即席查詢。具有OLAP加速引擎,可以在此基礎下實現15s內完成100G離線數據的計算,同時也支持自主式多維查詢等功能;
4)豐富數據可視化。由於Quick BI的網站式定位,因此提供了一整個互動式的網站體驗;
5)安全多端訪問支持。形成一個RBAC三位一體的許可權模型,即:連接資料庫許可權、編輯許可權和行級許可權。
2. Quick BI工作台設計
工作台設計初衷首先是能夠使工作者找到快速路口來進入空間進行工作;其次,作為數據訪問者,能夠快速分享、收藏相關報表內容。
因此在Quick BI工作台設計上目前主要包括5個部分:
1)數據獲取。在數據源上全面支持阿里雲資料庫,支持MaxCompute,同時也支持自主構建的Mysql,Oracle,本地Excel及Hadoop分散式數據;
2)創建數據集。基於數據源的聯接支持表建模、SQL(部分數據源),使業務分析不需求獨立計算任務產出,提高需求響應效率;
3)儀錶板。儀錶盤的建立可以使選擇數據集的過程直接過濾,不需進行額外選擇;
4)電子表格。表格增加了數據設置器便於相關數據選擇,提高了工作效率;
5)數據門戶。從業務角度、部分角度、場景角度等多視角組織業務數據門戶,讓每一個業務數據都能被統一看到,節省數據查找的時間。
3.Quick BI電子表格
Quick BI中的電子表格支持sheet操作並提供類似與Excel的操作體驗,便於相關人員的使用;此外內置300+的函數,可以幫助用戶在資料庫、手動錄入等方面實現多層透視分析(如定向排序,自定義分段分析等);最後還支持控制項每天自動、手工更新報表數據,減少重複數據的製作,有效提高數據相應效率。
4. Quick BI儀錶盤
儀錶盤中包括功能性組件和可視化組件,並且支持度量和維度的設置,支持行級許可權控制項,可以使不同的使用者看到不同的數據,支持特定組件的聯動分析,支持郵件定時推送等。
在雲計算的優勢下,Quick BI具有成本低,安全、高效、穩定的優點;此外由於內置了智能加速引擎,實現了處理海量數據時的快速性,無需進行大量數據的預處理,大大節省了時間;最後Quick BI通過提供智能化的數據建模工具,極大的降低了數據獲取的成本和使用門檻,不僅成為了業務人員「看」數據的工具,更讓每個使用者成為了數據分析師,讓企業實現數據化運營。
更多技術乾貨敬請關注云棲社區知乎機構號:阿里云云棲社區 - 知乎
推薦閱讀:
※沫小姐學數據分析之Python入門篇
※數據分析驅動業績增長
※R語言實戰—02-創建數據集
※用Python預測「周期性時間序列」的正確姿勢
※用戶畫像學習
TAG:數據分析 |