使用 BigQuery 監控管理您的 Google Cloud 成本

將 GCP 帳單輸出至 BigQuery,監控管理雲端成本

雲端計算的靈活性和可擴展性意味著你的使用量可能會大幅波動,以因應日常需求。當我們使用”用多少,付多少”的計價模式,顧客會希望我們能讓他們更好地掌握他們的費用。 閱讀全文〈使用 BigQuery 監控管理您的 Google Cloud 成本〉

使用 Cloud Dataproc 架設 Hadoop Cluster

dataproc

最近收到任務,希望在 Hadoop Cluster上面跑 Apache log的分析案例,雖然之前已經架設過環境,但是純手工真的不是件容易事,遇到版本衝突、網路沒設好之類的問題會讓人一個頭兩個大。認真覺得裝(懂)過一次,了解 Hadoop的安裝方式就可以了,為了快速完成目標,就直接用現成的雲端服務,開一個 Hadoop Cluster。

原本想用 Kubernetes (k8s) 架設,但是最近的 v1.6版出問題 (Issue #43815),轉而使用 Google Container Engine (k8s v1.5),後來才發現 Google 其實有推出 Cloud Dataproc服務,能直接幫架設好 Hadoop、Spark環境,幾分鐘的時間就能建置完成!

閱讀全文〈使用 Cloud Dataproc 架設 Hadoop Cluster〉

告訴你怎麼使用 BigQuery與 Data Studio 分析銷售數據

bigquery_datastudio

數據分析示意圖。圖/CC0授權,Sstocksnap

雙11購物節就快要到囉,準備好迎接大量訂單了嗎?這個由阿里巴巴集團於2009年首創的網路購物盛會,每年都不斷地翻升銷售數字,不論是電商或實體賣場,也都搶著這股熱潮,推出系列優惠以及活動促銷。去年,2015雙 11節開跑不到 12小時,商品交易額就已超過 2014年交易總額,最後創下 912.17億元人民幣的輝煌成績。這樣的漂亮數字,不僅靠活動宣傳與行銷手法,還需要一套完整的生態鏈,把支付寶,線上平台,物流宅配,保險等環節完整的串接。

面對破億的海量訂單,暴衝的流量,如何架構雲端系統變成一項挑戰,同時也該思考如即時處理資料,讓用戶有流暢的購物體驗。因此這回,我們將為您介紹 Google BigQuery 這套專門處理 TB等級資料的數據分析應用服務,並用一個遊戲銷售數據,為您示範如何使用 Google BigQuery分析銷售數據,並串接 Data Studio 建立視覺化報表。

閱讀全文〈告訴你怎麼使用 BigQuery與 Data Studio 分析銷售數據〉