多利曼―QSearch

善用微服務建構雲端原生數據平台, QSearch 攜手 Cloud Ace 實踐高效益的大數據應用服務

Google Cloud 的無/微服務工具大幅降低了解決方案的實現門檻,而作為沒有養機器或機房的雲端原生公司,實踐一個新方案會比過去簡單很多。
站在公司經營角度,Google Cloud 的產品與 Cloud Ace 的服務,都滿足了我們想平衡產出價值和支出成本的核心目標。

2014年發跡於台灣的 QSearch 致力於蒐集社群網路與媒體渠道資訊,擁有 Facebook、Instagram、YouTube、各大主流論壇和媒體數據。透過自行研發的大數據檢索分析系統,QSearch 讓過百的品牌、公關公司和代理商等專業人員,能全面掌握與監測網路聲量、熱門議題及潛在商機,並利用數據支援公關行銷決策。創立至今公司合作對象除了隸屬於公廣集團的公視,也不乏眾多知名跨國傳播集團(電通安吉斯集團、陽獅集團、WPP 集團等),而在海外經驗上,更曾為東南亞政府單位與國際組織提供數據相關服務。

平衡營運與開發需求,以 Google Cloud 奠定雲端數據平台基礎

公司草創階段第一個要確定的核心,就是分析結果跟支出成本間的平衡

從單純蒐集與分析 Facebook 公開資料,到現在整合各社群與論壇等平台數據,進而提供精準的網路聲量監測,QSearch 認為 Google Cloud 讓使用者能透過一個相對容易負擔的價格,快速產出一項產品或解決方案的特點,是當初團隊選擇導入的一大主因。對此 QSearch 營運長 Vincent 以 Raw Data 的儲存舉例,他提到:「這部分(Raw Data)我們會利用 Cloud Storage 去倉儲,因為它在儲存成本上是相對低的,而且同 zone 內的傳輸不會收費。」而這點,也是讓 QSearch 得以把龐雜的 Raw Data 做較細緻的清理,再進行運算的重要幫手。

隨著公司規模擴大,Google Cloud 雖協助 QSearch 可更快更簡單地實踐各種解決方案,支持公司在擴展時能無縫接軌並保有足夠的安全性,但公司成員對 BigQuery 運算收費模式的不甚了解,和未設定預警機制作為防護的疏漏,卻也讓他們在拿捏收支平衡的路上重重跌了一跤。營運長 Vincent 無奈坦言,當時 QSearch 想從單一社群平台跨足到其他網路資料來源,但龐大的資料運算量,讓不知情的團隊成員「收到帳單後才發現這件事情(運算費超出預期地暴增)」,進而驚覺基礎知識及預警的重要性。

化挫折為養分,為避免重蹈覆轍,QSearch 除了加強開發與產品設計人員對技術工具的理解,也設定了相關保險機制來確保開發與成本能達到完美的平衡。而回歸技術層面,營運長 Vincent 也指出與其他雲端平台相比,Google Cloud 是一個「比較技術者導向的雲端平台」。正因為 Google Cloud 同時滿足了團隊在營運與開發上需求,所以 QSearch 這間雲端原生的公司才能從草創時期就站穩腳步,逐步成長為今日廣受各品牌與公部門信賴的數據分析平台。

QSearch 技術團隊
(QSearch 提供)

從數據分析到機器學習,好工具助攻團隊克服生長痛

身為一間雲端原生的數據分析公司,QSearch 不僅大量使用 Google Cloud 的 Compute Engine 和 App Engine 等基礎架構服務,也廣泛搭配 Cloud Pub/Sub、Cloud Storage 和 BigQuery,這些在數據處理流程中不可或缺的工具,以及 Cloud SQL 這類輔助型的產品來管理使用者帳戶。但為了提供使用者更全面且具價值的服務,QSearch 也開始導入 AutoML 這類機器學習工具,來將數據做更進一步的應用。

QSearch 分享,他們近年推出的 PicKOL 網紅社群資料庫除了以 API 去串接既有網站,也大量利用 Cloud Functions 來串接架構上想新增的分析流程,並藉由 AutoML 從蒐集到的大量文本與帳號中,快速收斂出可能是網紅的帳號。對於 AutoML 的導入,營運長 Vincent 特別點出「我們內部還有分享這個工具可以讓團隊比較無痛地開始進行機器學習,因為機器學習最大的問題就是最一開始模型的建置。」他進一步舉例,在某些客製化提案中,客戶標記完他們蒐集到的留言資料後,QSearch 不須訓練模型,就能用 AutoML 進行機器學習來放大巨量資料所蘊含的價值。

PicKOL 服務示意圖
(截圖自 QSearch 官網

門檻更低應用更廣,以微服務工具啟動服務擴張加速鍵

相較過去,現在應用 Google Cloud 的雲端服務來實現 QSearch 解決方案的門檻是大幅降低的

除了導入機器學習來推出新服務,QSearch 也透過擴大無/微服務工具的使用強化既有服務。從過去利用 Google Kubernetes Engine 運作縮網址服務「Linkbundle」,QSearch 近年為完善全管道的資料蒐集,更透過 Cloud Run 設計出一個跨論壇的 Meta 爬蟲機制。營運長 Vincent 提到他們從偵測論壇是否出現新文章,到讀取文章中的標題、作者和內文等資料,這全套的開發機制就是以 Cloud Run 完成的。

針對 Cloud Run 這類無/微服務工具,雲端原生的 QSearch 認為這些工具最大的優勢,就是讓他們可以迅速地將一個解決方案架設起來並運作。營運長 Vincent 笑道:「我們的員工想玩 Minecraft(知名沙盒遊戲),也能直接用 Google Cloud 自建一個伺服器。」他補充若站在 PM 的角度,成本高低左右著解決方案要使用的技術或產品,而相較過去,現在應用 Google Cloud 的雲端服務來實現解決方案的門檻是大幅降低的。

QSearch Trend 的「關鍵字熱門文章」服務
(QSearch 提供)

成長腳步不停歇,如何加深加廣數據應用服務成未來課題

100家客戶心中可能就有100種數位轉型概念,所以我們希望做到數據可以著力的點

回首公司草創階段,QSearch 共同創辦人周世恩認為,資料分析結果與支出成本間的平衡是首要需確定的核心,而這個核心要點也反映在他們當初從眾多 Google Cloud 代理商中,選擇 Cloud Ace 作為合作夥伴的決定上。而放眼未來,QSearch 也期望在他們近期積極推動的海外事業拓展和數位轉型輔導計畫中,Cloud Ace 能與他們繼續攜手前行。

針對海外服務的布局,營運長 Vincent 透露他們目前在新加坡已有一位駐點夥伴,主要負責擔任新加坡、馬來西亞和菲律賓等國家的業務或顧問。儘管 QSearch 在台灣已累積豐富數據分析經驗,但他同時也點出雲端服務的品牌,前進海外可能會碰到的法律與政策問題,和當地技術支援不足的窘境。他進一步強調,不論是對 QSearch 或其他套用 GCP 的客戶,在現地的推廣上,當地的技術或解決方案協助都會是蠻大的幫助。

最後談及 QSearch 的數位轉型輔導計畫,營運長 Vincent 坦言因為數位轉型是很廣泛的概念,100家客戶心中可能就有100種數位轉型概念,所以期望能從集客行銷這類數據可以著力的點下去努力。透過與公關或整合行銷等不同產業的夥伴聯手,更積極地走入各個產業提供協助。由台灣邁向國際;從數據分析走向數位轉型輔導,作為 QSearch 合作夥伴的 Cloud Ace 期許未來能透過更全面服務,在挺進產業第一線提供數據服務的 QSearch 背後扮演最堅強的後盾。

公司簡介

公司名稱:多利曼股份有限公司

服務名稱:Trend+LinkbundlePICKOL

更多企業案例

想更了解雲端服務嗎?

歡迎填寫表單與我們聯繫

電盤輸入