Data Observability 系列文 8:什麼是資料可觀測性?先看看關鍵字趨勢

IT 及軟體圈有 Observability,Data 圈當然要有 Data Observability!讓我們將可觀測性附加到 Data 上,幫助 Data 圈的工作者們,可以更「主動觀測」他們的產品——Data!

前言

嗨,大家好,我是艦長!

歡迎來到 Data Observability 系列文的第 8 篇。

本文要實現上一篇的承諾,接下來真的要開始談「資料可觀測性」(Data Observability)。

Data Observability,它是一個新興的 Buzzword?還是已經成為 Data 圈的常見實踐?本文我們先不過度深入,先從這關鍵字的趨勢來認識它。

網路關鍵字趨勢

首先我們先從 Google Trends 開始,看看這個關鍵字的搜尋趨勢。

打開 Google Trends,輸入「Data Observability」,從圖中可以發現在 2019 年以前,這個詞幾乎無人關注,直到 2020 年12月才開始有了起色,然後維持一個小眾的熱度,最後到了 2025 終於熱度有明顯的上升。

(圖片擷取自 Google Trends。)

從這樣的圖表看來,Data Observability 仍是一個相對新的關鍵字,依然在發展中的階段。

如果我們將它跟其他關鍵字一起比較,會更能看出這件事。

誰在談論這個關鍵字?

既然關鍵字熱度有在提升,那下一步來猜猜看是誰在推廣(炒作)這個關鍵字。

未看先猜,你的答案裡面一定有各種服務供應商對吧!

確實如此,畢竟供應商的商業嗅覺是敏銳的,有能夠賣錢的關鍵字,當然要衝一波。

首先最早喊出 Data Observability 應該是 Monte Carlo Data,目前可以找到比較早開始談資料可觀測性的文章,很多都來自這間公司。

當然,過去專注在 Monitoring 及 Metrics 的廠商也不會放過機會,因此像是 Datadog 也有跟上。以及本來就擁有包山包海各種解決方案的 IBM 也有一些動作。

(IBM 也有一個網頁在介紹 Data Observability。)

Data 圈的一些知名服務供應商,例如 Splunk 就有網頁在介紹 Data Observability;而像是 Snowflake、Databricks、Cloudera,雖然他們自己沒有在談 Data Observability(多半是談 Observability),但倒是有一些想要搶 Data Observability 市場的新供應商,會嘗試將自己跟他們連結,例如 Acceldata 就有 “Data Observability and Support for Hadoop” 或 “Acceldata Data Observability for Snowflake Optimization” 這樣的文章。

在我們熟知的三大雲中,Azure 也有一個網頁在介紹 Data observability

除了服務供應商,大家都聽過的科技(技術)趨勢報告也出現過 Data Observability 或類似的關鍵字。

Gartner 在 2024 有出現過 Data Observability,而且位於 peak of inflated expectations 的高峰位置。 (這圖片出處也是來自 Monte Carlo Data,我合理的懷疑⋯⋯ )

在 InfoQ 則出現長得不太一樣的關鍵字,它寫的是 Data Lake Observability。 (圖片出處:https://www.infoq.com/articles/culture-trends-2025/

而歐萊禮則是在 2023 出版了一本書。我自己是認為基本上能出書,就代表這個關鍵字有一定的份量了。 (圖片出處:https://www.amazon.com/Fundamentals-Data-Observability-End-End/dp/1098133293

小結

從本文收集的這些資訊,相信應該足夠顯示,Data Observability 是一個雖然尚未破圈,但逐漸有一些熱度的議題了吧?

然而有熱度,也意味著會有人多嘴雜的狀況,那就是大家對這個詞各自的詮釋有所不同,以及大家在談的可能不是同一件事。

同樣都是 Data Observability,但仔細去看各種不同來源的資料時,你會發現有些人談的是 Data Observability,有的則是 Data Infra 的 Observability 或 Data pipeline Observability,甚至是 Observability 如何處理大量的 Data !?

(截圖出處:https://firsteigen.com/blog/data-pipeline-observability/

我自己在閱讀這些資料時,也是一度感到「你們搞得我好亂啊~」

好啦,看完了關鍵字趨勢,本文就先停在這裡留一個伏筆,下一篇文我們將會從定義切入,換個角度來認識 Data Observability。

系列文連結

此系列文持續撰寫中,陸續更新連結。

  1. Data 不只是技術問題
  2. 軟體圈都在注意些什麼?
  3. Data User 最關心的是什麼?
  4. 軟體圈與 Data 圈眼中的 Data
  5. 如何取得一杯乾淨的水(Data)?
  6. 我們過去為了資料品質做了些什麼?
  7. 有了監控為什麼還不夠?
  8. 什麼是資料可觀測性?先看看關鍵字趨勢

轉貼本文時禁止修改,禁止商業使用,並且必須註明來自「艦長,你有事嗎?」原創作者 Cheng Wei Chen,及附上原文連結。

用贊助表達你的支持

更多文章