![]()
數(shù)據(jù)管道廠商Fivetran上周干了件讓同行看不懂的事——把自家花了3年打磨的數(shù)據(jù)轉(zhuǎn)換框架SQLMesh,連同整個(gè)開源團(tuán)隊(duì)一起捐給了Linux基金會。這家公司去年剛完成5.25億美元融資,估值沖到56億美元,正是需要技術(shù)壁壘的時(shí)候。
CEO George Fraser在公告里說得直接:「我們希望SQLMesh成為行業(yè)標(biāo)準(zhǔn),而不是Fivetran的私有武器。」這話聽著像場面話,但結(jié)合Fivetran的商業(yè)模式看,更像是一場精心計(jì)算的陽謀。
SQLMesh是什么?為什么值得捐
用Fivetran自己的話說,SQLMesh是個(gè)「數(shù)據(jù)轉(zhuǎn)換框架」——說白了,就是幫企業(yè)把從各處撈來的原始數(shù)據(jù),清洗、整合、變成能用的樣子。這活兒 traditionally(傳統(tǒng)上)由dbt(數(shù)據(jù)構(gòu)建工具)壟斷,后者去年被Databricks以10億美元收購。
但SQLMesh搞了個(gè)狠的:它用「虛擬數(shù)據(jù)環(huán)境」技術(shù),讓數(shù)據(jù)工程師能像在Git里分支代碼一樣,給數(shù)據(jù)建分支。改個(gè)指標(biāo)定義?不用重寫整個(gè)管道,切個(gè)分支測試,沒問題再合并。Fraser的原話是:「這把數(shù)據(jù)轉(zhuǎn)換從手工活變成了軟件工程。」
Fivetran 2022年收購SQLMesh背后的初創(chuàng)公司Tobiko Data時(shí),這項(xiàng)目剛起步。3年過去,SQLMesh在GitHub攢了4000多星,用戶包括Netflix、Adobe這種量級。現(xiàn)在連人帶代碼全捐出去,F(xiàn)ivetran圖什么?
捐贈背后的商業(yè)算盤
Fraser的賬算得明白。Fivetran的核心生意是「數(shù)據(jù)移動」——把數(shù)據(jù)從A系統(tǒng)搬到B系統(tǒng),按連接的數(shù)據(jù)量收費(fèi)。數(shù)據(jù)轉(zhuǎn)換(SQLMesh干的活)和數(shù)據(jù)移動是上下游關(guān)系,但Fivetran發(fā)現(xiàn)客戶 increasingly(越來越)想把這兩件事解耦。
「客戶不想被鎖定在任何一家廠商,」Fraser說,「他們想要開放標(biāo)準(zhǔn)。」捐給Linux基金會,SQLMesh就成了中立的行業(yè)基礎(chǔ)設(shè)施。Fivetran繼續(xù)深度集成它,但競爭對手也能用——這反而擴(kuò)大了SQLMesh的采用面,最終讓更多人需要Fivetran的數(shù)據(jù)移動服務(wù)。
這套路云廠商熟。Google捐Kubernetes、Meta捐React,都是把「 complements(互補(bǔ)品)」開源,賣自己的「 core(核心)」。Fivetran的 core 是數(shù)據(jù)管道,SQLMesh是 complements。捐出去,比攥在手里值錢。
Linux基金會得到了什么
![]()
對Linux基金會來說,這是數(shù)據(jù)基礎(chǔ)設(shè)施版圖的關(guān)鍵一塊。它旗下已經(jīng)有OpenSearch、OpenTelemetry、PyTorch,但數(shù)據(jù)轉(zhuǎn)換層一直缺個(gè)能打的。dbt被Databricks收編后,開源社區(qū)其實(shí)都在找「非大廠控制」的替代方案。
SQLMesh進(jìn)基金會,等于拿到了「中立性認(rèn)證」。Fraser特意強(qiáng)調(diào):「SQLMesh的治理模型會和Kubernetes一樣。」翻譯一下:大廠各派代表坐一桌,誰也別想獨(dú)吞。
基金會執(zhí)行董事Jim Zemlin的回應(yīng)很官方:「這體現(xiàn)了開源協(xié)作在數(shù)據(jù)經(jīng)濟(jì)中的重要性。」但私下看,這是基金會首次在Modern Data Stack(現(xiàn)代數(shù)據(jù)棧)的核心層有了一席之地——之前他們更多是邊緣工具。
對dbt和Databricks的微妙壓力
這筆捐贈最尷尬的可能是dbt。它去年被Databricks收購后,社區(qū)就一直有「會不會閉源」的猜疑。雖然Databricks嘴上說著「保持開放」,但沒人信——畢竟它自己的Delta Lake都搞過「開放核心」的爭議。
SQLMesh現(xiàn)在有了Linux基金會背書,對擔(dān)心 vendor lock-in(廠商鎖定)的企業(yè)來說,吸引力直線上升。Fraser沒點(diǎn)名,但話里有話:「有些『開源』項(xiàng)目,核心功能其實(shí)捏在一家公司手里。SQLMesh不會這樣。」
Databricks的回應(yīng)還沒出來。但它最近剛把dbt Cloud的定價(jià)改得更激進(jìn),社區(qū)怨氣不小。SQLMesh這時(shí)候殺出來,時(shí)機(jī)選得準(zhǔn)。
Fivetran的賭注
當(dāng)然,捐贈也有風(fēng)險(xiǎn)。SQLMesh如果成了標(biāo)準(zhǔn),F(xiàn)ivetran能吃到紅利;但如果沒成,3年投入就打水漂。更麻煩的是,競爭對手比如Airbyte、Meltano現(xiàn)在也能無痛集成SQLMesh,和Fivetran站在同一起跑線。
Fraser的回應(yīng)是:「我們賭的是數(shù)據(jù)管道的網(wǎng)絡(luò)效應(yīng)。」Fivetran已經(jīng)接了500多家SaaS系統(tǒng)的預(yù)置連接器,這是SQLMesh短期內(nèi)抄不走的。轉(zhuǎn)換層開放,反而讓Fivetran的「連接層」更值錢——就像Android開源讓Google Mobile Services更值錢一樣。
這筆賬能不能算對,得看2-3年后SQLMesh的市場滲透率。但至少現(xiàn)在,F(xiàn)ivetran用一次「戰(zhàn)略性放棄」,把自己從「又一個(gè)數(shù)據(jù)工具商」重新定位成了「開放數(shù)據(jù)棧的推動者」。在Enterprise buyers(企業(yè)采購方)越來越看重「避免鎖定」的今天,這標(biāo)簽值多少錢?
Fraser在采訪最后拋了個(gè)問題:「如果SQLMesh真的成了行業(yè)標(biāo)準(zhǔn),你覺得數(shù)據(jù)團(tuán)隊(duì)的工作方式會變成什么樣?」他沒給答案,但顯然希望讀者自己去想——而想的過程中,SQLMesh的名字已經(jīng)刻進(jìn)去了。
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.