開(kāi)源不等于免費(fèi)。

大概每個(gè)人剛開(kāi)始了解開(kāi)源時(shí)，都會(huì)聽(tīng)到這句話。

但是，有這樣一家開(kāi)源創(chuàng)企，花了近2 年的時(shí)間，為開(kāi)源軟件 Apache Pulsar、Apache BookKeeper 做貢獻(xiàn)，甚至還免費(fèi)幫社區(qū)用戶開(kāi)發(fā)定制化的需求，分文不取……

這家公司便是 StreamNative，其兩位創(chuàng)始人郭斯杰和翟佳也是他們所維護(hù)的開(kāi)源項(xiàng)目的創(chuàng)始成員和 PMC 成員。最近，我們和 StreamNative 的創(chuàng)始人翟佳聊了聊他們的故事。

在 StreamNative 的故事中，我們能看到開(kāi)源掌舵者對(duì)開(kāi)源社區(qū)的堅(jiān)持和思考，能看到投資人在背后給予開(kāi)源事業(yè)的認(rèn)可與幫助。當(dāng)然，我們更能看到開(kāi)源創(chuàng)企獨(dú)特的發(fā)展路徑——兩年的免費(fèi)支持并不意味著慈善，而是蓄力之后靜待爆發(fā)，讓開(kāi)源社區(qū)成長(zhǎng)為企業(yè)最堅(jiān)固的護(hù)城河。

一條鯰魚(yú)至少能讓水面泛起波瀾

回想 2019 年初下決心投入 Pulsar 研發(fā)的時(shí)候，翟佳提到朋友給他的一句話：大數(shù)據(jù)市場(chǎng)已經(jīng)成型，你們進(jìn)來(lái)就相當(dāng)于一條鯰魚(yú)，不一定能游很遠(yuǎn)，但市場(chǎng)肯定會(huì)有波動(dòng)。

做為技術(shù)人員，在彼時(shí)風(fēng)起云涌的大數(shù)據(jù)市場(chǎng)留下自己的身影，聽(tīng)起來(lái)就心潮澎湃。

數(shù)據(jù)庫(kù)領(lǐng)域產(chǎn)品的爆發(fā)可追溯至 2003 年至 2006 年間，Google 公司陸續(xù)發(fā)布的 3 篇產(chǎn)品設(shè)計(jì)論文。這些論文從計(jì)算方式到存儲(chǔ)方式，開(kāi)創(chuàng)性地提出了分布式計(jì)算架構(gòu)，奠定了大數(shù)據(jù)計(jì)算技術(shù)的基礎(chǔ)。在這三篇論文的指導(dǎo)下，開(kāi)源社區(qū)大牛 Doug Cutting 使用 Java 對(duì) Google 的云計(jì)算核心技術(shù)，主要是 GFS 和 MapReduce 做了開(kāi)源的實(shí)現(xiàn)。后來(lái)，Apache基金會(huì)整合 Doug Cutting 以及其他 IT 公司的貢獻(xiàn)成果，推出了 Hadoop 生態(tài)系統(tǒng)。

Hadoop 的出現(xiàn)在大數(shù)據(jù)領(lǐng)域掀起了一股新的開(kāi)源浪潮。在此之前，開(kāi)源軟件的發(fā)展主要以 Red Hat 開(kāi)創(chuàng)的訂閱模式為代表，其用戶更多的是使用者，而非偏重二次開(kāi)發(fā)。Hadoop 出現(xiàn)之后，開(kāi)發(fā)者可以從底層去修改其代碼，從而真正比較深入地參與到開(kāi)源開(kāi)發(fā)中去。國(guó)內(nèi)包括百度、騰訊在內(nèi)的許多科技公司的開(kāi)源發(fā)展也都是從大規(guī)模定制 Hadoop 開(kāi)始的。

在接下來(lái)的十多年里，各路創(chuàng)業(yè)者、各種屬性的數(shù)據(jù)庫(kù)噴涌而出，逐漸形成當(dāng)下數(shù)據(jù)庫(kù)領(lǐng)域百舸爭(zhēng)流的局面。Pulsar 在其中，已經(jīng)屬于一個(gè)“后來(lái)者”，但也恰恰因?yàn)槌霈F(xiàn)較晚，Pulsar 天生適配云原生環(huán)境的特性，這便成為日后區(qū)別其“前輩”們的特性所在。

2012 年左右，雅虎內(nèi)部需要做一個(gè)Cloud Message Service云消息平臺(tái)，彼時(shí)郭斯杰在雅虎任職，其團(tuán)隊(duì)想要走存儲(chǔ)計(jì)算分離的架構(gòu)路線。但當(dāng)時(shí)的硬件帶寬很難支持這種架構(gòu)，因此并不被業(yè)內(nèi)認(rèn)可。為了說(shuō)服雅虎的技術(shù)委員會(huì)，郭斯杰在雅虎北京研發(fā)中心做出了 Pulsar 的原型系統(tǒng) Hadwig，針對(duì) MQ 場(chǎng)景，區(qū)別于 Kafka 針對(duì)大并發(fā)、高寬帶的場(chǎng)景。

Hadwig 的測(cè)試效果說(shuō)服了雅虎技術(shù)委員會(huì)。2013 至 2014 年在雅虎內(nèi)部完成基本開(kāi)發(fā)后，Hadwig又在雅虎內(nèi)部穩(wěn)定運(yùn)行了幾年，2016 年開(kāi)源出來(lái)成為 Pulsar。

彼時(shí)，同樣是大數(shù)據(jù)消息處理的基礎(chǔ)軟件Kafka已經(jīng)成為消息領(lǐng)域的“行業(yè)標(biāo)準(zhǔn)”。Pulsar 也常常需要借助 Kafka 來(lái)幫助用戶對(duì) Pulsar 建立更直觀的認(rèn)識(shí)。

消息領(lǐng)域?qū)嶋H上分成了兩個(gè)方向，一個(gè)是針對(duì)關(guān)鍵業(yè)務(wù)場(chǎng)景的 MQ，這是 Pulsar 所擅長(zhǎng)的。另一個(gè)便是針對(duì)大并發(fā)場(chǎng)景，為大數(shù)據(jù)引擎所提供的數(shù)據(jù)管道產(chǎn)品，如 Kafka。由于使用場(chǎng)景不同，消息系統(tǒng)在許多公司天然地被分成了兩個(gè)技術(shù)棧，而 Pulsar 則可以兼顧兩種場(chǎng)景，在存儲(chǔ)層也有很好的優(yōu)勢(shì)，不但可以保證數(shù)據(jù)的服務(wù)質(zhì)量，滿足一般情況下對(duì) MQ 產(chǎn)品的需求，也可以滿足 Kafka 這種高帶寬大并發(fā)的場(chǎng)景需求。逐漸，許多有云場(chǎng)景下分布式消息系統(tǒng)需求的公司，轉(zhuǎn)向使用 Pulsar。

Apache Pulsar 大數(shù)據(jù)生態(tài)

關(guān)于 Pulsar、BookKeeper 的技術(shù)細(xì)節(jié)以及 Pulsar 和 Kafka 的對(duì)比詳情，可查看 OSCHINA 之前的文章《專訪 PMC，開(kāi)源項(xiàng)目 Apache Pulsar 如何挑戰(zhàn) Kafka?》

國(guó)內(nèi)有很好的社區(qū)土壤

感知到 Pulsar 的世界不應(yīng)該被局限，是在Pulsar畢業(yè)前后。

2017 年 6 月 Pulsar 被雅虎捐贈(zèng)給 Apache 軟件基金會(huì)，2018 年 9 月畢業(yè)成為 ASF 頂級(jí)項(xiàng)目。Pulsar 畢業(yè)前夕，翟佳在國(guó)內(nèi)的一場(chǎng)技術(shù)峰會(huì)上遇到智聯(lián)招聘的一位技術(shù)總監(jiān)。當(dāng)時(shí)智聯(lián)招聘想做一個(gè)消息總線，剛好是 Pulsar 誕生所滿足的場(chǎng)景，他們需要保證消息不丟失，也能夠靈活擴(kuò)容，滿足死信隊(duì)列的需求，對(duì)一致性要求特別高。

智聯(lián)招聘技術(shù)團(tuán)隊(duì)先是發(fā)現(xiàn)了底層存儲(chǔ)的 BookKeeper 項(xiàng)目，正準(zhǔn)備自行研發(fā)一個(gè) MQ 系統(tǒng)時(shí)，發(fā)現(xiàn)了翟佳關(guān)于 Pulsar 的分享，于是便和翟佳聊起了自己需求。之后，智聯(lián)招聘便順勢(shì)成為 Pulsar 國(guó)內(nèi)第一個(gè)接觸的用戶。翟佳和社區(qū)小伙伴幫助智聯(lián)招聘在其場(chǎng)景中，替換了他們內(nèi)部的 MQ 產(chǎn)品和 Kafka。

2018 年 9 月 25 日，Pulsar 從 Apache 軟件基金會(huì)孵化器畢業(yè)。

借著這個(gè)時(shí)機(jī)，翟佳和郭斯杰回國(guó)做了兩場(chǎng) Pulsar 的線下 Meetup。第一場(chǎng)在北京，十月初的一個(gè)周末，報(bào)名有 200 人，實(shí)際到場(chǎng)的有一百六七十人。除了有來(lái)自互聯(lián)網(wǎng)的開(kāi)發(fā)者，也有許多來(lái)自銀行等傳統(tǒng)行業(yè)公司的開(kāi)發(fā)人員，“我記得當(dāng)時(shí)國(guó)有四大行之一的一個(gè)研發(fā)團(tuán)隊(duì)來(lái)了五六個(gè)人，當(dāng)時(shí)對(duì)我們的觸動(dòng)還挺大的，活動(dòng)的反饋?zhàn)屛覀兏杏X(jué)大家對(duì) Pulsar 還比較關(guān)注。”

上海的第二場(chǎng) Meetup 同樣也迎來(lái)很多關(guān)注。就這樣，翟佳意識(shí)到，即便在國(guó)內(nèi)的宣傳剛起步的情況下，第一場(chǎng)活動(dòng)就能吸引到這么多開(kāi)發(fā)者，那就說(shuō)明，屬于 Pulsar 的故事將有很大可能。

兩場(chǎng)活動(dòng)之后，翟佳和郭斯杰開(kāi)始與一些國(guó)內(nèi)的用戶、開(kāi)源團(tuán)隊(duì)逐漸建立聯(lián)系，回訪國(guó)內(nèi)用戶。慢慢地，翟佳和國(guó)內(nèi)團(tuán)隊(duì)達(dá)成一個(gè)共識(shí)——國(guó)內(nèi)的公司實(shí)際上比國(guó)外的公司擁有更大的數(shù)據(jù)量，比如四大行中的任意一個(gè)都比美國(guó)銀行的交易量更大，國(guó)內(nèi)的頭部互聯(lián)網(wǎng)公司內(nèi)部需要處理的數(shù)據(jù)量也遠(yuǎn)超國(guó)外許多同類公司，這些公司可能會(huì)更愿意接受能解決難題的新技術(shù)。此外還有許多初創(chuàng)公司對(duì)新技術(shù)接納程度普遍較高。

很快，二人決定回國(guó)創(chuàng)業(yè)，“我們覺(jué)得國(guó)內(nèi)是做社區(qū)的一個(gè)很好的土壤，所以毅然辭職，前后就只經(jīng)過(guò)一兩個(gè)月的時(shí)間。”

2019 年初，以 Pulsar 和 BookKeeper 為基座的 StreamNative 公司成立。

國(guó)內(nèi)最早的一批用戶還有騰訊計(jì)費(fèi)平臺(tái)、涂鴉智能等公司，“大家很早就能從社區(qū)合作中解決自己的問(wèn)題，能夠有收益。”

主攻社區(qū)的兩年

如果說(shuō)，國(guó)內(nèi)用戶的出現(xiàn)，給了翟佳和郭斯杰回國(guó)創(chuàng)業(yè)的勇氣。反之在二人在創(chuàng)業(yè)的初期，也給予了社區(qū)用戶最大并且不計(jì)回報(bào)的支持。

“我們前兩年主攻社區(qū)，希望社區(qū)的發(fā)展能夠打下好基礎(chǔ)。”翟佳介紹，“對(duì) Pulsar 社區(qū)的構(gòu)建主要是集中在產(chǎn)品及與用戶的互動(dòng)，貢獻(xiàn)和改進(jìn) Pulsar 的功能、豐富 Pulsar 的周邊生態(tài)、幫助 Pulsar 的版本發(fā)布和維護(hù)、溝通社區(qū)用戶并幫忙解決上線 Pulsar 中遇到的障礙、組織參加相關(guān) Pulsar 的 meetup 等推廣宣傳活動(dòng)等。這些工作主要是完善 Pulsar 的文檔、降低 Pulsar 的入門(mén)門(mén)檻、豐富 Pulsar 和其他系統(tǒng)的集成和交互，做好用戶起步的基礎(chǔ)工作。”

用戶在起步之后提出需求時(shí)，StreamNative 便會(huì)給出實(shí)現(xiàn)方案。如果雙方覺(jué)得方案可行，便一起在社區(qū)將所需功能開(kāi)發(fā)出來(lái)。無(wú)論是提供解決方案還是具體的開(kāi)發(fā)工作，在很長(zhǎng)一段時(shí)間內(nèi)，都是完全免費(fèi)的。

每一家選擇投入社區(qū)的開(kāi)源創(chuàng)企背后，必定是有著擁躉開(kāi)源的掌舵者，以及信任他們的投資人。

郭斯杰將社區(qū)當(dāng)做 StreamNative 最核心的護(hù)城河，“技術(shù)一直在迭代，可能 5 年后現(xiàn)在的技術(shù)就被淘汰了，但社區(qū)有眾多的貢獻(xiàn)者，他們一方面可以給你帶來(lái)豐富的應(yīng)用場(chǎng)景，另一方面可以帶來(lái)很好地口碑，吸引更多人使用你的產(chǎn)品，進(jìn)而不斷迭代你的產(chǎn)品。”

翟佳認(rèn)為，開(kāi)源是讓大家達(dá)成共識(shí)、提高效率的絕佳方式。假設(shè)沒(méi)有消息場(chǎng)景下的開(kāi)源項(xiàng)目，那么可能每家公司都會(huì)基于現(xiàn)有的程序和自己的背景去開(kāi)發(fā)一套系統(tǒng)。那么有了 Pulsar 之后，先是小部分人認(rèn)為 Pulsar 好，一起來(lái)用、一起貢獻(xiàn)，那么 Pulsar 便會(huì)越做越好，吸引更多的人。從總體上看，便能促進(jìn)社會(huì)效率的提升，“這是更大的意義，從開(kāi)源的角度，推動(dòng)社會(huì)分工進(jìn)步，提升開(kāi)發(fā)使用效率，對(duì)大家都有幫助。”

翟佳介紹，在他們接觸的投資人中，實(shí)際上也已經(jīng)達(dá)成了共識(shí)，認(rèn)為開(kāi)源是一個(gè)很好的獲客渠道，同時(shí)也是公司發(fā)展的重要基礎(chǔ)。

而關(guān)于商業(yè)化，需要考察行業(yè)的空間和可能性。那么，Pulsar 的可能性有多大?

回看 Pulsar，它是一個(gè)消息中間件基礎(chǔ)設(shè)施，比如我們手機(jī)上的一條消息，或是任意一個(gè)傳感器，都可以看成是一條消息，消息做為信息的載體，把現(xiàn)實(shí)世界中發(fā)生的事件記錄下來(lái)，然后在服務(wù)器中去記錄。

以 Pulsar 的客戶——騰訊計(jì)費(fèi)平臺(tái)為例。計(jì)費(fèi)平臺(tái)是一個(gè)典型的 MQ 使用環(huán)境，其上會(huì)支持騰訊內(nèi)部所有的計(jì)費(fèi)業(yè)務(wù)，如發(fā)紅包便是場(chǎng)景之一。那么此時(shí) Pulsar 便可以將紅包的收發(fā)信息、使用金額記錄下來(lái)，做事件性保存，然后數(shù)據(jù)庫(kù)或是之后的系統(tǒng)便可以根據(jù)數(shù)據(jù)庫(kù)帶寬做具體消費(fèi)。Pulsar 要做的便是削峰填谷一層的緩沖。假設(shè)沒(méi)有 MQ 層，在除夕夜紅包量巨大的情況下，可能任何一個(gè)數(shù)據(jù)庫(kù)都難以支撐。

當(dāng)聯(lián)合創(chuàng)始人開(kāi)始做銷售

就這樣，隨著用戶的增加，StreamNative 終于開(kāi)啟商業(yè)化的歷程。聯(lián)合創(chuàng)始人翟佳開(kāi)始往返在不同城市的不同客戶之間，兼職做起了銷售。

今年 6 月份，StreamNative 發(fā)布支持企業(yè)私有化部署的產(chǎn)品 StreamNative Platform。7 月，開(kāi)始組建銷售團(tuán)隊(duì)，嘗試和公有云廠商合作。而在銷售團(tuán)隊(duì)完全成型之前，翟佳便承擔(dān)了一些銷售和走訪客戶的工作。

他發(fā)現(xiàn)，當(dāng)下國(guó)內(nèi)客戶整體上對(duì)開(kāi)源軟件的信任度在提高?？蛻暨x擇開(kāi)源軟件，更多的是看中軟件本身可實(shí)現(xiàn)的功能，而非“免費(fèi)”、“低價(jià)”。同時(shí)，現(xiàn)階段的許多客戶來(lái)自于社區(qū)用戶，這讓翟佳可以在接觸客戶時(shí)，便已大致了解其業(yè)務(wù)場(chǎng)景中可以怎么更好地適用 Pulsar。

StreamNative 在國(guó)內(nèi)早期的商業(yè)化嘗試中，案例集中在金融行業(yè)，包括銀行、證券公司等等。

相對(duì)于國(guó)內(nèi)市場(chǎng)，StreamNative 的國(guó)際化發(fā)展更快，客群基本在海外。其中 40% 左右來(lái)自歐洲，50% 左右來(lái)自北美，還有一部分在印度?？蛻艏性诮鹑凇㈦娚毯?IoT 三大行業(yè)。典型的有波士頓和芝加哥的對(duì)沖基金和股票交易商，印度的 Flipkart，自動(dòng)駕駛行業(yè)的 Toyota 歐洲，芯片領(lǐng)域的 Applied Materials 等。

與 StreamNative 發(fā)展區(qū)域相對(duì)應(yīng)的是，StreamNative 的員工也來(lái)自于全球各地，這自然地為 StreamNative 造就了一個(gè)異步、自由的工作氛圍。

剛剛創(chuàng)辦之時(shí)，StreamNative 在北京租了間辦公室。疫情期間，辦公室閑置，StreamNative 索性退租，全員遠(yuǎn)程辦公。據(jù)翟佳介紹，全面遠(yuǎn)程辦公之后，StreamNative 的員工或是回到家鄉(xiāng)、或是到理想城市定居，生活也隨之發(fā)生翻天覆地的變化

事實(shí)上，不僅僅是 StreamNative，因?yàn)殚_(kāi)源社區(qū)的合作天然帶有跨國(guó)、異步、多人協(xié)同等特質(zhì)，國(guó)內(nèi)許多開(kāi)源創(chuàng)企都已經(jīng)實(shí)行遠(yuǎn)程辦公機(jī)制，這也成為開(kāi)源創(chuàng)企的一大特色。借此，OSCHINA 特發(fā)起【Anytime Anywhere】項(xiàng)目，面向開(kāi)源創(chuàng)企，了解其員工的工作狀態(tài)。

嘉賓介紹

翟佳，StreamNative 聯(lián)合創(chuàng)始人。在創(chuàng)辦 StreamNative 之前，在 EMC 從事分布式、文件系統(tǒng)、流存儲(chǔ)相關(guān)的設(shè)計(jì)和開(kāi)發(fā)，目前是 Apache BookKeeper 和 Apache Pulsar 兩個(gè)項(xiàng)目的 PMC 成員。

Anytime Anywhere

Feel free to build software.

項(xiàng)目介紹

你覺(jué)得開(kāi)源是什么?

一種共識(shí)、協(xié)作模式、亦或是組織形式……

答案如果還不清晰，不妨先看看開(kāi)源為我們帶來(lái)的切身改變。開(kāi)源社區(qū)日漸壯大，開(kāi)源不僅僅是通過(guò)軟硬件來(lái)改變科技世界，更是將更多自由賦予其參與者，改變著他們的工作生活方式。

我們發(fā)現(xiàn)，許多開(kāi)源原生商業(yè)公司以及開(kāi)源社區(qū)的個(gè)人開(kāi)發(fā)者，正完全到投入異步、異地的工作中。不用每天定點(diǎn)打卡、集中到辦公樓工作，不用隨時(shí)待命，可以根據(jù)目標(biāo)靈活安排自己的工作……最終，這樣的改變究竟會(huì)為團(tuán)隊(duì)和個(gè)人生活帶來(lái)何種程度的重塑，我們希望，通過(guò)【Anytime Anywhere】項(xiàng)目呈現(xiàn)答案。

【Anytime Anywhere】項(xiàng)目以公開(kāi)問(wèn)卷形式，收集各個(gè)遠(yuǎn)程辦公的開(kāi)源原生商業(yè)公司內(nèi)員工工作、生活作息時(shí)間表，以及他們的狀態(tài)和感受。最終結(jié)果以公開(kāi)圖表形式呈現(xiàn)。

關(guān)鍵詞： 蓄力 之后 才可