［干貨］100家硅谷IT公司技術(shù)博客－吐槽篇［大數(shù)據(jù)／SaaS專場］

時間：2023-03-15 07:42:01 | 來源：電子商務(wù)

時間：2023-03-15 07:42:01 來源：電子商務(wù)

前面總結(jié)了［上］，［中］，［下］，走到這，系列終于完了，想象一下，筆者把100多個截屏上傳圖片粘貼到微信編輯再二次加工配上文字，真是浩大的工程，誰知盤中餐，粒粒皆辛苦啊。這一期的特色是全是數(shù)據(jù)類技術(shù)公司，也可以說是SaaS領(lǐng)域。有一些筆者也沒有深入了解，還請多多指教。

發(fā)現(xiàn)沒法直接粘貼圖片，奔潰了，要看圖文版還是去 ［干貨］100家硅谷IT公司技術(shù)博客

76 AppDynamics

移動應(yīng)用監(jiān)測軟件, 這個領(lǐng)域是叫APM（應(yīng)用性能監(jiān)控）它提供了一系列對應(yīng)用程序的容量、擴展性、故障排除和用戶體驗進行管理和監(jiān)控的服務(wù)，去年一直說要上市的，鑒于股票市場對云計算還不夠熱枕，又緩一緩了。類似的工具還包括New Relic、ScienceLogic。

國內(nèi)APM企業(yè)主要是三家公司，即OneAPM、聽云和云智慧。筆者推薦OneAPM創(chuàng)始人何曉陽的讀書筆記，把量子物理，相對論，宇宙變遷，科幻小說，古希臘哲學(xué)，人類文明史，企業(yè)級應(yīng)用融合，波瀾壯闊，邏輯縝密，妙趣橫生。OneAPM何曉陽讀書筆記

77 Dropbox

這家公司想必大家都熟悉了，曾經(jīng)云存儲的老大，但日子過得不是太舒心，被各個巨頭圍剿，Google，蘋果，微軟，亞馬遜都推出更低價容量更大的云存儲，它之前估值超過百億，但最近很多獨角獸公司遭到投資者降級，它也被下調(diào)估值。筆者找了本站上“宋一松”對問題 “有哪些估值超過 10 億美金的「獨角獸」公司正在衰落？ - 獨角獸公司“的回答，大致說了Dropbox四點問題

1. 通過企業(yè)付費版的盈利路線發(fā)展并不順利
2. 普通用戶的使用情景單一，付費意愿不高
3. 被巨頭拉入價格競爭
   
4. 高估值阻礙了公司的進一步成長
   

但不得不承認，它們的人才還是挺厲害的，就是喜歡名校背景，很多做系統(tǒng)的高手，MIT出身，也有不少技術(shù)開源的東西，這篇文章講它們?nèi)绾巫鋈臋z索引擎。而為了吸引這些人才，居然請出米其林的大廚，給他們員工提供每日不一樣的精品大餐，真是有口福啊。（所以有機會還是要去它們面試一下，至少體驗一下米其林水平的食堂）

78 H2O.AI

能夠讓Hadoop做數(shù)學(xué)，H2O是基于大數(shù)據(jù)的統(tǒng)計分析機器學(xué)習(xí)和數(shù)學(xué)庫包，讓用戶基于核心的數(shù)學(xué)積木搭建應(yīng)用塊代碼，采取類似R語言，使的BigData愛好者和專家可以利用一系列簡單的先進算法對數(shù)據(jù)集進行探索，建模和評估。

它之前叫Oxdata，改名后更好記了，它打了個比方：當數(shù)據(jù)磚（databricks公司）遇到水（H2O)就變成蘇打水一樣。

筆者查了它家創(chuàng)始人也挺傳奇的：

“物理學(xué)家、黑客阿諾?康代爾 從小就生長在一個科研氛圍濃厚的環(huán)境中。他出生于瑞士一個叫做下錫根塔爾的小村子，這個村子恰好位于擁有歐洲頂級粒子加速實驗室的保羅謝爾學(xué)院（Paul Scherrer Institute）和歐洲大陸最著名的科技院校蘇黎士聯(lián)邦理工學(xué)院（ETH Zürich）之間。在學(xué)習(xí)粒子物理學(xué)和超級計算機學(xué)期間，康代爾曾經(jīng)在電腦上建立過宇宙的模型。后來他搬到美國加利福尼亞州，在斯坦福大學(xué)直線加速器中心的全國加速實驗室中工作（SLAC National Accelerator Laboratory），后來又開始創(chuàng)業(yè)，成為Skytree公司的創(chuàng)始工程師，并且設(shè)計了幾套高性能的機器學(xué)習(xí)算法?，F(xiàn)在他是Oxdata公司H2O數(shù)據(jù)分析平臺的核心開發(fā)者，他開發(fā)的這個H2O平臺，被編程社區(qū)GitHub的成員譽為最優(yōu)秀的開源Java機器學(xué)習(xí)項目，而且它還可以兼容流行的統(tǒng)計編程語言——R語言。他在Oxdata公司的頭銜是“物理學(xué)家兼黑客”

79 MapR

MapR作為Hadoop的三巨頭之一（cloudera，hortonworks），它自創(chuàng)文件系統(tǒng)比Hadoop快三倍，據(jù)說目前在積極尋找買家。最近它們CTO也是創(chuàng)始人之一M.C. Srivas跳槽到Uber，還是挺讓人驚訝的。

這一篇文章說的是數(shù)據(jù)庫從傳統(tǒng)到NoSQL進化過程，里面提到在遷移中學(xué)到的寶貴經(jīng)驗。

80 AppNexus

廣告競價與交易平臺，2015年融資額度達到 1 億美元，每天平臺上的實時競價廣告數(shù)量高達 300 億個，覆蓋桌面和移動平臺。AppNexus 2014年營收達到 1.3 億美元，平臺流水高達 10 億美元。這種需要對實時數(shù)據(jù)處理能力強大的技術(shù)。

81 Mesosphere

Mesos老家，Mesos是Apache下的開源分布式資源管理框架，它被稱為是分布式系統(tǒng)的內(nèi)核。Mesos最初是由加州大學(xué)伯克利分校的AMPLab開發(fā)的，后在Twitter得到廣泛使用。它們家發(fā)布全球首個數(shù)據(jù)中心操作系統(tǒng)。這里提到的Marathon是一個框架，可以通過mesos+marathon管理docker集群。

82 Zuora

Zuora誕生于 2007年硅谷，是目前硅谷成長最快的 Saas 公司，由來自 Salesforce 和 Cisco (WebEx) 的資深 SaaS 人士創(chuàng)建，其計費平臺通過云計算提供定價、計量、計費服務(wù)，為所有具有在線訂用業(yè)務(wù)的公司提供服務(wù)，致力于推動各領(lǐng)域 “用多少，付多少” 的訂用型商業(yè)模式的轉(zhuǎn)型和成長，使其商業(yè)潛力達到最大化。2015年1.15 億美元 F 輪融資。

83 DataDog
云端應(yīng)用監(jiān)控服務(wù)商，幫助企業(yè)用戶監(jiān)控應(yīng)用和底層架構(gòu)在工作時的各種數(shù)據(jù)，今年剛?cè)诹私粌|美金！就是公司內(nèi)部的dashboard，這個控制臺支持多種主流云服務(wù)，把從基礎(chǔ)設(shè)備和軟件采集的數(shù)據(jù)統(tǒng)一處理并存儲，允許用戶創(chuàng)建儀表盤和搜索訪問已有數(shù)據(jù)，讓用戶可以對多服務(wù)進行一站式管理。目前已經(jīng)開放了所有 API，不少創(chuàng)業(yè)公司用它的服務(wù)。

84 Sumo logic

Sumo Logic試圖成為Splunk的SaaS版本替代，不過他們走出了自己獨有的發(fā)展道路。筆者有幸跟這家技術(shù)總監(jiān)Yongxing Wang聊過，這算是是市場上功能最豐富的SaaS版日志管理工具之一，專攻企業(yè)市場。2015年E輪融資8000萬美金。這篇文章講“用戶是安全的阿喀琉斯之踵嗎”。

85 Pure Storage

為企業(yè)提供基于閃存技術(shù)的企業(yè)存儲方案，意在提供相比硬盤存儲技術(shù)更高的讀寫速率同時降低耗電和損耗。跟Quora是鄰居都在Mountain View Downtown，已經(jīng)上市，雖然上市后表現(xiàn)不佳。 筆者記得看過他們一個有意思的視頻，有個工程師對服務(wù)器吼叫，監(jiān)控 dashboard上馬上顯示異常。這是想說服務(wù)器也有情感？

86 Snowplow Analytics

是做基于AWS pipeline的分析報表，幫你搭建實時的數(shù)據(jù)倉庫，挺有意思的公司，因為它直接把代碼開源放到github上，可能是為了展現(xiàn)他們的技術(shù)強大自信。嚴格講它本部不是在硅谷，而是倫敦，自從筆者不小心郵箱注冊它們的試用服務(wù)，它們家老是給筆者發(fā)郵件電話約談服務(wù)，2B創(chuàng)業(yè)真是不容易。

87 Clari

有不少企業(yè)都希望通過大數(shù)據(jù)挖掘幫助企業(yè)級用戶提升工作效率，降低運營成本。其中一個很有意思的方向是預(yù)測智能（predictive intelligence）——通過觀測組織內(nèi)外的一切相關(guān)數(shù)據(jù)，預(yù)測未來需要采取的舉措。

Clari做B2B預(yù)測分析技術(shù)的公司。產(chǎn)品是一款智能引擎，通過分析人群的高時效性的行為數(shù)據(jù)，辨別潛在客戶，協(xié)助商戶優(yōu)化銷售和市場事務(wù)，增長銷售額。

88 Amplitude

移動應(yīng)用表現(xiàn)分析工具，能夠幫助應(yīng)用開發(fā)者更好的理解用戶是怎樣使用自己的產(chǎn)品。這一家人才還不錯，創(chuàng)始人MIT，還有斯坦福一些高手加盟，比如Jeffrey Wang短短兩年做到技術(shù)VP，之前在Sumo Logic和Palantir做工程師，佩服啊。

89 Dato

機器學(xué)習(xí)平臺 GraphLab改名Dato， 提供了一個完整的平臺，讓客戶能夠使用可擴展的機器學(xué)習(xí)系統(tǒng)進行大數(shù)據(jù)分析。簡單來說，就是從別的應(yīng)用程序或者服務(wù)中抓取數(shù)據(jù)，讓機器學(xué)習(xí)這個模型，并將學(xué)到的知識作為基礎(chǔ)，自動地進行準確的預(yù)測和決策制定。這么講挺抽象，最好理解的例子就是美國總統(tǒng)選舉的民意調(diào)查，可以通過社交網(wǎng)絡(luò)、媒體等提取數(shù)據(jù)，分析出民眾到底在關(guān)心什么，分析出哪個候選人競爭力最強。

90 Altiscale

服務(wù)主要目的是解決Hadoop的抽象性與復(fù)雜性，為工程師搭建一個完整的Hadoop環(huán)境，并且對其進行維護與管理。讓用戶可以更專注于他們的數(shù)據(jù)與應(yīng)用。

91 Adaptive Insights

提供實時分析和異常檢測的大數(shù)據(jù)創(chuàng)業(yè)公司，2015年6月獲得了7500 萬美元。

92 Pentaho

技術(shù)是將數(shù)據(jù)集成、業(yè)務(wù)分析與開源軟件結(jié)合起來。它的軟件收集來自各種專有來源的數(shù)據(jù)，例如Hadoop（Cloudera、Hortonworks等等）、NoSQL（MongoDB、HBASE、Cassandra等等）以及像Vertica這樣的數(shù)據(jù)倉庫，然后過濾并處理數(shù)據(jù)，轉(zhuǎn)變?yōu)閹順I(yè)務(wù)分析的洞察力。人們可以在任何地方得到來自結(jié)果的圖形顯示，自行分析報告，而無需IT開發(fā)者編寫查詢請求。Pentaho的技術(shù)可以嵌入到各種終端和應(yīng)用中。

93 Datatorrent

它聲稱可以將數(shù)據(jù)處理速度從實時提高到“現(xiàn)在時（Nowtime）”。公司的系統(tǒng)每秒鐘可以處理上千萬個數(shù)據(jù)項。持續(xù)生成大規(guī)模非結(jié)構(gòu)化的數(shù)據(jù)流，可以利用它來處理、監(jiān)控、分析并采取行動。

94 Galvanize

培養(yǎng)數(shù)據(jù)人才的培訓(xùn)網(wǎng)站，之前看到新聞“IBM 宣布大規(guī)模資助開源大數(shù)據(jù)項目 Spark”，IBM與UC Berkeley 的 AMPLab、DataCamp、Galvanize 以及 Big Data University 等學(xué)術(shù)及教育組織合作提供 Spark 教育課程，目標是培養(yǎng) 100 萬名數(shù)據(jù)工程師和數(shù)據(jù)科學(xué)家。

95 Datameer

這是一家數(shù)據(jù)分析工具提供商。利用開源Hadoop 分布式計算框架，幫助客戶分析大型數(shù)據(jù)。

把酒問青天，Kafka是啥玩意？一般來說在美國公司同事都很喜歡酒精，大家通過喝酒的方式社交，喝點啤酒布道技術(shù)，豈不樂哉！

96 Qubole

一家托管的Hadoop即服務(wù)提供商，F(xiàn)acebook前員工創(chuàng)立，幫你去管理云上Hadoop計算資源，它們一個成功案例是Pinterest，下面來自36kr的介紹

“Pinterest曾嘗試自行通過 Amazon EMR 建立數(shù)據(jù)處理平臺，但是因為其穩(wěn)定性無法控制和數(shù)據(jù)量增長過快的原因，最終決定改為使用 Qubole 提供的服務(wù)。在 Qubole 這個第三方平臺上，Pinterest 有能力處理其 0.7 億用戶每天所產(chǎn)生的海量數(shù)據(jù)，并且能夠完成包括 ETL、搜索、ad hoc query 等不同種類的數(shù)據(jù)處理方式。盡管 Pinterest 也是一個技術(shù)性公司，也有足夠優(yōu)秀的工程師來建立數(shù)據(jù)處理團隊，他們依然選擇了 Qubole 這樣的專業(yè)團隊來完成數(shù)據(jù)處理服務(wù)?！?br>
－－－－－－－－－－－－－－－－－－

下面說幾個做數(shù)據(jù)庫的明星創(chuàng)業(yè)公司。雖然說數(shù)據(jù)庫市場在Oracle的大旗下，它收購了SUN，MySQL，高低組合，軟硬通吃，云端發(fā)力，短時間很難顛覆，但是人民的智慧是不甘于在壟斷下茍活的，向這些勇敢的小而美公司致敬！

97 Cockroach Labs

Google最近幾年出了個牛逼哄哄的數(shù)據(jù)庫叫Spanner，一款全球級分布式關(guān)系數(shù)據(jù)庫管理系統(tǒng)，它是BigTable的繼任，但是不開源的，只是發(fā)了論文，CockroachDB就是仿作它。個人覺得這篇文章介紹時鐘和鎖還是很深刻的，如何保持原子性，同步并發(fā)，時序的嚴謹是做數(shù)據(jù)庫系統(tǒng)的基本。

97 MemSQL

號稱最快的內(nèi)存數(shù)據(jù)庫。據(jù)說它要比市面上現(xiàn)有的內(nèi)存數(shù)據(jù)庫便宜得多也快得多。他們是從Facebook出去的高手創(chuàng)辦，MemSQL在設(shè)計時同時針對了兩種需求（關(guān)系式數(shù)據(jù)庫與非關(guān)系式數(shù)據(jù)庫），它提供對大數(shù)據(jù)的實時分析功能，又能同時支持 SQL 與 JSON 非結(jié)構(gòu)化數(shù)據(jù)，雙管齊下。

說道這個Lambda架構(gòu)，其實挺有名的大數(shù)據(jù)專用詞，把實時處理和批處理結(jié)合起來取長補短，做到一個混合式數(shù)據(jù)流架構(gòu)，具體還得參考（Lambda Architecture）

98 GraphSQL

高效、大容量的圖數(shù)據(jù)庫和實時分析平臺，創(chuàng)始人是靳若明博士，應(yīng)用圖形理論存儲實體和實體之間的關(guān)系信息, 開發(fā)出了圖形數(shù)據(jù)庫領(lǐng)域中最為領(lǐng)先的數(shù)據(jù)存儲和處理技術(shù),擁有傳統(tǒng)關(guān)系型數(shù)據(jù)庫以及其他非關(guān)系型數(shù)據(jù)庫無可比擬的高效遍歷算法、非結(jié)構(gòu)化數(shù)據(jù)的強大存儲與計算能力。讓企業(yè)用戶可以實時獲取和分析數(shù)據(jù)。

比傳統(tǒng)數(shù)據(jù)庫的計算能力提高上千倍。在LinkedIn、阿里巴巴，支付寶、百度、Letv、沃爾瑪實驗室、奇虎360、攜程、國家電網(wǎng)等公司使用，獲得Data Collective創(chuàng)投、雅虎創(chuàng)始人楊致遠、阿里巴巴、百度、丹華資本、啟明創(chuàng)投等投資。

100 EverString

壓軸公司選這一家吧。這是家在硅谷和北京兩邊都有組織架構(gòu)的大數(shù)據(jù)公司，通過不斷地主動挖掘和分析全網(wǎng)在線企業(yè)信息，結(jié)合每家企業(yè)內(nèi)部的客戶關(guān)系管理系統(tǒng)，利用機器學(xué)習(xí)自動建立量化客戶模型預(yù)測誰是下一個客戶。

筆者與EverString聯(lián)合創(chuàng)始人汪超交流過，他說A輪前做了很大轉(zhuǎn)型。一開始針對金融高頻交易的預(yù)測產(chǎn)品失敗了，轉(zhuǎn)型后來找到這個方向，他認為大數(shù)據(jù)不是商業(yè)模式，是一個方法論。本質(zhì)跟搜索引擎很像，百度是對C端的產(chǎn)品，我們用百度獲取我們要的信息，而EverString是B端的產(chǎn)品，企業(yè)可以用它搜到他們想要的目標客戶。

他們B輪融資（6500萬）是企業(yè)人工智能領(lǐng)域全球最大一次。提到原因，主要是產(chǎn)品成功銷售給微軟，zenefits等一線公司，提高了2，3倍到30倍效率，人才方面把Salesforce前VP挖過來，這些都為B輪融資做了很好的鋪墊。

記得筆者剛?cè)ネ┺k公室，引入眼簾就是他們的logo，一位數(shù)學(xué)家提出用模型去構(gòu)建節(jié)點的關(guān)系，(scientific concept of being able to draw connections or relationships between nodes in a model.) 筆者就聯(lián)想到數(shù)學(xué)家西蒙斯創(chuàng)建的文藝復(fù)興公司，用心感受那種科技＋情懷。筆者也遇到很多創(chuàng)業(yè)的國內(nèi)朋友，但在美國做SaaS創(chuàng)業(yè)，還得到一線公司的認可，著實不易，也說明實力非凡，祝他們未來前程更偉大！

后記

如果大家感興趣收藏完整鏈接，具體做法先訂閱微信公眾號“董老師在硅谷”（donglaoshi-123）后臺回復(fù)“博客”，總共160家?；貜?fù)“獨角獸”，給出最新獨角獸公司融資列表。

可能有人會想問為什么沒有Google博客，并不是筆者看不上啊，而是它家博客實在太多了，每個產(chǎn)品線都有，技術(shù)又特別深，大多不是開源的，只能去"瞻仰"，不過還是可以推薦一下當年在谷歌的吳軍老師寫的《數(shù)學(xué)之美》，《浪潮之巔》。

還有家硅谷公司Palantir，做大數(shù)據(jù)的，估值超百億，但它們都是跟政府軍方合作，保密程度趕上蘋果了，也談不上窺探技術(shù)了。

筆者準備整理一個系列，把最新的硅谷科技公司的技術(shù)帶給國內(nèi)朋友，把上面的博客中精華翻譯出來，如果感興趣的，在本站上關(guān)注“ 科技閱讀列表全集［600篇］ - 董老師在硅谷 - 本站專欄 ，又是個浩大工程。。。歡迎勇者留言聯(lián)系翻譯事宜。

－－－－－－－－－－－－－－－－－－

關(guān)注如下我的微信公眾號“董老師在硅谷”，關(guān)注硅谷趨勢，一起學(xué)習(xí)成長。