一直是數(shù)據(jù)庫領域關注度非常高的兩家公司，雖然同在一個地盤，但各有特色，競爭一直沒有擺到臺面上。而這一次的生成式AI浪潮，兩家公司非常積極的通過收購布局，Snowflake完成了對Neeva（企業(yè)級AI搜索引擎）的收購，Databricks 13億美金收購MosaicML（ML模型部署），并低調宣布對OmniML（模型壓縮）的收購。兩家一改一直以來表面和睦、暗里較勁的態(tài)勢，選擇同一天舉辦公司最重要的年會，亮明自家的生成式AI布局，野心藏不住了。??????????????????????????????????????????
對數(shù)據(jù)和人工智能領域從業(yè)者來說，兩個最重要的參與者——Databricks和Snowflake——分別在同一天，在舊金山和拉斯維加斯舉辦了他們的年度會議（Databricks的Data and AI Summit和Snowflake的Summit）。這兩個巨頭決定在同一周舉辦他們的重要活動，這大概率不是巧合。在過去十年中，Snowflake和Databricks一直是朋友也是對手，但這一周明顯表明，它們現(xiàn)在是彼此的主要競爭對手，而新的戰(zhàn)場就是人工智能。
毫不奇怪的是，兩個會議上的討論和宣布大部分都圍繞生成式人工智能。所傳達的重要信息是，為了建立生成式人工智能戰(zhàn)略，每家公司都必須從數(shù)據(jù)戰(zhàn)略開始。不出所料，Databricks和Snowflake都為自己為什么可以在這一旅程中為客戶提供最佳支持進行了論證。
兩家公司從價值鏈的不同部分開始，曾經甚至是戰(zhàn)略合作伙伴關系，為何在這個人工智能的新時代演變?yōu)槿绱思ち业母偁帉κ帜兀?
【快速免責聲明：Madrona曾投資Snowflake的C輪，并仍持有該公司的一些股份?！?
3）在計算資源使用上具有彈性，從而實現(xiàn)查詢處理和靈活性方面的前所未有的速度。
如今，Snowflake已經從“僅僅”一個云數(shù)據(jù)倉庫發(fā)展成為一個“數(shù)據(jù)云”，為客戶提供訪問、構建、協(xié)作和變現(xiàn)其數(shù)據(jù)的單一平臺。僅用十多年時間，Snowflake已發(fā)展成為市值550億美元的上市公司，為6000多家客戶和許多《財富》500強企業(yè)提供服務。Snowflake已與主要超大規(guī)模云服務提供商（Azure、AWS和GCP）并肩作戰(zhàn)，現(xiàn)在他們明確將目光投向人工智能領域以贏得更多關注。
為了實現(xiàn)這一目標，他們在人工智能和機器學習領域進行了一系列收購和產品推出，包括：
1）Snowpark允許數(shù)據(jù)科學家使用其首選編程語言進行端到端的機器學習工作負載開發(fā)、部署和編排。通過Snowpark，客戶可以攝取、分析和轉換其數(shù)據(jù)，以訓練機器學習模型和運行更多的預測性分析。
2）Streamlit是一個數(shù)據(jù)驅動的應用程序構建工具，Snowflake于2022年3月以8億美元收購。Streamlit使客戶能夠僅通過幾行代碼開發(fā)數(shù)據(jù)密集型應用程序。Streamlit簡化了通過前端Web應用程序對數(shù)據(jù)分析任務和機器學習模型輸出進行上下文化的過程。
3）Neeva是Snowflake今年早些時候收購的公司，旨在加速企業(yè)與數(shù)據(jù)的交互和搜索，尤其是以更具對話性的方式進行。
Databricks成立于2013年，僅比Snowflake晚一年。與Benoit和Theirry是行業(yè)從業(yè)者不同，Databricks是由一群與學術界和開源社區(qū)有著深厚淵源的人士創(chuàng)立的。包括現(xiàn)任CEOAli Ghodsi在內的七位創(chuàng)始人是UC Berkeley的AMPLab研究員，他們構思了Apache Spark，這是一個用于大規(guī)模數(shù)據(jù)處理的開源統(tǒng)一分析引擎。Spark已經發(fā)展成為最大且最常用的數(shù)據(jù)處理框架之一，在大規(guī)模數(shù)據(jù)工程、數(shù)據(jù)科學和機器學習方面起著重要作用。
Databricks最初的目標是商業(yè)化Spark，推出了企業(yè)級的Spark版本，提供了大型組織所需的所有功能（治理、支持、托管等）。Databricks隨后發(fā)展成為創(chuàng)新的“Lakehouse平臺”，統(tǒng)一了數(shù)據(jù)、分析和人工智能。統(tǒng)一的Lakehouse概念將“集成、存儲、處理、治理、共享、分析和人工智能”融合在一個平臺上。
在過去的十年中，Databricks已成為全球估值最高的私人公司之一，2021年估值達到380億美元，并于近期實現(xiàn)了10億美元的收入里程碑。他們?yōu)槌汕先f的企業(yè)客戶和開源用戶提供服務，并被視為最受矚目的IPO之一。在所有這些增長中，他們越來越將自己定位為人工智能領域的領導者，并最近進行了重要的收購和產品發(fā)布，包括以13億美元收購MosaicML（下文將更詳細介紹），并開源了Dolly，這是一種以低于30美元的成本訓練的指令調優(yōu)LLM。
Snowflake和Databricks都有良好的生態(tài)位，可以繼續(xù)利用長期的結構性趨勢，因為企業(yè)正在為生成式人工智能的轉變做準備。隨著生成式人工智能應用的廣泛應用，這兩家公司都試圖將自己定位為戰(zhàn)略性的多產品數(shù)據(jù)平臺。以下是各自會議中的一些重要公告以及我們對每家公司整體人工智能戰(zhàn)略的看法。
1）Snowflake的原生應用框架：通過允許開發(fā)人員創(chuàng)建、分發(fā)和變現(xiàn)應用程序，以新的方式利用數(shù)據(jù)，可基于Snowflake的數(shù)據(jù)云擴展。
2）Snowpark容器服務：擴展數(shù)據(jù)可編程性和計算基礎架構，以支持編程語言、訪問第三方軟件，并為托管全棧應用程序和LLM提供增強的安全性和治理。通過泛化Snowflake的計算平臺，提供進一步的靈活性，使客戶能夠從底層（數(shù)據(jù)層）一直到UI層運行完整的端到端應用程序。
3） 其他重要公告： Snowpipe流式處理功能；動態(tài)表格（也稱為材料化表格）；Document AI（一項新服務，用于提取文檔中的非結構化數(shù)據(jù)）；以及Iceberg Tables。
1）與NVIDIA的合作計劃將其NeMo企業(yè)開發(fā)框架嵌入到Snowflake的數(shù)據(jù)云中，這將使Snowflake的客戶能夠構建和部署LLMs和基于人工智能的應用程序，利用存儲在Snowflake中的專有數(shù)據(jù)。
2）與Microsoft的合作將擴展與Azure的合作伙伴關系，重點是圍繞Microsoft Azure的OpenAI和Azure AI/ML服務進行新產品整合。該合作有可能將工作負載和客戶引入數(shù)據(jù)云。
3）與Weights & Biases這家領先的MLOps平臺的合作，Snowflake的容器服務使Weights & Biases能夠加速在Snowflake數(shù)據(jù)云中進行ML模型、LLMs和LLM驅動應用的迭代開發(fā)。最終，這項合作將幫助企業(yè)和用戶更輕松地構建和利用生成式人工智能。
直到最近，Snowflake沒有透露任何在現(xiàn)有能力上添加生成式人工智能的計劃，許多投資者對Snowflake在這個領域（尤其是與Databricks相比）的競爭能力表示擔憂。然而，在2023年的峰會上，Snowflake展示了一個強大的愿景，將自己定位為可信賴的數(shù)據(jù)云提供商，并以此打造了一個與生成式人工智能相關的強大故事。
Snowflake與Nvidia的合作，以及Snowpark容器服務的宣布，使他們在AI數(shù)據(jù)堆棧中成為一個更具可行性的參與者。他們想傳達的核心觀點是，他們可以讓客戶在Snowflake數(shù)據(jù)云中安全地訪問、開發(fā)和部署LLMs和基于人工智能的應用程序，同時提供Nvidia GPU和AI軟件的加速計算。
雖然他們的故事和傳遞的信息令人印象深刻，但我們認為他們在人工智能領域相對于Databricks仍然處于劣勢狀態(tài)...
1）LakehouseIQ：基于LLM的自然語言接口，用于搜索和查詢數(shù)據(jù)，并強大地理解客戶的數(shù)據(jù)、內部行話和使用模式，以了解客戶的架構、文檔、查詢、系統(tǒng)等。
2）LakehouseAI：Databricks在Databricks ML方面宣布了許多新功能，包括一些關于LLMOps的能力，例如整合數(shù)據(jù)、為機器學習準備數(shù)據(jù)集、微調和策劃機器學習模型，以及部署模型本身。Dat abricks還宣布了關于向量搜索、特征服務和MLFlow Gateway的許多功能。
3）MosaicML：就在峰會開始之前，Databricks宣布以13億美元收購MosaicML，該收購在峰會期間定位為“構建GenAI模型的機器”。
Databricks通過將數(shù)據(jù)、人工智能模型、監(jiān)控和治理能力整合到Lakehouse平臺中，采取了統(tǒng)一的人工智能方法。因此，Databricks使客戶能夠更高效地開發(fā)他們的GenAI解決方案，并且客戶認為Databricks是一個值得信賴的合作伙伴，平均而言，在機器學習開發(fā)方面更快速、更經濟、更易于使用。
雖然Databricks已經被視為人工智能堆棧中的關鍵參與者，但通過對模型（如Dolly，一個開源的指令跟隨LLM）的投資以及對MosaicML的重大收購，Databricks在GenAI領域鞏固了其領導地位。Databricks繼續(xù)強調他們的Lakehouse是GenAI初創(chuàng)企業(yè)訓練和部署自己的人工智能模型的最佳方式，以成本效益的方式利用自己的專有數(shù)據(jù)，而不受大型科技公司的束縛。
盡管生成式人工智能的熱潮已經持續(xù)了8個多月，但過去一周明確表明，Snowflake和Databricks正在展開競爭，爭奪這個領域的心智和市場份額。
1.收購將繼續(xù)進行→ Snowflake和Databricks都相對有良好的生態(tài)位來繼續(xù)收購與其整體戰(zhàn)略相輔相成的小公司。Snowflake在其資產負債表上擁有約40億美元的現(xiàn)金，而Databricks則擁有可用于交易的高估值。同時，數(shù)百家AI和數(shù)據(jù)工具初創(chuàng)企業(yè)渴望在干旱的IPO市場找到出口。我們不認為Neeva和MosaicML會是這些巨頭最后一次收購，市場將出現(xiàn)整合。
2.客戶將受益→ 在Snowflake和Databricks之間逐漸升級的競爭中，最明顯的贏家應該是他們的客戶。這兩家巨頭正在快速為他們的平臺添加新穎的產品和服務，構建“一站式商店”，供客戶構建數(shù)據(jù)應用程序并利用LLMs。這種平臺增強將有助于民主化訪問人工智能，并讓數(shù)據(jù)科學家、數(shù)據(jù)工程師和人工智能從業(yè)者能夠更有意義地進行合作。
3.Azure和AWS將賺取更多的利潤→ 隨著Snowflake和Databricks繼續(xù)在AI市場上進一步擴張，它們將需要大量的計算能力，主要由Azure和AWS提供。數(shù)據(jù)工程師Anant Packidurali敏銳地觀察到這一點。與Nvidia在AI中受益一樣，為Snowflake和Databricks的計算需求提供基礎設施的超大規(guī)模云服務提供商無論誰在AI競爭中獲勝，都將獲得利益。
隨著企業(yè)對數(shù)據(jù)的依賴程度越來越高，以支持其生成式人工智能戰(zhàn)略，我們相信Snowflake和Databricks都處于良好的位置，可以利用這一代的轉變。盡管它們來自價值鏈的不同部分，并且它們的關系在過去十年的發(fā)展中發(fā)生了變化，但它們現(xiàn)在正處于一場獎勵巨大的競賽中。
