Databricks推出Genie Code智能體，自動(dòng)化數(shù)據(jù)科學(xué)工程任務(wù)

Databricks發(fā)布了全新AI智能體Genie Code，旨在幫助企業(yè)數(shù)據(jù)從業(yè)者自動(dòng)化數(shù)據(jù)科學(xué)和工程任務(wù)。

Genie Code作為內(nèi)嵌面板集成在Databricks的筆記本、SQL編輯器和Lakeflow Pipelines編輯器中，能夠規(guī)劃、構(gòu)建、部署和維護(hù)端到端機(jī)器學(xué)習(xí)工作流。該產(chǎn)品可以自動(dòng)化MLflow實(shí)驗(yàn)跟蹤、監(jiān)控管道、修復(fù)模型問(wèn)題以及優(yōu)化資源配置。

分析師認(rèn)為Genie Code對(duì)企業(yè)具有重要價(jià)值。Future Group首席信息官實(shí)踐部門負(fù)責(zé)人Dion Hinchcliffe表示，數(shù)據(jù)團(tuán)隊(duì)在拼接管道、SQL轉(zhuǎn)換、特征工程邏輯和編排代碼方面耗費(fèi)大量時(shí)間，Genie Code通過(guò)對(duì)話界面生成和修改這些組件，能夠縮短從數(shù)據(jù)中提取洞察的時(shí)間。

除了提升生產(chǎn)力，Genie Code還能降低治理和合規(guī)挑戰(zhàn)的時(shí)間和精力成本。HFS Research執(zhí)行研究負(fù)責(zé)人Ashish Chaturvedi指出，隨著數(shù)據(jù)管道和機(jī)器學(xué)習(xí)工作流日益復(fù)雜和分布式，確保開(kāi)發(fā)者遵循訪問(wèn)控制、政策要求和審計(jì)標(biāo)準(zhǔn)傳統(tǒng)上需要大量手動(dòng)監(jiān)督。Genie Code的自動(dòng)化能力結(jié)合Databricks Unity Catalog，旨在簡(jiǎn)化這一過(guò)程。

對(duì)于首席信息官而言，自動(dòng)化治理和合規(guī)解決了一個(gè)主要痛點(diǎn)。Pareekh Consulting首席分析師Pareekh JAIn認(rèn)為，Genie Code通過(guò)模型上下文協(xié)議的可擴(kuò)展性同樣對(duì)開(kāi)發(fā)者有益。

該協(xié)議支持允許開(kāi)發(fā)者將Genie Code與Jira、GitHub、Confluence和Notion等第三方工具集成，直接在現(xiàn)有系統(tǒng)中觸發(fā)訓(xùn)練模型或故障排除管道等任務(wù)，同時(shí)自動(dòng)將結(jié)果更新回這些平臺(tái)。Broadcom站點(diǎn)可靠性工程師Advait Patel表示，這有助于減少上下文切換，而不是在文檔、筆記本、儀表板和故障排除屏幕之間跳轉(zhuǎn)。

一些分析師認(rèn)為，Genie Code的發(fā)布標(biāo)志著Databricks更廣泛的戰(zhàn)略轉(zhuǎn)變，而不僅僅是另一個(gè)開(kāi)發(fā)者生產(chǎn)力工具的推出。HyperFRAME Research AI棧實(shí)踐負(fù)責(zé)人Stephanie Walter表示，Genie Code是讓湖倉(cāng)成為企業(yè)AI智能體或應(yīng)用程序運(yùn)行時(shí)環(huán)境的微妙策略。

Databricks正逐步將其平臺(tái)轉(zhuǎn)變?yōu)橹悄荏w可以推理數(shù)據(jù)、編寫(xiě)代碼、執(zhí)行工作流并在單一治理系統(tǒng)內(nèi)評(píng)估結(jié)果的環(huán)境。如果這一愿景成功，競(jìng)爭(zhēng)戰(zhàn)場(chǎng)將從傳統(tǒng)的商業(yè)智能工具或筆記本轉(zhuǎn)向控制企業(yè)AI系統(tǒng)實(shí)際運(yùn)行層的爭(zhēng)奪。

Hinchcliffe認(rèn)為這對(duì)首席信息官來(lái)說(shuō)可能是重大轉(zhuǎn)變，將把企業(yè)開(kāi)發(fā)的重心轉(zhuǎn)向數(shù)據(jù)平臺(tái)本身。成為數(shù)據(jù)工程和分析"AI操作系統(tǒng)"的供應(yīng)商可能在下一個(gè)十年擁有企業(yè)軟件棧的大部分份額。

Hinchcliffe還觀察到Snowflake的類似戰(zhàn)略舉措，Snowflake的Cortex Code通過(guò)在Snowflake生態(tài)系統(tǒng)內(nèi)幫助生成查詢、管道和分析工作流來(lái)追求類似目標(biāo)。Jain也看到超大規(guī)模云服務(wù)商的類似進(jìn)展，至少在AI智能體管理數(shù)據(jù)工作流方面，微軟正在整合Fabric Copilot、GitHub Copilot for data和AI驅(qū)動(dòng)的管道，谷歌正在構(gòu)建BigQuery AI智能體和Gemini數(shù)據(jù)助手，AWS提供用于數(shù)據(jù)分析的Q和用于管道編排的Bedrock智能體。

然而，兩位分析師都認(rèn)為Databricks可能具有優(yōu)勢(shì)，特別是相對(duì)于Snowflake。Hinchcliffe表示，Databricks的優(yōu)勢(shì)可能在于平臺(tái)深度，其技術(shù)棧在統(tǒng)一架構(gòu)下涵蓋數(shù)據(jù)工程、機(jī)器學(xué)習(xí)工作流和生成式AI工具，這意味著編碼智能體可以接觸更廣泛的原語(yǔ)集合。Databricks還大力投資可觀察性和大語(yǔ)言模型操作能力，這很重要，因?yàn)槠髽I(yè)越來(lái)越希望監(jiān)控AI生成代碼在生產(chǎn)環(huán)境中的行為。

據(jù)該公司表示，Genie Code已正式發(fā)布，客戶可免費(fèi)使用。

Q&A

Q1：Genie Code是什么？它能做什么？

A：Genie Code是Databricks推出的AI智能體，專門幫助企業(yè)數(shù)據(jù)從業(yè)者自動(dòng)化數(shù)據(jù)科學(xué)和工程任務(wù)。它能夠規(guī)劃、構(gòu)建、部署和維護(hù)端到端機(jī)器學(xué)習(xí)工作流，包括自動(dòng)化MLflow實(shí)驗(yàn)跟蹤、監(jiān)控管道、修復(fù)模型問(wèn)題以及優(yōu)化資源配置。

Q2：Genie Code如何解決企業(yè)數(shù)據(jù)團(tuán)隊(duì)的痛點(diǎn)？

A：數(shù)據(jù)團(tuán)隊(duì)通常需要花費(fèi)大量時(shí)間拼接管道、SQL轉(zhuǎn)換、特征工程邏輯和編排代碼。Genie Code通過(guò)對(duì)話界面自動(dòng)生成和修改這些組件，大大縮短了從數(shù)據(jù)中提取洞察的時(shí)間，并有助于更快的運(yùn)營(yíng)決策。

Q3：Genie Code與其他同類產(chǎn)品相比有什么優(yōu)勢(shì)？

A：相比Snowflake等競(jìng)爭(zhēng)對(duì)手，Databricks的優(yōu)勢(shì)在于平臺(tái)深度。其技術(shù)棧在統(tǒng)一架構(gòu)下涵蓋數(shù)據(jù)工程、機(jī)器學(xué)習(xí)工作流和生成式AI工具，編碼智能體可以接觸更廣泛的功能集合。此外，Databricks在可觀察性和大語(yǔ)言模型操作能力方面投資較大。