メインコンテンツへジャンプ

データインテリジェンスと評価インテリジェンスを統合する:Databricks VenturesがGalileoに投資

アンドリュー・ファーガソン
Maria Pere-Perez
プラサド・コナ
Share this post

私たちの顧客は、生成型AIを試験から本番環境へ移行させる最大の課題は「測定問題」だと言っています。これらのシステムを測定し、信頼するのは難しいです。LLMプロバイダーは制御テストでのパフォーマンス結果を共有しますが、企業はモデルを変更し、自身のデータを追加します。これにより、現実世界での評価が難しくなります。

現在のAIの状況では、ほとんどの組織が単一の呼び出しLLMアプリケーションからAIシステムへと移行しています。これらのシステムは、複数のツール、検索戦略、推論ステップ、ビジネスルール、およびLLMを使用して、ユーザープロンプトから単一の出力を生成します。フードの下ではたくさんのことが進行中です。

Databricksでは、顧客のデータと、そのビジネスのユニークな特性に合わせて調整された強力なAIモデルを組み合わせることで、分析とインテリジェントアプリケーションへのアクセスを民主化しています。私たちは、一般的なインテリジェンスから、私たちがデータインテリジェンスと呼ぶものへのシフトをリードしています。私たちのユーザーが証明しているように、データの品質と効率の小さな改善でも、大きな影響を及ぼすことができます。今年、Databricks Mosaic AIを基盤としたアプリケーションが急増したことを受け、Databricksが顧客の複合システムに対して業界をリードするスケーラブルな評価を提供できることが重要です。

私たちは、AIチーム全体の評価インテリジェンスに焦点を当てたスタートアップ、GalileoのシリーズBの資金調達ラウンドにDatabricks Venturesが投資したことをお知らせすることを嬉しく思います。そして、この深いパートナーシップにより、現在、すべてのDatabricksモデルがガリレオユーザーにネイティブで利用可能となり、顧客にデータインテリジェンスと評価インテリジェンスの両方を提供します。

なぜガリレオなのか

ガリレオは、独自の指標と評価基盤モデルのセットであるLuna評価スイートを用いた新しいタイプの評価インテリジェンスを提供します。ガリレオは、Lunaとその意見形成的なワークフローを組み合わせて、実験、監視、リアルタイム保護を可能にし、評価によってチームを強化します:

  • AI開発ワークフロー全体をカバー
  • グラウンドトゥルースデータが必要なく、そのまま使えます。
  • コストや遅延の影響を受けずに、月に数百万のAIクエリをスケールアップ
  • エンジニア、開発者、ビジネスユーザーにとって同等に有用です
  • あなたのユースケースに特有のデータに自動的に適応して、継続的に改善します

これにより、チームは信頼性の高いアプリケーションを迅速に出荷し、一貫した出力と内部および外部ユーザーに対するポジティブなブランド体験を確保することができます。ガリレオは、Fortune 50のDatabricksの顧客との既存の関係を含むエンタープライズ全体で実績を持っており、昨年に比べてビジネス成長率が800%以上に達しています。

GalileoとDatabricksの次のステップは何か

ガリレオは現在、Unityカタログ、Databricksマーケットプレイス、およびMosaic AIモデルサービスから、Databricksの最新世代の高品質な事前学習済み基盤モデルを提供しています。Databricksで利用可能なすべての既製品および微調整モデルは、ネイティブ統合を通じてGalileoでの評価を強化するためにアクセスできるようになりました。これには、あなたのOAuth Databricksの資格情報だけが必要です。この統合により、ユーザーはデータインテリジェンスと評価インテリジェンスの両方の最良の部分を一つのエコシステムの一部として得ることができます。

これは、DatabricksとGalileoとのデータインテリジェンスへの移行の最初のステップに過ぎません。将来的に、ガリレオはDatabricksのデータレイヤーと統合することで、評価と効率的なRLHFのための自動アルゴリズムによる高品質なテストセットと微調整データセットの作成を可能にし、全体のエコシステム内でネイティブに開発ループを閉じる予定です。

これらの統合を展開することに興奮しています - 共同ソリューションを今すぐ始めるために、興味を登録するためにここから連絡してください。今後のアップデートをお楽しみにし、AI評価の未来についてもっと学ぶために、10月29日にDatabricksとGalileoチームに参加して、GenAI Productionize 2.0バーチャルサミットに参加してください。

Databricks 無料トライアル

関連記事

RAGの精度向上へ:Databricks VenturesがVoyage AIに出資

私たちが顧客から頻繁に聞くのは、生成AIアプリケーションをパイロットから本番環境に移行する際の課題の1つが、既製の大規模言語モデル(LLM)が生成する結果の正確性であるということです。この正確性のギャップを埋めるために、企業が取り組んでいる方法の1つが、Retrieval Augmented Generation(RAG)アーキテクチャを含む「 複合AIシステム 」を構築することです。RAGアーキテクチャや複合AIシステムでは、企業や特定分野のデータをプロンプトや応答の一部として取り入れることで、既製のLLMの応答の質を向上させます。Databricksでは、これをLLMの「一般知能」から「データ知能」へのシフトと捉えており、わずかなリトリーバルの質や効率の向上でも、ユーザー体験に大きな影響を与えることができると考えています。 高品質な埋め込みモデルは、正確なRAGシステムの礎です。今年、DatabricksのMosaic AI上で開発されたRAGアプリケーションが急増している中、Databricksが業界トップ

革新を解き放て:DatabricksがジェネレーティブAIスタートアップチャレンジを発表!

September 18, 2024 アンドリュー・ファーガソンSteve Sobel による投稿 in
Databricksを基盤にした画期的なGenerative AIのユースケースを持つ起業家やスタートアップですか?それなら、私たちのチャレンジに挑戦してみませんか?Databricksは、 Databricks Generative AI Startup Challenge を紹介することを大変嬉しく思います - これは、Generative AIの力を利用して実際の顧客の問題を解決する革新的な製品を開発している 初期段階のスタートアップ向けの賞金総額が100万ドル以上のコンペティション であり、Databricks Data Intelligence Platformの力を活用しています。 Databricks Ventures と Databricks for Startups のスポンサーであり、AWSとの協力のもと、これはあなたが印象を残し、比類のない露出を得て、成功への道を加速するチャンスです。...

Databricks AI ファンドのご紹介

私たちは、新世代の創業者とスタートアップ企業を支援するという私たちの取り組みを示す Databricks AI Fund を発表できることを嬉しく思います。
Databricks ブログ一覧へ