AIをよりアクセシブルに：Databricks上のMeta Llama 3.3で最大80％のコスト削減！
企業が高品質なAIアプリを提供するエージェントシステムを構築するにつれて、私たちはお客様に最高のコスト効率を提供するための最適化を続けています。Meta Llama 3.3モデルが Databricks Data Intelligence Platform で利用可能になったことを発表することを嬉しく思います。また、Mosaic AIの Model Serving の価格と効率性に大幅な更新が加えられました。これらの更新により、推論コストが最大80％削減され、AIエージェントを構築したり、バッチLLM処理を行っている企業にとって、以前よりも大幅にコスト効率が向上します。 コスト削減80%： 新しいLlama 3.3モデルと価格の引き下げにより、大幅なコスト削減を実現します。 推論速度の向上： レスポンスが40%速くなり、バッチ処理時間が短縮されることで、より良い顧客体験と迅速な洞察を実現します。 新しいMeta Llama 3.3モデルへのアクセス： Metaの最新技術を活用して、品質とパフォーマンスを向上させま
Unity Catalogに新機能！Hive MetastoreとAWS Glue Federationのパブリックプレビュー開始！
Hive Metastore（HMS）とAWS Glue Federationのパブリックプレビュー開始をお知らせします！ この新機能により、Unity CatalogはDatabricks内外に存在するHive MetastoreやAWS Glueに保存されたテーブルにシームレスにアクセスし、統一的なガバナンスを提供できるようになります。これは、Unity Catalogを通じてデータベース、データウェアハウス、カタログといった外部データソースを統一ガバナンスフレームワークの下にまとめる Lakehouse Federation ビジョンの重要な一歩となります。 形式や場所を問わず、すべてのデータを単一のプラットフォームから簡単に発見、ガバナンス、クエリ可能になり、組織全体のオープンなアクセスとコラボレーションを促進します。また、データインテリジェンスをすべてのデータソースに拡張することが可能になります。 このブログでは、HMSとAWS Glue Federationのメリット、仕組み、導入方法について解説しま
ファインチューニングされたラマモデルに対するバッチ推論とMosaic AIモデル提供
序章 本番環境向け、スケーラブルでフォールトトレラントな生成型AIソリューションを構築するには、信頼性の高いLLMの利用可能性が必要です。あなたのLLMエンドポイントは、専用の計算をあなたのワークロードのために持つことで需要を満たす準備ができている必要があります。必要に応じて容量をスケーリングし、一貫したレイテンシを持ち、すべてのインタラクションをログに記録する能力、そして予測可能な価格設定を持つことが求められます。このニーズを満たすために、Databricksは プロビジョニングされたスループットエンドポイント を、各種の高性能基盤モデル（全ての主要なラマモデル、DBRX、ミストラルなど）で提供しています。しかし、最新で最も性能の高い微調整されたLlama 3.1と3.2のバリアントを提供することはどうでしょうか？NVIDIAの Nemotron 70Bモデル は、Llama 3.1の微調整されたバリアントで、多様なベンチマークで競争力のあるパフォーマンスを示しています。Databricksの最近の革新により、
製造業を変革する自動化されたワークフローの革命とは？
現代の製造業者にとって、効率化され自動化されたワークフローは、手動データ管理や設備のダウンタイムなどの課題を克服するために不可欠です。自動化されたワークフローを活用し、予測保守を可能にすることで、製造業者は非効率性と廃棄物を減らすリアルタイムの生産洞察を得ることができます。データのサイロ化の排除と分析のスケーリング能力は、より良い意思決定を可能にし、増大する運用データの量をサポートします。データ駆動の風景では、自動化されたワークフローはビジネス成功のために不可欠となり、データ実践者が反応的な問題解決から積極的なイノベーションへとシフトすることを可能にします。 Databricks Workflows は、データ、分析、AIの統一されたオーケストレーションツールで、ETL、分析、機械学習パイプラインの自動化ワークフローを簡単に定義、管理、監視することで、データチームの増大する要求に対応するのに役立ちます。データインテリジェンスプラットフォームと完全に統合されたWorkflowsは、シンプルなワークフロー定義体験、高
マネージドAzureリソースへのアウトバウンドアクセスを包括的にカバーするAzure Private Linkの提供開始を発表！
Azure Private LinkがDatabricksサーバーレスおよびMosaic AIモデル提供ワークロード向けに一般提供（GA）となったことをお知らせします！ これにより、Databricks SQL、Jobs、Notebooks、Delta Live Tables、Mosaic AIモデル提供のCPU/GPUエンドポイントから、Azure Data Lake Storage（ADLS）やマネージドAzureリソースへのプライベート接続が可能になります。また、本日、Azure OpenAIやAzure SQLなど、 60以上のAzureファーストパーティリソース への新たなサポートも導入しました。今年初めに発表した DBSQLウェアハウスからAzure Storageへのプライベートリンクサポート に加え、さらに強化された内容となっています。 Azure Private Link は、クラウドストレージ、シークレット、SQLデータベース、AIモデルなどの顧客リソースへのアウトバウンドアクセスにおいて、パ
ノートブックの洞察をAI/BIダッシュボードで提示・共有する方法
私たちは、 Databricks Notebooks と AI/BI ダッシュボード間の新しい統合を発表することを嬉しく思います。これにより、ノートブックからの洞察を労力をかけずに共有可能な洗練されたダッシュボード に変換することができます。この機能は、Databricksプラットフォーム全体での作業に美しい、ローコードのダッシュボーディングを統合するための私たちの継続的な努力を反映しています。この統合により、ノートブックの分析をプロフェッショナルでインタラクティブなダッシュボードに表示し、 ビジネスユーザーやステークホルダーと簡単に共有する ことができます。これは組織全体で可能です。 この統合はどのように機能しますか？ この新機能により、クエリ、パラメータ、ビジュアライゼーションを完備したSQLノートブックセルをAI/BIダッシュボードに統合できます。ノートブックでデータ分析を開始する柔軟性と、AI/BIダッシュボードを通じて洞察を提示し、共有する簡便さを、実践者に提供します。 データアナリストとして、ノートブッ
統計の予測最適化を発表
統計の予測最適化のゲーテッドパブリックプレビューを発表できることを嬉しく思います。Data + AI Summitで発表された 予測最適化 （ Predictive Optimization ） は、最適化プロセスを効率化するためのAI駆動のアプローチとして一般提供されています。予測最適化は現在、 重要なデータ レイアウトとクリーンアップ タスクをサポートしており、ユーザーからの早期フィ ードバックでは、日常的なデータ メンテナンスを大幅に簡素化する効果が高く評価されています。 自動統計管理の追加により、予測最適化は次のような進歩を通じて顧客に価値を提供し、操作を簡素化します。 データスキップ統計のインテリジェントな選択により、列順序管理の必要性が排除されます クエリ最適化統計の自動収集により、データロード後にANALYZEを実行する必要がなくなります 収集された統計情報はクエリ実行戦略に役立ち、平均してパフォーマンスの向上とコストの削減につながります 統計の影響 最新の統計情報を利用することで、パフォーマンスと総
UCXを使用したUnity Catalogアップグレードワークフローの自動化
組織がデータとAIのニーズに対してDatabricks Data Intelligence Platformをますます活用するにつれて、 Unity Catalog へのアップグレードは、プラットフォームの全潜在能力を引き出すための発見、ガバナンス、セキュリティを強化するための重要なステップです。Databricks Labsが開発した強力なツールであるUCXは、この遷移を自動化することでアップグレードプロセスを簡素化し 、よりスムーズで効率的な旅を保証します。このブログでは、Unity Catalogへのアップグレード計画にUCXがどのように強力なパートナーとなるかを示します。 UCXとは？ UCX は、組織が非Unity CatalogワークスペースをUnity Catalogにアップグレードするのを支援するために設計されたオープンソースのDatabricks Labsプロジェクトです。このようなアップグレードの複雑さを直接理解している経験豊富なDatabricksの専門家チームによって開発されたUCXは、この
AI/BIダッシュボード最新情報 ~2024年秋~
イントロダクション Databricksの AI/BI ダッシュボードは、一般提供開始以来、大きな進化を遂げました。Databricks SQLを基盤とし、データインテリジェンスにより強化されたAI/BIダッシュボードは、インタラクティブなデータビジュアライゼーション、ダッシュボード、レポートを通じて企業データから洞察を生成する簡単でシームレスな方法を提供します。データと分析を1つの統合プラットフォームに集約することで、ビジネスインテリジェンスを効率化し、組織全体にわたるデータ主導の意思決定を推進します。 AI/BIダッシュボードは3,000以上の企業と30,000人以上のユーザーに毎週利用されるほどの広がりを見せており、その採用率は驚異的です。 Databricks SQLのユーザーで、まだAI/BIを利用していない方は、この機能を見逃してい ます。 AI/BIダッシュボードは追加のライセンスなしで利用でき、今日からすぐに使用を開始できます。お客様は、データのすぐ隣にある最新のAIを活用したBIソリューションを利
Databricks SQLの最新情報 ~2024年10月~
私たちは、Databricks SQLをこれまで以上にシンプルで、高速で、手頃な価格にする最新の機能とパフォーマンスの改善をお知らせできることを嬉しく思います。 Databricks SQL は、Databricks Data Intelligence Platform内のインテリジェントなデータウェアハウスで、 レイクハウスアーキテクチャ 上に構築されています。実際、 Databricks SQLは現在8,000以上の顧客に使用頂いています！ このブログでは、AI/BI、インテリジェントな体験、予測的最適化について詳しく説明します。また、強力な新しい価格/パフォーマンス機能も備えています。過去3ヶ月間の革新的な機能を皆様にご紹介できることを嬉しく思います。 AI/BI 2024年のData + AI Summit (DAIS)で AI/BIを発表 して以来、多くのエキサイティングな機能強化を追加してきました。まだAI/BIを試していない 方は、ぜひお試しください。追加ライセンス不要で、すべてのDatabricks