Databricksによる建築製品業界の異常検知のための機械学習の活 用
序章 異常検知はさまざまな業界で広く応用されており、企業部門では重要な役割を果たしています。 このブログでは、製造業での応用に焦点を当てます。 シミュレーションされたプロセスサブシステムの健全性監視を中心としたケーススタディを探求します。 さらに、主成分分析（PCA）のような次元削減手法を掘り下げ、そのようなシステムを本番環境に導入した場合の実際の影響を検証します。 実際の例を分析することで、Databricksをツールとして活用し、このアプローチをどのようにスケールアップして、広範なセンサーデータから価値ある洞察を抽出できるかを実証します。 LPビルディングソリューションズ（LP）は、建築業界を形成してきた50年以上の実績を持つ木材製品製造会社です。 北米と南米で事業を展開するLP社は、耐湿性、耐火性、耐シロアリ性を備えた建築製品ソリューションを製造しています。 LP社では、環境・衛生・安全（EHS）データとともに、ペタバイト級の過去のプロセスデータが長年にわたって収集されてきました。 このような大量の履歴デー
Databricksは、2023年ガートナー®マジッククアドラント™クラウドデータベース管理システムのリーダーに選ばれました。
私たちは、GartnerがDatabricksを2023年のGartner® Magic Quadrant™ for Cloud Database Management Systemsで3年連続のリーダーと認識したことを発表することを嬉しく思います。今年、Gartnerは19のベンダーを評価し、私たちはAmazon Web Services、Google Cloud PlatformでのDatabricks Data Intelligence Platform、そしてMicrosoftのAzure Databricksとしての第一パーティ製品として認識されることを光栄に思います。 レポートの無料コピーを ここ からダウンロードしてください。 Databricksでは、お客様へのこだわりが引き続き私たちの革新と製品ロードマップを推進しており、 デ ータインテリジェンスプラットフォーム を急速に拡大して、真にData +...
Databricksの小売業向けデータ・インテリジェンス・プラットフォームがNRF 2024に登場！
NRFでDatabricksのエグゼクティブ/ソートリーダーとのミーティングをリクエストしてください！ 毎年1月、世界中の小売企業のリーダー数千人が、ニューヨークのジャビッツ・センターに集い、リテールズ・ビッグ・ショーに参加します。NRFは、リーダーたちが同業者からソート・リーダーシップを聞き、パートナーと会い、イノベーションの世界で最新かつ最高のものを目にする機会です。 私たちは、AIがあらゆるところに活用されることを期待しています。すでに多くの企業が、パンフレットだけではわからない顧客のマインドシェアを獲得するために、製品名をAIに適した名前に変更し始めています。しかし、クリエイティブなブランディングだけでなく、AIを単なるコンセプトから製品化することにも課題があるのが現実です 。 そのため今年は、画期的なデータ・インテリジェンス技術を中心に多くの議論が交わされることが予想されます。適切なデータ・プラットフォームがあれば、AIは在庫プランナーから商品プランナーまで、あらゆる役割に真に民主化することができます。
Databricks @ AFROTECH
"AFROTECHは洞察に富んでいるだけでなく、私の技術分野への帰属意識を大いに高めてくれました！業界で新しい人脈を作れただけでなく、Databricksの他の黒人社員との絆も深まりました" - フェリス・カブラル（Black Employee Network ERGリード兼シニア採用コーディネーター） Black, bold and big on Data 今年11月、Databricksはテキサス州オースティンに戻り、米国最大の黒人技術者会議である AFROTECH™ カンファレンスに参加しました。AFROTECHは、活気に満ちたエネルギッシュでダイナミックな空間で、ユニークな学習とネットワーキングの機会を求めてブラックテック・コミュニティが一堂に会します。 業界のリーダーや団体が一堂に会し、新たなトレンドを共有し、次世代のイノベーターに刺激を与えています。 Databricksでは、自社の社員であるBrickstersに専門能力開発の機会やカンファレンスに参加することを奨励することで、レベルを上げることがで
Databricksの中東展開とAzureカタールのローンチを発表
私たちは、Azureカタールの提供開始を発表できることを嬉しく思います。Azure Databricksの利用可能範囲が拡大されたことで、中東全域の 組織が Databricks Data Intelligence Platform を 活用し、 Azureのグローバルでスケーラブルかつ弾力性のあるネットワーク上で、 データエンジニアリング、データサイエンス、機械学習 、アナリティクスを統合することがこれまで以上に容易になりました。 AzureカタールリージョンにおけるDatabricksインフラストラクチャーのローンチは、カタール航空などの最も革新的で先進的なカタールの組織が、Azure Databricksを活用してデータドリブンなアプリケーションやユースケースでビジネスを変革することをサポートするものです。 今回の事業拡大は、カタールにおける当社の広範な関係を基盤としています。今月初め、カタール投資庁（QIA）は、ポストマネー評価額が430億ドルとなったDatabricksの シリーズI を通じて同社に投資
データ文化の構築により、チームのパフォーマンスを向上させる方法
データ文化の定義は組織によって異なります。データ文化とは、組織がデータ中心になることを可能にする、共有された価値観、態度、行動のことです。Databricksでは、洞察の獲得、データ主導の意思決定、ビジネスパフォーマンスの向上、AIの実現を通じてデータ文化を考えています。データ文化を持つことはデータエグゼクティブの間で一般的なトピックになりつつありますが、多くの組織はまだそこに至っていません。 業績を加速する上でデータ中心の文化を持つことの重要性を示す研究は数多くあります。 Forrester 社は、「意思決定のための洞察力を高めるためにデータを使用している組織は、2桁成長を達成する可能性が約3倍高い」と述べています。同様に MIT は、「データ重視の企業文化は、収益の増加、収益性の向上、経営効率の改善につながる」と述べています。 データ文化の醸成における課題 企業はデータ文化の構築が重要だと考えているかもしれませんが、それを成功に導くには多くの課題があります。最も一般的な落とし穴は、1）既存の労働力におけるデー
[ゲスト投稿:Tecton]レイクハウスにおけるリアルタイムの不正検知
不正行為の代償は計り知れない。 2022年には、不正行為の1つであるカード非携帯型不正行為が、米国だけで約60億ドルの損失をもたらした。 連邦取引委員会によると、米国における詐欺のトップ5は以下の通りである 1 ： 偽者 オンラインショッピング 賞品、懸賞、宝くじ 投資 ビジネスと仕事の機会 すでに多くの企業が、リアルタイムの不正防止と検知を大規模に自動化するためにAIを活用し始めている。 しかし、これは詐欺師が絶えず新しい方法を考え出し、発見をすり抜ける、猫とネズミのゲームなのだ。 AIモデルは常に進化し、最も新鮮なデータを入力として取り込む必要があるため、機能の 鮮度とモデル開発のスピードが成功に不可欠となる。 このブログでは、Tecton on Databricksを活用してリアルタイム不正検知システムを構築するための主な方法をご紹介する。 最後に実際の例をいくつか挙げているので、読んでみてほしい！ MLフィーチャーパイプラインの拡張 不正は、膨大で大量のネットワーク（1秒間に何千ものトランザクションがあると
『ラーニングフェスティバル』でデータ＋AIキャリアを加速させましょう
データ＋AIのキャリアを加速させるロールベースの学習を通じたスキルアップ Databricksは、データ、アナリティクス、AIの各分野における学習者向けの技術トレーニングの作成と反復に長年を費やし、スキルアップや再スキルを目指す個人、チーム、組織がアクセスしやすく適 切なコンテンツを利用できるようにしています。 データ、アナリティクス、AIにおけるAI/MLと役割の爆発的な増加に伴い、多くの組織で新しいテクノロジーを採用する必要性が加速しています。 2022年から2025年にかけて、AIに関わる 9,700万件の雇用が 創出されると予測されています。 これは、スケーラブルな方法で人材をスキルアップさせるというユニークな課題を提示しています。 Databricksの『ラーニングフェスティバル』であなたのキャリアを高めよう Databricksのバーチャルラーニングフェスティバルは、データエンジニアリング、データサイエンス、データアナリティクスの各コースを、 お客様、見込み客、パートナーの ために構築し、スキルアップと
集まれ！Legendary Heroes of DATA + AI !! Vol 6
日本のDatabricks Championの皆様に、目指したその理由や、これからの思いについて伺う「集まれ！Legendary Heroes of DATA + AI !!」。Legendary Heroes of Data＋AI の皆さんの輪もドンドン広がっています！できる限りこちらでご紹介を続けていきたいと思いますので、是非引き続きご覧ください！ さて、今回はVol.6として満を持して登場、 アマゾン ウェブ サービス ジャパン合同会社 本橋 和貴 様 をご紹介します。 —- 以前にご紹介したLegendary...
大手金融機関がデータブリックスを採用したワケは
去る6月28日、サンフランシスコで開催されたDATA＋AI SUMMITにて、「APJ Partner Champion of the Year」を受賞したDatabricks Champion、NTTデータの齋藤が登壇いたしました。 NTTデータのData＋AI Summit参加のレポートはこちら Data and AI Summit 2023 - Databricks 現地レポート（6/27 Partner Summit） - Qiita 今回のセッションでは、大手金融機関であるNTTデータのお客様が、データとAIを活用したデータ分析へと進化していく際、数あるサービスの中から、プラットフォームとして、データブリックスを採用された経緯や、基盤構築の際に苦労したポイントなどを紹介しています。お客様の既存のプラットフォームがどのような課題を抱え、データブリックスにどのような期待を持って導入されたのか。同じような課題をお持ちの企業様に参考にしていただければと思います。...