[2024年10月版] Notebook 2.0のご紹介 / Notebook2.0

Databricksの主要な機能のひとつであるノートブックの最新機能についてご紹介します。

Transcript

1. 1_DAIS_Title_Slide Notebooks 2.0 🎉 Jason Messer - Product Manager, Databricks
2. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary 2 マルチ言語 1つのノートブックでPython、SQL、Scala、R を活用 Jupyterとの互換性 ノートブックでJupyterエコシステムのパ ワーを活用 探索に最適 ビルトインのチャートとデータプロファイルに よるデータの探索、可視化、要約 プロダクションを迅速に ジョブとしてクイックにノートブックをスケ ジュール、ジョブの結果から ダッシュボードを作成 コラボレーティブ リアルタイムの同時参照、同時編集、 コメント 再現可能性 Reposバージョン履歴を自動で追跡、 Reposによるgitバージョン管理の活用 エンタープライズレディ エンタープライズレベルのアクセス 制御、ID管理、監査 適応性 標準ライブラリのインストール、 ローカルモジュールの使用 レイクハウスの玄関 Databricksノートブック
3. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary ノートブックに対する我々の ビジョンはレイクハウスに おけるベストな開発体験を 生み出すことです 3
4. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary Databricksアシスタントによ るAIを活用した開発 レイクハウス連携 ノートブックにお好きな IDEの 機能を持ち込む ノートブック2.0にようこそ モダンで直感的な UX
5. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary モダンで直感的なUX 5
6. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary 最適化されたセルのデザイン よりモダンなルックアンド フィール🚀 6 • クリーンでシンプルなデザイン • 1クリックでセルを実行 • 強化されたマークダウンレンダリング • はっきり表示される実行タイマー • フォーカスモード
7. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary モダンな結果テーブル 見た目のアップデート & 馴染みのある操作感 🤝 7 • レンダリング性能の改善 • シンプル & モダンなUX • Excelやその他の人気のデータグリッドツー ルと同じ選択操作 • ビルトインのフィルタリング
8. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary 8 ビジュアライゼーションのアップデート より速く、よりプリティに ✨ • 拡張されたカラーパレット • レンダリングの高速化 • ツールチップやシリーズ選択の ソート、ズーム機能 • 製品全体で統一
9. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary Databricksアシスタント によるAIを活用した開発 9
10. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary 開発アシスタント 🤖 10 • ノートブック、ファイルエディタ、SQLエディタ に組み込まれたLLMを活用した開発アシ スタント • より正確なレスポンスを行うために コンテキスト を活用 • コードのセル • ライブラリ • Databricksランタイムバージョン • ドキュメント • テーブルのスキーマ • 最近アクセスした、お気に入りのテー ブル • 人気のテーブル • 人気のjoin • UCの説明文とタグ • リネージ
11. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary セルのアクション 🪄
12. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary ゴーストテキスト 👻
13. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary Text-to-SQL 📊 13 • 適切なテーブルを特定 : 強化された検索で データ資産の発見を容易に • あなたにパーソナライズ : 会社の専門 用語を用いてクエリーを作成、洗練するた めに自然言語を活用 • インラインでの提案 : コメントを記述 して、よく使われるクエリースニペットをアシ スタントに提案させる
14. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary アシスタントによってはるかに多く のものが提供されます… 14
15. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary レイクハウス連携 15 レイクハウスに最適なノートブック
16. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary 柔軟なコンピュート サーバレス • 完全マネージド、スケーリングの設定なしに高速 に起動 • 使った分だけ支払い—アイドル状態の コンピュートはありません SQLウェアハウス • ノートブックでSQLウェアハウスを使ってSQLを実 行 • SQLウェアハウスを用いたジョブとして ノートブックをスケジュール サーバレス、SQLウェアハウス、クラシック 📊 16
17. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary レイクハウスの探索をシンプルに エディタを離れることなしにデータを検索 🔍 17 • スキーマブラウザ • アクティブなテーブルで フィルタリング • ノートブックセルから テーブルにジャンプ • ファイルブラウザ • Delta-Live-Tablesの出力 • 表出化させる手段の探索 : • データリネージ • レイクハウスモニタリング • エクスペクテーション
18. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary パーソナライズされたオートコンプリート Coming Soon… あなたのすべてのコアのフローにコンテキストを 🔄 18 • 以下に基づく提案による強化 オートコンプリート : • 人気のテーブルとjoin • お気に入りのテーブル • 最近使用した、参照した テーブル
19. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary ノートブックにお好きなIDEの機 能を持ち込む 19
20. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary 20 どこでも新たなエディタを ノートブック、ファイル、SQLで一貫した編集体験 ✍ • 新たなエディタ - Monaco - VS Codeで使われ ているのと同じ • 新機能: • オートコンプリート • 選択テキストの実行 • 変数の調査 • Pythonのフォーマッティング • 定義に移動 • 横並びでのdiff • … などなど • ノートブック、ファイルエディタ、 SQLエディタに組み込み
21. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary Webターミナル & 下部のパネル 21 • ノートブックやファイルから 離れることなしに、お使いの クラスターのターミナルに アクセスしてコマンドを実行 • エディタを表示させながらアウトプット を確認できる専用のパネル • DLTパイプラインの可視化のタブを含 め、追加のパネルをまもなく 提供 完全にインタラクティブな環境でコマンドを実行💻
22. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary 新たなノートブックデバッガー • ノートブックで直接 インタラクティブにデバッグ • ノートブックとIDEを行ったり 来たりする必要はありません • Databricksにおける大規模 プロジェクトで活用 Coming Soon… 22 ステップバイステップのデバッグを円滑に🐞 🔨
23. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary DEMO 23
24. ©2023 Databricks Inc. — All rights reserved Confidential and Proprietary 24