Upgrade to Pro — share decks privately, control downloads, hide ads and more …

みん強Lightning! データ基盤ひとりでできるかな

Sponsored · Ship Features Fearlessly Turn features on and off without deploys. Used by thousands of Ruby developers. →
Naoya Endo
November 18, 2026

 みん強Lightning! データ基盤ひとりでできるかな

Naoya Endo

November 18, 2026

Transcript

52 slides
  1. みん強Lightning! 2026年11月18日(水) Excelのデータ基盤を、部分的にBigQueryへ移した 927,274行 既存Excel基盤 2019年1月から2026年10月までの売上明細 → 加工済みCSV → BigQuery

    → SQLで分析 元データを取り込み、 生成AIと形式をそろえ、 売上明細を 8年分の件数や売上を 顧客・商品の属性を付与 年別の8ファイルを結合 1つのテーブルに格納 暦年別に集計 Excelで続ける処理 元データからのETL、顧客マスタの管理・名寄せ、赤黒処理 データ基盤ひとりでできるかな by 遠藤な
  2. みん強Lightning! 2026年11月18日(水) 8年分の売上明細を、1本のSQLで集計できた BigQueryのテーブル 暦年別の集計結果 実行したSQL(抜粋) 画面に続く3年の明細件数 2024年 2025年 2026年

    158,812件 164,656件 156,636件 全8年で、件数・売上・粗利・補正粗利・数量が元CSVの集計と一致。 データ基盤ひとりでできるかな by 遠藤な
  3. みん強Lightning! 2026年11月18日(水) BigQueryへ移したのは、8年分の売上明細の統合・集計 Excel基盤の全体図 取込元のCSV BigQueryでの処理 統合・集計の対応箇所 2 1 3

    売上明細CSV 8ファイル 2019年1月〜2026年10月 2 1 BigQuery統合テーブル 結合済みの927,274行を格納 3 SQL集計 暦年別/コスメの月・支店等区分別 集計結果 件数・売上・粗利を算出 Excelで続ける処理 共通ETL、名寄せ、赤黒処理など データ基盤ひとりでできるかな by 遠藤な

More Decks by Naoya Endo

Other Decks in Technology