20250219_一人データエンジニアだからこそ感じるアウトプットの重要性

https://pug.connpass.com/event/344460/

Transcript

1. 一人データエンジニアだからこそ感じる アウトプットの重要性 2025-02-19 Yada Yuichiro
2. SPEAKER 2 クックビズ株式会社 データマネジメントグループ Yada Yuichiro • 関西人 • 2023年9月にクックビズ株式会社に 入社 • キャリアはメーカーの非 IT職種からスタートし、データアナリストを経験。転職 を機にデータエンジニアへと転向 （データ人材歴 4年目） • 現在は社内唯一のデータ人材として、データ基盤の開発・運用、データ分析、 ダッシュボード構築など幅広く担当 • 趣味はZennへの小ネタ投稿 （Zenn投稿歴 2年目）
3. 事業・サービス全体像 会社案内 3 ➢ これまで支援し続けた「人」を起点に、新たにDXや事業再生を通じて持続可能な食ビジネ スのためのエコシステムを提供することで、事業規模の拡大を目指します。
4. 商品ラインナップ サービス案内 4 ➢ クックビズの人材採用サービスはすべて飲食サービス特化です。
5. 登壇のミッション 5 アウトプットするハードルを下げる
6. 今回お話しすること 6 1. TROCCOの使い方やデータ活用の状況 2. アウトプットして良かったこと
7. TROCCOの使い方やデータ活用の状況 01
8. クックビズのデータ分析基盤 8 BigQuery Export dbt連携 Cloud Functions BigQuery
9. 旧サービスからのデータマイグレーション 9 TROCCO利用のユースケース マイグレーションクエリ データチェック 旧データ 旧データ マイグレーション データ 例外パターン データ 修正データ 例外パターン データ アラート データチェック アラート データ転送 データ転送 データ転送 新データ 17年貯めた負債を解消する PJ https://corp.cookbiz.co.jp/news/2024041560735
10. ステージング環境への転送（暫定対応） 10 TROCCO利用のユースケース prod データ転送 ＋ ステージング環境に 必要なデータ処理 stg サイトリニューアル後、迅速にステージング環境整備
11. 一定期間の差分チェック 11 TROCCO利用のユースケース prod リバースETLなどのビジネスクリティカルなパイプラインに対するテスト 旧データ処理 新データ処理 データチェック アラート 一定期間 差分チェック 一番好きなTROCCOの機能 はデータチェックです リバースETL
12. 一定期間の差分チェック 12 TROCCO利用のユースケース prod リバースETLなどのビジネスクリティカルなパイプラインに対するテスト 旧データ処理 新データ処理 データチェック アラート 一定期間 差分チェック リバースETL 一番好きなTROCCOの機能 はデータチェックです OK パイプライン切り替え
13. TROCCOの気にっているポイント 13 画像引用： https://www.linkedin.com/pulse/modern-data-stack-part-1-sankha-mitra-lefpc/ ① データ基盤で対応可能な役割が多い • データ転送 • データ変換（dbt連携） • ワークフロー機能
14. TROCCOの気にっているポイント 14 ② 対応コネクタが多い • 日本のユーザーに嬉しい ラインナップ
15. アウトプットして良かったこと 02
16. 日頃のアウトプット活動について 16 技術記事の感想を Xに投稿 興味を持った技術記事を読んだ際に、感想や学びを Xに投稿する
17. 日頃のアウトプット活動について 17 イベント時には積極的に感想を Xに投稿 参加した技術イベントや勉強会の内容を整理し、 感想やポイントをXに投稿する
18. 日頃のアウトプット活動について 18 技術記事を書く 学んだことや業務で得た知見を技術記事としてまとめ、発信する 小ネタ技術記事の量産
19. なぜアウトプットするようになったか 19 憧れ と フィードバックの欠乏
20. 憧れドリブンなエンジニアライフ 20 データアナリストだった頃 資格勉強を欠かさず続ける凄腕エンジニアの同僚に憧れた データエンジニアになりたての頃 ハイペースに技術書を読破するマネージャーに憧れた そして今は 技術ブログを書き、勉強会を開催し、 OSS活動をしている 著名なデータエンジニアの方々に憧れている 常に憧れの存在を追いかけながら、エンジニアライフを楽しんでます！
21. 一人データエンジニアのつらみ 21 データエンジニアリング技術や新しいトレンド情報で一緒 に語り合う人が社内にいない スタンプすら つかなかった悲しみ
22. 一人データエンジニアのつらみ 22 技術的な観点でフィードバックしてくれる人がいない 壁打ち相手 コードレビュアー
23. なぜアウトプットするようになったか 23 自分がしてほしいことを、 まずは他の人にすることからスタート 🔁 ちょっとしたフィードバックや感想を投稿 ＋小ネタでも技術記事を書く その結果… ✅ フィードバックをくれる人が増えた ✅ Xのフォロワーも増えた
24. 「共創」の思想 24 シャープ伝説のエンジニア 佐々木正氏（シャープ元副社長）の座右の銘 「いいかい、君たち。分からなければ聞けばいい。 持っていないなら借りればいい。逆に聞かれたら教えるべき だし、持っているものは与えるべきだ。人間、一人でできるこ となど高が知れている。 技術の世界はみんなで共に創る『共創』が肝心だ。」 https://kitto-cea.com/column/detail/17 https://www.shinchosha.co.jp/book/101261/
25. 技術記事投稿ルーチン 25 気になるトピック や技術を試す Zennのスクラップに 書き溜める 内容をまとめて 記事化する 記事化することによって 未来の自分の助けになるかも駆動
26. 記事を書く敷居を低くしよう 26 記事テンプレートの設定 技術記事 技術書読書ログ
27. エッセイ的な要素を盛り込む 27 生成AI時代に単なるナレッジだけではなく、エッセイ的な要素を盛り込む必要性が高まっている？ その技術に触れた時に思ったことなどが記載するように心がけてます。 https://x.com/yoshimura_datam/status/1855389269818499402 https://x.com/ikki_mz/status/1890224047566516610
28. ZennでのGoogleアナリティクス (GA4)活用 28 ZennではGA4での測定ID取得でき、自分の記事のアクセス数などを確認することが出来ます ※過去28日間(2025/02/16現在) ♡ 255 ♡ 1 モチベーションが下がってきたら GA4でもみてニヤニヤしましょう
29. アウトプットして良かったこと 29 1. 知見が広がり、フィードバックが得られる • 自分が書いた記事に対して、他のエンジニアからフィードバックや質問がもらえる (特に Advent Calender) • 似た課題を持つ人と議論できることで、自分の考えが整理され、さらに深まる。 • ニッチな話題でも、意外と共感する人が多い。 • 手戻りを防ぐことができる まとめ
30. アウトプットして良かったこと 30 2. 情報の整理・ストックになる • 記事を書く過程で、自分の知識が整理され、理解が深まる。 • 記録として残るので、後で自分が見返したときにも役立つ。 まとめ
31. アウトプットして良かったこと 31 3. 技術コミュニティとのつながりが生まれる • 情報発信していると、同じ領域のエンジニアとつながれる。 • 「社内一人データエンジニア」 →「業界のデータエンジニア仲間が増える」 という 変化が起きる。 まとめ
32. 今後やっていきたいこと 32 • OSS活動に取り組みたい • Metabaseの和訳
33. エンジニアの募集はしていませんが、代わりに ほたて の宣伝 33 ※ 2025/02/19現在 きゅういち株式会社 (関係会社) : https://kyuichi.co.jp/ 今夜からお買い物マラソンも始まるので、 良ければこちらもぜひ！