Upgrade to Pro — share decks privately, control downloads, hide ads and more …

（弊社の）OpenSearchに潜んでいた罠

Avatar for Keisuke Yamauchi Keisuke Yamauchi
May 23, 2024
Programming
0
120

 （弊社の）OpenSearchに潜んでいた罠

Avatar for Keisuke Yamauchi

Keisuke Yamauchi

May 23, 2024
Tweet

More Decks by Keisuke Yamauchi

See All by Keisuke Yamauchi
動的型付け言語に抗うPHPStanという戦士
Avatar for Keisuke Yamauchi kechiiin
0
21
Cake.jpのCRM 今と未来
Avatar for Keisuke Yamauchi kechiiin
0
53
半年かけてPHP5.6からPHP7.4までバージョンアップした苦労と工夫 PHPカンファレンス福岡2024
Avatar for Keisuke Yamauchi kechiiin
1
690
before/afterで見る Cake.jpのアジャイル開発
Avatar for Keisuke Yamauchi kechiiin
0
20
ランダム処理を修正し、DBの負荷を下げた話
Avatar for Keisuke Yamauchi kechiiin
0
31
レガシーからモダンへ？ PHP5.6からの脱却
Avatar for Keisuke Yamauchi kechiiin
0
330

Other Decks in Programming

See All in Programming
品質ワークショップをやってみた
Avatar for Nealle nealle
0
280
他言語経験者が Golangci-lint を最初のコーディングメンターにした話 / How Golangci-lint Became My First Coding Mentor: A Story from a Polyglot Programmer
Avatar for uMa uma31
0
160
大規模アプリのDIフレームワーク刷新戦略 ～過去最大規模の並行開発を止めずにアプリ全体に導入するまで～
Avatar for GO Inc. dev mot_techtalk
1
450
uniqueパッケージの内部実装を支えるweak pointerの話
Avatar for magavel magavel
0
1k
株式会社 Sun terras カンパニーデック
Avatar for Sun terras.Inc sunterras
0
320
理論と実務のギャップを超える
Avatar for kmuto eycjur
0
140
はじめてのDSPy - 言語モデルを『プロンプト』ではなく『プログラミング』するための仕組み
Avatar for Masahiro Nishimi masahiro_nishimi
2
490
AIと人間の共創開発！OSSで試行錯誤した開発スタイル
Avatar for mae616 mae616
1
410
The Past, Present, and Future of Enterprise Java
Avatar for ivargrimstad ivargrimstad
0
140
Server Side Kotlin Meetup vol.16: 内部動作を理解して ハイパフォーマンスなサーバサイド Kotlin アプリケーションを書こう
Avatar for ternbusty ternbusty
3
190
Six and a half ridiculous things to do with Quarkus
Avatar for Holly Cummins hollycummins
0
170
After go func(): Goroutines Through a Beginner’s Eye
Avatar for Vaibhav Gupta 97vaibhav
0
400

Featured

See All Featured
Rails Girls Zürich Keynote
Avatar for Gregor Martynus gr2m
95
14k
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
Avatar for soudai sone soudai
PRO
189
55k
Code Reviewing Like a Champion
Avatar for maltzj maltzj
526
40k
The Cult of Friendly URLs
Avatar for Andy Hume andyhume
79
6.6k
Imperfection Machines: The Place of Print at Facebook
Avatar for Scott Boms scottboms
269
13k
RailsConf 2023
Avatar for Aaron Patterson tenderlove
30
1.2k
Faster Mobile Websites
Avatar for Dean Hume deanohume
310
31k
Speed Design
Avatar for Sergey Chernyshev sergeychernyshev
32
1.2k
Java REST API Framework Comparison - PWX 2021
Avatar for Matt Raible mraible
34
8.9k
Large-scale JavaScript Application Architecture
Avatar for Addy Osmani addyosmani
514
110k
The World Runs on Bad Software
Avatar for Brandon Keepers bkeepers
PRO
72
11k
Docker and Python
Avatar for Tania Allard trallard
46
3.6k

Transcript

  1. © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 2024/05/23 （弊社の） OpenSearchに潜んでいた罠 山内

    啓輔

  2. 2 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 自己紹介 山内 啓輔

    やまうち 　けいすけ 担当業務 CRM、PHPバージョンアップなど 🍰おすすめスイーツ 元祖かぼちゃプリン 約1.2kg かぼちゃ感が強く、甘さが控えめで美味し い！ 付属のカラメルをかけることで甘さもアッ プ

  3. 3 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 今日話す内容 1.　 背景の説明

    2.　 何が起きたのか 3.　 どのような対応をしたのか 4.　 まとめ 検索機能のしくじり

  4. 4 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 今日話す内容 1.　 背景の説明

    2.　 何が起きたのか 3.　 どのような対応をしたのか 4.　 まとめ 検索機能のしくじり

  5. 5 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 背景の説明 ・商品検索でOpenSearchを使用している 「OpenSearchは、大量のデータをリアルタイムでインデックス化し、迅速かつ柔軟に検索・分析できる

    オープンソースの検索エンジンです。」 by ChatGPT 4o ・何をしようとしていたのか ソートに使用する項目に変更を加えた 0〜5まで設定できる項目を、0〜500まで設定できるように変更　→　仕様変更

  6. 6 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 今日話す内容 1.　 背景の説明

    2.　 何が起きたのか 3.　 どのような対応をしたのか 4.　 まとめ 検索機能のしくじり

  7. 7 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 何が起きたのか 時系列順に説明

  8. 8 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 何が起きたのか DBの値を更新 DBの値を更新→

  9. 9 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 何が起きたのか OpenSearchのインデックス更新 DBの値を更新→OpenSearchのインデックス更新→

  10. 10 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 何が起きたのか 他部署の方から「なんかおかしい」と連絡 DBの値を更新→OpenSearchのインデックス更新→他部署

    の方から「なんかおかしい」と連絡→

  11. 11 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 何が起きたのか 「待ってれば大丈夫」と言うための調査開始 DBの値を更新→OpenSearchのインデックス更新→他部署の方から「なんかおかしい」

    と連絡→「待ってれば大丈夫」と言うための調査開始→

  12. 12 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 何が起きたのか エラー発見！ DBの値を更新→OpenSearchのインデックス更新→他部署の方

    から「なんかおかしい」と連絡→「待ってれば大丈夫」と言う ための調査開始→エラー発見！→

  13. 13 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 何が起きたのか 調査開始 DBの値を更新→OpenSearchのインデックス更新→他部署の方から「なんか

    おかしい」と連絡→「待ってれば大丈夫」と言うための調査開始→エラー発 見！→調査開始→

  14. 14 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 何が起きたのか エラー内容把握 管理画面の変更→DBの値を更新→OpenSearchのインデックス更新→社内に連絡→他部署から「なんかおかしい」と連

    絡→「待ってれば大丈夫」というための調査開始→エラー発見！→調査開始→エラー内容把握→

  15. 15 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 何が起きたのか エラー内容 "reason":"Value

    [400] is out of range for a byte"

  16. 16 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 何が起きたのか OpenSearchの公式を見に行くと・・・

  17. 17 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 何が起きたのか OpenSearchの公式を見に行くと・・・ 引用：https://opensearch.org/docs/latest/field-types/supported-field-types/numeric/

  18. 18 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 何が起きたのか せめて全て失敗していれば良かったのに、 1→100だけ成功してしまったばっかりに、

    ソートがおかしくになってしまった

  19. 19 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 今日話す内容 1.　 背景の説明

    2.　 何が起きたのか 3.　 どのような対応をしたのか 4.　 まとめ 検索機能のしくじり

  20. 20 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential どのような対応をしたのか ・DBのデータを元に戻す 100→1、200→2、、、　

    これをすることでOpenSearchのインデックスは、バッチが勝手に元に戻してくれる とりあえず、不具合解消 ・テスト環境で予行練習 OpenSearchのフィールドの型を変更する（byte→integer） DBのデータを更新する OpenSearchのインデックスの更新 ・本番で実施 OpenSearchのフィールドの型を変更する（byte→integer） DBのデータを更新する OpenSearchのインデックスの更新

  21. 21 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential 今日話す内容 1.　 背景の説明

    2.　 何が起きたのか 3.　 どのような対応をしたのか 4.　 まとめ 検索機能のしくじり

  22. 22 © Cake.jp Co.Ltd. All Right Reserved.｜Confidential まとめ 関連する項目を確認し、 どのようにデータが入っていくのかを確認しよう！

    なかなか、難しいけどね、、、