求人検索をElasticsearchにしたら速度２倍速くなった！！

2024/09/25　常見一樹求人検索をElasticsearchにしたら速度２倍速くなった！！ @ksilverwall

目次 • 自己紹介・サービス紹介 • 何が問題だったか？ • こうしてみた • 速くなったよ

自己紹介：常見（ツネミ）です • 開発11年目（36歳） • バックエンドエンジニア ◦ Reactも書きがち • リプレイス案件多しタイミーの求人検索周りを開発中

1 何が問題だったか？

RDBが頑張っていた Web API 検索 RDB RDB RDB RDB RDB RDB
RDB Reader Writer 900万人検索うおおおお！！複製登録 29.7万拠点 400-600ms 上昇トレンド RDB クラスタ

ストレージ数で解決できなくなってきた CPU 〜30% 余裕だわ partition: 2023-12-01 IO まだ自分できるっす
API RDB partition: 2023-12-02 partition: 2023-12-03 フィルタ＆ソートデカイ

募集人数の推移コロナ禍においても、過去に例を見ない程の加速的高成長を実現。 ※1：2023年4Qと2022年4Qの比較 8 O(スキャン時間) =O(パーティションサイズ) =O(求人数/day)

リクエスト分散の限界そうだElasticsearchにしよう

2 こうしてみた

検索をElasticsearchに移譲 Web API 検索 RDB RDB Reader Writer 複製
登録 ????ms 上昇トレンド Elasticsearch 検索取得 Index生成

ノード分散してくれるはず API Elasticsearch ノード0 ノード1 顧客A 顧客B 顧客C ノード2 顧客A
顧客B 顧客C ノード3 顧客A 顧客B 顧客C スケーリング可能

3 速くなったよ

レイテンシが半減 400ms 200ms

Kazuki Tsunemi