食べログで動いている自作ライブラリのお話

Transcript

1. 食べログで動 食べログで動 いている自作 いている自作 ライブラリの ライブラリの お話 お話
2. おおいしつかさ tsukasa_oishi@twitter http://www.kaeruspoon.net/ 食べログ iPhone
3. 自作ライブラリ
4. 既存のものではダメなのか ・必要な機能を持つライブラリがない ・食べログのニーズに微妙に合わない ・開発が止まっている
5. 自作 ・必要な機能を持つライブラリがない →ないなら作ればいい ・食べログのニーズに微妙に合わない →欲している仕様にぴったり ・開発が止まっている →開発者が自分、または同僚
6. 食べログで動いている 自作ライブラリ ActsAsReadonlyable改　ActsAsS tateMachine改　TabelogThread 　MiyazakiResistance TabelogA sync　DrySumpException　Disgu iseToBusinessCode　WordScoop　 TcHash　EnhancedColumnType　 ExceptionLogger
7. 食べログで動いている 自作ライブラリ ActsAsReadonlyable改　ActsAsS tateMachine改　TabelogThread 　MiyazakiResistance TabelogA sync　DrySumpException　Disgu iseToBusinessCode　WordScoop　 TcHash　EnhancedColumnType　 ExceptionLogger
8. ActsAsReadonlyable改
9. ActsAsReadonlyableとは master slave2 slave1 CUD R R AP
10. 障害が起こると master slave2 slave1 CUD R AP
11. Webサーバーが死んでも大丈夫 APサーバが死んでも大丈夫 DBサーバが死ぬとサービスに影響あり
12. Webサーバーが死んでも大丈夫 APサーバが死んでも大丈夫 DBサーバが死んでも大丈夫 当然こうしたい
13. 障害が起こると master slave2 slave1 CUD R AP
14. 自動切り離し MySQL::ConnectionError発生 コネクションプール群から該当 サーバのプールを除外 リトライ
15. 運用も楽に メンテナンス等でも 気軽にDBを落とせる ようになった
16. TabelogAsync
17. TabelogAsyncとは ▪非同期処理ライブラリ 　・backgroundrbが暴走する 　・Mongrelを通したくない 　・堅牢性はそれほど必要ない ▪仮名のまま 　・公開するときはカッコいい名前に
18. Rails側 TabelogAsync::Thrower.send( :class => :async_log, :args => “good” ) lib/worker class AsyncLog < TabelogAsync::WorkerBase def do_work(args) logger.info args end end
19. 当初の設計思想 軽くてすぐに終わって同期する必要のない 大量の処理をさばく 重い処理は従来通りbackgroundrbで
20. いつの間にか 気軽に使えるので重い処理も回すように なった シングルスレッドなので遅延が数時間レベ ルにまで拡大 いくら非同期でも遅れすぎ
21. Rails Rinda TabelogAsync normal heavy Rinda
22. WordScoop
23. WordScoopとは ▪キーワード検索ライブラリ 　・はてなダイアリーキーワード 　・高速 　・軽量 　・HTML対応 ▪命名 　・奥さん
24. 登録 5 μs 検索 3 ms
25. 高速 ▪キーワード登録 　1.399998 s (1語 : 0.000005 s) ▪キーワード検索(1000回) 　3.519995 s (1回 : 0.003520 s) 軽量 インデックス構築後 56Mバイト キーワード数　262380語 検索対象文字数　8789字
26. 使い方
27. キーワード登録 Index = WordScoop.new(['クリスマス', '鍋']) キーワード追加 Index << 'はくさい' キーワード検索 index.search(“クリスマスは鍋にしようか。鍋には はくさいだよね”)
28. キーワード登録 Index = WordScoop.new(['クリスマス', '鍋']) キーワード追加 Index << 'はくさい' キーワード検索 index.search(“クリスマスは鍋にしようか。鍋には はくさいだよね”) #=> ['クリスマス', '鍋', '鍋', 'はくさい']
29. HTML変換URLの登録 index.link_url = %Q|<a href="http://cookpad.com/レシピ/%s">%s</a>| HTML文章への自動リンク付与 index.filter_html(“クリスマスは鍋にしようか”)
30. HTML変換URLの登録 index.link_url = %Q|<a href="http://cookpad.com/レシピ/%s">%s</a>| HTML文章への自動リンク付与 index.filter_html(“クリスマスは鍋にしようか”) #=> %Q|<a href=”http://cookpad.com/レシピ/クリスマス”> クリスマス</a>は<a href=”http://cookpad.com/レシピ/鍋“> 鍋</a>にしようか|
31. gem install word_scoop
32. 今後の機能追加予定 ▪検索をさらに高速に 　・HTMLの自動リンクアルゴリズム 　 の改良 　・AhoCorasick(エイホ-コラシック)法 　 の採用 　 ▪さらに軽量に 　・DoubleArrayの採用
33. まとめ
34. 自作 ・必要な機能を持つライブラリがない →ないなら作ればいい ・食べログのニーズに微妙に合わない →欲している仕様にぴったり ・開発が止まっている →開発者が自分、または同僚
35. ライブラリが充実すると、開発・運用 ともに楽になる 作る課程も楽しい この世界に貢献ができる ライブラリを作ると みんなが幸せになる
36. コミットログは英語で
37. おしまい thanks!