Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
ログ集約基盤をCloudWatchからOpenSearchに変えてみた
Search
YouYou
August 02, 2022
Technology
0
390
ログ集約基盤をCloudWatchからOpenSearchに変えてみた
詳細ブログ↓
https://cuebic.hatenablog.com/entry/2022/07/11/154446
YouYou
August 02, 2022
Tweet
Share
More Decks by YouYou
See All by YouYou
今インフラ技術をイチから学び直すなら
yuhta28
1
170
AWSに詳しくない人でも始められるコスト最適化ガイド
yuhta28
3
550
Datadog外形監視基盤をEC2から ECSへ移行してみた
yuhta28
0
1.5k
アウトプット頑張ったら企業からLT登壇の依頼がきた話
yuhta28
1
1.2k
小さなことから始めるAWSコスト最適入門
yuhta28
1
980
Datadogのコストも監視しよう
yuhta28
1
790
Rcloneを使った定期的なストレージ同期
yuhta28
0
540
Pulumiを触ってみよう
yuhta28
1
2.1k
ログストレージコスパ最強!?OpenObserveを試してみた
yuhta28
0
3.5k
Other Decks in Technology
See All in Technology
型チェック 速度改善 奮闘記⌛
tocomi
1
140
生成AIが変えるデータ分析の全体像
ishikawa_satoru
0
180
Storybook との上手な向き合い方を考える
re_taro
5
1.7k
AI前提のサービス運用ってなんだろう?
ryuichi1208
8
1.4k
Adopting Jetpack Compose in Your Existing Project - GDG DevFest Bangkok 2024
akexorcist
0
120
【LT】ソフトウェア産業は進化しているのか? #Agilejapan
takabow
0
110
DynamoDB でスロットリングが発生したとき_大盛りver/when_throttling_occurs_in_dynamodb_long
emiki
1
460
TypeScriptの次なる大進化なるか!? 条件型を返り値とする関数の型推論
uhyo
2
1.8k
インフラとバックエンドとフロントエンドをくまなく調べて遅いアプリを早くした件
tubone24
1
440
マルチモーダル / AI Agent / LLMOps 3つの技術トレンドで理解するLLMの今後の展望
hirosatogamo
38
13k
エンジニア人生の拡張性を高める 「探索型キャリア設計」の提案
tenshoku_draft
1
130
開発生産性を上げながらビジネスも30倍成長させてきたチームの姿
kamina_zzz
2
1.7k
Featured
See All Featured
Stop Working from a Prison Cell
hatefulcrawdad
267
20k
Agile that works and the tools we love
rasmusluckow
327
21k
Let's Do A Bunch of Simple Stuff to Make Websites Faster
chriscoyier
506
140k
Rails Girls Zürich Keynote
gr2m
94
13k
CSS Pre-Processors: Stylus, Less & Sass
bermonpainter
356
29k
Practical Orchestrator
shlominoach
186
10k
4 Signs Your Business is Dying
shpigford
180
21k
I Don’t Have Time: Getting Over the Fear to Launch Your Podcast
jcasabona
28
2k
Site-Speed That Sticks
csswizardry
0
36
jQuery: Nuts, Bolts and Bling
dougneiner
61
7.5k
How to Think Like a Performance Engineer
csswizardry
20
1.1k
A designer walks into a library…
pauljervisheath
204
24k
Transcript
ログ集約基盤をCloudWatchから OpenSearchに変えてみた 1
Name:ユータ Occupation:SRE Twitter:@Y0u281 (オーでなくゼロです) ブログ:https://zenn.dev/yuta28 自己紹介 Twitter 2
目次 • 背景 • 実装 • 課題 • 改善 •
よかったこと • まとめ 3
背景 4
背景 5 課題 • ログ収集が遅い • 検索しにくい • グラフがほしい
実装 6 AWS側でCloudWatchのログを OpenSearchに転送してくれる
課題 7 すべてのレコードが文字列型で登 録される!!
改善 8
改善 9 すべてのレコードが文字列型で登 録される!!
改善 10 数値型に変換! Fluentdの設定はブログを 御覧ください
よかったこと 11 専用のIAMユーザーを 発行する必要がなくなった
よかったこと 12 ステータスコード割合
よかったこと 13 解決 • ほぼリアルタイムで検索 • 全文検索で検索性向上 • ダッシュボード作成 •
Google認証で簡単ログイン 課題 • ログ収集が遅い • 検索しにくい • グラフがほしい
まとめ 14
より詳しい内容は弊社ブログに 15 CloudWatch LogsからOpenSearchへログ集 約を移行した - CUEBiC TEC BLOG (hatenablog.com)
ありがとうございました 16