Upgrade to Pro — share decks privately, control downloads, hide ads and more …

ログストレージコスパ最強!?OpenObserveを試してみた

Avatar for YouYou YouYou
June 27, 2023
Programming
6.4k
0

 ログストレージコスパ最強!?OpenObserveを試してみた

関連記事↓
https://zenn.dev/yuta28/articles/openobserve-tutorial

Avatar for YouYou

YouYou

June 27, 2023

More Decks by YouYou

See All by YouYou
AWSマネコンに複数のアカウントで入れるようになりました
Avatar for YouYou yuhta28
2
300
今インフラ技術をイチから学び直すなら
Avatar for YouYou yuhta28
1
310
AWSに詳しくない人でも始められるコスト最適化ガイド
Avatar for YouYou yuhta28
3
680
Datadog外形監視基盤をEC2から ECSへ移行してみた
Avatar for YouYou yuhta28
0
1.8k
アウトプット頑張ったら企業からLT登壇の依頼がきた話
Avatar for YouYou yuhta28
1
1.9k
小さなことから始めるAWSコスト最適入門
Avatar for YouYou yuhta28
1
1.5k
Datadogのコストも監視しよう
Avatar for YouYou yuhta28
1
1.1k
Rcloneを使った定期的なストレージ同期
Avatar for YouYou yuhta28
0
860
Pulumiを触ってみよう
Avatar for YouYou yuhta28
1
2.7k

Other Decks in Programming

See All in Programming
ドリフトを絶対に許さない（？）CDK運用 / CDK Ops with Zero Tolerance for Drifts (?)
Avatar for アキキー | Akihisa Ikeda akihisaikeda
1
180
生成AI導入の「期待外れ」を乗り越える ー 開発フロー改革が目指す、真の組織変革
Avatar for starfish719 starfish719
0
4.1k
Claude Code全社展開のためにやったことn選～プラグイン302個・コミッター271人を支えるために～
Avatar for Kenichi Takahashi kenchan
5
1.4k
関東Kaggler会_NVIDIA_Nemotron_コンペ_振り返り
Avatar for rick rick_ds
0
490
これって Effect でできたのでは? / TSKaigi Mashup Kansai #2
Avatar for Susisu susisu
0
150
AIが無かった頃の素敵な出会いの話
Avatar for コドモン開発チーム codmoninc
1
390
AI Engineeringは、AIプロダクトだけのものか？ 〜AIがソフトウェアを作る時代の新しい当たり前〜 / No AI in your product. AI Engineering in your development.
Avatar for r-kagaya rkaga
4
380
仕様駆動開発の消費期限
Avatar for watany watany
17
7.3k
PostgreSQL 18で考えるUUID主キー
Avatar for Kazuhiro Seo kazuhiro1982
0
460
Go言語とトイモデルで学ぶTransformerの気持ち / fukuokago23-transformer
Avatar for monochromegane monochromegane
0
160
生成AIで帳票OCRが「簡単に」作れる時代になった？
Avatar for Shohei Kondo kon_shou
0
630
freee が目指す データ マネジメント戦略 AI-Ready 時代を支える 攻めのガバナンスとは
Avatar for freee freee
PRO
0
300

Featured

See All Featured
Product Roadmaps are Hard
Avatar for C. Todd Lombardo iamctodd
55
12k
The Cult of Friendly URLs
Avatar for Andy Hume andyhume
79
7k
What's in a price? How to price your products and services
Avatar for Michael Herold michaelherold
247
13k
Design and Strategy: How to Deal with People Who Don’t "Get" Design
Avatar for Morgane Peng morganepeng
133
19k
How to train your dragon (web standard)
Avatar for Monica Dinculescu notwaldorf
97
6.7k
Ruling the World: When Life Gets Gamed
Avatar for Sebastian Deterding codingconduct
0
290
4 Signs Your Business is Dying
Avatar for Josh Pigford shpigford
187
22k
KATA
Avatar for Megan Lloyd mclloyd
PRO
35
15k
Test your architecture with Archunit
Avatar for Yoan thirion
1
2.3k
Avoiding the “Bad Training, Faster” Trap in the Age of AI
Avatar for Mike Taylor tmiket
0
200
SERP Conf. Vienna - Web Accessibility: Optimizing for Inclusivity and SEO
Avatar for Sara Fernández Carmona sarafernandez
2
1.5k
jQuery: Nuts, Bolts and Bling
Avatar for Doug Neiner dougneiner
66
8.5k

Transcript

  1. ログストレージコスパ最強!? OpenObserveを試してみた 1

  2. Name：ユータ Occupation：SRE Twitter：@Y0u281 （オーでなくゼロです） ブログ：https://zenn.dev/yuta28 自己紹介 Twitter 2

  3. 皆さんはこう思ったことはあり ませんか？ 3

  4. ログの保存料金が高い 4

  5. 5

  6. 6

  7. 聴講者 • ログのコストを気にしている人 • 監視基盤構築担当者 • 新しいもの好き 7

  8. 目次 • OpenObserveとは？ • OpenObserveの利点 • 低コストについて • 課題 •

    まとめ 8

  9. OpenObserveとは？ • ログ、メトリクス、トレース監視を一元管理できるプラットフォーム • セルフホスト利用かクラウドサービスが提供されている • ストレージコストが他のサービスと比較して1/140(!!!) • ペタバイト相当のスケーリングが可能 9

  10. OpenObserveの利点 • 高い圧縮率によって実現した圧倒的な低コスト • すぐに始めることができる無償クラウドプラン • 日本語表示もある 10

  11. 低コストについて 1/140はHA構成のElasticSearchと比較した場合 • 3台のEBSを使うESとS3を使うOpenObserve 11

  12. 低コストについて 1/140はHA構成のElasticSearchと比較した場合 • 3台のEBSを使うESとS3を使うOpenObserve 12

  13. 低コストについて 1/140はHA構成のElasticSearchと比較した場合 • 3台のEBSを使うESとS3を使うOpenObserve 13

  14. 低コストについて 1/140はHA構成のElasticSearchと比較した場合 • 3台のEBSを使うESとS3を使うOpenObserve 14

  15. 課題 • ログ転送は自前で実装しなければならない • インデックスを作成しないため検索速度は遅い • メトリクス/トレースも他OSSからの情報を自前で収集しなければ ならない • ログ検索はやや学習コスト高

    15

  16. まとめ 16

  17. まとめ 17 • コスト　　　安 • 学習難易度　高　

  18. ありがとうございました より詳しい内容は以下のブログで↓ ログコスパ最強!?OpenObserveを触って みた 18