Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
2014-10-11_chiba.pm5
Search
SUZUKI Masashi
October 27, 2014
Technology
0
390
2014-10-11_chiba.pm5
アプリケーションのログ収集/監視ほかの会社はどうしてるのかしら?というお話
SUZUKI Masashi
October 27, 2014
Tweet
Share
More Decks by SUZUKI Masashi
See All by SUZUKI Masashi
2024-03-29 SRETT9 Cloud SQLの可用性について
masasuzu
0
220
2023-12-18 SRETT8 Terraform使いがPulumiに入門する
masasuzu
0
1.2k
2023-12-01 吉祥寺.pm ベストプラクティスと組織とIaC
masasuzu
1
960
SRETT#6_Terraformのtfstateについて考える
masasuzu
2
1.1k
SRETT#4黒い画面をもっと効率的に(使って自動化の時間を捻出)
masasuzu
2
330
2022-04-12 吉祥寺.pm 29
masasuzu
0
1.3k
2015-12-12-chiba.pm7
masasuzu
0
3.3k
2015-09-17_gotanda.pm6
masasuzu
0
3.4k
2015-07-10-kichijoji.pm4_yurui_template
masasuzu
0
1.2k
Other Decks in Technology
See All in Technology
How to Lead? Testimonial of a Lead Android Engineer
oleur
1
120
LangSmith入門―トレース/評価/プロンプト管理などを担うLLMアプリ開発プラットフォーム
os1ma
5
790
同じ様なUIをiOS/Android間で合わせるヒントNo.2
fumiyasac0921
1
110
高専で制御を、大学でセンシングを学び、次は脳みそ
satoshirobatofujimoto
0
120
本当のガバクラ基礎
toru_kubota
0
230
DevRelによる信頼構築とデータ駆動で変わるエンジニア採用 / DevRel Trust Building to Data Driven Engineering Hiring
bobtani
1
100
コードや知識を組み込む / Incorporate Code and knowledge
ks91
PRO
0
160
中年男性がメインフレームから クラウドへキャリアシフトしてみた
uechishingo
1
430
Cloud Service Mesh に触れ合う
phaya72
1
310
Secrets of a PowerShell "Guru"
guyrleech
1
110
Android Target SDK 35 (Android 15) 対応の概要
akkie76
0
200
認知症フレンドリーテックとスタックチャン
naokiuc
0
380
Featured
See All Featured
Building Effective Engineering Teams - LeadDev
addyosmani
32
1.9k
Robots, Beer and Maslow
schacon
PRO
155
7.9k
Web Components: a chance to create the future
zenorocha
306
41k
The Cost Of JavaScript in 2023
addyosmani
21
3.9k
Unsuck your backbone
ammeep
664
57k
個人開発の失敗を避けるイケてる考え方 / tips for indie hackers
panda_program
66
14k
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
126
32k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
15
1.6k
Fireside Chat
paigeccino
22
2.6k
KATA
mclloyd
16
12k
ピンチをチャンスに:未来をつくるプロダクトロードマップ #pmconf2020
aki_iinuma
80
44k
Happy Clients
brianwarren
92
6.4k
Transcript
ログ監視の話 chiba.pm #5 すずきまさし / @masasuz 1
2
ネタは特に話さないです 3
ログ監視の話 chiba.pm #5 すずきまさし / @masasuz 4
おまえだれよ すずきまさし / @masasuz 五反田の辺りにある中小web企業 開発基盤的なものを整備しているらし い zsh / perl
/ mysql / Ubuntu / Debian 5
最近江戸川区と葛飾区は千葉だっ てずっと言い続けていたら、西葛 西在住の人に怒られたので自重し ます。 6
ログ監視 ログ収集 7
コンテキスト ウェブサービス 自社サービス 物理サーバ 数百台の中小規模 8
ログ監視の話 9
エラーログ監視 定期的に アクセスログから4xx 5xxのログをvhost 毎、path毎に集計し、 一日あたりのᮢ値(デフォルト10件)越 えたらIRC、メールで通知する 当日ᮢ値は更新可能 10
問題 ᮢ値が一律10件(デフォルト)なので、 件数少ないけど重要なエラーを見逃す。 syntaxエラーとか仕込んでしまうと全 てのアクセスで500が上がるので、ᮢ値 上げ大変。 11
別ソリューション 単位時間当たりで5xx 4xxを集計すると か? 12
ログ収集の話 13
昔の話 監視サーバから 各アプリケーションサーバに serverlist.sh | xargs -I% ssh % ‘egrep
“status:(4|5)[0-9]{2}” access.log ‘ 14
現在 fluentdでログサーバに転送 fluentdがごにょごにょして、vhost毎 にアクセスログ分けてファイル保存 15
問題 複数ファイルをzgrepするのであまり効 率よくない 結局logサーバにsshしないといけない webアプリでごにょごにょしにくい 16
将来? fluentd => elasticsearch 検証し始めた aggrecationsがだいぶ使えそう kabana3良い kibana4??? 17
緩募: 事例 ベタープラクティス 18
ありがとう ございました 19