[つながりテック #2 AWSトークで締めくくる年度末LT大会]Amazon Q Developerとこれからの運用を考える

Amazon Q Developerとこれからの運用を考える 2025年3月26日 #つながりテックつながりテック #2 AWSトークで締めくくる年度末LT大会

自己紹介 >深津新太郎 PM ＠事業会社の情報システム子会社オンプレシステムの運用・開発・リプレイスを担当 >AWS利用 2019- >好きなサービス
S3、Cloudwatch

レガシーシステムの運用とはつらい。人力で頑張る

流行りのGenAIで運用も効率化したい

Amazon Q Developer Operational Investigation （Amazon Q Developer 運用調査機能）

Amazon Q Developer 運用調査機能 re:Invent2024 CEO Matt氏から発表 Preview＠バージニア、オレゴン Cloudwatchのログ等を読み取って解析原因究明、対策を提案

Example AWS Cloud Virtual private cloud (VPC) Front End Task
ALB ALB Amazon Aurora Internet gateway Private subnet Public subnet Private subnet Fargate Back End Task Fargate Amazon CloudWatch Amazon Q Developer User Alarm

Cloudwatch Alarm設定

Example AWS Cloud Virtual private cloud (VPC) Front End Task
ALB ALB Amazon Aurora Internet gateway Private subnet Public subnet Private subnet Fargate Back End Task Fargate Amazon CloudWatch Amazon Q Developer User 調査開始 Alarm いつもより遅いな

Cloudwatch Alarm発生

Amazon Q Developer登場！調査開始

Amazon Q Developer 分析中

Amazon Q Developer 分析中関係のない提案も

Amazon Q Developer 運用調査機能分析内部の Application Load Balancer で
TargetResponseTime が大幅に増加し、 5 秒のしきい値を超えてアラームがトリガーされました。これは、さまざまなレイテンシーメトリック (InsertLatency、 CommitLatency、SelectLatency) の急上昇とスループットメトリック (WriteIOPS、StorageNetworkReceiveThroughput) の低下によって証明された、 RDS クラスターのパフォーマンス低下が原因でした。RDS ログでの接続の中止と ConnectionAttempts の急上昇が示すように、この問題は接続の問題によって悪化した可能性があります。このデータベースパフォーマンスの問題はバックエンドサービスに影響を及ぼし、システム全体の応答時間の増加を引き起こしました。

Amazon Q Developer 運用調査機能分析 ECS バックエンドサービスでは、データベース接続プールの飽和によりパフォーマンスが低下しました。これは、トラフィックの急激な増加によって RDS
インスタンスへの接続試行が急増したことが原因と考えられます。この問題は、データベース操作のレイテンシの増加として現れ、挿入、コミット、および選択のレイテンシがすべて急増しました。ECS タスクではメモリ使用率とネットワーク受信バイトが増加し、 RDS インスタンスでは書き込み IOPS が低下し、アクティブなトランザクションが増加しました。これらのパフォーマンスの問題により、イングレスおよび内部アプリケーションロードバランサーの両方でターゲット応答時間が大幅に増加し、内部 ALB は 5 秒のしきい値を超えるとアラームをトリガーしました。

Slackでも通知、対応可能

やるじゃん Amazon Q Developer！東京で待ってるよ！

https://docs.aws.amazon.com/AmazonCloudWatch/latest/monitoring/Investigations-GetStarted.html#Investigations-GetStarted-Group https://docs.aws.amazon.com/AmazonCloudWatch/latest/monitoring/Investigations-GetStarted.html#Investigations-GetStarted-Group 気になることクロスリージョン推論東京→シドニー、シンガポール、ムンバイ… 色々読み取って推論するので、トークン量が… GAされたら高そう

まとめ運用調査機能ログ読み取り→分析→提案未知の障害、大規模障害使い所を考えれば課金も怖くない（はず）使いこなせば夜間対応も安心東京でのGAに期待！

-Share your lessons-

[つながりテック #2 AWSトークで締めくくる年度末LT大会]Amazon Q Develo...

[つながりテック #2 AWSトークで締めくくる年度末LT大会]Amazon Q Developerとこれからの運用を考える

sh_fk2

More Decks by sh_fk2

Other Decks in Technology

Featured

Transcript