NGINX Ingress Controller を活用した Retty のサービス開発とモニタリング / NGINX ユーザー会 2022 春

NGINX Ingress Controller Λ׆༻ͨ͠ Retty ͷαʔϏε։ൃͱϞχλϦϯά Yuya Koda 2022/04/15 NGINX
Ϣʔβʔձ 2022 य़

ࣗݾ঺հ ໊લ ޾ా༏࠸ ͜͏ͩΏ͏΍ ͓࢓ࣄ ΠϯϑϥΤϯδχΞ ޷͖ͳ͓ళ 4"70:ຑ෍े൪ళ ΧϨʔͷళΨϯδʔ
޷͖ͳ΋ͷ ւ઱ྉཧίʔώʔࣗಈԽLT 5XJUUFS !QPOLJP@P IUUQTVTFSSFUUZNF

͋ͳͨʹ#&45ͳ ͓ళ͕ݟ͔ͭΔ ໊࣮ܕάϧϝαʔϏε Retty

ΞδΣϯμ ։ൃ؀ڥͷ֓ཁ B ։ൃ؀ڥͷͳΓͨͪ C ։ൃ؀ڥͷߏ੒ ϩʔυόϥϯαʔͷߏ੒ݕ౼
ϞχλϦϯάͷӡ༻ࣄྫͱϋϚͬͨͱ͜Ζ ·ͱΊ

ࣾ಺։ൃ؀ڥͷͳΓͨͪ • ϩʔΧϧ։ൃ࣌ʹ։ൃஈ֊ͷ΋ͷ͕ϨϏϡʔͰ͖ͳ͍ ◦ OHSPLΛ࢖͍ͬͯͨ ▪ ্ཱ͍ͪ͛ͯΔ͔ؒ͠ݟΕͳ͍ͷͰෆศ • ։ൃ%#΍"1*ͱͷ࿈ܞ ◦
खݩͷEPDLFSDPNQPTFͰ্ཱͪ͛ͨ.Z42-Ͱ͸ͳ͘։ൃ༻ͷ %#Λࢀর͍ͨ͠ ◦ ผγεςϜͷ"1*Λࢀরͯ͠࿈ܞ෦෼ͷಈ࡞֬ೝΛߦ͍͍ͨ ▪ ˠϙʔτϑΥϫʔσΟϯάͳͲ͕ඞཁ ։ൃ͢Δʹ͍͔͋ͨͬͯͭ͘ͷ՝୊͕͋ͬͨ

։ൃͷྲྀΕ ϩʔΧϧ؀ڥͰ։ൃमਖ਼ मਖ਼ͨ͠ΠϝʔδΛ&$3ʹΞοϓϩʔυ εΫϦϓτΛ࢖༻ͯࣗ͠෼ͷ%FQMPZNFOUͷΠϝʔδΛͰΞοϓϩʔυ ͨ͠΋ͷʹมߋ ൓ө֬ೝ
ԼهͷΑ͏ͳྲྀΕͰ։ൃʙ֬ೝΛߦ͏

ࣾ಺։ൃ؀ڥͷߏ੒ ˞ϗετ໊ͳͲ͸͢΂ͯՍۭͷ΋ͷ IUUQT\VTFS^\TFSWJDF@OBNF^EFWSFUUZNF ʹΞΫηεͯ͠දࣔ֬ೝ εΫϦϓτͰ%FQMPZNFOUͷΠϝʔδΛมߋ͢Δ ։ൃऀYαʔϏεຖʹ*OHSFTT4FSWJDF%FQMPZNFOU͕ଘࡏ͢Δ มߋΛDPNNJU CVJMEQVTI

ϩʔυόϥϯαʔͷߏ੒ʹ͍ͭͯ

ϩʔυόϥϯαʔͷߏ੒Ҋ ։ൃ؀ڥߏங౰ॳ ೥݄ࠒ ͸ҎԼͷΑ͏ͳબ୒ࢶ͕͋ΓɺͦΕͧΕΛൺֱݕ౼ ͠·ͨ͠ɻ • "-#*OHSFTT • $-# /-#
/(*/9*OHSFTT$POUSPMMFS • "-#*OHSFTT /(*/9*OHSFTT$POUSPMMFS

A) ALB Ingress "84"-#Λ*OHSFTTͱͯ͠࢖༻͢Δ&,4ͩͱఆ൪ ͷߏ੒ • ϝϦοτ ◦ ߏ੒͕ඇৗʹγϯϓϧ ◦
"-#ͷػೳ͕࢖͑Δ • σϝϦοτ ◦ "-#Λ*OHSFTTͱͯ͠ར༻͢ΔͷͰ"-#ͷ੍໿Λͦͷ··ड͚Δ ▪ ਖ਼نදݱ͕࢖͑ͳ͍😭 ▪ 4FSWJDF2VPUB • λʔήοτͷొ࿥਺͸σϑΥϧτͰ Ҿ্͖͛Մೳ • λʔήοτͷొ࿥਺͸૿͑ΔՄೳੑ͕͋ͬͨ

B) CLB / (NLB) + NGINX Ingress /(*/9*OHSFTTΛUZQF-PBE#BMBODFSͰެ։ͯ͠ɺશͯͷϧʔςΟϯάΛ/(*/9 ʹ೚ͤΔํࣜ •
ϝϦοτ ◦ /(*/9ͰϧʔςΟϯάͰ͖Δ ▪ ਖ਼نදݱ΋࢖͑Δ͠ϔομʔ΋৮ΕΔ • σϝϦοτ ◦ $-#Λ࢖͏ඞཁ͕͋ͬͨ ݱࡏ͸/-#͕ར༻Մೳ ▪ ౰ॳ͸UZQF-PBE#BMBODFSͳ4FSWJDFͰ࢖༻Ͱ͖Δ&-#͕ $-#ͷΈͩͬͨ

C) ALB Ingress + NGINX Ingress "-#*OHSFTTΛϑϩϯτʹ഑ஔͭͭ͠ɺͦͷޙΖͰ/(*/9*OHSFTTΛಈ͔ͯ͠ͲͪΒ΋ ࢖͏ํࣜɻ"ͱ#ͷ͍͍ͱ͜औΓߏ੒ • ϝϦοτ
◦ /(*/9ͰϧʔςΟϯάͰ͖Δ ▪ "-#Ͱ΋Ͱ͖Δ͠"-#ͷػೳ΋࢖͑Δ ◦ ౰࣌ͱͯ͠͸ $-#Λ࢖Θͳͯ͘΋͍͍ • σϝϦοτ ◦ *OHSFTT$POUSPMMFSΛෳ਺؅ཧ͢Δඞཁ͕͋Δ ▪ ͱ͸͍͑ӡ༻͍ͯͯ͠େมͩͳͱײͨ͜͡ͱ͕ͳ͍

ύλʔϯ C Λ࠾༻ͨ͠ཧ༝ ओʹ$-#Λ࢖͍ͨ͘ͳ͍ͱ͍͏ͷ͕େ͖ͳཧ༝ "84-PBE#BMBODFS$POUSPMMFSͷొ৔ʹΑΓݱࡏղফ͍ͯ͠Δ໰୊΋ଟ͍ • ౰࣌͸ $-#Λ࢖Θͳ͍બ୒ࢶ͕͜Ε͔͠ͳ͔ͬͨ ◦ ྩ࿨ʹ$-#Λ৽ن࡞੒͢Δͷ͸ͪΐͬͱʜ
• &,4PO'BSHBUF΁ͷ৐Γ׵͑ͷՄೳੑ͕͋ͬͨ ◦ ίετ؍఺͔Β'BSHBUF΁ͷҠߦ͸݁ՌతʹߦΘͣ ◦ ౰࣌͸ PO'BSHBUFͷ৔߹͸"-#*OHSFTTΛ࢖͏͔͠ͳ͔ͬͨ • "-#୯ମͩͱػೳෆ଍Λײͨ͡ ◦ ϧʔςΟϯάͷઃఆ ◦ Ϧεφʔϧʔϧͷ্ݶ͕σϑΥϧτͩͱ Ҿ্͖͛Մೳ

࠷ऴతͳߏ੒ ˞ϗετ໊ͳͲ͸͢΂ͯՍۭͷ΋ͷ

ӡ༻ࣄྫ

Prometheus + Grafana ʹΑΔϞχλϦϯά ϞχλϦϯά؀ڥͷߏஙʹ͸QSPNFUIFVTPQFSBUPSLVCFQSPNFUIFVTΛ࢖༻ 1SPNFUIFVT(SBGBOB"MFSUNBOBHFSͳͲΛΠΠײ͡ʹηοτΞοϓͰ͖Δ IUUQTHJUIVCDPNQSPNFUIFVTPQFSBUPSLVCFQSPNFUIFVT

kube-prometheus vs prometheus-operator QSPNFUIFVTPQFSBUPS͸ʮ1SPNFUIFVTͷ0QFSBUPS ୯ମ ʯͰ(SBGBOB΍֤छ FYQPSUFS͸ผ్Πϯετʔϧ͢Δඞཁ͕͋Δɻ QSPNFUIFVTPQFSBUPSΛ಺แ͠ɺ(SBGBOB"MFSUNBOBHFS&YQPSUFSΛೖΕͯ͘ ΕΔͷ͕LVCFQSPNFUIFVT

nginx-prometheus-exporter ͸ඞཁʁ OHJOYJODLVCFSOFUFTJOHSFTTΛ࢖͏৔߹ʹ͸ಉࠝ͞Ε͓ͯΓɺϑϥάͰ༗ޮԽ͢Δ ͚ͩͳͷͰผ్FYQPSUFSΛೖΕͳͯ͘΋ྑ͍ IUUQTHJUIVCDPNOHJOYJODOHJOYQSPNFUIFVTFYQPSUFS

exporter ͷઃఆ OHJOYJOHSFTTͷҾ਺ͱͯ͠FOBCMFQSPNFUIFVTNFUSJDTΛ౉ͯ͠ɺεΫϨΠϓ Ͱ͖ΔΑ͏ʹ֘౰ͷϙʔτ ࠓճ͸ Λެ։͢Δ

औಘͰ͖ΔϝτϦΫεʹ͍ͭͯ 044൛ͩͱऔಘͰ͖ΔϝτϦΫεׂ͕ͱݶΒΕΔͨΊɺΑΓৄࡉʹϞχλϦϯά͢Δ ৔߹͸/(*/91MVT͕ྑͦ͞͏ ։ൃ؀ڥͩͱࢮ׆؂ࢹͰ͖Ε͹े෼ͳͷͰࠓͷͱ͜Ζ໰୊ͳ͠ • $PNNPO ◦ OHJOYFYQPSUFS@CVJME@JOGP ◦ OJHOY@VQ
• 4UBUVT ◦ OHJOY@DPOOFDUJPOT@BDDFQUFE ◦ OHJOY@DPOOFDUJPOT@BDUJWF ◦ OHJOY@DPOOFDUJPOT@IBOEMFE ◦ OHJOY@DPOOFDUJPOT@SFBEJOH ◦ OHJOY@DPOOFDUJPOT@XBJUJOH ◦ OHJOY@DPOOFDUJPOT@XSJUJOH ◦ OHJOY@IUUQ@SFRVFTUT@UPUBM 044/(*/9ͰऔಘͰ͖ΔϝτϦΫεҰཡ

·ͱΊ

·ͱΊ • &,4ͷ৔߹͸"-#*OHSFTT SEQBSUZ*OHSFTTͷ૊Έ߹Θͤ͸ΞϦ ◦ "-#ͷػೳΛ࢖͍ͭͭ଍Γͳ͍ՕॴΛิ͑Δ ▪ "$.8"'0*%$"VUI • ϞχλϦϯά؀ڥͷߏஙʹ͸LVCFQSPNFUIFVT͕ศར
◦ 2VJDLTUBSUͷ௨Γʹ΍Ε͹Ұ௨ΓΠΠײ͡ʹଗ͏ ◦ LVCFQSPNFUIFVTʹݶΒͣ 0QFSBUPSͦͷ΋ͷͷֶशίετ͸͔͔Δ

ืूϙδγϣϯ • ϑϩϯτΤϯυΤϯδχΞ • όοΫΤϯυΤϯδχΞ • ΞϓϦΤϯδχΞ • ΤϯδχΞϦϯάϚωʔδϟʔ •
σʔλΞφϦετ • σʔλαΠΤϯςΟετ • σʔλΤϯδχΞ • ΠϯϑϥΤϯδχΞ ৄࡉ͸ͪ͜Β

NGINX Ingress Controller を活用した Retty のサービス開発とモニ...

NGINX Ingress Controller を活用した Retty のサービス開発とモニタリング / NGINX ユーザー会 2022 春

YuyaKoda PRO

More Decks by YuyaKoda

Other Decks in Technology

Featured

Transcript

NGINX Ingress Controller Λ׆༻ͨ͠ Retty ͷαʔϏε։ൃͱϞχλϦϯά Yuya Koda 2022/04/15 NGINX

ࣗݾ঺հ ໊લ ޾ా༏࠸ ͜͏ͩΏ͏΍ ͓࢓ࣄ ΠϯϑϥΤϯδχΞ ޷͖ͳ͓ళ 4"70:ຑ෍े൪ళ ΧϨʔͷళΨϯδʔ

͋ͳͨʹ#&45ͳ ͓ళ͕ݟ͔ͭΔ ໊࣮ܕάϧϝαʔϏε Retty

ΞδΣϯμ ։ൃ؀ڥͷ֓ཁ B ։ൃ؀ڥͷͳΓͨͪ C ։ൃ؀ڥͷߏ੒ ϩʔυόϥϯαʔͷߏ੒ݕ౼

ࣾ಺։ൃ؀ڥͷͳΓͨͪ • ϩʔΧϧ։ൃ࣌ʹ։ൃஈ֊ͷ΋ͷ͕ϨϏϡʔͰ͖ͳ͍ ◦ OHSPLΛ࢖͍ͬͯͨ ▪ ্ཱ͍ͪ͛ͯΔ͔ؒ͠ݟΕͳ͍ͷͰෆศ • ։ൃ%#΍"1*ͱͷ࿈ܞ ◦

։ൃͷྲྀΕ ϩʔΧϧ؀ڥͰ։ൃमਖ਼ मਖ਼ͨ͠ΠϝʔδΛ&$3ʹΞοϓϩʔυ εΫϦϓτΛ࢖༻ͯࣗ͠෼ͷ%FQMPZNFOUͷΠϝʔδΛͰΞοϓϩʔυ ͨ͠΋ͷʹมߋ ൓ө֬ೝ

ࣾ಺։ൃ؀ڥͷߏ੒ ˞ϗετ໊ͳͲ͸͢΂ͯՍۭͷ΋ͷ IUUQT\VTFS^\TFSWJDF@OBNF^EFWSFUUZNF ʹΞΫηεͯ͠දࣔ֬ೝ εΫϦϓτͰ%FQMPZNFOUͷΠϝʔδΛมߋ͢Δ ։ൃऀYαʔϏεຖʹ*OHSFTT4FSWJDF%FQMPZNFOU͕ଘࡏ͢Δ มߋΛDPNNJU CVJMEQVTI

ϩʔυόϥϯαʔͷߏ੒ʹ͍ͭͯ

ϩʔυόϥϯαʔͷߏ੒Ҋ ։ൃ؀ڥߏங౰ॳ ೥݄ࠒ ͸ҎԼͷΑ͏ͳબ୒ࢶ͕͋ΓɺͦΕͧΕΛൺֱݕ౼ ͠·ͨ͠ɻ • "-#*OHSFTT • $-# /-#

A) ALB Ingress "84"-#Λ*OHSFTTͱͯ͠࢖༻͢Δ&,4ͩͱఆ൪ ͷߏ੒ • ϝϦοτ ◦ ߏ੒͕ඇৗʹγϯϓϧ ◦

B) CLB / (NLB) + NGINX Ingress /(/9OHSFTTΛUZQF-PBE#BMBODFSͰެ։ͯ͠ɺશͯͷϧʔςΟϯάΛ/(*/9 ʹ೚ͤΔํࣜ •

C) ALB Ingress + NGINX Ingress "-#OHSFTTΛϑϩϯτʹ഑ஔͭͭ͠ɺͦͷޙΖͰ/(/9*OHSFTTΛಈ͔ͯ͠ͲͪΒ΋ ࢖͏ํࣜɻ"ͱ#ͷ͍͍ͱ͜औΓߏ੒ • ϝϦοτ

ύλʔϯ C Λ࠾༻ͨ͠ཧ༝ ओʹ$-#Λ࢖͍ͨ͘ͳ͍ͱ͍͏ͷ͕େ͖ͳཧ༝ "84-PBE#BMBODFS$POUSPMMFSͷొ৔ʹΑΓݱࡏղফ͍ͯ͠Δ໰୊΋ଟ͍ • ౰࣌͸ $-#Λ࢖Θͳ͍બ୒ࢶ͕͜Ε͔͠ͳ͔ͬͨ ◦ ྩ࿨ʹ$-#Λ৽ن࡞੒͢Δͷ͸ͪΐͬͱʜ

࠷ऴతͳߏ੒ ˞ϗετ໊ͳͲ͸͢΂ͯՍۭͷ΋ͷ

ӡ༻ࣄྫ

Prometheus + Grafana ʹΑΔϞχλϦϯά ϞχλϦϯά؀ڥͷߏஙʹ͸QSPNFUIFVTPQFSBUPSLVCFQSPNFUIFVTΛ࢖༻ 1SPNFUIFVT(SBGBOB"MFSUNBOBHFSͳͲΛΠΠײ͡ʹηοτΞοϓͰ͖Δ IUUQTHJUIVCDPNQSPNFUIFVTPQFSBUPSLVCFQSPNFUIFVT

kube-prometheus vs prometheus-operator QSPNFUIFVTPQFSBUPS͸ʮ1SPNFUIFVTͷ0QFSBUPS ୯ମ ʯͰ(SBGBOB΍֤छ FYQPSUFS͸ผ్Πϯετʔϧ͢Δඞཁ͕͋Δɻ QSPNFUIFVTPQFSBUPSΛ಺แ͠ɺ(SBGBOB"MFSUNBOBHFS&YQPSUFSΛೖΕͯ͘ ΕΔͷ͕LVCFQSPNFUIFVT

nginx-prometheus-exporter ͸ඞཁʁ OHJOYJODLVCFSOFUFTJOHSFTTΛ࢖͏৔߹ʹ͸ಉࠝ͞Ε͓ͯΓɺϑϥάͰ༗ޮԽ͢Δ ͚ͩͳͷͰผ్FYQPSUFSΛೖΕͳͯ͘΋ྑ͍ IUUQTHJUIVCDPNOHJOYJODOHJOYQSPNFUIFVTFYQPSUFS

exporter ͷઃఆ OHJOYJOHSFTTͷҾ਺ͱͯ͠FOBCMFQSPNFUIFVTNFUSJDTΛ౉ͯ͠ɺεΫϨΠϓ Ͱ͖ΔΑ͏ʹ֘౰ͷϙʔτ ࠓճ͸ Λެ։͢Δ

औಘͰ͖ΔϝτϦΫεʹ͍ͭͯ 044൛ͩͱऔಘͰ͖ΔϝτϦΫεׂ͕ͱݶΒΕΔͨΊɺΑΓৄࡉʹϞχλϦϯά͢Δ ৔߹͸/(*/91MVT͕ྑͦ͞͏ ։ൃ؀ڥͩͱࢮ׆؂ࢹͰ͖Ε͹े෼ͳͷͰࠓͷͱ͜Ζ໰୊ͳ͠ • $PNNPO ◦ OHJOYFYQPSUFS@CVJME@JOGP ◦ OJHOY@VQ

·ͱΊ

·ͱΊ • &,4ͷ৔߹͸"-#OHSFTT SEQBSUZOHSFTTͷ૊Έ߹Θͤ͸ΞϦ ◦ "-#ͷػೳΛ࢖͍ͭͭ଍Γͳ͍ՕॴΛิ͑Δ ▪ "$.8"'0*%$"VUI • ϞχλϦϯά؀ڥͷߏஙʹ͸LVCFQSPNFUIFVT͕ศར

ืूϙδγϣϯ • ϑϩϯτΤϯυΤϯδχΞ • όοΫΤϯυΤϯδχΞ • ΞϓϦΤϯδχΞ • ΤϯδχΞϦϯάϚωʔδϟʔ •