フリマアプリ「フリル」を支える Elasticsearch を用いた全文検索入門

ϑϦϚΞϓϦʮϑϦϧʯΛࢧ͑Δ &MBTUJDTFBSDIΛ༻͍ͨશจݕࡧೖ໳

ࣗݾ঺հ

3 Fablic, inc. Co-founder CTO ງҪ༤ଠ @yutadayo ࣗݾ঺հ

4 ϑϦϧ '3*- ʮཉ͍͠ʯ͕Έ͔ͭΔϑϦϚΞϓϦ

ΞδΣϯμ 5

6 ΞδΣϯμ w &MBTUJDTFBSDIͱ͸ʁ w &MBTUJDTFBSDIͷ$36% w Ϋϥελߏ੒ʹ͍ͭͯ w ݕࡧͷઃܭͱ࣮૷
w JOEFYߏஙʹ͍ͭͯ w ݕࡧਫ਼౓޲্ͷͨΊͷऔΓ૊Έ w ݕࡧϩδοΫͷมߋ w ݕࡧΫΤϦͷվળ w ·ͱΊ

&MBTUJDTFBSDIͱ͸ʁ 7

8 &MBTUJDTFBSDIʹ͍ͭͯ w ෼ࢄܕ3&45GVMݕࡧΤϯδϯ w શͯͷೖग़ྗ͸3&45ΠϯλʔϑΣΠεʢ+40/ʣܗࣜ w Ϋϥελߏ੒Ͱӡ༻͞Εɺطଘσʔλͷ෼ࢄϨϓϦΧ΋ࣗಈ Ͱ࣮ߦ w
+BWBͰ࣮૷ w Φʔϓϯιʔε w IUUQTHJUIVCDPNFMBTUJDFMBTUJDTFBSDI w εΩʔϚϑϦʔ w εΩʔϚ σʔλϚοϐϯά ఆٛͳ͠Ͱɺσʔλ౤ೖ͕Մೳ w ౤ೖͨ͠஋Ͱࣗಈతʹܕ൑ผɺ΋ͪΖΜ໌ࣔతʹఆٛ΋Մೳ w ϚϧνςφϯτରԠ w ΠϯσοΫεΛෳ਺࣋ͭ͜ͱ͕Մೳ

&MBTUJDTFBSDIͰͷ$36% 9

10 σʔλొ࿥ DVSM91045MPDBMIPTUUXJUUFSUXFFU σʔλͷొ࿥ \ VTFSZVUBEBZP QPTU@EBUF5 NFTTBHFl)FMMP8PSME
^

11 σʔλߋ৽ DVSM9165MPDBMIPTUUXJUUFSUXFFU σʔλͷߋ৽ \ VTFSZVUBEBZP QPTU@EBUF5 NFTTBHFl)B)B)Bz
^

12 σʔλऔಘ࡟আ DVSM9(&5MPDBMIPTUUXJUUFSUXFFU DVSM9(&5MPDBMIPTUUXJUUFSUXFFU@TPVSDF DVSM9%&-&5&MPDBMIPTUUXJUUFSUXFFU σʔλͷऔಘ σʔλͷ࡟আ

13 ࣮ࡍͷݕࡧΫΤϦ DVSMIUUQMPDBMIPTUGSJM@TFBSDIa QSFUUZE\ RVFSZ\ CPPM\ NVTU\ RVFSZ@TUSJOH\ EFGBVMU@PQFSBUPSBOE
VTF@EJT@NBYUSVF RVFSZϫϯϐʔε BOBMZ[FSKB@OBNF@BOBMZ[FS ^ ^ GJMUFS< \lSBOHFz\QSJDF\GSPN JODMVEF@MPXFSUSVF UP JODMVEF@VQQFSUSVF^^^ \UFSN\CSBOE@JE^^ \UFSN\DBUFHPSZ@JE^^ >

Ϋϥελߏ੒ʹ͍ͭͯ 14

15 Ϋϥελߏ੒ʹ͍ͭͯ wશ୆ͷ&$αʔόͰΫϥελϦϯά w .BTUFS/PEF୆ʢ಺୆͸଴ػܥʣ w %BUB/PEF୆ wOVNCFSPGTIBSET w ΠϯσοΫε͕࣋ͭϓϥΠϚϦʔγϟʔυͷ਺
w ϑϦϧͰ͸γϟʔυӡ༻ w γϟʔυ਺ͱϊʔυ਺Λಉ͡ʹઃఆ wOVNCFSPGSFQMJDBT w ϓϥΠϚϦγϟʔυ͕࣋ͭϨϓϦΧγϟʔυͷ਺ w ϑϦϧͰ͸σϑΥϧτͷϨϓϦΧઃఆ

16 &MBTUJDTFBSDIͷΫϥελߏ੒ .BTUFS /PEF .BTUFS FMJHJCMF/PEF %BUB /PEF %BUB /PEF
%BUB /PEF %BUB /PEF %BUB /PEF %BUB /PEF %BUB /PEF %BUB /PEF %BUB /PEF %BUB /PEF .BTUFS FMJHJCMF/PEF &MBTUJDTFBSDI$MVTUFS 8FCBQQ 4FSWFS "1*TFSWFST 8FCBQQ 4FSWFS 8FCTFSWFST

17 /PEFͱ4IBSEͷ෼෍ .BTUFSOPEF .BTUFSFMJHJCMF OPEF %BUBOPEF 1SJNBSZTIBSE 3FQMJDBTIBSE

18 ߏ੒ʹ͍ͭͯͷߟ࡯ wΫϥελͷߏ੒͸νϡʔχϯά͕ඞཁ w *OEFY༰ྔݕࡧස౓ΫΤϦʔͷ౤͛ํFUD wOPEFͱTIBSE਺Λἧ͑Δ͜ͱͰOPEF͋ͨΓͷTIBSEͷภΓ Λແͯ͘͠ɺγϯϓϧͳߏ੒ʹ w*OEFY༰ྔ͕ࠓΑΓഒҎ্͋ͬͨ࣌͸ɺ%BUB/PEF΋ഒ͙ Β͍͋ͬͨ w
%BUB/PEFΛ૿΍͢͜ͱͰεέʔϧՄೳ͕ͩɺίετ΋ wࢪࡦΛߦ͏ࡍʹ&$ΠϯελϯεͷੑೳΛ61ͤ͞Δ͜ͱ΋

ݕࡧͷઃܭͱ࣮૷ 19

20 ઃܭʹ͍ͭͯ w&MBTUJDTFBSDIΛ࢖࣮ͬͯݱ͍ͨ͜͠ͱΛܾΊΔ w λΠτϧ΍঎඼આ໌ʹର͢Δશจݕࡧ w ϒϥϯυ΍ΧςΰϦͰͷߜΓࠐΈ w ͍͍Ͷॱ΍ग़඼೔Ͱͷιʔτ wϑΟʔϧυͱσʔλܕΛܾΊΔ
w ঎඼σʔλͱ&MBTUJDTFBSDIϑΟʔϧυͱͷϚοϐϯά w UJUMFTUSJOHɺCSBOE@JEJOUFHFSɺDSFBUFE@BUEBUF wݕࡧͷͨΊͷσʔλͷΞφϥΠζํ๏ΛܾΊΔ w େจࣈͱখจࣈΛؾʹͤͣ)JU͍ͤͨ͞ w ʮʹʯʮ͕ʯͳͲͷॿࢺΛল͖͍ͨ

21 JOEFYʹ࢖༻͢Δσʔλιʔε w*OEFYΛߏ੒͢ΔϑΟʔϧυ wλΠτϧ wৄࡉઆ໌ wΧςΰϦ wϒϥϯυ wൢചՁ֨ wFUDʜ

22 σʔλͱϑΟʔϧυͷϚοϐϯά ֤σʔλͱ*OEFYϑΟʔϧυͷϚοϐϯάॲཧ

23 શจݕࡧ͍ͭͯิ଍ ͳͥݕࡧͰ͖Δͷ͔ʁେ·͔ʹ෼͚ΔͱҎԼͷΑ͏ʹͳ͍ͬͯΔ wJOEFYͷ࡞੒ w ঎඼σʔλʹରͯ͠Լهͷஈ֊ʹ෼͚ͯɺॲཧ͞ΕΔ w લॲཧˠτʔΫϯ෼ׂˠτʔΫϯຖͷॲཧʹֻ͚ΒΕͯτʔΫ ϯ܈͕࡞੒͞ΕΔ wݕࡧΫΤϦͷτʔΫϯ܈Խ
w ্ड़ͷॲཧͱಉ͡ϓϩηεΛܦͯɺݕࡧΫΤϦʹؚ·ΕΔτʔΫ ϯ܈͕࡞੒͞ΕΔ wݕࡧ w ݕࡧΫΤϦͷτʔΫϯ܈͕঎඼σʔλͷτʔΫϯ܈ʹؚ·Ε͍ͯΕ ͹ݕࡧʹ)JU͢Δ

24 શจݕࡧ͍ͭͯิ଍ χϯςϯυʔ4XJUDIţŲƅŽŪŏŖƃᶄ৽඼ͷ঎඼ લॲཧ χϯςϯυʔTXJUDIεϓϥτΡʔϯ৽඼ͷ঎඼ τʔΫϯ෼ׂ χϯςϯυʔTXJUDIεϓϥτΡʔϯ ৽඼ͷ঎඼ τʔΫϯຖͷ ॲཧ
χϯςϯυʔTXJUDIεϓϥτΡʔϯ ৽඼ͷ঎඼ ΞϧϑΣϕοτ͸খจࣈԽɺ൒֯Λશ֯ʹɺᶄͳͲͷґଘจࣈΛਖ਼نԽ ೔ຊޠͰݕࡧͰ͖ΔΑ͏ʹ඼ࢺ୯ҐͰτʔΫϯʹ෼ׂ ෼ׂޙɺτʔΫϯͱͯ͠ҙຯͷͳͦ͞͏ͳॿࢺͷ࡟আ

25 શจݕࡧ͍ͭͯิ଍ w χϯςϯυʔ w TXJUDI w εϓϥτΡʔϯ w
w ৽඼ w ঎඼ ݕࡧΫΤϦ χϯςϯυʔTXJUDI lχϯςϯυʔ48*5$)z ݕࡧτʔΫϯ ঎඼τʔΫϯ l৽඼ͷεϓϥτΡʔϯz ৽඼εϓϥτΡʔϯ lεϓϥᶄz εϓϥ

26 &MBTUJDTFBSDIͷ"OBMZ[FSʹ͍ͭͯ χϯςϯυʔ4XJUDIţŲƅŽŪŏŖƃᶄ৽඼ͷະ։෧ $IBSBDUFSGJMUFST χϯςϯυʔTXJUDIεϓϥτΡʔϯ৽඼ͷ঎඼ 5PLFOJ[FS χϯςϯυʔTXJUDIεϓϥτΡʔϯ ৽඼ͷ঎඼ 5PLFOGJMUFST χϯςϯυʔTXJUDIεϓϥτΡʔϯ
৽඼ͷ঎඼

27 "OBMZ[FSͷઃఆ ςΩετσʔλͷΞφϥΠβʔઃఆ

JOEFYߏஙʹ͍ͭͯ 28

29 ࣮૷ʹ͍ͭͯ wϑϦϧͷΞϓϦέʔγϣϯ͸3BJMTͰߏங w3BJMT͔Β&MBTUJDTFBSDIΛѻ͏HFNͱͯ͠TFBSDILJDL Λ࢖͍ͬͯ·͢ wIUUQTHJUIVCDPNBOLBOFTFBSDILJDL wEPXOUJNFͳ͠ͷSFJOEFY w42-MJLFͳRVFSZͷൃߦ͕Ͱ͖ͨΓ

30 JOEFYJOH ϑϦϧͷݕࡧ*OEFYͷߋ৽ʹ͍ͭͯ wجຊతʹ͸ϦΞϧλΠϜߋ৽ w঎඼ग़඼ w঎඼৘ใߋ৽ w঎඼࡟আചΓ੾Ε wΑΓ৽͍͠৘ใΛϢʔβʔʹݟͤΔ͜ͱ͕Ͱ͖Δ w൓໘ɺ࣮૷͕ෳࡶʹͳΓɺ&TΫϥελʹର͢Δෛՙ΋૿͑Δ

31 ࣮૷ wJOEFY͸঎඼Ϟσϧͷߋ৽ΛτϦΨʔʹඇಉظͰߋ৽ wಉظతʹߦ͏ʹ͸Φʔόϔουίετ͕ߴ͍ wΞϓϦ⁵"1*⁵&MBTUJDTFBSDI wݕࡧJOEFYߋ৽༻ͷ+PC2VFVFʹॲཧΛ೚ͤΔܗͰ࣮૷ wඇಉظॲཧʹ͸TJEFLJRΛ࠾༻ wIUUQTJEFLJRPSH w&TΫϥελଆͰ໰୊͕͋ͬͨ৔߹΋TJEFLJR͕ϦτϥΠ ͯ͘͠ΕΔͷͰ҆৺

32 *OEFYJOHͱݕࡧͷྲྀΕ '3*-"1* 3BJMT*OEFYJOH4FSWFS 4JEFLJR8PSLFS &MBTUJDTFBSDI$MVTUFS .BTUFS /PEF .BTUFS FMJHJCMF/PEF
.BTUFS FMJHJCMF/PEF *OEFYJOH 3FRVFTUT "1* 3FRVFTUT TFBSDI 3FRVFTUT

ݕࡧਫ਼౓޲্ͷͨΊͷऔΓ૊Έ 33

34 ݕࡧਫ਼౓ʹ͓͚Δࢦඪ wద߹཰ wݕࡧ݁Ռͱͯ͠ಘΒΕͨू߹தʹͲΕ͚ͩݕࡧʹద߹͠ ͨจॻΛؚΜͰ͍Δ͔ͱ͍͏ਖ਼֬ੑͷࢦඪ w࠶ݱ཰ wݕࡧର৅ͱ͍ͯ͠ΔจॻͷதͰݕࡧ݁Ռͱͯ͠ద߹͍ͯ͠ Δจॻʢਖ਼ղจॻʣͷ͏ͪͰͲΕ͚ͩͷจॻΛݕࡧͰ͖ ͍ͯΔ͔ͱ͍͏໢ཏੑͷࢦඪ ݕࡧγεςϜͷਫ਼౓ʹ͓͚ΔࢦඪCZXJLJQFEJB

35 ݕࡧਫ਼౓ʹ͍ͭͯ શͯͷ঎඼υΩϡϝϯτ ϢʔβʔͷٻΊ͍ͯͨ ঎඼υΩϡϝϯτ γεςϜͷݕࡧ݁Ռ $ # "
w "ɿϢʔβʔͷཉ͍͠঎඼ͱγεςϜͷ݁Ռ͕Ұகͨ͠෦෼ w #ɿϢʔβʔ͕ཉ͘͠ͳ͍ͷʹɺݕࡧ݁Ռʹؚ·ΕͨϊΠδʔͳ෦෼ w $ɿϢʔβʔ͕ཉ͍͠ͷʹɺݕࡧ݁Ռʹؚ·ΕͣɺऔΓ͜΅ͯ͠͠·ͬͨ෦෼

36 ద߹཰ͱ࠶ݱ཰ʹ͍ͭͯ wద߹཰ w"ݕࡧ݁ՌͷυΩϡϝϯτ਺ w࠶ݱ཰ w"ϢʔβʔͷٻΊ͍ͯͨ঎඼υΩϡϝϯτ਺ wద߹཰ͱ࠶ݱ཰͸τϨʔυΦϑ wͲͪΒ͔Λ্͛Α͏ͱ͢Δͱยํ͸Լ͕Δ wద߹཰ͱ࠶ݱ཰͕όϥϯεྑ͘ߴ͍͜ͱ͕ٻΊΒΕΔ

ݕࡧϩδοΫͷมߋ 37

38 ҎલͷݕࡧϩδοΫ w5PLFOJ[FS͕(SBNϕʔεͷݕࡧ wશจݕࡧɺಋೖ౰ॳ͸঎඼਺΋গͳ͘ɺϊ΢ϋ΢΋ ͦ͜·Ͱͳ͔ͬͨͨΊɺ࠶ݱ཰Λॏࢹ wϊΠζ͸ଟ͘ͳΔ͕ɺΫΤϦʹର͢ΔऔΓ͜΅͠͸গ ͳ͘ͳΔ wϢʔβʔʹ೐Θ͍ͬͯΔͷΛݟͤΔͨΊɺͨ͘͞Μ ঎඼݁ՌΛද͍ࣔͨ͠ʜ

39 (SBNͱܗଶૉղੳͷҧ͍ αϯϓϧ౦ژ౎ͷ॓ ܗଶૉղੳ ౦ژ౎ͷ॓ (SBN ౦ژژ౎౎ͷͷ॓ ݕࡧΫΤϦlژ౎zʹରͯ͠ɺܗଶૉղੳͷJOEFY ʹ͸ώοτͤͣɺ(SBNͷJOEFYʹͷΈώοτ ͠·͢

40 /(SBNͷ՝୊ w ؔ܎ͳ͍΋ͷ͕ͳΔ΂͘)JU͠ͳ͍Α͏ʹ͍ͨ͠ w O(SBNͩͱϑΝʔͰݕࡧͨ͠ͱ͖ʹɺϩʔϑΝʔ΍ϩʔϦʔζϑΝʔ Ϝ͕)JU͢Δ w ಉ͡ҙຯͷ୯ޠͷݕࡧ݁Ռ͸ͳΔ΂͘ಉ͡ʹ͍ͨ͠ w
όοάɾόοΫ΍ΧγϛΞɾΧγϛϠͳͲɺදه͕༳ΕΔޠ͕͋Γ

41 ܗଶૉղੳΛ༻͍ͨݕࡧ w 5PLFOJ[FSΛLVSPNPKJ@UPLFOJ[FSΛ࢖༻ͯ͠ܗଶૉղੳ w IUUQTXXXFMBTUJDDPHVJEFFOFMBTUJDTFBSDI QMVHJOTDVSSFOUBOBMZTJTLVSPNPKJUPLFOJ[FSIUNM IUUQJOGBCMJDDPKQFOUSZ ৄ͘͠͸ฐࣾ5FDIϒϩάͰʂ

42 ࣙॻͷಋೖ w Ϣʔβʔࣙॻ w '3*-ͷ঎඼৘ใ΍ݕࡧϫʔυʹ͸ɺϑΝογϣϯϒϥϯυ΍ ༸෰ʹؔ͢Δ୯ޠɺϞσϧͷ໊લͳͲσϑΥϧτͷLVSPNPKJ ࣙॻʹ͸ࡌͬͯͳ͍Α͏ͳ୯ޠ͕ଟ͍ w εϓϥτΡʔϯϩʔϦʔζϑΝʔϜ#&".4FUDʜ
w TZOPOZNʢಉҙޠʣࣙॻ w දه༳Ε΍ಉҙޠɺলུܗ΋)JU͢ΔΑ͏ʹ੔උ w όοάόοΫ w ϫϯϐˠϫϯϐʔε w ౻ాχίϧʹ͜ΔΜ

43 ࣙॻͷӡ༻ w جຊ͸టष͍खӡ༻ɺαϙʔτ΁ͷ໰͍߹Θͤ΍ɺྲྀߦޠɺ /PSFTVMUͷΫΤϦΛௐ΂݄ͯҰͰ·ͱΊͯࣙॻ௥Ճ w ࣙॻ΍ݕࡧΫΤϦͷϥϯΩϯάΛ֬ೝ͢ΔͨΊʹ؅ཧը໘Λ࡞੒

ݕࡧΫΤϦͷվળ 44

45 ΞφϩάλΠϓͷΫΤϦվળ w άον߳ਫ w ϙέϞϯ%4ιϑτ w ϫϯϐʔεϑΟΪϡΞ w ϛχΦϯζ%7%
w ϒϥϯυ΍ΧςΰϦͷϦετ͔Βબ୒Ͱ͖Δ͕ɺΩʔϫʔυͰ ݕࡧ͢ΔλΠϓͷΫΤϦ ΞφϩάλΠϓͳΫΤϦͱ͸ʁ

46 ΞφϩάλΠϓͷΫΤϦ՝୊ w ΧςΰϦ ϒϥϯυͷ྆࣠ͰߜΓࠐΊ͍ͯͳ͍঎඼͕)JU͢Δ w ঎඼ࣗମ͕ผΧςΰϦʢϒϥϯυʣͷઃఆʹͳ͍ͬͯΔ঎඼ ΋ݕࡧ݁Ռʹදࣔ͞ΕΔ w ঎඼આ໌ͷݕࡧཏྻϫʔυʹ)JUͯ͠͠·͍ͬͯΔ
w Ϣʔβʔ͸঎඼આ໌ʹɺݕࡧ݁ՌʹΑΓදࣔ͞Ε΍͘͢͢Δ ͨΊؔ܎ͷͳ͍ϫʔυ΋੝ΓࠐΜͰ͘Δ

47 ݕࡧΩʔϫʔυཏྻ໰୊ ຊ౰͸ϒϧΨϦͷ঎඼ lάον߳ਫzͰϒϧΨϦͷ ঎඼͕)JUͯ͠͠·͏ ଞͷϒϥϯυͰݕࡧͯ͠΋঎඼ ͕දࣔ͞ΕΔΑ͏ʹݕࡧϫʔυ Λ੝ΓࠐΈ·͘Δ

48 νϡʔχϯά w ΫΤϦʹରͯ͠είΞϦϯά w ঎඼໊΍ϒϥϯυɺΧςΰϦʹϒϥϯυʢΧςΰϦʣ໊͕ೖͬ ͍ͯΔ৔߹ͷ঎඼ͷείΞΛϒʔετ w ࣮ࡍ͸ϑΟʔϧυʹΑͬͯॏΈΛௐ੔ w
λΠτϧͷείΞΛॏࢹɺ঎඼આ໌͸ϒʔετ͠ͳ͍ w ؔ࿈౓ͷ௿͍঎඼Λ଍੾Γ w NJO@TDPSFΦϓγϣϯʹ஋Λࢦఆ w ࢦఆͷ஋ΑΓείΞ͕௿͍঎඼͸ݕࡧ݁Ռʹදࣔͤ͞ͳ͍

49 վળ݁Ռ "#ςετΛ࣮ࢪ ΞΫγϣϯ཰ʢӾཡճ਺ʸݕࡧճ਺ʣ͕ఔ౓վળ

·ͱΊ 50

51 ·ͱΊ w &MBTUJDTFBSDIͷৄࡉͱ׆༻ํ๏Λղઆͨ͠ w 3BJMTʢTFBSDILJDLʣΛ࢖ͬͯඇಉظͰJOEFYΛ࡞੒͠ ͍ͯ·͢ w ݕࡧͷਫ਼౓վળ͸஍ಓɺܭଌͱνϡʔχϯάΛ܁Γฦ͠ ͯɺਫ਼౓޲্Λߦͳ͍ͬͯ·͢
w ࢪࡦपΓʹ͍ͭͯ͸ɺ࣌ؒͷ౎߹Ͱ͓࿩Ͱ͖ͳ͔ͬͨ͜ ͱ΋ଟ͍ͷͰɺ࠙਌ձͰฉ͍͍ͯͩ͘͞

52 'BCMJDͰ͸ΤϯδχΞΛੵۃ࠾༻தʂ

フリマアプリ「フリル」を支える Elasticsearch を用いた全文検索入門

フリマアプリ「フリル」を支える Elasticsearch を用いた全文検索入門

More Decks by Yuta Horii

Other Decks in Programming

Featured

Transcript