Vespaを利用したテクいベクトル検索

Search Engineering Tech Talk 2024 Summer
https://search-tech.connpass.com/event/331560/

Transcript

1. ˜
   -:
   $PSQPSBUJPO -*/&Ϡϑʔגࣜձࣾ σʔλάϧʔϓ %4౷ׅຊ෦ ླ໦ ᠳޗ 7FTQBΛར༻ͨ͠ςΫ͍ϕΫτϧݕࡧ  4FBSDI
   &OHJOFFSJOH
   5FDI
   5BML
   
   4VNNFS
2. ˜
   -:
   $PSQPSBUJPO  ླ໦ ᠳޗ !T[@ES σʔλαΠΤϯεΛ׆༻ͨ͠ݕࡧվળʹ औΓ૊ΜͰ͍·͢ɻ p :BIPPγϣοϐϯά p :BIPP஌ܙା p :BIPPΦʔΫγϣϯ p :BIPPϑϦϚ
3. ˜
   -:
   $PSQPSBUJPO  ࠓ೔͓࿩͢͠Δ͜ͱ େن໛ݴޠϞσϧɺը૾ݴޠϞσϧɺʜͷൃలʹ൐͍ɺʮϕΫτϧݕࡧʯ͸೤͍🔥τϐοΫ l ࣭໰Ԡ౴γεςϜɿϢʔβʔͷ࣭໰จͱؔ࿈ੑͷߴ͍ճ౴จΛݕࡧ l 3"(ʹ͓͚Δ3FUSJFWBM෦෼Ͱͷ׆༻ l ϚϧνϞʔμϧͳ঎඼ݕࡧγεςϜɿΩʔϫʔυͱؔ࿈ੑͷߴ͍঎඼ը૾Λݕࡧ ϕΫτϧݕࡧͷύϫʔΛ͞ΒʹҾ͖ग़ͨ͢Ίʹɺ l ͲΜͳ՝୊ɾղܾࡦ͕͋Δͷ͔ʁ l ݕࡧΤϯδϯ7FTQBͰ͸ͲͷΑ͏ʹ࣮૷Ͱ͖Δͷ͔ʁ Λʢ-5࿮ͳͷͰߴ଎ʹʣ͓࿩͍͖ͯ͠͠·͢ʂ ˞
   7FTQBɿΦʔϓϯιʔεͷCJH
   EBUB
   TFSWJOH
   FOHJOFɻੑೳ͕ߴ͘ɺػೳ΋๛෋ͳݕࡧΤϯδϯɻ l4FBSDI
   &OHJOFFSJOH
   5FDI
   5BML
   
   8JOUFSzͷୋऔ͞Μͷ͝ൃද͕ඇৗʹࢀߟʹͳΓ·͢ɻ IUUQTTFBSDIUFDIDPOOQBTTDPNFWFOU
4. ˜
   -:
   $PSQPSBUJPO  ࠓ೔͓࿩͢͠Δ͜ͱ pจࣈྻҰகݕࡧͱϕΫτϧݕࡧͷ૊Έ߹Θͤ pείΞ͕௿͍ίϯςϯπΛݕࡧ݁Ռ͔Βআ֎ pͭͷίϯςϯπʹର͠ෳ਺ͷϕΫτϧ͕ඥͮ͘έʔε pϕΫτϧͷ֨ೲ༰ྔΛઅ໿
5. ˜
   -:
   $PSQPSBUJPO  จࣈྻҰகݕࡧͱϕΫτϧݕࡧͷ૊Έ߹Θͤ ϕΫτϧݕࡧ͕೤͍🔥ͱ͸͍͑ɺґવͱͯ͠ैདྷͷจࣈྻҰகݕࡧ͸ॏཁ ೖྗΩʔϫʔυ จࣈྻҰகݕࡧ݁Ռ ϕΫτϧݕࡧ݁Ռ ࿨ू߹ ݕࡧ݁Ռ 7FTQBͰ࣮૷͢ΔͳΒʜ IUUQTCMPHWFTQBBJSFEFpOJOHIZCSJETFBSDIQPTTJCJMJUJFTXJUIWFTQB ͞Βʹɺ"/%Ͱ݁߹ͨ͠Γɺෳ਺ͷϕΫτϧݕࡧ݁ՌΛ݁߹ͨ͠Γɺ݁߹݁ՌͷϦϥϯΫ΋Մೳʂ IUUQTEPDTWFTQBBJFOOFBSFTUOFJHICPSTFBSDIHVJEFIUNMNVMUJQMFOFBSFTUOFJHICPSTFBSDIPQFSBUPSTJOUIFTBNFRVFSZ จࣈྻҰகݕࡧͱϕΫτϧݕࡧͷݕࡧ݁ՌΛ૊Έ߹Θͤͯɺ݁ՌΛฦ͍ͨ͠ʂ WFTQB
   RVFSZ bZRMTFMFDU
   
   GSPN
   
   XIFSF
   \UBSHFU)JUT
   
   BQQSPYJNBUF
   USVF^OFBSFTU/FJHICPS  PS
   VTFS2VFSZ ` lRVFSZจࣈྻҰகݕࡧΩʔϫʔυz lJOQVURVFSZ ΩʔϫʔυϕΫτϧ໊ <ϕΫτϧ> ϕΫτϧݕࡧΫΤϦ 03Ͱ݁߹ RVFSZ
6. ˜
   -:
   $PSQPSBUJPO  είΞ͕௿͍ίϯςϯπΛݕࡧ݁Ռ͔Βআ֎ ϕΫτϧݕࡧͰ͸ɺΑ͘ྨࣅ౓্Ґ݅Λऔಘͯ͠ܝग़ʙͱ͢Δ͕ɺ ద߹ίϯςϯπ͕ຊ࣭తʹগͳ͍৔߹ɺϊΠζͩΒ͚ͷϕΫτϧݕࡧ݁Ռʹͳͬͯ͠·͏ɻɻ ྫɿϑΝογϣϯ&$αΠτͰͷݕࡧʮϛοΩʔ͕ඳ͔Εͨࠇ஍Ͱγϯϓϧͳ5γϟπʯ ˠ ΫΤϦҙਤʹԊͬͨ঎඼͸͍͍ͤͥ਺͔݅͠ͳ͍ɻɻ ҙਤͱେ͖͘ҟͳΔ঎඼͸ݕࡧ݁Ռʹग़ͨ͘͠ͳ͍ʂ ྨࣅ౓είΞͷ௿͍ίϯςϯπ͸ݕࡧ݁Ռ͔Βআ֎͍ͨ͠ʂ 7FTQBͰ࣮૷͢ΔͳΒʜ ϥϯΩϯάఆٛ FYQSFTTJPOʢϥϯΫείΞʣͷ஋͕ΛԼճͬͨ৔߹ɺ ݕࡧ݁Ռ͔Βআ֎͢Δ SBOLQSPGJMF
   SBOLJOH@XJUI@TDPSF@ESPQ
   \ GJSTUQIBTF
   \ SBOLTDPSFESPQMJNJU
    FYQSFTTJPO
   \ JG
   ྨࣅ౓είΞ 
   <ᮢ஋>
   
   ྨࣅ౓είΞ ^ ^ ^
   ᮢ஋ະຬͷ৔߹ɺϥϯΫείΞͱ͢Δɻ ᮢ஋Ҏ্ͷ৔߹ɺϥϯΫείΞྨࣅ౓ͱ͢Δɻ ྨࣅ౓είΞ͕ ϥϯΫείΞͷͱ͖ɺSBOLTDPSFESPQMJNJU
   ʹҾ͔͔ͬͬͯɺ ݕࡧ݁Ռ͔Βআ֎͞ΕΔ👋 ✅ ✅ ❌ ❌ ❌ ❌ ❌ ❌ ❌ ❌ ❌ ❌ ϊΠζͩΒ͚😇 IUUQTYDPNKPCFSHVNTUBUVT IUUQTEPDTWFTQBBJFOGBRIUNMIPXUPTFUBEZOBNJDRVFSZUJNFSBOLJOHESPQUISFTIPME
7. ˜
   -:
   $PSQPSBUJPO  ͭͷίϯςϯπʹର͠ෳ਺ͷϕΫτϧ͕ඥͮ͘έʔε ྫɿ8JLJQFEJBͷهࣄݕࡧ ϕΫτϧݕࡧਫ਼౓ΛߴΊΔͨΊʹɺͭͷʮจষʯʹର͠ʮஈམʯ͝ͱʹϕΫτϧԽ͢Δ Ҿ͖౰͍ͯͨͷ͸ʮจষʯ୯Ґ͕ͩɺ؅ཧ͢Δͷ͸ʮஈམʯ୯Ґ l ߋ৽ϑϩʔ͕൥ࡶɿʮจॻʯͷ௥Ճ΍ʮஈམʯͷมߋɾ࡟আ l ݕࡧޙॲཧ͕൥ࡶɿʮஈམʯͰҾ͖౰ͯͯɺʮจॻʯ୯ҐͰϚʔδͯ͠ɺʜ ָʹϕΫτϧݕࡧΛ࣮ݱ͍ͨ͠ʂ λΠτϧ ஈམ ஈམ <
   
   > <
   
   > ϕΫτϧݕࡧ Τϯδϯ υΩϡϝϯτ@ஈམ υΩϡϝϯτ@ஈམ υΩϡϝϯτ@ஈམ υΩϡϝϯτ@ஈམ  7FTQBͰ࣮૷͢ΔͳΒʜ ϑΟʔϧυఆٛ GJFME
   QBSBHSBQI@FNCFEEJOHT
   UZQF
   UFOTPSGMPBU Q\^
   FNC<>
   \ ϕΫτϧݕࡧ༻ઃఆ  ^ จॻ͝ͱʹஈམ਺͸ՄมͰ͋Δ͜ͱʹ஫ҙɻ ࣍ݩ໨͸NBQQFE
   EJNFOTJPOͰѻ͍ɺ ࣍ݩ໨͸ݻఆαΠζͷϕΫτϧͰѻ͏ɻ NFUBEBUBͱͯ͠ ֤ϊʔυ͝ͱʹ υΩϡϝϯτ*%Λ͍࣋ͬͯΔ ෳ਺ϕΫτϧ͕ඥͮ͘έʔεͷ )/48಺෦ߏ଄ IUUQTCMPHWFTQBBJTFNBOUJDTFBSDIXJUINVMUJWFDUPSJOEFYJOH
8. ˜
   -:
   $PSQPSBUJPO  ϕΫτϧͷ֨ೲ༰ྔΛઅ໿ ྫɿ ࣍ݩͷϕΫτϧΛѻ͏৔߹ ֤࣍ݩΛGMPBU
   CZUFT Ͱද͢ͱɺίϯςϯπ͋ͨΓ
   
    
   
   
   CZUFTඞཁ #JOBSJ[BUJPOʹΑͬͯ֨ೲ༰ྔΛઅ໿Ͱ͖Δ͕ɺڑ཭ܭࢉʹίαΠϯྨࣅ౓಺ੵϢʔΫϦουڑ཭͸ෆద ༰ྔઅ໿ͷςΫχοΫͷҰͭɿ#JOBSJ[BUJPO <
   
   
   
   
   
   
   > <
   
   
   
   
   
   
   > ͳΒ
   ͳΒͰɺม׵ ࣍ݩ͝ͱʹJOU
   CZUF
   Ͱද͢ͱ  ʸ࣍ݩʹѹॖ ˠ CZUFTʂ ϋϛϯάڑ཭ͰϕΫτϧݕࡧ͍ͨ͠ʂ 7FTQBͰ࣮૷͢ΔͳΒʜ ϑΟʔϧυఆٛ GJFME
   FNCFEEJOHT
   UZQF
   UFOTPSJOU FNC<>
   \ BUUSJCVUF
   \ EJTUBODFNFUSJD
   IBNNJOH ^ 
   ^ 7FTQBͰ͸ϕΫτϧݕࡧͷڑ཭ܭࢉʹ FVDMJEFBOBOHVMBSEPUQSPEVDUIBNNJOH ͱɺ͞·͟·ͳࣜΛར༻Մೳʂ IUUQTEPDTWFTQBBJFOSFGFSFODFTDIFNBSFGFSFODFIUNMEJTUBODFNFUSJD IUUQTCMPHWFTQBBJCJMMJPOTDBMFLOO
9. ˜
   -:
   $PSQPSBUJPO  ࠓ೔͓࿩ͨ͜͠͠ͱ pจࣈྻҰகݕࡧͱϕΫτϧݕࡧͷ૊Έ߹Θͤ pείΞ͕௿͍ίϯςϯπΛݕࡧ݁Ռ͔Βআ֎ pͭͷίϯςϯπʹର͠ෳ਺ͷϕΫτϧ͕ඥͮ͘έʔε pϕΫτϧͷ֨ೲ༰ྔΛઅ໿ ʢ7FTQBಛ༗ͷ࣮૷͸͓͖ͯ͞ʣ ϕΫτϧݕࡧͷར༻Λ࣮ࡍʹݕ౼͢Δͱɺݟ͑ͯͳ͔ͬͨ՝୊͕ු͔ͼ্͕ͬͯ͘Δ ՝୊ʹର͠Ͳ͏Ξϓϩʔν͞Ε͍ͯΔͷ͔ɺௐ΂ͯΈΔͱ໘ന͍ ࠙ஊձͰɺʮͦͷ՝୊͋Δ͋Δʂʯʮ͜ͷ՝୊͸Ͳ͏ͳͷʁʯͳͲɺ͓࿩Ͱ͖Ε͹ͱࢥ͍·͢ʂ🙇