Share
Embed
ECサイトにおける作品の特徴ラベル分類に 関する精度と付与率の向上に向けた取り組み/2022年度 情報処理学会 関西支部 支部大会
2022.09.18 情報処理学会 関西支部 支部大会
https://kansai.ipsj.or.jp/2022sibutaikai_kaisai/
tossy
September 18, 2022
Transcript
31 slides
-
ञҪහ(GMOϖύϘגࣜձࣾ ϖύϘݚڀॴ/भେֶ), ࡾ༔հ(GMOϖύϘגࣜձࣾ ϖύϘݚڀॴ) ൃදऀɿञҪහ / Pepabo R&D Institute, GMO
Pepabo, Inc. / Kyushu University 2022.09.18 ใॲཧֶձ ؔࢧ෦ࢧ෦େձ ECαΠτʹ͓͚Δ࡞ͷಛϥϕϧྨʹ ؔ͢Δਫ਼ͱ༩ͷ্ʹ͚ͨऔΓΈ -
1. എܠɺత 2. ՝ 3. ैདྷख๏ 4. ຊݚڀͷख๏ 5. ධՁ
6. ऴΘΓʹ 2 ࣍ -
ߪೖऀɺཉ͍͠࡞Λ୳ͨ͢Ίɺ࡞ͷಛʢಛϥϕϧʣʹΑΔ࡞ͷߜΓࠐΈΛߦ͏ 5 ࡞ͷಛΛ׆༻ͨ͠࡞ͷߜࠐΈ ࣫Ͱ࡞ΒΕͨɺख࡞Γ ͷ͓͕ཉ͍͠ͳ͊ʜ ࣫ث ࡞" ࡞# ࡞$ ࡞"
࡞% ࡞& ࡞' ࡞( ࡞) ʜ ߜΓࠐΈ݅ ݕࡧ݁ՌʢΠϝʔδʣ ʜ ʜ ʜ ಃث ࣓ث -
࣫Ͱ࡞ΒΕͨɺख࡞Γͷ͓ ͕ཉ͍͠ͳ͊ʜ 6 ࡞ՈʹΑΔಛϥϕϧͷ༩ ࡞Ո͕࡞ͷಛੑΛѲ͍ͯ͠Δͱߟ͑ɺ࡞Ոʹಛϥϕϧͷ༩ͷઃఆΛґཔ λΠτϧ આ໌จ ಛϥϕϧ ొࣄ߲ ը૾
ಛϥϕϧͷೖྗը໘ ˞ྫϐΞε ࡞ՈʹΑΔ࡞ใͷొ ݸͷ͏ͪ ࠷େݸΛબ -
7 ਓखͰͷ༩ʹΑΔ༩࿙Ε༩ޡΓ ͔͠͠ɺಛϥϕϧ࡞Ո͕ਓखͰ༩͢ΔΈ্ɺ༩࿙Εɾ༩ޡΓ͕ൃੜ͠ɺಛϥ ϕϧͷ৴པɺ༩͕͍ঢ়ଶʹͳΓ͏Δ ʮఱવੴʯ༻ͷࢫهࡌ͋Δ͕ɺಛϥϕϧ͕༩͞Ε͍ͯͳ͍ λΠτϧ ύʔϧɹϐΞεɹΠϠϦϯά આ໌จ ఱવੴΛ༻͓ͯ͠Γ·͢ɻʜ ࡞ͷಛ
ύʔϧ ༩࿙Εͷྫ ఱવੴ ༩ޡΓͷྫ ༩࿙Ε λΠτϧ ϐΞεɹ͔Θ͍͍ɹ݁ࠗࣜ આ໌จ ύʔϧΛ༻ɻʜ ࡞ͷಛ ύʔϧ Ψϥε ༩ޡΓ ޡͬͯʮΨϥεʯΛ༩ͯ͠͠·ͬͨ -
8 ػցతͳಛϥϕϧͷ༩ ͦ͜Ͱɺਖ਼͔֬ͭ࿙Εແ͘ಛϥϕϧΛࣗಈͰ༩͢ΔͨΊɺྨثΛߏங͢Δɻͦͷࡍɺ ࡞ใΛ༻͍ͨػցֶशʹΑΔΞϓϩʔνΛऔΔ λΠτϧ આ໌จ ಛϥϕϧ ը૾ ϥϕϧ
ಛϥϕϧ ಛྔ ֶश λΠτϧ આ໌จ ը૾ ਪ ྨث ಛྔ ϥϕϧ ྨثʹΑΔਪ ຊݚڀͰɺ࡞ͷಛϥϕϧྨʹؔ͢Δਫ਼ͱ༩ͷ্Λࢦ͢ ࡞ ࡞ -
11 ࡞ͷςΩετɺը૾୯ମͰɺಛϥϕϧΛࣝผ͢ΔͨΊͷใ͕ෆ ࡞ՈɺಛϥϕϧྨΛߟྀͨ͠࡞ใΛ࡞͢Δ༁Ͱͳ͍ɻͦͷͨΊɺಛ ϥϕϧΛࣝผ͢ΔͨΊͷใͱͯ͠࡞ใʹෆ͕ى͖͏Δɻ ςΩετ୯ମͰࣝผͰ͖ͳ͍ྫ λΠτϧ େͿΓɹύʔϧɹϐΞεɹΠϠϦϯά આ໌จ थࢷΛ༻ͨ͠ϐΞεͰ͢ɻʜ ಛϥϕϧ
ΰʔϧυྨɺʜ ςΩετ͚ͩͰʮΰʔϧυྨʯΛࣝผͰ͖Δใ͕ෆ ˞ը૾୯ମͰಉ༷ͷ͕ى͖͏Δ -
12 ಛϥϕϧͷ৴པٴͼ༩͕͍ݒ೦͕͋Δ ಛϥϕϧͷ৴པٴͼ༩͕͍ݒ೦͕͋Δঢ়ଶͰྨثΛֶशͨ͠ࡍɺͦͷ ྨਫ਼͍͜ͱ͕ఆ͞ΕΔ ྨثʹΑΔࣝผ ಛϥϕϧ ৴པٴͼ༩͕͍ ΰʔϧυྨ γϧόʔྨ ࡞
ֶश ྨث ਪ ޡͬͨࣝผ ਖ਼͍ࣝ͠ผ ྨثͷྨਫ਼͕͍ Մೳੑ͕͋Δ -
14 ECαΠτʹ͓͚Δྨ ECαΠτͷྨͰɺςΩετ[Cevahir 2016] ը૾[Peng+ 2021] Λಛྔͱͯ͠༻͍Δ ͔͠͠ɺͲͷಛྔ͕ྨʹޮՌత͔ɺྨͷઃఆɺͷଐੑใͷ ࣭ʹґଘ ͞ΒʹɺCtoCͷECαΠτͰɺ࡞Ո͕࡞ͷଐੑใΛઃఆ͢ΔͨΊɺϥϕϧࣝ
ผͷͨΊͷใෆʢ՝ᶃʣ͕ڍ͛ΒΕΔ → ֤ಛྔͷগͳ͍ख͕͔ΓΛ౷߹ͨ͠ྨਫ਼ͷ্͕ඞཁ w $FWBIJS -BSHFTDBMF.VMUJDMBTTBOE)JFSBSDIJDBM1SPEVDU$BUFHPSJ[BUJPOGPSBO&DPNNFSDF(JBOU $0-*/( w 1FOH .VMUJNPEBM1SPEVDU*EFOUJ fi DBUJPO4VCNJTTJPOUP8BUDIBOE#VZ$IBMMFOHF 8.1* -
ςΩετͱը૾ͷಛྔͷ౷߹ํࣜͱͯ͠Early FusionͱLate Fusion͕͋Δ 15 ֤ಛྔͷख͕͔ΓΛ౷߹͢Δख๏ ςΩετ ಛྔ ը૾
ಛྔ ςΩετ ը૾ ಛྔ ྨث &BSMZ'VTJPO ༧ଌ݁Ռ ςΩετ ಛྔ ը૾ ಛྔ ྨث -BUF'VTJPO ༧ଌ݁Ռ ྨث ϙϦγʔ ྫʣଟܾ<'FOH > ςΩετ ಛྔ ը૾ ಛྔ ྨث ༧ଌ݁Ռ ྨث ༧ଌ֬ ༧ଌ֬ .-1<3PTT+> w 'FOH "MQIBBU4FN&WBM5BTL5SBOTGPSNFS#BTFE1SPQBHBOEB$MBTTJ fi DBUJPO 4FN&WBM w 3PTT 6OTVQFSWJTFENVMUJNPEBMSFQSFTFOUBUJPOMFBSOJOHGPSB ff FDUJWFDPNQVUJOHXJUINVMUJDPSQVTXFBSBCMFEBUB "*)$ -
19 ख๏ᶃɿ࡞ͷςΩετɾը૾ͷࣝผ݁Ռͷू߹ΛٻΊΔ ςΩετɾը૾ͷ૬ޓิతͳੑ࣭Λ౿·͑ɺ֤ࣝผ݁Ռͷू߹ΛٻΊΔख๏Λ ࢼߦ͢Δ ରԠ͢Δ՝ ՝ᶃɹ࡞ͷςΩετɺը૾୯ମͰɺಛϥϕϧΛࣝผ͢ΔͨΊͷใ͕ෆ ςΩετ ಛྔ ը૾
ಛྔ ྨث ༧ଌ݁Ռ ྨث ࣝผ݁Ռͷू߹Λ ٻΊΔ ςΩετ୯ମɺը૾୯ମͰࣝผͰ͖ͳ͍ࣄྫͰ ू߹ΛٻΊΔ͜ͱͰࣝผՄೳͱͳΔ -
ΩʔϫʔυϚονʹΑΓɺಛϥϕϧͷ༩࿙ΕɾࣝผޡΓΛ͙ 20 ख๏ᶄ ಛϥϕϧͷ୯ޠʹΑΔΩʔϫʔυϚον ରԠ͢Δ՝ ՝ᶄɹಛϥϕϧͷ৴པٴͼ༩͕͍ݒ೦͕͋Δ λΠτϧ ύʔϧɹϐΞεɹΠϠϦϯά આ໌จ ఱવੴΛ༻͓ͯ͠Γ·͢ɻʜ
࡞ͷಛ ύʔϧ ༩࿙Εͷྫ ࣝผޡΓͷྫ ༩࿙ΕΛ͙ ࣝผޡΓΛ͙ ఱવੴ ʮఱવੴʯ༻ͷࢫهࡌ͋Δ͕ɺ ಛϥϕϧ͕༩͞Ε͍ͯͳ͍ ֶश ྨثʹΑΔ ࣝผ ಛ ϥϕϧ ৴པٴͼ༩͕͍ ΰʔϧυྨ ఱવੴ ΰʔϧυྨ ΩʔϫʔυϚον ΩʔϫʔυϚον ྨث ࡞" -
• ֤ྨثʹ͓͚Δɺಛϥϕϧͷࣝผ݁ՌΛF1-score(micro)ͰධՁ • minneͷ࡞λΠτϧɾઆ໌จɾը૾Λநग़ ϐΞεɿ10,000݅ɺोɾϘϧɾുɿ2,000݅ • ςΩετɿਖ਼نԽɺURLɾه߸ͷআɺMeCabٴͼNEologdΛ༻ɻ໊ࢺΛநग़ • ը૾ɿ224×224ʹϦαΠζɻ֤ϐΫηϧͷਖ਼نԽɹ
22 σʔληοτͱલॲཧ ΧςΰϦ ߲ ಛϥϕϧ ༩্ݶ ྫ ΞΫηαϦʔɾδϡΤϦʔʼϐΞε ૉࡐ ΰʔϧυྨɺνλϯɺϨδϯɾथࢷɹ ৯ثɾΩονϯʼोɾϘϧɾു ૉࡐ ಃثɺ࣓ثɺ࣫ثɺɺΨϥε ৯ثɾΩονϯʼोɾϘϧɾു ख๏ɾٕ๏ ಃܳɺΨϥεܳɺɹ -
• ςΩετΛಛྔͱ͢Δख๏ • ը૾Λಛྔͱ͢Δख๏ • ResNet50[He+ 2016](Ҏ߱ɺImageͱهࡌ)ɹ※ImageNetͷॏΈΛ༻ • ग़ྗʹಛϥϕϧʹԠͨ͡
શ݁߹ΛՃ 23 ಛྔͱྨث ໊শ LFZXPSE 5'*%' 5'*%'LFZXPSE ख๏ ΩʔϫʔυϚον λΠτϧɾઆ໌จΛ 5'*%'ͰϕΫτϧԽ LFZXPSEͱ5'*%'ͷࣝผ݁Ռͷ ू߹ ྨث .-1 ໊শ LFZXPSE 5'*%' *NBHF 5'*%'LFZXPSE LFZXPSE*NBHF 5'*%'*NBHF 5'*%'LFZXPSE*NBHF ܭछྨͷख๏ͰൺֱΛߦ͏ w )F %FFQ3FTJEVBM-FBSOJOHGPS*NBHF3FDPHOJUJPO $713 -
ը૾ΑΓςΩετͷख๏͕ࣝผੑೳ͕ߴ͘ɺΩʔϫʔυϚον༗ޮͰ͋ͬͨ 24 શମͷ݁Ռ ΧςΰϦ ৯ثɾΩονϯʼोɾϘϧɾു ΞΫηαϦʔɾδϡΤϦʔʼϐΞε ߲ ૉࡐ ख๏ɾٕ๏
ૉࡐ ಛϥϕϧ ςΩετ 5'*%' 5'*%' 5'*%'LFZXPSE ը૾ w ը૾ࣝผੑೳ͕͍ͱߟ͑ΒΕΔཁҼ w ؔ࿈ݚڀ<$IFO > <;BIBWZ >ͱൺֱ͠ɺ༻͍ͨը૾͕গͳ͍ w *NBHF/FUͰֶश͞ΕͨΫϥεͱࠓճࣝผ͢ΔΫϥεͷཻ͕ҟͳΔ w ಛϥϕϧ͕૿͑Δͱੑೳ͕Լ͕Δ w $IFO .VMUJNPEBM*UFN$BUFHPSJ[BUJPO'VMMZ#BTFEPO5SBOTGPSNFS &$/-1 w ;BIBWZ *TB1JDUVSF8PSUIB5IPVTBOE8PSET "%FFQ.VMUJ.PEBM"SDIJUFDUVSFGPS1SPEVDU$MBTTJ fi DBUJPOJO&$PNNFSDF """* -
25 ख๏ᶃͷ݁Ռ ରԠ͢Δख๏ ख๏ᶃɹ࡞ͷςΩετɾը૾ͷࣝผ݁Ռͷू߹ΛٻΊΔ 1SFDJTJPO 3FDBMM 'TDPSF ಛϥϕϧ 5'*%' 5'*%'*NBHF
5'*%' 5'*%'*NBHF 5'*%' 5'*%'*NBHF ಃܳ ʮोɾϘϧɾുʯͷʮख๏ɾٕ๏ʯ߲ʹ͓͚Δ݁Ռ TF-IDF-Image(ख๏ᶃ)ը૾ࣝผͷޡఆͷӨڹΛ͏͚ͯɺશମੑೳྼԽ 5'*%' 5'*%'*NBHF ਖ਼ྫ ಃܳ ಃܳ ҰํͰɺू߹ʹΑΓɺςΩετͰࣝผͰ͖ͳ͔͕ͬͨɺը૾Ͱਖ਼ࣝ͘͠ผͰ͖ͨྫ͋ͬͨ ը૾ࣝผͰͷޡఆ ࠶ݱͷ্ ద߹ͷԼͷͨΊ -
ΩʔϫʔυϚονʹΑΓಛϥϕϧͷ༩࿙ΕΛ͍ͩ 26 ख๏ᶄͷ݁Ռ ରԠ͢Δख๏ ख๏ᶄɹಛϥϕϧͷ୯ޠʹΑΔΩʔϫʔυϚον 5'*%' 5'*%'LFZXPSE ਖ਼ྫ छྨ
Ϩδϯɾथࢷ ༩࿙Ε ϐΞεͷʮૉࡐʯ߲ʹ͓͚Δ݁Ռ ࢹͰ֬ೝ͠ɺΰʔϧυྨͱγϧόʔྨͷಛΛද͢͜ͱΛ֬ೝ ˠ༩࿙ΕΛ͙͜ͱ͕Ͱ͖ͨ γϧόʔྨ ΰʔϧυྨ ΰʔϧυྨ γϧόʔྨ ༩࿙Ε -
ΩʔϫʔυϚονʹΑΓಛϥϕϧͷࣝผޡΓΛ͍ͩ 27 ख๏ᶄͷ݁Ռ ରԠ͢Δख๏ ख๏ᶄɹಛϥϕϧͷ୯ޠʹΑΔΩʔϫʔυϚον 5'*%' 5'*%'LFZXPSE ਖ਼ྫ छྨ Ϩδϯɾथࢷ
Ϗʔζ Ϩδϯɾथࢷ Ϗʔζ Ϩδϯɾथࢷ Ϗʔζ Ψϥε ࣝผޡΓ ϐΞεͷʮૉࡐʯ߲ʹ͓͚Δ݁Ռ ࣝผޡΓΛ͙͜ͱ͕Ͱ͖ͨ Ψϥε Ψϥε ࣝผޡΓ -
࡞ͷಛϥϕϧྨʹؔ͢Δਫ਼ͱ༩ͷ্ʹ͚ɺҎԼʹऔΓΜͩ 29 ຊݚڀͷ·ͱΊ ՝ ख๏ ධՁ ᶃ ࡞ͷςΩετɺը૾୯ମͰɺಛ ϥϕϧΛࣝผ͢ΔͨΊͷใ͕ෆ
࡞ͷςΩετɾը૾ͷࣝผ݁Ռͷ ू߹ΛٻΊΔ ɾը૾ࣝผʹΑΔޡఆʹΑΓશମ ੑೳྼԽ ɾςΩετ͚ͩͰࣝผͰ͖ͳ͔ͬ ͕ͨɺը૾Ͱਖ਼ࣝ͘͠ผͰ͖Δࣄྫ Λ֬ೝ ᶄ ಛϥϕϧͷ৴པٴͼ༩͕ ͍ݒ೦͕͋Δ ಛϥϕϧͷ୯ޠʹΑΔΩʔϫʔυ Ϛον ΩʔϫʔυϚονʹΑΓಛϥϕϧ ͷ༩࿙ΕɾࣝผޡΓΛ͍ͩ