Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
HMCC2019 Emoji SANPO
Search
Takuya Mukohira
February 22, 2019
Programming
0
3.1k
HMCC2019 Emoji SANPO
Takuya Mukohira
February 22, 2019
Tweet
Share
More Decks by Takuya Mukohira
See All by Takuya Mukohira
Podcasting Guide 2024
mktakuya
3
870
『インタプリタの作り方』の紹介 / Let's enjoy crafting interpreters
mktakuya
1
780
マネジメントとコミュニケーションとプロトコルと / kichijojipm-34
mktakuya
1
800
自分の道具を自作してつくる喜びを体感しよう、Railsで。 〜4年続いたPodcastを実例に〜 / Kaigi on Rails 2023
mktakuya
1
1.5k
Podcast配信システムを自作したら捗った話 / kichijojipm-28
mktakuya
0
2.5k
趣味と趣味の掛け算で技術を学んでいく話 / 2020-11-27
mktakuya
0
330
ゆるふわなPodcastのすすめ / kichijojipm-22
mktakuya
0
1.2k
コーチLT / Rails Girls Tokyo 12th
mktakuya
1
1k
プログラミングと一人暮らし 〜Nature Remoで遊ぶ編〜 / prolt-2019
mktakuya
1
300
Other Decks in Programming
See All in Programming
GCCのプラグインを作る / I Made a GCC Plugin
shouth
1
140
Tuning GraphQL on Rails
pyama86
2
670
Amazon Neptuneで始めてみるグラフDB-OpenSearchによるグラフの全文検索-
satoshi256kbyte
4
290
レイトレ合宿10 レンダラー紹介 / Renderer Introduction, Ray Tracing Camp 10
shocker_0x15
0
670
テスト駆動開発✅️
akitoshiga
1
200
watsonx.ai Dojo #3 プロンプトエンジニアリング入門
oniak3ibm
PRO
0
480
ピクシブ百科事典のWebフロントエンドパフォーマンス改善
higara
0
170
Re:proS_案内資料
rect
0
250
弊社の「意識チョット低いアーキテクチャ」10選
texmeijin
0
1.2k
OpenTelemetryでRailsのパフォーマンス分析を始めてみよう(KoR2024)
ymtdzzz
3
780
CPython 인터프리터 구조 파헤치기 - PyCon Korea 24
kennethanceyer
0
200
組織に自動テストを書く文化を根付かせる戦略(2024秋版) / Building Automated Test Culture 2024 Autumn Edition
twada
PRO
9
4.2k
Featured
See All Featured
Why You Should Never Use an ORM
jnunemaker
PRO
53
9k
Making Projects Easy
brettharned
115
5.9k
Scaling GitHub
holman
458
140k
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
eileencodes
32
1.7k
Exploring the Power of Turbo Streams & Action Cable | RailsConf2023
kevinliebholz
27
4.1k
The World Runs on Bad Software
bkeepers
PRO
65
11k
The Language of Interfaces
destraynor
154
24k
Docker and Python
trallard
40
3k
Designing for humans not robots
tammielis
249
25k
A Modern Web Designer's Workflow
chriscoyier
692
190k
Product Roadmaps are Hard
iamctodd
PRO
48
10k
The Art of Delivering Value - GDevCon NA Keynote
reverentgeek
5
140
Transcript
Emoji SANPO 直感で絵文字を選ぶと お出かけ先を提案してくれるアプリケーション 苫小牧高専 ソフトウェアテクノロジー部 向平 卓矢 水野 琴未
2019/02/22 北海道学生アプリコンテスト2019
検索
検索 • キーワードなどを条件に設定し、 それに合ったデータを探し出すこと。 ※出典: ASCIIデジタル用語辞典
テキスト検索
音声検索
画像検索
いろいろな検索 • テキスト検索 ・ユーザが入力したキーワードで検索 • 音声検索 ・ユーザの音声を認識して、キーワードで検索 • 画像検索 ・ユーザの画像を認識して似た画像を検索
いろいろな検索 • テキスト検索 ・ユーザが入力したキーワードで検索 • 音声検索 ・ユーザの音声を認識して、キーワードで検索 • 画像検索 ・ユーザの画像を認識して似た画像を検索
絵文字検索
絵文字検索 • 私たちが提案する、新しい検索方法 • ユーザが今の気分を絵文字で表現し、 その絵文字をもとに検索できる • 既存のものとは一味違った 検索UIを提供する
世界共通語 Emoji • 日本のケータイ絵文字から始まり、 世界共通語「Emoji」へ • 言葉では表しにくい感情の表現や、 単体で意味を持つ文字として便利
世界共通語 Emoji • 日本のケータイ絵文字から始まり、 世界共通語「Emoji」へ • 言葉では表しにくい感情の表現や、 単体で意味を持つ文字として便利 「絵文字で何かおもしろいことをしたい!」 という思いから絵文字検索が生まれました
絵文字検索 絵文字検索 ユーザの感情 気分に合った コンテンツ 絵文字で入力 提供
絵文字検索 絵文字検索 ユーザの感情 気分に合った コンテンツ 絵文字で入力 提供 言葉の壁を超えた直感での検索が可能に
絵文字検索の仕組み • コンテンツの感情を分析、絵文字でタグ付け • 感情分析システムにはDeepMojiと Google Cloudを使用しRubyでAPI化 入力 絵文字登録 コンテンツ
感情分析システム 絵文字検索エンジン
感情で検索 キーワードで検索
Emoji SANPO
Emoji SANPO 【コンセプト】 直感で絵文字を選ぶと お出かけ先を提案してく れるアプリケーション
絵文字検索 • TOP画面には絵文字の 一覧が表示 • 絵文字を選択し場所を 検索
絵文字を地図に表示 • 検索した絵文字に関連し た場所を地図上に絵文字 で表示 • 場所の詳細画面では、そ の場所に関連した他の絵 文字も見ることができる
地図アプリと連携 • 「この場所に行く」 のボタンから地図アプ リに飛べる
絵文字レビュー • 訪れた場所に絵文字で レビューをつける • 絵文字レビューで集め たデータで検索の精度 が高まる 絵文字レビューする
絵文字コレクション • レビューをした絵文字 はコレクション機能で 確認できる • ユーザの継続利用のた めにゲーム性を付加
Demo
絵文字タグ付けの仕組み DeepMojiを利用して、レビュー文から絵文字を出力、場所と紐付け Google Translation APIを利用し、レビューを英訳 Google Maps Platformを利用し、場所情報を取得 Google Places
APIを利用して、場所に紐づくレビューを取得 ユーザからの絵文字レビューを利用し、データを強化する
絵文字検索で 場所を探す!
絵文字検索で 場所を探す! 実際に場所に 行く!
絵文字検索で 場所を探す! 実際に場所に 行く! 絵文字レビュー で検索精度向上!
絵文字検索で 場所を探す! 実際に場所に 行く! 絵文字レビュー で検索精度向上!
利用した技術 • サーバサイド ・Ruby 2.5 / Ruby on Rails 5.2.1
• クライアントサイド ・Swift 4.1 / UIKit • その他使用したAPIやライブラリ ・Google Maps Platform ・DeepMoji
絵文字検索の未来 • Emoji SANPOでは、場所の絵文字検索を 可能にした • テキストや音声、動画に関する感情分析の 研究も盛んに行われている • 将来的には、テキストや画像に次ぐ
第三の検索として利用されていく
絵文字検索の未来
絵文字検索の未来 様々なコンテンツに対応可能!
Emoji SANPO 直感で絵文字を選ぶと お出かけ先を提案してくれるアプリケーション 苫小牧高専 ソフトウェアテクノロジー部 向平 卓矢 水野 琴未
END◦