○○ぽい文章を自動生成しよう

2021/11/23 第6回LT会
発表資料

Transcript

1. ◦◦ぽい文章を 自動生成しよう 2021/11/23 o-xian
2. 目次 • 自己紹介 • 文章生成の手法 • マルコフ連鎖とは • どうやって文章生成を？ • 形態素解析エンジン • 実行結果(各種) • 現状・今後の展望 2021/11/23 ◦◦ぽい文章を自動生成しよう 2
3. 自己紹介 • o-xian(🕊@oshanqq) • 九州工業大学工学部 宇宙システム工学科3年 • 絶賛就活中 2021/11/23 ◦◦ぽい文章を自動生成しよう 3
4. 今日のテーマ • ◦◦ぽい文章を自動生成する • ◦◦さんのメッセージっぽい文章 • 村上春樹っぽい文章 • ボージョレ・ヌーヴォーっぽい文章 • おじさん構文 etc... 2021/11/23 ◦◦ぽい文章を自動生成しよう 4
5. 文章生成の手法 • さまざまな手法が存在する • マルコフ連鎖 • RNN・LSTM • GPT-2 今回はマルコフ連鎖で文章を生成しよう！ 2021/11/23 ◦◦ぽい文章を自動生成しよう 5
6. マルコフ連鎖とは • 現在の状態だけで次の状態が 決定するマルコフ過程のひとつ • 状態が離散的であるとき、 マルコフ連鎖という • Twitterのしゅうまい君 (@shuumai)とかに使われている 2021/11/23 ◦◦ぽい文章を自動生成しよう 6
7. どうやって文章生成を？ • 文を読み込んで形態素に分割して、 形態素をノードとするマルコフモデルを作成する • 形態素：言語の最小単位 2021/11/23 ◦◦ぽい文章を自動生成しよう 7
8. どうやって文章生成を？ • 2つの文を読み込んで、マルコフモデルを作る • 「私はトマトが好きです」 • 「私は休みが欲しい」 • 矢印のそばにある数字は、遷移確立 2021/11/23 ◦◦ぽい文章を自動生成しよう 8
9. どうやって文章生成を？ • ランダムにノードを選択すると、新しい文章ができる • 「私はトマトが欲しいです。」 • 他にも、「私は休みが好きです。」など 2021/11/23 ◦◦ぽい文章を自動生成しよう 9
10. どうやって文章生成を？ • マルコフ連鎖を使って文章を生成するには • 文章を形態素に分割 • 形態素をノードとしたマルコフモデルを作成 • 文頭のノードをランダムに選び、ランダムにノード間を遷移 • 遷移した過程に存在したノードの形態素を繋げる 2021/11/23 ◦◦ぽい文章を自動生成しよう 10
11. 形態素解析エンジン • MeCab • 京都大学情報学研究科のプロジェクトで開発された オープンソースの形態素解析エンジン • 日本語を高い精度で形態素解析できる • めかぶは作者の好物 2021/11/23 ◦◦ぽい文章を自動生成しよう 11
12. 形態素解析エンジン • Janome • Mecab辞書を内包している 形態素解析器Python版 • pip installするだけで 簡単に実行できる • Dockerfikeに記述する都合上、 導入に手間のかかるMeCabではなく Janomeを採用 2021/11/23 ◦◦ぽい文章を自動生成しよう 12 Illustration by janome. All rights reserved
13. 形態素解析エンジン • Janome • 具体的には、tokenize()メソッドに 解析したい文字列を渡す • Tokenオブジェクトのイテレータを 返すので、コイツらをいろいろ使う 2021/11/23 ◦◦ぽい文章を自動生成しよう 13 Illustration by janome. All rights reserved
14. 実行結果(走れメロス風) 2021/11/23 ◦◦ぽい文章を自動生成しよう 14
15. 実行結果(ジョジョ風) 2021/11/23 ◦◦ぽい文章を自動生成しよう 15
16. 現状・今度の展望 • 文章の精度がそんなに高くない • 精度を改善して、一回の実行でリアルな文章を作るのか? • 精度はそのままで、複数回実行してリアルな文章を抽出するのか? • Twitterの投稿を学習させて、俺botとか作ってみたいよね しゅうまい君? 2021/11/23 ◦◦ぽい文章を自動生成しよう 16
17. 参考 • マルコフ連鎖による文章生成 - 知識のサラダボウル • https://omedstu.jimdofree.com/2018/05/06/%E3%83%9E%E3%83%AB%E3%82%B3%E 3%83%95%E9%80%A3%E9%8E%96%E3%81%AB%E3%82%88%E3%82%8B%E6%96 %87%E6%9B%B8%E7%94%9F%E6%88%90/ • マルコフ過程 – Wikipedia • https://ja.wikipedia.org/wiki/%E3%83%9E%E3%83%AB%E3%82%B3%E3%83%95%E9 %81%8E%E7%A8%8B • MeCab: Yet Another Part-of-Speech and Morphological Analyzer • https://taku910.github.io/mecab/ • Welcome to janome's documentation! (Japanese) — Janome v0.4 documentation (ja) • https://mocobeta.github.io/janome/ ※すべて2021/11/23時点 2021/11/23 ◦◦ぽい文章を自動生成しよう 17