Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Rubyで音声「データ」を作る
Search
Shogo Kawahara
April 30, 2025
Programming
83
0
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
Rubyで音声「データ」を作る
Shogo Kawahara
April 30, 2025
More Decks by Shogo Kawahara
See All by Shogo Kawahara
strudel-rb について
kawahara
0
10
Google Apps Script で Ruby を動かす
kawahara
0
260
rspec の --tag オプションがこんなに便利だったなんて...
kawahara
0
20
データベースだけじゃないN+1とその対策
kawahara
0
1.4k
CoderDojo 千葉県総武線沿線の取り組み
kawahara
1
430
SendGrid Template Engine 奮闘記
kawahara
0
380
Other Decks in Programming
See All in Programming
Building a Meta Ray-Ban display app
akkeylab
0
160
引き算の組織 ― アウトカムとAIに全振りするために辞めたこと ― / Organization by Subtraction
hirokiyamamoto14
PRO
0
170
AIが無かった頃の素敵な出会いの話
codmoninc
1
450
これって Effect でできたのでは? / TSKaigi Mashup Kansai #2
susisu
0
240
ルールを書いて終わらせないハーネスエンジニアリング
yug1224
5
1.9k
Cloudflare is Agents
chimame
0
170
in-process GraphQL のすすめ #ginzajs
izumin5210
4
1.2k
「寝てても仕事が進む」Claude Codeで組む第二の脳
tomoyafujita2016
0
340
Augmenting AI with the Power of Jakarta EE
ivargrimstad
0
620
Detecting Compromised CI with eBPF and Cilium Tetragon
lizrice
0
200
生成AIで帳票OCRが「簡単に」作れる時代になった?
kon_shou
0
1.1k
属人化した知識を、 AIが辿れる地図にする
pkshadeck
PRO
1
180
Featured
See All Featured
Dealing with People You Can't Stand - Big Design 2015
cassininazir
367
27k
Build The Right Thing And Hit Your Dates
maggiecrowley
39
3.4k
The Organizational Zoo: Understanding Human Behavior Agility Through Metaphoric Constructive Conversations (based on the works of Arthur Shelley, Ph.D)
kimpetersen
PRO
0
420
Groundhog Day: Seeking Process in Gaming for Health
codingconduct
0
280
Building Flexible Design Systems
yeseniaperezcruz
330
40k
HDC tutorial
michielstock
2
790
Designing Powerful Visuals for Engaging Learning
tmiket
1
490
Chrome DevTools: State of the Union 2024 - Debugging React & Beyond
addyosmani
10
1.3k
Navigating the moral maze — ethical principles for Al-driven product design
skipperchong
2
490
HU Berlin: Industrial-Strength Natural Language Processing with spaCy and Prodigy
inesmontani
PRO
0
650
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
28
3.6k
Effective software design: The role of men in debugging patriarchy in IT @ Voxxed Days AMS
baasie
0
480
Transcript
Rubyで 音声「データ」を作る Shogo Kawahara
[email protected]
kyobashi.rb 2025.04.30
RubyKaigi 2025 よかったね もちろん船でいきました
こんな内容が面白かったと思った • Ruby LSP が Conference 中リリースされてすげえと思った ◦ YARD で
Docs 書いてたけど、Ruby LSP に移行して結構時が立ったので、そろそろ inline rbs に よる型情報の補完とかをやり始めようと思った (何気に対応している ) ◦ Ruby LSP を介して、MCP に繋げていくところとか夢があるとは思った • ZJIT (ジージット) は夢があるよね • もちろん最後のトークはプログラマーとして考えさせられた ◦ AIが型を捕捉するようになる理論 ◦ たのしいプログラミングとは何か
こんな内容が面白かったと思った • Ruby LSP が Conference 中リリースされてすげえと思った ◦ YARD で
Docs 書いてたけど、Ruby LSP に移行して結構時が立ったので、そろそろ inline rbs に よる型情報の補完とかをやり始めようと思った (何気に対応している ) ◦ Ruby LSP を介して、MCP に繋げていくところとか夢があるとは思った • ZJIT (ジージット) は夢があるよね • もちろん最後のトークはプログラマーとして考えさせられた ◦ AIが型を捕捉するようになる理論 ◦ たのしいプログラミングとは何か • 音声
ちょっくら自分も音声やってみるか • ずっとこういうコードを書こうと思ってた。特に理由はない。単純にFUNとして。 • やりたいことは以下。 なんか文字列 なんか文字列
いまだにカセットで音楽を聞く • インディーズな感じの曲を探りたいと思ったらカセット • ゲーム音楽とかもカセットで売ってたりするよ • 自分で録音もできて最高 (?) ◦ つまりデータも記録できるってことだよね。
昔はカセットにデータを記録していたらしい • 私はここまで古い人間ではないので、先人の知恵を探る • MSXやファミコンは下記のような機器で、市販のカセットにデータを記録していたら しい • フロッピーは高いがカセットは安い時代 • 参考
◦ https://xtech.nikkei.com/atcl/nxt/column/18/00531/122600009/?P=2 ◦ https://yosshin4004.github.io/famibe/overview/index.html
データから音声に変換するやり方はいろいろあるらしい • 文字列「こんにちは」 -> バイナリ「111000…」 ◦ これは結局のところ、文字符号方式である ◦ UTF-8 にすれば、日本語も行けそうではある
• バイナリ「111000…」 -> 音声「アナログの波」 ◦ いろいろ探るとこれも単純に 1つ。というわけではなくいろいろ方式がある ◦ 「変調方式」というらしい ◦ https://www.ritsumei.ac.jp/se/re/izumilab/lecture/06comm/index.htm ◦ FSK (Frequency Shift Keying) ◦ ASK (Amplitude Shift Keying) ◦ PSK (Phase Shift Keying) ▪ Pre-Shared Key ではない ◦ QAM (Quadrature Amplitude Modulation)
データから音声に変換するやり方はいろいろあるらしい • 文字列「こんにちは」 -> バイナリ「111000…」 ◦ これは結局のところ、文字符号方式である ◦ UTF-8 にすれば、日本語も行けそうではある
• バイナリ「111000…」 -> 音声「アナログの波」 ◦ いろいろ探るとこれも単純に 1つ。というわけではなくいろいろ方式がある ◦ 「変調方式」というらしい ◦ https://www.ritsumei.ac.jp/se/re/izumilab/lecture/06comm/index.htm ◦ FSK (Frequency Shift Keying) => データにあわせ周波数を変える , 初期の「モデム」もこれ ◦ ASK (Amplitude Shift Keying) => 振幅の有無で制御する , ノイズに弱い ◦ PSK (Phase Shift Keying) => 位相をかえる (波をずらす) ▪ Pre-Shared Key ではない ◦ QAM (Quadrature Amplitude Modulation) => 位相もかえるし、振幅もかえる
FSKの仕組みはすげぇシンプル 周波数が低い = 0 周波数が高い = 1 普通は開始と終了を 示すプリアンブルをつ ける
(0, 1以外の周波 数) 011.. と読める
やってみよう • デモだよ。実演するよ。
楽しいかも、でやってみたけどこれは実用的なのでは? • 特に電子工作の分野では(本当に)実用性がありそう ◦ PCからデバイスに対して phone plug を通じてデータを送信する ◦ デバイスにマイクがあれば、スピーカを通じて一斉に何らかの動きをさせることはできる
▪ ただ、ノイズ除去とか、チェックパリティとか、ネットワークでいうところの物理層とかデータリン ク層がやるような実装はある程度考えなきゃいけない ◦ つまり、Bluetooth や WiFi のモジュールなしで通信ができる ! ◦ (配信機器のLiveShellはPCと機器を音声プラグで繋げて設定情報流せました ) • ステガノグラフィー (情報を他の情報に隠蔽する) ◦ 人間が聞こえない高周波にデータを載せて、可聴範囲には通常の音楽データを入れるといったテク ニックがありそう ◦ 実装的にはローパスフィルターでデータ部分だけ取り出すイメージ ◦ ただし、カセットテープやデッキがそこまで高周波に対応していない可能性もある • TRICK のお供にもどうぞ ◦ これを使えば音がコードとして機能できるようになる ◦ 聞くとテクノな音楽だが、デコードすると実行可能 ! みたいな技もできる。だれかやって。
次にやりたいこと • RubyでFAXを送受信する ◦ 文字が行けるなら画像だ ! という感じだが、FAXはQAMという方式で変調しているらしい。これもい つかやっておこう ◦ WiFi7
のキー技術はこの辺を使っているので (音ではなく電波だが ) 最新技術と関係ないわけでも ない