Mastodon on Ruby master

Mastodon on Ruby master S.H.

自己紹介 S.H. Rubyにたまにパッチを投げてる人 2017年ごろから鯖缶やってる人最近ActivityPubリレーサーバを自作した

Rubyのコントリビューター

Mastodonの鯖缶

今日話すこと Ruby masterについて実際の運用方法バグの事例

Ruby masterについて

Ruby master とは? ruby/ruby リポジトリのmasterブランチのことつまりRubyの開発版 rbenv などのバージョン管理ツールで使える公式の rubylang/ruby
イメージ経由でも使える

Ruby master を使うメリット新機能をいち早く試せるパフォーマンス改善の恩恵を受けられるバグを踏めるコントリビューションチャンスがある

Ruby master を使うデメリットバグを踏むことがあるバグを踏んだときは自力でどうにかするしかないデバッグとかつらい

利用状況や安定性 Shopify や GitHub でも利用されているコミッター(開発者)がそれらの企業にいるためバグも修正されやすい基本的に安定しているバグを踏んでも少し待てば修正されることが多い

弊鯖での利用バージョン Ruby 3.4-dev(hash) jemalloc(アロケーションの改善) Universal Parser(パーサー周りの設定) YJIT(パフォーマンス改善) M:N Thread(軽量な並行処理の改善)

実際の運用方法

MastodonでRuby masterを使う RubyのバージョンやGemfile、CI の修正が必要デプロイ時にRuby masterをビルドそれ以外は基本的に必要な変更はない

Rubyのバージョン変更 .ruby-versionをruby-dev に変更 - 3.3.6 + ruby-dev

Gemfileの変更 bundled_gem になった gem を追加一部のgemは特定のコミットに変更 + gem 'rexml', '~>
3.2' - gem 'pg', '~> 1.5' + gem 'pg', github: 'ged/ruby-pg', ref: 'd072b218'

CIの修正 GitHub Actions にruby-devを追加 strategy: fail-fast: false matrix: ruby-version: -
'3.2' - '3.3' + - 'head'

デプロイ時のビルド rbenvを使ってRuby masterをビルド jemallocやYJITなどをオプションで有効化ビルド時のログも出力し、バグや警告も確認

実際のビルドコマンド RUBY_CONFIGURE_OPTS=" \ --with-jemalloc \ --enable-yjit \ cppflags=-DUNIVERSAL_PARSER \ "
\ rbenv install ruby-dev --verbose

バグを踏んだ時本番環境のログを確認ローカル環境で再現手順を作製パッチを投げるパッチが難しい場合は、Ruby 3.2 か 3.3へダウングレードして解消

バグの事例

RDocがビルドできない(1) Ruby masterでRDocがインストールできない Generating RDoc documentation Parsing sources... double free
or corruption (!prev) Aborted make: *** [uncommon.mk:676: rdoc] Error 134

RDocがビルドできない(2) どうもメモリ周りの問題らしい double free or corruption (!prev) Aborted make: ***
[uncommon.mk:676: rdoc] Error 134

調査(1) ログからメモリ周りの問題であることは判明オプションのオンオフを試す

調査(2) -DUNIVERSAL_PARSER が有効な場合のみ再現直近の変更を確認し、各コミット毎にビルドを試す

調査(3) [Feature #20257] Rearchitect Ripper これがマージされて以降に発生していることが分かった

調査(4) RipperとRDocのコードを読み最小の再現コードを作成 require 'ripper' Ripper.new("./array.rb")

調査結果 RipperとPaserのメモリアロケーション関数が同じ関数を使っている Universal Parserを有効化した際にCの translation unitで構造体のアロケーションされるサイズが異なっていた

パッチ作成(1) RipperとPaserそれぞれでアロケーションされるサイズを調整再現コードでエラーにならないことを確認

パッチ作成(2)

パッチ作成(3) レビューで「アロケーション周りの関数を共有しているのをやめ、分離してはどうか？」とコメントを頂いたそのほうが後々も楽そうなので分離する方向で対応し、無事マージされた

まとめ Ruby masterでMastodon を動かすことはできるバグを踏むこともあるけどコントリビューションチャンスでもあるので楽しい

Mastodon on Ruby master

Mastodon on Ruby master

S.H.

More Decks by S.H.

Featured

Transcript