ゆるゆるMastodon 鯖缶生活

Slide 1

Slide 1 text

ゆるゆるMastodon鯖缶生活 S.H. 東京Ruby会議12 前夜祭 2025-01-17

Slide 2

Slide 2 text

自己紹介 S.H.(Shun Hiraoka) Mastodonの管理者(鯖缶) 島根県在住 Hamada.rb ESM アジャイル事業部一日一Halo

Slide 3

Slide 3 text

各種SNSなど Github: S-H-GAMELINKS Mastodon: S_H_@gamelinks007.net Honk: honk.gamelinks007.net/u/sh Mixi2: S_H_ 基本的にはMastodonかHonkにいます

Slide 4

Slide 4 text

東京Ruby会議12

Slide 5

Slide 5 text

Rubyと暮らす

Slide 6

Slide 6 text

Mastodonとの暮らし

Slide 7

Slide 7 text

mastodon(prod)> Account.second => #

Slide 8

Slide 8 text

ゆるゆると7年ほど Mastodonと暮らす

Slide 9

Slide 9 text

RubyとRails なんもわからん

Slide 10

Slide 10 text

RubyとMastodonにパッチを投げる

Slide 11

Slide 11 text

そこまでの歴史を話します

Slide 12

Slide 12 text

今日話すこと Mastodonとの出会いやらかしと成長砂場としての楽しさ現在の鯖缶生活

Slide 13

Slide 13 text

Mastodonとの出会い

Slide 14

Slide 14 text

出会い 2017年4月に日本で第一次Mastodonブームが起きた Matzがシェアした記事経由で知った

Slide 15

Slide 15 text

Mastodonの面白さ連合という概念 RubyとRailsで作られている個人でSNSを運用できる

Slide 16

Slide 16 text

連合とはサーバ同士が同じプロトコルでやり取りができる連合先のアカウントをフォローしたりできる

Slide 17

Slide 17 text

RubyとRailsとの距離当時はまだRubyとRailsを触りはじめたばかりだった勉強のため何か良い題材はないかと悩んでいた RubyとRailsでできたサービスを運用すると知見が溜まるのではないかと考えた

Slide 18

Slide 18 text

個人でSNSを運用できる面白さ大手SNSの規約に縛られない自由さがあった当時は趣味でフリーゲームをC/DxLibとかで作っており、創作活動する人向けの場を作りたいという思いもあった

Slide 19

Slide 19 text

「Mastodon建てよう!!」

Slide 20

Slide 20 text

2017年当時のサーバを建てる方法さくらインターネット提供のスタートアップスクリプトがあった多くのサーバがスタートアップスクリプトで建立されていた

Slide 21

Slide 21 text

サーバは建てたけど…? ユーザーが自分しかいない連合先がないので他にどんなサーバがあるのかがわからない別のサーバのアカウントをフォローしていないので連合先がない

Slide 22

Slide 22 text

サーバ建てた後のアレコレ交流のあった人を自分のサーバに招待した TwitterでMastodonのサーバを建てた人を探してフォローして、連合先を増やした RubyでシンプルなBotを作って、そこを経由して連合先を増やしたりもした

Slide 23

Slide 23 text

Mastodonの鯖缶生活の始まり

Slide 24

Slide 24 text

やらかしと成長

Slide 25

Slide 25 text

7年間にいくつものやらかしをした

Slide 26

Slide 26 text

二大やらかし Let’s Encryptのルート証明書の切り替えで自分のサーバからの投稿の配送が詰まってしまったメンテナンスをサボっていたために、関連gemの mimemagicがyankされていた問題を踏んでしまった

Slide 27

Slide 27 text

やらかしその①

Slide 28

Slide 28 text

Let’s Encryptのルート証明書 Let’s Encryptのルート証明書が2021年9月 30日で切り替わる切り替えにより、Mastodonの一部のサーバで証明書のエラーが起きるのではないかと危惧されていた

Slide 29

Slide 29 text

ウチは大丈夫でしょう

Slide 30

Slide 30 text

そんなことはなかった

Slide 31

Slide 31 text

2021年10月1日以降サーバでインストールされている証明書が廃止されるものだったそれにより外部のサーバへの配送が詰まり、 Sidekiqで再試行ジョブが詰まっていたしかし、外部のサーバからの投稿に関してはタイムラインに流れていた

Slide 32

Slide 32 text

状況確認と調査スタートアップスクリプトでサーバを建てていたのでそのあたりに何かないか確認したサーバのOSとしてCentOS 7を使っていることが判明した CentOS 7関連で同じ問題を踏んでいる人を探せばなんとかなりそう

Slide 33

Slide 33 text

暫定的な対応調査の結果、ca-certificatesをアップデートすれば対応できそう Sidekiqのスレッド数などを調整して一時的に処理する数を増やしてジョブをさばいた sudo yum update ca-certificates

Slide 34

Slide 34 text

なんとかなった

Slide 35

Slide 35 text

反省点ルート証明書の切り替えの影響を受けるかどうかの確認がないまま対応不要と判断してしまっていた定期的なメンテナンスをサボっていたので環境の確認に手間取ってしまった

Slide 36

Slide 36 text

やらかしその②

Slide 37

Slide 37 text

サーバを建てて 4年以上が経過した

Slide 38

Slide 38 text

だんだんメンテナンスしにくくなってきた

Slide 39

Slide 39 text

サーバの移行をやらないといけないか

Slide 40

Slide 40 text

サーバの移行 Let’s Encryptのルート証明書の件もあり、サーバの移行を検討しはじめたまた以前からＣ拡張のgemもインストールできないケースもあったことも移行を考える後押しにもなった Mastodonの公式ドキュメントで推奨されているUbuntuに移行することにした

Slide 41

Slide 41 text

現状の確認少し前のMastodonのバージョン(v3.0.1)を使っていた AWS S3にメディアファイルは移行済み PostgreSQLとRedisを同じサーバ内で動かしていた DBとRedisのバックアップを取って移行先に流し込めば移行は簡単そう

Slide 42

Slide 42 text

やることの洗い出しユーザーと連合先の鯖缶向けにサーバ移行のアナウンス移行元のサーバを停止 PostgreSQLとRedisのバックアップと流し込み移行先のサーバでMastodonのセットアップ

Slide 43

Slide 43 text

なんとかなりそう

Slide 44

Slide 44 text

DBとRedisの移行まで完了

Slide 45

Slide 45 text

あとはMastodonのセットアップだけ

Slide 46

Slide 46 text

bundle installが失敗する

Slide 47

Slide 47 text

You'll need to update your bundle to a version other than mimemagic (0.3.3) that hasn't been removed in order to install.

Slide 48

Slide 48 text

mimemagicがない

Slide 49

Slide 49 text

mimemagicのyank mimemagicがGPLライセンスに変更された件で、古いmimemagicがすべてyankされていた件の影響を受けた bundle installが通らずMastodonのセットアップが完了しない

Slide 50

Slide 50 text

Mastodonの対応を確認 mimemagicに依存しないRailsにアップデートして対応していたただし、最新のバージョン(v3.4.1)で対応されており、うちのサーバのバージョン(v3.0.1)では未対応 Mastodonのアップデートもやらないとだめそう

Slide 51

Slide 51 text

対応方針サーバの移行はやる Mastodonのアップデートも同時にやる両方やらないといけないというのがだいぶ辛い

Slide 52

Slide 52 text

リリースノートを読みつつアップデート

Slide 53

Slide 53 text

祈りながらマイグレーションを走らせる

Slide 54

Slide 54 text

なんとか対応できた

Slide 55

Slide 55 text

対応完了後ユーザーと連合先の鯖缶向けにサーバの移行が完了したアナウンスを流すサーバを止めていた間の配送が処理されるのを確認

Slide 56

Slide 56 text

教訓ソフトウェアはメンテナンスしなくなると動かなくなる定期的なメンテナンスが大事

Slide 57

Slide 57 text

トラブルのある鯖缶生活

Slide 58

Slide 58 text

経験を積めた

Slide 59

Slide 59 text

慣れてきたころ

Slide 60

Slide 60 text

色々手を出し始める

Slide 61

Slide 61 text

砂場としての楽しさ

Slide 62

Slide 62 text

当時の状況 Ruby Hack ChallengeをきっかけにRuby へパッチを投げていたお仕事ではGoとReactで自社サービスの開発をしていたお仕事でRubyを使っていないためコーナーケースを踏む機会がほとんどなかった

Slide 63

Slide 63 text

そんなとき Rubyのmasterブランチでサービスを動かしている話を聴く色々と試す場所としてMastodonを使えないかと考えだす新しい技術を試す砂場にできそう

Slide 64

Slide 64 text

やってみよう

Slide 65

Slide 65 text

Mastodonの砂場化 RubyとMastodonの開発ブランチでのサーバを運用 TypeProfやSteepといった型解析ツールの試験的導入独自機能の導入とメンテナンス

Slide 66

Slide 66 text

開発ブランチでの運用 Ruby masterとMastodon mainでサーバを運用 Ruby 3.1 から masterまでのバージョンでCI を回している最新のRubyやMastodonに導入された新機能を試し、バグなどがないかを確認運用できないレベルのバグの場合は一旦バージョンを落とす

Slide 67

Slide 67 text

実際にRubyに投げたパッチ Universal Parserを有効化するとRipperのメモリのバグを踏む Ripperの内部を知る良い機会になった

Slide 68

Slide 68 text

型周りのツールの導入 TypeProfで型を自動生成し、Steepで型チェックを行うように導入した Mastodon側の実装の問題を検知できた

Slide 69

Slide 69 text

実際の問題を検知ができたコード # デフォルト値ありの引数として定義されている def process(url, terminal = false) # ... end def process_html(response) # 実際にはキーワード引数で渡されていた process(json_link['href'], terminal: true) unless json_link.nil? end

Slide 70

Slide 70 text

独自機能公開範囲「にゃーん」を実装投稿に何を書いても最終的に「にゃーん」に置き換えられる機能当時Mastodon にはE2Eテストがなかった公開範囲を選択して投稿されるまでのE2Eテストが欲しくなった

Slide 71

Slide 71 text

cypress-railsの導入とパッチ cypress-railsを導入し、E2Eテストを追加古い設定ファイルを使っており、そのままでは動作しないので修正パッチを投げた

Slide 72

Slide 72 text

良いコントリビューションチャンスが得られた

Slide 73

Slide 73 text

現在の鯖缶生活

Slide 74

Slide 74 text

普段の鯖缶生活 RubyとMastodonの開発ブランチへの追従他の鯖缶向けの新機能の共有他のサーバのCI修正

Slide 75

Slide 75 text

開発ブランチへの追従 3日から7日程度の間隔で実施過去にメンテナンスをサボっていたことの反省から間隔は短め Mastodonのみ変更差分を確認し、非互換や大きな変更がないかをチェックしている Rubyに関しては随時変更を追っているのでメンテナンスのタイミングでは特に何もしない

Slide 76

Slide 76 text

メンテナンスの通知変更差分をメンテナンス用のesaの記事にまとめる esaの記事を外部向けに公開すると、自動的にユーザー向けメンテナンス終了のアナウンスが流れるようにしている

Slide 77

Slide 77 text

他の鯖缶へ新機能の共有メンテナンスの際に新機能などを確認確認した内容をタイムラインにPostして共有

Slide 78

Slide 78 text

他のサーバのCI修正連合先の鯖缶がCIが通らなくて困っていたのでフォロー開発ブランチに追従している際のCI修正の知見を活かせた