なぜtree-sitter-rubyの日本語シンボルはハイライトされないのか ～敗北編～

Transcript

1. なぜtree-sitter-rubyの日本語シ ンボルはハイライトされないのか ～敗北編～ いとじゅん(@itojum1230)
2. 自己紹介 いとじゅん(@itojum1230) SmartHRでプロダクトエンジニアやってます。26新 卒です。 技術コミュニティとメタプログラミングに 興味があります VRChat.rbのオーガナイザーをやってます 2
3. tree-sitter • 構文解析ライブラリ • 使われているところ ◦ エディタ（Zed, Neovim, Emacs?） ◦ コーディングエージェント(Claude Code, Codex等) tree-sitter-rubyは、tree-sitterのRuby文法ライブラリ tree-sitterのロゴ https://github.com/tree-sitter 3
4. なにがおこったの？ 4 • いくつかの文字がハイライトさ れない ◦ :你, :池, :罠, :遠などなど • Playgroundを見るとエラーに なっている
5. 原因(たぶん) 文字 codepoint 下位バイト 一致する禁止文字 你 U+5E60 0x60 ` 池 Ux6C60 0x60 ` 罠 U+7F60 0x60 ` 遠 U+9060 0x60 ` • 禁止文字の判定メソッドがUnicodeをchar(8bit)に切り詰めて いた • マルチバイト文字の下位バイトが Rubyのシンボルの禁止文 字に一致したとき 、エラーを出していた 5
6. ここからが本題 6
7. Issue🚀 7
8. よ～し PR出しちゃうぞ～ 8 私のVRChatの姿
9. なんだ...と... 9
10. 経緯 10
11. 経緯 11 https://x.com/Gaku07jp/status/2072639350094053834
12. 経緯 12 https://x.com/Gaku07jp/status/2072639350094053834 社名が出たけど何事だろう？ 社内で話題に上がる
13. 経緯 13 社名が出たけど何事だろう？ 社内で話題に上がる
14. 経緯 14 社名が出たけど何事だろう？ 社内で話題に上がる こういう事情で ～tree-sitter-rubyってのが ～
15. 経緯 15 こういう事情で ～tree-sitter-rubyってのが ～
16. 経緯 16 こういう事情で ～tree-sitter-rubyってのが ～ https://github.com/tree-sitter/tree-sitter-ruby/pull/293 🚀PR
17. OSS貢献は早い者勝ち！！ 17
18. おわりに • OSS貢献は早い者勝ち！！(大事なことなので • 自分で実装・修正したいなら早くPRを出そう ◦ Issue→PRの手順が必要なOSSもあるので、 CONTRIBUTING.md を要確認 18