SNLP2023: From Characters to Words: Hierarchical Pre-trained Language Model for Open-vocabulary Language Understanding

最長一致法のためのサブワード正則化手法（MaxMatch-Dropout）とその周辺の話

最先端NLP2022: Rare Tokens Degenerate All Tokens: Improving Neural Text Generation via Adaptive Gradient Gating for Rare Token Embeddings

テキストベクトルの重み付けを用いたタスクに対する単語分割の最適化

要点を聞いてもらえるプレゼンを作ろう

Task-Oriented Word Segmentation (Presentation for Doctoral Dissertation)

論文紹介: Fast WordPiece Tokenization

最先端NLP2021: How Good is Your Tokenizer? On the Monolingual Performance of Multilingual Language Models

文系的な興味を理系的な達成目標に変換する

最先端NLP2020: Dice Loss for Data-imbalanced NLP Tasks

saisentan-nlp(hiraoka)

20190918NERchallenge_tathi_public.pdf