Home

Japanese NLP Resources not on GitHub

• 日本の言語資源・ツールのカタログ
• 自然言語処理の餅屋
• 黒橋・褚・村脇研究室 自然言語処理のためのリソース
• 東北大学 乾研究室　Open Resources【公開資源】
• 東京都立大学 自然言語処理研究室 小町研
• 東京大学 宮尾研究室 研究成果
• 奈良先端科学技術大学院大学 ソーシャル・コンピューティング研究室 Resources & Software
• 松本研究室で開発した自然言語処理ツールの一覧です．
• 研究に使えるデータセットです．
• 日本語単語類似度・関連度データセット JWSAN
• Hugging Face Models language=ja
• Hugging Face Datasets language=ja
• huggingface datasetsで使える日本語データセットのまとめ
• Manga109 Annotations
• 深層学習による自然言語処理のコーパス まとめ
• 【保存版】オープンデータ・データセット100選 -膨大なデータを活用しよう！ - テキスト
• 日本語 LLM のためのデータセットメモ
• 文書検索の日本語データセットのメモ
• LLMのJGLUEによる日本語タスクベンチマーク

Multilingual NLP libraries for Japanese

• 自然言語処理データ増強用ライブラリのnlpaug 日本語での利用方法
• LaBSE をファインチューニングした多言語単語アライナー
• Stanford Alpaca: An Instruction-following LLaMA Model
• DeepSpeed Chat: ChatGPTライクなモデルを簡単・高速・低コストに、あらゆるスケールで学習
• MATLABのためのトランスフォーマーモデル