2024.05.01
大規模言語モデル「LLM-jp-13B v2.0」を構築(2024年4月30日)
- Technologies
- Natural language processing
- 国立研究開発法人 理化学研究所 革新知能統合研究センター
- https://aip.riken.jp/news/20240430llm/?lang=ja
国⽴情報学研究所(NII)が中心となって構築した⼤規模⾔語モデル「LLM-jp-13B v1.0」の後続モデルとして「LLM-jp-13B v2.0」が構築されました。「LLM-jp-13B v2.0」は計算資源としてデータ活⽤社会創成プラットフォームmdxを活⽤し、⾃然⾔語の⽂章を構造化し⼤規模に集積したデータベースやモデル構造の改善、安全性を考慮したチューニングの導⼊などを⾏っています。 理研AIPは、モデル構築支援を行いました。
詳細は、理研AIP Webニュースサイトをご覧ください。
https://aip.riken.jp/news/20240430llm/?lang=ja
Technologies
0