大規模言語モデル入門

技術評論社
山田育矢　鈴木正敏　山田康輔　李凌寒　

• 価格: 3,520円（本体3,200円＋税）
• 発行年月: 2023年08月
• 判型: Ｂ５
• ISBN: 9784297136338

内容情報

[BOOKデータベースより]

コンピュータが言語を理解するしくみ。

第１章　はじめに
第２章　Ｔｒａｎｓｆｏｒｍｅｒ
第３章　大規模言語モデルの基礎
第４章　大規模言語モデルの進展
第５章　大規模言語モデルのファインチューニング
第６章　固有表現認識
第７章　要約生成
第８章　文埋め込み
第９章　質問応答

[日販商品データベースより]

"ChatGPTに代表される大規模言語モデルが自然言語処理の幅広いタスクで高い性能を獲得し、大きな話題となっています。大規模言語モデルは、大規模なテキストデータで訓練された大規模なパラメータで構成されるニューラルネットワークです。2020年以降、自然言語処理や機械学習の知見をもとに、パラメータ数とテキストデータの拡大により、性能が飛躍的に向上しました。

Hugging Face社の""transformers""というPythonライブラリを利用することで、プログラミングの経験があれば、モデルの操作やデータからの学習がかんたんにできます。モデルを訓練するための日本語もしくは日本語を含む多言語のデータセットも充実してきており、すぐに業務に使える実用的なモデルを作ることが可能な時代がやってきました。

本書は、大規模言語モデルの理論と実装の両方を解説した入門書です。大規模言語モデルの技術や自然言語処理の課題について理解し、実際の問題に対処できるようになることを目指しています。以下のような構成によって、理論とプログラミングの双方の側面から、大規模言語モデルに関する情報を提供します。

第1章　はじめに
第2章　Transformer
第3章　大規模言語モデルの基礎
第4章　大規模言語モデルの進展
第5章　大規模言語モデルのファインチューニング
第6章　固有表現認識
第7章　要約生成
第8章　文埋め込み
第9章　質問応答システム"