BERTによる自然言語処理入門 Transformersを使った実践プログラミング

近江崇宏(著者), 金田健太郎(著者), 森長誠(著者), 江間見亜利(著者), ストックマーク株式会社(編者)

• 販売会社／発売会社: オーム社
• 発売年月日: 2021/06/28
• JAN: 9784274227264

商品レビュー

2023/08/12

言語モデルとはある文脈下で出現するトークンを予測するモデルである。

ニューラルネットワークは、複数の層を組み合わせることにより高い表現能力を示す

2022/09/05

https://elib.maruzen.co.jp/elib/html/BookDetail/Id/3000105724

2022/07/31

　自分で考えてコーディングするのはできませんが、この本の場合はコードがgithub上に公開されており、それをダウンロードしてGoogle Colaboratoryで実行すればとりあえず動作は確認できるので、「やった感、達成感」が得られるので完読することができました。

　どちらかというと本やコード内のコメントを読んでどんなことをやっているのかざっくりと理解できることが重要なように思います。なんとなくBERTやtransformersといった流行りの用語を理解できた気がします。

　本書では自然言語認識に特化しており、以下のようなところをカバーしています。
第1章～第3章：BERTや自然言語認識で用いられる基礎的な技術についての解説
第5章：文章の穴埋め
第6章：文章分類
第7章：マルチラベル文章分類
第8章：固有表現抽出
第9章：文章校正
第10章：文章ベクトルを用いたデータの可視化と類似文章検索