【教材紹介】BERTによる自然言語処理

投稿日：2022年1月13日更新日：2022年1月12日

自然言語処理の応用モデルであるBERTを今すぐに使いたい、機械学習の概要を知っている担当者レベルに向けた書籍を紹介します。

名称

ストックマーク株式会社
近江崇宏、金田健太郎、森長誠、江間見亜利

自然言語処理で難易度の高いタスクがあり、BERTを使うことでどうにかしたいという担当者向けの技術的な書籍です。
機械学習や自然言語処理の説明はそこそこに、BERTを自分で使えるようにするために色々なレクチャーが行われます。

基本的な機械学習の知識（データ準備→学習→検証等）

Python, Pytorch, BertModel, Tokenizer, 事前学習, ファインチューニング, 文章の穴埋め, 文章分類, 固有表現抽出, 類似文章分類

その他の教材紹介ページはこちら → Skill Stacks

執筆者：rei

: 自然言語処理×教師なし学習での温故知新 PythonでBERT-MaskedLM実装

はじめに自然言語処理（BERT、GPT-3）および画像認識（ViT）等で以前のState of The Artモデルを超える精度を発揮したTransformer（元論文：Attention Is A …

: 【教材紹介】施策デザインのための機械学習入門

機械学習のその問題設定、現実に一致していますか？予測しただけになっていませんか？本当に解きたい問題はなんでしょうか。問題設定の応用的な方法論を学ぶための一冊を紹介します。名称施策デザインのため …

: 【初心者向け】mysqlclientのインストールで詰まったときの補足

コマンドラインでmysqlを使いたい！と思ったら、思わぬ罠がありましたので紹介します。 *僕の場合はpythonで使いたい！というものでしたが、他でも使えることを確認しています。まずコマンドラインで …

: 【教材紹介】数理モデル入門

本当にそのモデルでいいんですか？データ分析を活用する数理モデルにはいろいろな種類があります。ただ、問題設定に合わないモデルが設定されていることがままあります。今回紹介する書籍では、体系的に数理モデル …

: [Python：Predict Gollira]2枚の画像でどちらがゴリラっぽいかを人間が予想する。

「あーこの人ゴリラっぽい。」と思うことはありませんか？ゴリラっぽさってどこから来るんだろうかと悩んでいました。前回、[Python] ディープラーニングのモデル「VGG16」を使って画像認識をし、 …