【教材紹介】BERTによる自然言語処理

投稿日：2022年1月13日更新日：2022年1月12日

自然言語処理の応用モデルであるBERTを今すぐに使いたい、機械学習の概要を知っている担当者レベルに向けた書籍を紹介します。

名称

ストックマーク株式会社
近江崇宏、金田健太郎、森長誠、江間見亜利

自然言語処理で難易度の高いタスクがあり、BERTを使うことでどうにかしたいという担当者向けの技術的な書籍です。
機械学習や自然言語処理の説明はそこそこに、BERTを自分で使えるようにするために色々なレクチャーが行われます。

基本的な機械学習の知識（データ準備→学習→検証等）

Python, Pytorch, BertModel, Tokenizer, 事前学習, ファインチューニング, 文章の穴埋め, 文章分類, 固有表現抽出, 類似文章分類

その他の教材紹介ページはこちら → Skill Stacks

執筆者：rei

: [Meisyo]パラメータバランス調整 ver 0.10(a)

パラメータバランスを調整します。理由としては、ミートが強すぎるからです。ミートが神の地位を手に入れて早・・・というより、Meisyoが最初からそうだった。「ミートを上げれば即ち打てる」で、パワー …

: [Python] 機械学習での変数選択自動化（SVRを例に）

今回、会社のコンペで255というとんでもない量の変数を扱うことになりました。価格予想を行うコンペです。今回のデータのおさらいデータ量は1500程度。8:2で分けると検証データが300しかないすご …

: [Meisyo]育成方針の不均衡を減らすための分析

もともと問題視していた育成方針の選択数の不均衡。なぜそれが起こるのかというと・・・、使えない（と思いやすい）育成方針があるってことなんですよね。詳しく見ていきましょう。各方針の能力上昇（201 …

: Flask-Babelを使って、Pythonアプリで多言語対応を行う

Pythonで多言語対応してみたいなーと思っていました。思っていましたが、実際になかなか使うタイミングがない・・・。今回自作ゲームでユーザー数の増加がみられ、かつ海外からのアクセスも複数確認できた …

: 「実践！Chainerとロボットで学ぶディープラーニング」を作ってみた

実践！Chainerとロボットで学ぶディープラーニングを購入しました。単純にロボを動かすのは楽しいです。周りに意外と買った人が居ないようなので、レビューを書きました。所感ちょっとお高いけど、土 …

メインサイト：Rの考え方