革命的な言語モデル、「BERT」はどのように大量のデータを学習したのか？

小林雅一氏の新著、『生成AI―「ChatGPT」を支える技術はどのようにビジネスを変え、人間の創造性を揺るがすのか？』一部を紹介する連載の第6回。大規模言語モデル（LLM）が大きく発展する端緒となった、言語モデル「BERT」について解説する。