Google Research·2018-11-02 00:00· 2018-11-02

Google 开源 BERT 双向语言预训练模型与代码

Open Sourcing BERT: State-of-the-Art Pre-training for Natural Language Processing

AI 导读

Google Research 宣布开源 BERT，提供基于 TensorFlow 的代码及预训练语言模型；BERT 通过掩码词预测学习深层双向表示，并可微调用于问答等 NLP 任务。此次发布的模型仅支持英语；原文报告其在 SQuAD v1.1 和 GLUE 等基准上取得领先结果。

来源：Google Research · research.google