# 预训练

Google 发布 BERT

BERT 以双向预训练刷新多项自然语言理解基准。