5 января этого года модель ИИ впервые превзошла людей в понимании прочитанного. Модель SLQA+ (ансамбль) от Alibaba зафиксировала оценку точного совпадения 82,44 против человеческой оценки 82,304 в наборе данных SQuAD . Оказывается, модель Microsoft r-net+ (ансамбль) за два дня до этого набрала 82,650. И с тех пор две другие модели также превзошли человеческий показатель ЭМ. Хотя ни одна из моделей еще не превзошла человеческий балл F1 (точность, полнота) 91,21, эти события еще..