word embedding是非常重要的贡献了

如果把是现代深度学习也算上，Transformer的核心是attention，一般认为是基于2014年Bengio提出的，并且用在机器翻译里

【 在 yzjba 的大作中提到: 】
: Bengio有什么具体贡献，感觉他就是山头大
: CNN和LSTM是实打实的贡献
--
FROM 1.202.9.*