• Long Short-Term Memory, 长短时记忆网络
  • 门信息
    • 控制权重
    • 向量每个元素乘自己的sigmoid函数
  • 门类型
    • 输入门
    • 遗忘门
    • 输出门
  • 一条链编码解码
    • 用于翻译
    • 但没法处理词间强对应关系
  • 改进
    • 相对RNN, w变成相加
  • BiLSTM
    • 双向预测