DL

此仓库将介绍Deep Learning 所需要的基础知识以及NLP方面的模型原理到项目实操，若你有认为好的教程也可以pull上去，一起将简单易懂的知识传播出去 : )

章节

• 线上课程
• 深度学习
• Transformer时代
• 进阶篇
• 必备技能
• 问题库

---

线上课程

• 李宏毅（入门极荐，简单易懂，且为中文授课）
• 陈蕴侬（与李宏毅同为台大老师，偏重应用，范围更广）
• 吴恩达（斯坦福华人教授，业界公认厉害）
• Hinton（深度学习开山鼻祖）

---

Neural Network

• Gradient Descent
• BackPropagation
• Normalization
• Activation
• DNN
  • IMDB影评情感分类
• CNN
• RNN概述
  • 单双向RNN
  • LSTM之词嵌入
  • LSTM之文本分类
  • LSTM之文本生成
  • Seq2Seq翻译模型搭建
• 常见优化技巧
• Numpy

---

Transformer时代

• 词嵌入综述

• NLP模型讲解

  • Transformer原理篇
  • Transformer代码（PyTorch）
  • Transformer翻译模型（PyTorch）
  • Bert

• Bert文本任务源码解读系列

  • Bert之文本分类
  • Bert之阅读理解

• Bert实战项目

  • 中文情感分类

---

进阶篇

• 数据预处理

---

必备技能

• 上手项目&源码阅读

问题库

此部分用来记载各种各样小bug的解决方案

• 问题库