自然语言处理与深度学习线上课程

关于课程回看，请给班长写信索要，并请用如下格式：目的-姓名-微信号，如"回看申请-程序员-codermonkey"，否则邮件将不会被处理，详细规则请跳转到本页最后查看

简介：目前，自然语言处理和深度学习都是非常火热的内容，鉴于此，集智俱乐部的小s开展了系列课程，以研讨、学习相关的内容。
时间：2016年7月底－2016年11月初，预计活动11-13次
地点：互联网授课
主讲人：李嫣然，北京大学智能科学专业本科，现为香港理工大学在读博士生。研究方向为自然语言处理中的语义表达和语言生成。曾于自然语言领域的顶级会议上发表多篇论文，合著有《科学的极致——漫谈人工智能》一书。集智俱乐部成员，同时是微信公众号［程序媛的日常］的维护者之一小Ｓ。

课表

所有的资料都在这里：http://pan.baidu.com/s/1qYN9yji，密码：j7hu

课次	时间	内容	参考资料
1	2016-7-21 20:00-21:00	Word2Vec: Basics and Model 课件下载课程回看	Deep Learning in NLP(一) 、Efficient Estimation of Word Representations in Vector Space、From Frequency to Meaning: Vector Space Models of Semantics
2	2016-7-28 20:00-21:00	Word2Vec: code and practice 课件下载	source code, word2vec/lstm on mxnet with NCE loss, Vector Representations of Words, Deep Learning实战之word2vec, 中英文维基百科语料上的Word2Vec实验, 一些关于word2vec实现的人僧经验
3	2016-8-4 20:00-21:00	Word Embeddings: Further Issues 课件下载	GloVe: Global Vectors for Word Representation, Deep Learning, NLP, and Representations, “后 Word Embedding ”的热点会在哪里?
4	2016-8-11 20:00-21:00	Foundations of Neural Network （主讲人：钟翰廷）课件下载
5	2016-8-18 20:00-21:00	RNN 及其在 NLP 中的应用（主讲人：钟翰廷）课件下载	Recurrent nets and LSTM, The Unreasonable Effectiveness of Recurrent Neural Networks, On the difficulty of training recurrent neural networks, Recurrent neural network based language model
6	2016-8-25 20:00-21:00	NLP in Action with RNN （主讲人：钟翰廷）课件下载	Chinese Poetry Generation with Recurrent Neural Networks
7	2016-09-08 20:00-21:00	LDA简介（主讲人：谷伟伟）课件下载	[沈志勇，主题模型简介(PPT)：http://dwz.cn/2kC5Av lda数学八卦：http://www.flickering.cn/tag/lda/]
8	2016-9-22 20:00-21:00	Convolutional Neural Networks （主讲人：李嫣然）课件下载	Understanding Convolutions
9	2016-9-29 20:00-21:00	Sentiment Analysis （主讲人：李嫣然）课件下载	Stanford Sentiment Analysis Demo
10	2016-9-29 20:00-21:00	Machine Translation （主讲人：李嫣然）课件下载	Google's Neural Machine Translation System: Bridging the Gap between Human and Machine Translation
11	2016-10-06 20:00-21:00	Neural Response Generation （主讲人：李嫣然）课件下载	Ultimate Guide to Your Chatbot

课程回放在这里：http://xue.duobeiyun.com/，邀请码请与班长联系。

内容提纲

感谢大家对于集智俱乐部《自然语言处理与深度学习》读书会活动感兴趣。由于这次活动我们想采取全新的收费模式,请大家务必在充分了解课程大纲和收费模式后,评估对于课程的预期,再决定是否缴费参加。

关于收费模式的详细信息,请参考集智俱乐部的公众号文章,点击此处查看。读书会大纲如下(预计分10次)

Word Representations

108Merely wanna comment on few general things, The website layout is perfect, the articles is real superb. “Some for renown, on scraps of learning dote, And think they grow immortal as they quo&t.e#8221; by Edward Young.

Sentence Modeling

RNN

neural network basics (back propagation, gradient, regularization, activations)
RNN (model, calculation, language modeling)
further reading and related issues (gradient vanishing, GRU, LSTM)

CNN

convolutional operation basics
paper (model, pooling, sentence modeling, variable-length...)
further reading and related issues (character-level CNN...)

NLP Tasks

Sentiment Analysis

Sentiment Analysis tasks and benchmarks (Stanford TreeBank...)
papers (GAN, duyu-tang)

Machine Translation

Seq2Seq and encoder-decoder framework
papers (attention, code)
further reading and related issues (http://www.statmt.org/ued/?n=Public.WeeklyMeeting)

Fancy topics

Machine Comprehension
Neural Turing Machine
Dynamic Memory Network
Neural Conversation Model

考核要求

由于很多人不能保证同一个时间点参与活动,所以我们取消了每次上课都点人数的规定,也就取消了必须参加完所有课程的规定;
每个人登陆都必须用自己的微信昵称;
每个人在全部课(10-12次)下来,必须积分达到10分才行。其中完成一次作业为1分,完成一次符合要求(见后面的说明)的笔记积2分,如果笔记被选中发布了集智公众号则这次笔记积4分。其中笔记或者作业可以在所有课中任选。
所谓符合要求的一次读书会笔记是指一篇编辑工整的图文并茂的文章,篇幅不得少于3页A4纸(含图,正常五号字,正常行间距),参考文章请点击这里查看。
每次课的笔记或者作业都必须在下一次讲课前完成,补交不算数!
上述要求达到才算完成了整个课程学习,退费80%,否则都算未完成,不退费!

前期活动预热

在读书会开始之前，集智俱乐部举办了一次公开活动，由小s主讲，内容是对整个读书会的一个更改介绍。有关这次活动信息，请参看这里，本次活动的课件可在这里下载。

邮件规则

为了方便大家及时得到邮件反馈，邮箱现在使用脚本管理+人工审核机制，所以希望参课的同学按照主题格式发送邮件。

主题的格式为：邮件主题-昵称-ID

   现在支持的邮件主题：回看申请，作业（包含笔记）
   附件的格式 ：作业/笔记-课程日期-昵称

例如：

回看申请-程序员-codermonkey

作业-程序员-codermonkey

附件名：作业-0721-程序员

现在id确定为微信号，能搜到的，昵称为微信昵称

注意：

本期课程已经结束，为了方便已经参加课程的同学回看往期课程，回看申请格式变更：

回看申请-课程序号-用户名-用户id

课程序号参见课程安排表格第一列。

例如：

回看申请-1-程序员-codermonkey