yuxiaowww / NLP-Basic-Learning

NLP-基础学习（包括：#基础的文本预处理操作；#NLP相关算法实现；)

NLP-Basic Learning

任务1: 数据集探索-词与id互转

原文参考：参考链接。 任务1中当前目录cnews文件夹中存放数据集： 数据下载链接 提取码: qfud

任务2: 分词-去停用词-词频-文本向量化

原文参考：参考链接。 任务2中当前目录cnews文件夹中存放数据集： 数据下载链接同任务1,停用词已上传

任务3: TFIDF-Word2Vec-互信息

原文参考：参考链接。几种方法的简单示例。

任务4: 特征合并与svc-朴素贝叶斯-LDA

原文参考：参考链接。特征合并，常用机器学习文本分类算法简单示例

任务5: 正则化-tensorflow反向传播

原文参考：参考链接1；参考链接2。正则化介绍，TensorFlow简单示例

任务6: onehot-word2vec-fasttext

原文参考：参考链接1；参考链接2。onehot二种方法示例，word2vec示例，fasttext分类简单示例

其他任务: keras简单示例

原文参考：参考链接1；参考链接2。keras文本处理示例；keras文本分类示例