TextInfoExp:自然语言处理相关实验（基于sougou数据集）

——免费加入AI技术专家社群>>

——免费加入AI高管投资者群>>

介绍：自然语言处理相关实验（基于sougou数据集），包含文本特征提取（TF-IDF），文本分类，文本聚类，word2vec训练词向量及同义词词林中文词语相似度计算、文档自动摘要，信息抽取，情感分析与观点挖掘等。

构建实验环境

1 安装python（2.7） https://www.python.org/

2 安装pip：

2.1 下载pip https://pypi.python.org/pypi/pip/9.0.1

2.2 解压缩后，安装指令 python setup.py install

2.3 pip升级 python -m pip install –upgrade pip

2.4 pip安装扩展包 pip install jieba （这里以jieba包为例），如果速度较慢，可改为国内的阿里源，即 pip install jieba -i http://mirrors.aliyun.com/pypi/simple/ –trusted-host mirrors.aliyun.com

3 安装pycharm http://www.jetbrains.com/pycharm/

4 使用GitHub获取代码

4.1 安装git https://git-scm.com/

4.2 登陆自己的GitHub账号，找到自己的项目，（别人的需要先fork过来，也可以直接 git clone xxx,或者直接下载zip包放进pycharm）

4.3 打开pycharm，首先设置git的位置及github账号，点击Test都通过后继续，依次在菜单栏点击 VCS checkout from version control
GitHub，登陆自己的账号后选择相应的项目，得到代码。

4.4 （更新fork的项目到最新的版本）Syncing a fork https://help.github.com/articles/syncing-a-fork/

5 ipython交互式开发环境

5.1 安装ipython pip install ipython

5.2 安装jupyter（即notebook） pip install notebook

5.3 jupyter notebook 启动，打开浏览器即可（默认1224端口）

项目地址：https://github.com/Roshanson/TextInfoExp

热门文章推荐

周志华：实验表明gcForest是最好的非深度神经网络方法

黑科技｜Adobe出图象技术神器！视频也可以PS了！！

史上第一个被授予公民身份的机器人索菲亚和人对答如流！

浙大90后女黑客在GeekPwn2017上秒破人脸识别系统！

周志华点评AlphaGo Zero：这6大特点非常值得注意！

汤晓鸥教授：人工智能让天下没有难吹的牛!

英伟达发布全球首款人工智能全自动驾驶平台

未来 3~5 年内，哪个方向的机器学习人才最紧缺？

中科院步态识别技术：不看脸 50米内在人群中认出你！

厉害｜黄仁勋狂怼CPU:摩尔定律已死 未来属于GPU!