使用weka进行文本分类

任务: 使用Weka完成一个简单的文本分类试验,原始数据是文本,训练文本和测试文本的内容都描述了篮球运动和谷歌地球的情况,分类标签要求关于篮球运动为yes,谷歌地球的标签为no。

训练文本:train.txt
图片发自简书App

测试文本:test.txt


图片发自简书App

一:准备工作####

1.首先,我用文本编辑器(EmEditor)分别打开训练文本和测试文本,将其另存为csv格式.
2.用Excel打开刚刚csv后缀的两个文件...在训练集train中插入首行,加入两列的列名,分别为text和label.在训练集里根据描述内容判断其为yes或者为no...在测试集里只插入首行,填上第一列和第二列列名text与label...保存..

二:数据导入weka进行文本分类###

1.用weka分别打开处理好的csv文件...##如果打开为乱码,请用方法解决:打开weka文件,,找到RunWeka.ini,,将其里的fileEncoding修改为fileEncoding=cp936...###
2.将文件打开后,我们发现属性类型为Nominal.第一步经过filter里的nominaltoString将其改变为String类型..
注意两点: (1)将第一列属性改变为String,
(2)下方选择noclass
附图


图片发自简书App

图片发自简书App

图片发自简书App

第二步再次经过filter,使用StringToWordVector过滤器,对其进行预处理.将文本分割...
3.将两个文件进行相同预处理后,保存成arff格式.打开train.arff,,使用classify算法对其分类.注意三点:
(1).我们用Supplied test set的方式加载测试集,点击set,然后open file,将test.arff加载进去,,在open file下方选择class为label.
(2)第一步完成之后,,在start上方选择label.最后点击start..
(3)在result list中将鼠标放在刚刚出现的分类名称上,右击,然后选择visualize classifier errors ,将其保存成arff格式,(我保存为graph.arff)
附图:


图片发自简书App

图片发自简书App

图片发自简书App

三:呈现结果###

将上面保存的graph.arff用weka打开,点击editor,即可看到我们对测试文本进行分类的结果.
附图:


图片发自简书App
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 发现 关注 消息 iOS 第三方库、插件、知名博客总结 作者大灰狼的小绵羊哥哥关注 2017.06.26 09:4...
    肇东周阅读 14,196评论 4 61
  • 今天爸爸妈妈带我们去罗浮山旅行。我们先坐了缆车。等我们来的时候,就已经是一条大长龙了!我们足足等了一个半小...
    黄清悠阅读 1,079评论 0 3
  • 这是个变换莫测、更新快速的世界:常常一夜间,就会冒出不少成功者。 美国记者沙恩.斯诺,曾好奇地采访过一些快速成长的...
    孙国飞扬阅读 1,813评论 0 4
  • 那天,我写了一篇《十年》的散文,城问我,为什么不写写我们的故事,我说我没有灵感,写不出来。 为此,他做了个蛋糕,说...
    soso50阅读 1,397评论 0 3