给新手的机器学习思路

你现在可能在做数据分析师,做一些报表,图表,计算一下平均值,偶尔用一下SQL。然后突然有一天你意识到可以对你的数据做更多的事儿,那么恭喜你,你可以开始做机器学习了,但是当你打开搜索引擎,发现有4360万个关于“机器学习”的结果,有的技术太深刻,有的只有大段的数学公式,或者深不可测的人工智能产品,但是这些对一个新手来说都不够友好。因此,我有了写下面几个建议的想法,来帮助梳理一下机器学习的使用思路。

第一步:找到工作中哪一个流程是可以通过机器学习解决的

首先要做的是思考一下自己的工作,理清楚工作的内容,思考哪一个工作任务可以通过机器学习等到更好的结果或者提高工作工作效率。下面是几个机器学习可以解决的问题:

预测:比如哪个客户会流失,哪个客户会归还贷款,谁将会变成最重要的客户,谁在说谎,谁会死去(泰坦尼克号项目),当你有了相关数据的时候,你都可以去预测这些事情,一般情况下,预测的结果不会针对到个人,也不能做到100%正确,但是可以让你在看上去随机的情况中找到可能性更大的情况。

划分:不同的顾客,他们的行为模式也是不同的,通过机器学习,你可以通过找出不同顾客之间的有意义的不同点来将顾客划分为不同的组,这种做法有助于了解你的客户,甚至可以想象出他们的样子。另外,细分也有助于销售,生产,客户管理等部门之间的合作。

分类:当你做完细分操作后,你就可以快速地理解你的新客户们属于哪个类别,这可以通过分类任务来完成,你已经对客户进行了划分,知道了他们的轮廓,拥有了一些关于新客户的新数据。你可以很容易了解新客户

联系:它是关于你的新客户可能会购买什么样的产品,这样你就可以非常聪明地制定销售策略

模型探索:你可能感兴趣于你的公司的哪一个因素对公司发展影响最大,销售、士气、员工忠诚度等,我们称之为模型探索,即发现非明显的因素。例如我们发现在电信业上,抱怨的频率比较高的用户流失的几率更小。

第二步:为你的问题找到最合适的算法

描述机器算法并不是件简单的事儿。尤其是对初学者来说,在找到正确的书或者训练之前可能会走很多弯路。

决策树:将你的数据根据不同来分组。例如将你的目标客户分为谁会买,谁不会买。

朴素贝叶斯:朴素的意思是它不会考虑列属性之间的依赖关系。它的作用和决策树类似

K-means或者期望最小值:找出你的数据中隐藏的分类

逻辑回归:预测一些事情发生的可能性

神经网路:非常适合用来进行模型探索,尤其是那些复杂且不明显的数据

线性回归:由于它特别简单,因此使用的频率也最高。你可以使用它分析数据之间的依赖性,或者做一些预测

关联规则:用来分析有助于销售的产品组合

以上就是出现频率最高的几个算法,除此之外还有例如支持向量机等算法,值得注意的是,没有最好的算法,只有最合适的算法。

第三步:选择合适的工具

专业的数据分析软件如Matlab等,都非常规,好消息是目前已经有很多开源免费的工具,对一个机器学习的新手,我觉得R语言和Python是非常不错的入门语言,个人认为Python不仅简单易学,而且在各个行业的应用也非常广,作为第一个入门语言是非常合适的。

第二步中提到的机器学习算法,目前已经都有开源的库实现,例如Python中的sicikit-learn或者最近大火的tensorflow,性能都有经过优化,推荐新手使用。

最后:如何使用工具

取得数据之后的第一步是直观地去观察数据,刷过kaggle教程的人都知道,每一个kaggle大神写的新手教程都是先做数据的展示的,他们会先将数据用图的方式展现出来,无论是使用Excel,Python或者R,图可以告诉你一组数据最有价值的部分。然后通过观察,排除无效的数据,筛选合适的特征,选取合适的模型,最终整理出来的数据才是真正程序需要处理的。

我认为对于新手来说,复杂的数学公式,几十万的数据,或者是高大上的AlphaGo,只会让人望而却步,无从下手。新手更应该尝试从自己工作或者生活中的小问题入手,去理清思路、分析数据、选取模型、运用机器学习算法,才能更深入的学习下去。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 213,558评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,002评论 3 387
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 159,036评论 0 349
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,024评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,144评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,255评论 1 292
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,295评论 3 412
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,068评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,478评论 1 305
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,789评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,965评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,649评论 4 336
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,267评论 3 318
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,982评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,223评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,800评论 2 365
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,847评论 2 351

推荐阅读更多精彩内容