《深度学习之美》读书笔记章一~二

从这一篇开始进行拆书系列,首先来拆一下这一本《深度学习之美》。看到这本书,是在张老师的朋友圈,那时还在五月份,张老师说新书要出来了,当时就立即预定了一本。下面来拆这一本书。书的前四章比较简单,一块来作为这篇文章。

章一:一入侯门深似海,深度学习深几许

这一章是深度学习的简介。

1.1深度学习的影响.

2013年深度学习被麻省理工学院的《MIT科技评论》评为世界10大突破性技术之一。AlphaGo是深度学习的一个应用。利用深度学习通过对海量数据的快速处理,消除信息的不确定性。将人类过去痴迷的算法问题,演变成数据和计算问题。深度学习从输出层开始,到中间隐藏层的数据抽取变换到输出层的判断,所有特征的提取完全是自主完成的,在机器学习领域,是革命性的。

1.2学习的概念

学习是为了改进系统性能而执行的过程。

1.3什么是机器学习

通过运用数据及某种特定的方法(统计,推理等)来提升机器系统的性能就是机器学习(Machine Learning)。
大数据时代,机器学习从海量的数据中获取知识,将焕发异彩。

1.4机器学习的四个象限

知识的四个象限。如下图:



深度学习属于统计学习的范畴。对数据进行统计,提取其特征,抽象出模型,发现其中的知识,最后再回到数据的分析和预测中去。

1.5深度学习的概念

深度学习是包含多个隐藏层的学习方式。2016年商汤科技把网络层做到了1207层。

章二: 人工“碳”索意犹尽,智能“硅”未来可知

这一章讲的是人工智能,机器学习,深度学习的关系,以及神经网络的特点等。

2.1深度学习的归属

人工智能是为机器赋予与人脑类似的智能。简单划分人工智能包含机器学习,机器学习是实现人工智能的一种方法,而深度学习是实现机器学习的一种技术。

2.2机器学习形式化定义

机器学习三大步骤:函数建模,一系列标准评估函数的好坏,优化找到最佳函数。
形式化定义是用数学表达式来表示,如训练集合等。

T={(x1,y1,(x2,y2),...,(xm,ym)}

2.3神经网络的定义

神经网络:是一种具有自适应的简单单元构成的广泛并行互联的网络,它的组织结构能够模拟生物神经系统对真实世界所做出的交叉反应。

生物神经网络的学习方式:大脑通过增强或弱化突触进行学习,最终形成一个复杂的网络系统。
人工神经网络(Artificial Neural Network,ANN)处理数据的新模式。

人工神经网络

人工智能领域的两大门派:
符号主义。他们认为知识是信息的一种表达形式,人工智能的核心人物是处理好知识表示,知识推理和知识运用。核心方法论是自顶向下设计规则,然后通过各种推理,逐步解决问题。

连接主义。试图编写一个通用模型,通过数据训练,不断改善模型中的参数,直到输出的结果符合预期。在网路层次上模拟人的认知功能,用人脑的并行处理模式来表征认知过程。深度学习属于这个门派。

2.4人工神经网络的特点

  1. 非线性。
  2. 非局限性。作用域不是局部的。
  3. 非长定性。一直在自我更新。
  4. 非凸性。指函数可能有多个极值。

2.5通用近似定理

机器学习本质上是找到一个好用的函数,人工神经网络在理论上证明:“一个足够多隐含层神经元的多层前馈网络,能以任意精度逼近任意预定的连续函数”。
这个定理称为通用近似定理。这个定理告诉我们,不论函数在形式上有多复杂,我们总能找到一个神经网络,对任意输入x,以任意高的精度近似输出f(x).


这篇文章介绍学习,深度学习,人工智能,机器学习,神经网络学习等概念,特点。下一篇拆第二,三章,介绍机器学习的分类,python基础。

©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 文章主要分为:一、深度学习概念;二、国内外研究现状;三、深度学习模型结构;四、深度学习训练算法;五、深度学习的优点...
    艾剪疏阅读 22,064评论 0 58
  • 原文地址:http://www.cnblogs.com/subconscious/p/5058741.html 神...
    Albert陈凯阅读 10,813评论 0 48
  • 1.先完成,再完美 畏首畏尾,迟迟不愿开始,这样下去,还没开始就落后了一截。接到任务,着手开始,在修正中成熟。 2...
    赵三多阅读 2,778评论 0 2
  • 奶奶在自己母亲怀里把委屈发泄一通后,才发现围在身边的弟弟妹妹们,唯独少了大弟弟。一问才知道,大弟弟也向姐姐学习打日...
    6水中飓风6阅读 1,885评论 0 7
  • 塌陷问题 当两个盒子在垂直方向上设置margin值时,会出现一个有趣的塌陷现象。 垂直并列(少见) /HTML部分...
    饥人谷_米弥轮阅读 8,148评论 1 0