机器学习环境配置

写在前面的几个概念

  • python
    多指python解释器,作用是将高级语言翻译为机器语言
  • 编辑器
    编写代码的工具,python解释器自带的IDLE、JupyterNotebook、Pycharm、VSCode等
  • pip(package installer for python)
    库管理工具,通过pip安装、卸载、更新众多库(python3.4后的版本的解释器自带pip工具)
  • Anaconda
    相比于直接使用编辑器+解释器的安装方案,Anaconda预装了conda、某个版本的python解释器、集成了许多常用库(因而不再需要一个个pip安装)、一些科学计算工具;同时兼容python2版本和3版本;安装时会自动安装相应的依赖包
  • conda
    conda是一个工具,也是一个可执行命令(在cmd中),核心功能是包管理(pip)和环境管理(virtualenv)。包管理与pip类似,环境管理则允许用户安装不同版本的python并快速切换
  • Ubuntu
    Linux系统之一

安装方法

推荐采用Anaconda+Pycharm的安装方式

安装Anaconda

Anaconda是一款包括Conda、Python以及一大堆安装好的工具包,其中conda是一个开源的包、环境管理器,可以用于在同一个机器上安装不同版本的软件包及其依赖,并能够在不同的环境之间切换。就用它给tensorflow搭个虚拟环境。

点击标题链接进入Anaconda个人版下载页面,根据自己系统版本下载相应的软件安装包,我自己下载的是python3.7 64位


image.png

下载好后直接默认点next就行了,由于我自己C盘留了三百多G,就没有更改安装路径,换其他盘应该也没问题。
安装进行到下图时把PATH environment 选项勾上,这是为了把Anaconda给加到环境变量里。如果不勾的话,到时候手动设置就行了。

image.png

手动设置的方法
进入桌面-此电脑-右键-属性-高级系统设置-环境变量-系统变量中的Path-选中后点编辑-新建-浏览-把Anaconda安装目录下的Scripts文件夹加入-一路确认退出即可

安装完成后按win键到开始界面找到anaconda文件夹下的anaconda powershell prompt(另一个也可以,区别见下)
输入

conda --version

输出是conda的版本信息就OK了

Anaconda prompt和Anaconda powershell prompt的区别

区别就是在于powershell。类似于win10下的cmd和powershell, anaconda powershell prompt比anaconda prompt多出了一些Linux命令,比如你在两个窗口中都输入ls,前者有用后者没用

安装CUDA Toolkit

想要通过GPU运行tensorflow、pytorch等库需要以下依赖

  • CUDA Toolkit
  • 支持CUDA Toolkit 的显卡驱动
  • cuDNN
  • 具有CUDA Compute Capability 3.0或更高版本的显卡

CUDA Toolkit版本的选择

太高版本的CUDA你使用的显卡可能并不支持,因此要确定自己的显卡最多支持到什么版本的CUDA
进入桌面-右键-Nvidia控制面板-帮助-系统信息-组件


image.png

可以看到我的显卡只支持到CUDA 9.0,再高版本的CUDA就无法使用了

CUDA Toolkit的安装

下载好后直接双击运行开始安装

  • 默认安装会提示你没装Visual Studio,忽略即可
  • 自定义安装将CUDA下的Visual Studio Intergration勾取消;
    “Driver Components”选项卡下,比较当前版本信息和安装版本信息。
    若当前版本高于安装版本,则取消勾选“Display Driver”;
    若当前版本低于或等于安装版本,保留默认信息安装即可(这是另一个博主说的,电脑上之前没CUDA的话应该没事,我是默认没取消)
    自定义安装的话CUDA安装的目录要记牢!后面要用

安装好后,同样再在Power Shell里运行

nvcc -V(V要大写!)

显示版本号就安装成功

PS:我一开始安装时,先安装了tensorflow 2.1.0再装的CUDA 9.0,报“Could not load dynamic library 'cudart64_101.dll'”的错误,是因为tensorflow的版本太高了,而盲目将CUDA换成10.1版本[February,2019],却忽视了自己的显卡并不支持这么高的CUDA,只好重新卸载安装低版本

卸载CUDA

  1. 打开设置的应用与功能,按时间顺序排序;
  2. 保留NVIDIA的图形驱动程序、NVIDIA Physx系统软件和Nvidia Geforce Experience,其他的绿色的那种全卸了;
  3. C:\Program Files\下的NVIDIA GPU Computing Toolkit文件夹也可以删了;
  4. 用杀软清理一下注册表

安装显卡驱动

显卡驱动可通过官方的Nvidia Geforce Experience更新,如果下载速度过慢就去官网手动下载。一定要注意显卡驱动的更新,不然可能在后面会出现“Attempting to fetch value instead of handling error Internal: failed to get device attribute 13 for device 0: CUDA_ERROR_UNKNOWN: unknown error”的错误

安装cuDNN

要对神经网络加速的话,要下载额外的cuDNN加速库。这不是一个安装程序。下载这个要先加入Nvidia的开发者,登录费了我好大劲。。
下载的版本要与相应的CUDA版本对应,我下的是图中红箭头那个。


image.png

下载完成后解压,将其内容复制到CUDA所在的目录

之前安装时采取默认安装的话,位置应该是在“C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA”,自定义的话就是你记的那个

PS:有博主是将解压出来的东西放在一个文件夹下再放入CUDA所在目录,再将该文件夹下的cuda文件夹下的bin文件夹加入环境变量(这种方法我没试过,不知道行不行)

安装Pytorch

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,634评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,951评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,427评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,770评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,835评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,799评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,768评论 3 416
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,544评论 0 271
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,979评论 1 308
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,271评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,427评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,121评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,756评论 3 324
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,375评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,579评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,410评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,315评论 2 352