谷歌云平台上搭建带有 GPU 计算能力的实例

图片来源于 Unsplash 作者为 chuttersnap

最近,团队里希望能够在神经网络上和深度学习上做些实验,想做些概念证明工作。

因此,我需要搭建一台能给我 GPU 计算能力的计算机。我决定了在谷歌的云平台上搭建一台。以下是考虑的因数,

  • 在谷歌上注册新用户都能够获取到300美金的代金券

  • 现在谷歌上有的 GPUs 类型有两款 (Nvidia K80/P100)

  • 我可以在服务器上安装 CUDA 和 cnDNN

注册新用户

首先,注册新的谷歌帐号

接着,注册谷歌云平台帐号

谷歌云平台登入页面

备注

  • 谷歌云平台免费实用期为12月,价值300美金代金券
  • 在注册谷歌云品台时会用到信用卡。即使是免费注册也需要有效的信用卡号

设置预算预警

我建议在添加任何新的功能前,先吧预算预警设好,应为毕竟我们只有300美金的余额。可以跟着以下步骤,进行设置。

登入到 “结算 > 预算和提醒” 点击 “创建新预算”。

设置新预算提醒网页

创建新预算时,切记把预算金额设置为 $300。

设置 GPU 硬件

谷歌上的免费帐号权限只有最基本的配额。GPU 其实不在这基本的配额上。我们需要向平台申请修改配额。

不过免费帐号是不能申请 GPU 的。我们首先必须做的是从免费版升级到付费版。

升级的步骤如以下,

登入到 “IAM 和管理 > 配额”。右上角附近点击 “升级帐号”。升级后才能申请添加 GPU 的配额。

成功升级后,在列表里的下啦框里,选择适当的指标后应该可在亚洲服务器上找到有关的 GPU。

在写这篇文章时的,只有东亚1 (Asia-East1) 有所需要的 GPU。

选GPU的配额

唯一美中不足的一点是,在提交配额升级的过程时我们需要付一批35美金的激活费。考虑到价格,我的 GPU 选了一架 Nvidia 的 K80 GPU.

备注

  • 一般申请流程需要 2–3 工作日
  • 还有在写文章的时间时,K80 比 P100 的计算费用按月来算差别为 500美金,因为 P100 已经超出我的预算,所以选择了 K80

以上的流程一旦通过,我们可以开始搭建新的实例。因项目的需求,我选择了以下的配置,

实例配置

  • 地区:asia-east1-a
  • 机器类型:1 x vCPU
  • 内存:3.75GB
  • GPU:1 x K80
  • OS: Ubuntu 16.04
  • Cloud API 访问权限范围:允许所有 Cloud API 的全面访问权限

实例搭建好之后,你可以通过几种方式登入到实例上做一系列的操作。最普遍的方式应该有,

  1. 直接从游览器上打开
  2. 用 ssh 客户段
  3. 用谷歌的 gcloud 命令

我选这了用第三种方式。gcloud 命令。

本地机上安装 gcloud 程序

因为我的本地机上的系统是 macOS,以下的内容将针对我所经验过的步骤。如果需要用其他的系统可以参考以下链接,

在你的本地 macOS 上,确保你已经有 python 2.7,如果需要的,可以用 vitualenv 或 conda 安装 python。

登入到 macOS Quickstart 下载针对您的 macOS 系统的 gcloud 安装包。然后运行安装脚本 ./google-cloud-sdk/install.sh

如果您遇到如以下的问题/报错,

UnicodeDecodeError: 'ascii' codec can't decode byte 0xe2 in position 262: ordinal not in range(128)

您可以直接把程序的命令脚本文件连接到您的 rc 文件里,例如 ~/.bashrc, 记得保存后运行 source ~/.bashrc/。以下的命令,可以把自己的参数替换掉。

$ echo 'export PATH=/where-you-unzipped/google-cloud-sdk/bin:$PATH' >> ~/.bashrc

$ source ~/.bashrc

运行 gcloud init 把初始化的流程走完,问题回答完。

流程走完后,登入到实例的命令如以下,记得把需要的参数改为自己的参数。

$ gcloud compute --project 'your-project' ssh --zone 'your-zone' 'your-instance-name'

Done! You should now have access to GCP instance.

If you want to start using your GPUs, look at the steps I took to install CUDA and cuDNN.

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,287评论 6 498
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,346评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,277评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,132评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,147评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,106评论 1 295
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,019评论 3 417
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,862评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,301评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,521评论 2 332
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,682评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,405评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,996评论 3 325
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,651评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,803评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,674评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,563评论 2 352

推荐阅读更多精彩内容

  • 车子行驶在城郊的公路上,天色渐渐暗下来,杨树立在道路的两边黑,漆漆的像是哨兵。路上的车子开着灯,像一只只的幽灵,穿...
    serf阅读 369评论 0 0
  • 耳闻窗外雨,轻轻点点,欲敲门户。院子明明,瓦楞水沟成柱。奔向南山是雪,雪行早、黄花无度。天尽处,银光闪烁,不知何故...
    木貞ma阅读 250评论 1 3
  • 作 者:文刀公众号:做到洞察即做到简 书:做到时间-1:2017.11.22 06:35-07:56(3...
    WendaoSolemn阅读 2,162评论 1 6