tensorflow中使用tf.ConfigProto()配置Session运行参数&&GPU设备指定

【转载】
tf.ConfigProto()函数用在创建session的时候,用来对session进行参数配置:

config = tf.ConfigProto(allow_soft_placement=True, allow_soft_placement=True)  
config.gpu_options.per_process_gpu_memory_fraction = 0.4  #占用40%显存  
sess = tf.Session(config=config)  

1. 记录设备指派情况:tf.ConfigProto(log_device_placement=True)

设置tf.ConfigProto()中参数log_device_placement = True ,可以获取到 operations 和 Tensor 被指派到哪个设备(几号CPU或几号GPU)上运行,会在终端打印出各项操作是在哪个设备上运行的。

2. 自动选择运行设备 : tf.ConfigProto(allow_soft_placement=True)

在tf中,通过命令 "with tf.device('/cpu:0'):",允许手动设置操作运行的设备。如果手动设置的设备不存在或者不可用,就会导致tf程序等待或异常,为了防止这种情况,可以设置tf.ConfigProto()中参数allow_soft_placement=True,允许tf自动选择一个存在并且可用的设备来运行操作。

3. 限制GPU资源使用:

为了加快运行效率,TensorFlow在初始化时会尝试分配所有可用的GPU显存资源给自己,这在多人使用的服务器上工作就会导致GPU占用,别人无法使用GPU工作的情况。
tf提供了两种控制GPU资源使用的方法,一是让TensorFlow在运行过程中动态申请显存,需要多少就申请多少;第二种方式就是限制GPU的使用率。
一、动态申请显存

config = tf.ConfigProto()  
config.gpu_options.allow_growth = True  
session = tf.Session(config=config)

二、限制GPU使用率

config = tf.ConfigProto()  
config.gpu_options.per_process_gpu_memory_fraction = 0.4  #占用40%显存  
session = tf.Session(config=config) 

或者

gpu_options=tf.GPUOptions(per_process_gpu_memory_fraction=0.4)  
config=tf.ConfigProto(gpu_options=gpu_options)  
session = tf.Session(config=config) 

4.设置使用哪块GPU
方法一、在python程序中设置:

#在程序开头
os.environ['CUDA_VISIBLE_DEVICES'] = '0' #使用 GPU 0
os.environ['CUDA_VISIBLE_DEVICES'] = '0,1' # 使用 GPU 0,1

方法二、在执行python程序时候:

CUDA_VISIBLE_DEVICE=0,1 python yourcode.py

推荐使用更灵活一点的第二种方法。

©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

  • 1、tf.shape(varA)和varA.get_shape()这两个API都是返回varA的size大小,但是...
    溪奇阅读 9,261评论 0 1
  • 工作中遇到的一些问题,随手记下来自我的cmd https://www.zybuluo.com/jiehanwang...
    汉杰阅读 13,056评论 0 4
  • “美必须干干净净,清清白白,在形象上如此,在内心中更是如此。”这句话,援引自法国著名思想家孟德斯鸠之口,每思及此,...
    是舒格阅读 3,233评论 0 3
  • 可以下班了,今天把党内年报在系统上校核好上报提交了,断断续续加班加点大概有两周时间,涉及信息录入、核对、报错、反查...
    小梅弄堂阅读 1,081评论 0 0
  • 风筝——天高地远任尔飞,心却唯系她手中。
    陈心络阅读 1,850评论 1 0

友情链接更多精彩内容