Pytorch如何根据layers的name实现冻结训练方式-创新互联

这篇文章主要介绍了Pytorch如何根据layers的name实现冻结训练方式,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。

创新互联专注于新乡网站建设服务及定制,我们拥有丰富的企业做网站经验。 热诚为您提供新乡营销型网站建设,新乡网站制作、新乡网页设计、新乡网站官网定制、微信小程序开发服务,打造新乡网络公司原创品牌,更为您提供新乡网站排名全网营销落地服务。

使用model.named_parameters()可以轻松搞定,

model.cuda()
 
 
# ######################################## Froze some layers to fine-turn the model ########################
for name, param in model.named_parameters(): # 带有参数名的模型的各个层包含的参数遍历
  if 'out' or 'merge' or 'before_regress' in name: # 判断参数名字符串中是否包含某些关键字
    continue
  param.requires_grad = False
# #############################################################################################################
 
 
optimizer = optim.SGD(filter(lambda p: p.requires_grad, model.parameters()),
           lr=opt.learning_rate * args.world_size, momentum=0.9, weight_decay=5e-4)

感谢你能够认真阅读完这篇文章,希望小编分享的“Pytorch如何根据layers的name实现冻结训练方式”这篇文章对大家有帮助,同时也希望大家多多支持创新互联,关注创新互联行业资讯频道,更多相关知识等着你来学习!


网站栏目:Pytorch如何根据layers的name实现冻结训练方式-创新互联
文章路径:http://bzwzjz.com/article/dscccg.html

其他资讯

Copyright © 2007-2020 广东宝晨空调科技有限公司 All Rights Reserved 粤ICP备2022107769号
友情链接: 成都网站建设公司 成都网站建设公司 成都网站制作 手机网站制作 手机网站建设 成都商城网站建设 成都网站建设 网站建设推广 定制级高端网站建设 网站制作 成都网站建设公司 营销型网站建设 古蔺网站建设 教育网站设计方案 成都营销网站建设 重庆电商网站建设 定制网站建设多少钱 企业网站设计 四川成都网站设计 成都网站建设 企业网站设计 外贸网站设计方案