先说说自己的亲身体验吧,最近忙于毕设,刚好也是做深度学习方面。
自己魔改yolov5模型,用的一直是yolov5m v6.1版本。三月份确定用bdd100k数据集,这个数据集相当大。10w张交通类型的图片,13个种类。图片质量虽然效果一般,但是量大自己也是做交通识别。
大家自己看下这个标签数量就知道了。高达70w的汽车标签,这怎么能是1050ti能处理的呢?显存还是4g。以上是自己笔记本配置。自己起初是在电脑上先训练。这个当时给自己卡的就想砸电脑了,自己设置epoch就设置了5轮从早上9跑到了晚上9点。看下效果图啊
看起来效果是很不错的,而且有可能会有长点的趋势,如果只在自己电脑上跑150epoch的话我大概得跑25天左右,而且每天晚上必须的中断,而且在跑的过程中电脑不i能进行其他操作。于是我放弃了。这无疑不是一个好选择。
/
于是转战其他平台,自己找到google colab,上面谷歌云盘网址,可以挂载自己代码和数据集,然后通过Google colab读取云盘,并运行。这个平台怎么说呢?用过才知道,只不是资本家过剩的资源,除了免费和免费试用6小时gpu,我要开始吐槽了,如果遇到我说的不对的你可以反驳我。我也只是给出建议:
1.免费,如果你玩不明白,就白搭了。
2.需要翻Q,这个国内是禁止的,但是可以实现。也可能是我校园网被Q了
3.上传大文件数据集相当慢,自己也找其他办法,本地准备好所有代码和数据,要提前测试好,不然你弄个跑不通的代码去colab挺麻烦的。本地打包压缩,用one driverOneDrive ()上传数据,再通过mult cloud/授权两个平台,在转过去。是不是看到这里你已经放弃了,这也只是我上传1.5g数据所做的事。
3.一切准备好了,那就开始训练吧,训练还挺好上手的,只说缺点啊,这个下面验证码会一直出现,但是可以通过浏览器脚本事件去除掉,自行去找方法。
4.分配gpu为下面这个类型,分配运行内存说是动态的但我每次看我都是0.9g(不是显存哦),可能运气不好吧。到6小时直接不让用gpu我跑了大概46轮。必须得等24小时候重新分配gpu,很鸡肋。官方说是充钱可以强大。但是不支持国内支付方式。这你让我怎么玩。而且还不能后台运行。
5.环境倒是基本符合我的要求。
唉没办法大项目的话只能弃坑了,想不花钱是不可能的了,作为一个合格炼丹师,要敢于面对困难,但是这个可以找导师报销哦,如果是实验室大项目的话。
主题来啦!!!
国内也有很多gpu平台。自己也是被别人种草推荐来到这个恒源云这个平台。上手真的很快,gpu价格也很亲人!!!
先上官网链接恒源云_GPUSHARE-恒源智享云
1.平台显卡类型丰富、价格实惠、环境预装框架工具等
几乎把环境直接跳过了,价格真的美丽动人:
以上是官方给出的价格!!!
2.100G免费数据存储、oss数据上传速度快、内置400+公共数据集等
oss真的很快,上传能到10m/s,下载也是在10m/s,这个取决于自己网速啊,在镜像之间互传能到400m/s,真的无敌。
3.活动丰富(新人100元礼券、会员专属折扣、学生100元礼包、邀请有礼、每日签到、每月限定活动)
这个真的巴适,我认证了学生福利,所有服务器95折,送100元代金卷,无门槛使用哦,也就就是3090 24g能跑13个小时。已经对新人来说相当好了。
自己已经白漂了2次实验结果了,结果相当不错啊。
tips:
官方给出有脚本,支持自动保存训练结果,支持观看gpu,cpu实时情况,支持无卡启动调试(0.5元/时),还有好多功能我还没开发到,但是对我的毕设已经时绰绰有余了。官方还有好多社群,大家感兴趣的话一起加入进来开发ai吧!!!
最后再安利一次恒源云,YYDS,我为恒源云举大旗!!!
连接附上:恒源云_GPUSHARE-恒源智享云