机器学习
-
阿里云天池怎么用?新手第一周该先做哪几件事
不少人第一次接触数据分析或机器学习,都是从“去比赛练练手”开始的。比赛多,真打开页面时反而容易愣住,不知道先点哪里、先看哪份数据。阿里云天池是国内不少人常用的平台,适合拿来练手,题目背景也离真实业务比较近,这一点对新手挺有用。 天池是什么 说白了,阿里云天池是一个数据科学竞赛与学习平台。上面有企业出的正式比赛,也有长期开放的学习赛和公开数据集,还配了在线开发…
-
用服务器训练模型,选配置时最容易踩哪些坑
第一次接触机器学习,多半是在笔记本上跑个小demo。数据稍微大一点,模型复杂一点,风扇就开始狂转,进度条半天不动。这时候把任务交给服务器,通常是更省事的做法。结合几次实际踩坑,说说用服务器训练模型时要考虑哪些事。 什么时候该上服务器 判断标准不复杂。数据量超过几个G,参数动辄上亿,或者单次训练要跑十几个小时,本地机器基本扛不住。如果还要多人协作、反复对比实验…
-
用云服务器训练模型,GPU 型号和计费方式怎么选
不少团队做机器学习项目时,都会碰到一个老问题:本地机器跑不动大模型,买一张显卡又怕大部分时间闲着。云服务器就是为这个矛盾准备的。需要算力时租一台,训练跑完就释放,精力可以放在数据和算法上。 为什么不在本地训练 本地训练的问题主要有两点:算力上限和利用率。一块消费级显卡能跑通小模型,遇到几十亿参数的模型,显存很快就不够用。训练任务通常是一阵一阵的,项目赶进度时…