PAI-AutoML调参服务是通过算法的方式解放用户调节算法参数的工作。自2018年8月发布PAI-AutoML1.0版本以来，该功能已经帮助众多PAI的中小企业用户提升了模型的准确性，得到了不错的反馈。
PAI-AutoML1.0版本介绍文章：https://help.aliyun.com/document_detail/87393.html，为了进一步提升该服务的能力，PAI在今日发布AutoML调参服务2.0版本，目前该功能已经在PAI各区域服务全量上线。
在AutoML2.0版本中将包含以下Feature：
- 新增目前业内热门的高斯调参方法以及针对大规模数据改良后的高斯采样算法
- 增加了提前停止条件（EarlyStop）机制，帮助用户能更高效的利用资源
典型用户场景
某公司主营业务是广告DSP平台，对于广告DSP公司来讲，CTR预估准确性是营收的生命线。而CTR预估算法在机器学习领域属于二分类算法，目的是通过用户画像判断投放给用户的广告是否会被点击。
二分类算法如果在PAI平台选用GBDT或者RF这些算法需要有大量的参数调节，而且每个参数都具有很广的定义域，光靠人工手动调节很难锁定最优的参数组合。如下图，仅树的数目这一个参数就有[1,10000]这1万种参数可能性。
通过PAI-AutoML工具，只需要设置每个参数的大致范围，就可以通过调参算法自动找到最优参数组合：
从收益来讲，假设用户每日投放广告量为1000万次，使用AutoML之前的CTR预估准确率为0.7%，也就是投放1000万次会获得点击7万次。如果通过AutoML调参功能将CTR预估准确性提升到0.8%，可以帮助平台每天新增点击1万次。假设每次广告点击平台的收益是1元，那么平台日新增收入将增加1万元，年直接经济收益超过百万。
开箱即用
目前PAI-AutoML功能已经全面上线，只需要进入PAI-STUDIO页面，地址：https://pai.data.aliyun.com/console
新建项目并在首页模板中找到”基于对象特征的推荐“模板：
点击控制面板中的AutoML功能即可开始试用：
详细说明
在2.0版本中调参算法种类从4个增加到7个，各个算法详细说明如下：
| 算法名称 | 说明 |
|---|---|
| Gause（高斯算法） | 高斯过程，是一种非参数贝叶斯模型。作为经典算法，高斯过程已经广泛地被应用于超参优化领域。它通过不断观测超参配置表现来拟合代理模型，再通过模型的预测能力来强化决策，从而能在有限的尝试次数中更有目的地选出合适的超参结果。 |
| Sample（采样算法） | 该算法是PAI团队与达摩院合作自研的算法。对于数据量巨大的实验，其实仅需要一部分数据，就可以对一组超参所能得到的最终结果作一个预估。采样算法利用这一特性，结合PBT算法的思想，在增加超参选取数量的同时，逐步提高采样比例，不仅能进行更广的探索也能获得更快的加速 |
| EvolutionaryOptimizer（进化式调参方法） | 该算法是PAI团队基于PBT理论自研的算法，EvolutionaryOptimizer算法将调参问题看成一个多轮迭代循序渐进探索最优解的问题。其中”探索样本数“表示每轮迭代的样本，”探索次数“表示迭代轮数，”收敛系数“控制每次迭代的步长。在迭代过程中EvolutionaryOptimizer会在每轮结束后抛弃效果不理想的探索样本，并在效果更优的探索样本集合中向外拓展更多探索样本，形成下一轮的计算探索样本集合。以此方式迭代，直到完成迭代轮数。 |
| PBT（Population-based training） | PBT是一类基于种群概念的演化算法。它把超参配置看为一个种群，将搜索过程作为一个动态环境，在不断的迭代中对超参配置们进行优胜劣汰的筛选，最终得到表现更好的结果。这类算法概念简洁，可以适应不同的数据结构，在深度学习模型训练中取得过较好效果。 |
| Grid Search | 网格搜索调参法，将每个参与调参的参数按照比例等分切割，并且将切割后的参数随机组合生成参数数候选集进行计算和对比。 |
| Random Search | 随机搜索调参法，在每个参数空间中随机采样并且组合形成参数候选集，并对候选集进行计算和对比 |
| User-define | 用户自定义参数组合 |
作者：傲海
阅读原文
本文为云栖社区原创内容，未经允许不得转载。
网友评论