企业很少会缺乏机器学习方面的想法。更难的是如何将这些想法转化为可以开发、验证、部署和改进的模型,同时又不耗费过多的时间和专业人才。.
数据准备会延长项目周期。特征工程需要反复试验。团队需要测试无数种算法和超参数组合。即使找到了一个有前景的模型,验证和部署又会带来另一层复杂性。.
这就是自动化机器学习正在改变企业人工智能经济格局的地方。通过自动化机器学习生命周期中重复性强、计算密集型的阶段,企业可以缩短实验周期,让数据科学家有更多时间从事真正需要人类判断的工作。.
但更大的机遇不仅仅在于速度,更在于消除阻碍机器学习规模化的瓶颈。.
瓶颈审计:机器学习动力减弱的原因
机器学习流程在白板上看起来可能很高效。但实际上,几乎每个阶段都会积累摩擦。以下七个瓶颈尤其值得关注。.
1. 数据准备占用起跑线
在模型能够学习任何有用信息之前,团队必须对数据进行清洗、转换、结构化和验证。缺失值、格式不一致和噪声数据集都会使准备工作变成一项漫长的任务。.
自动化可以加速重复性的预处理任务并规范工作流程。数据科学家仍然需要了解数据质量和上下文,但他们花费在执行机械转换上的时间会减少。.
2. 特征工程过于依赖手动实验
传统上,选择哪些变量有助于模型做出准确的预测需要领域知识和大量的反复试验。.
现代自动化机器学习系统能够从大型数据集中生成、评估和选择潜在特征。这扩大了搜索范围,同时使专家能够专注于这些特征是否具有商业和统计学意义。.
自动化负责搜索,人类负责判断。.
3. 算法选择变成了一场猜谜游戏
团队应该选择哪种模型?随机森林?梯度提升?神经网络?还是完全不同的其他技术?
手动测试多种方法很快就会变得成本高昂。自动化系统可以根据预先设定的性能目标评估候选算法,从而为团队提供更有力的模型选择依据,而不是依赖于熟悉的方法或假设。.
4. 超参数调优会耗费大量实验时间
即使是正确的算法,如果超参数配置不当,也会表现不佳。.
手动调优需要反复的训练和评估,这会造成计算和操作瓶颈。而自动优化可以系统地探索各种配置,并更快地找到更优的组合。.
这一点很重要,因为企业人工智能团队应该把时间花在解读结果上,而不是无休止地调整设置上。.
5. 模型验证难以跟上步伐
准确率高的模型并不一定就是好的商业模型。团队必须评估模型的稳健性、泛化能力、偏差以及在不同条件下的表现。.
自动化可以规范部分测试和比较流程,从而更容易对多个模型进行一致的评估。然而,最强大的自动化机器学习实现方案仍然需要人工参与,以确定技术上强大的模型是否适合其预期用途。.
在高风险环境下,这种区别尤为重要。.
6. 部署造成了“最后一公里”问题
有些组织能够开发出优秀的模型,但却难以将其投入生产。.
开发环境与生产环境之间的差异、集成要求、治理控制以及数据科学团队与工程团队之间的交接,都可能大大减慢部署速度。.
自动化流水线可以通过标准化打包、测试和部署流程来减少这种摩擦。企业无需将生产视为一项独立的挑战,而是可以从一开始就将部署纳入机器学习工作流程的设计考量。.
7. 人才稀缺成为规模化发展的制约因素
或许最具战略意义的瓶颈在于人。.
高技能数据科学家的价值恰恰在于他们的专业知识难以复制。然而,企业却常常利用这些专业知识进行机器也能完成的重复性实验。.
自动化改变了格局。它可以让规模较小的团队评估更多想法,加快原型制作,并在适当的管理下将机器学习能力扩展到分析师和领域专家。.
这并不意味着数据科学家会过时,而是让他们的时间更有价值。.
领导力问题:哪些环节不应该自动化?
这正是 AutoML 讨论变得更有意思的地方。我们的目标绝不应该是自动化所有机器学习决策。业务背景、伦理判断、因果推理、模型治理和问责制仍然需要人的参与。.
领导者应该思考的是,人类的专业知识在哪些方面能创造最大的优势。.
机器擅长搜索庞大的可能性空间、重复实验以及针对既定目标进行优化。而人类则更擅长判断哪些问题值得解决、输出结果是否合理以及模型可能产生哪些后果。.
当企业围绕这些互补优势设计工作流程时,竞争优势就会显现出来。.
自动化机器学习改变了人工智能的经济格局
自动化机器学习最大的优势并非在于任何人都能一键打造完美无瑕的人工智能。这种想法过于简单化,既低估了这项技术,也低估了负责任地运用这项技术所需的专业知识。.
它的真正价值在于消除不必要的摩擦。.
当团队减少准备流程、比较算法、调整配置和重复例行实验的时间时,他们就可以将专业知识重新用于问题定义、治理、解释和创新。.
另请阅读: 如何管理员工使用消费级与企业级生成式人工智能平台
人工智能的下一个优势在于消除瓶颈
企业人工智能的成熟度将越来越取决于组织如何高效地将数据转化为可靠的决策。.
最终的赢家未必会拥有规模最大的数据科学团队,也未必会尝试最多的模型。他们会构建出能够让稀缺专业知识发挥更大作用的系统。.
这就是自动化机器学习的战略意义:不是取代人工智能背后的人,而是消除阻碍这些人做出更高价值决策的重复性工作。.

