极视角黄河：极市，一个平台解决AI算法开发落地的全部难题

12月24日，由腾讯云启创新中心（珠海）和极视角联合主办的第二届珠港澳人工智能开发者主题论坛暨算法大赛颁奖典礼在珠海电视台新闻发布厅圆满举行。会上，极视角副总裁黄河作了《极市平台产品和技术实践》主题报告，报告分享了极市平台的产品技术的底层逻辑。

黄河表示，在算法开发过程中，存在四个瓶颈常常导致算法“难产”：

1、缺少优质的一站式开发平台，开发效率低；

2、算力成本高昂，算力资源的利用率低；

3、难以接触大量真实有效的业务数据，且数据安全性和隐私性难以保障；

4、算法测试耗时繁琐，且难以评估落地有效性。

基于此，极视角打造了极市平台。极市平台是面向算法开发者打造的一站式全流程AI算法开发平台，可以覆盖从数据生产到算法落地一站式编码、训练、测试、封装、部署等全生命周期。极市平台为算法开发者提供强大的基建设施支撑及丰富的工具引擎，将算法开发与工程化效率提升60%以上。

极市平台打造了自动测试框架、数据安全沙箱、算力调度系统及异构硬件兼容适配等多项关键技术，相比传统线下开发方式，大幅提升算法开发效率，一个平台解决AI算法开发落地的全部难题。

极市平台提供开箱即用的开发环境，内置了Pytorch、TensorFlow等主流深度学习框架，开发者可以通过WEB界面直接使用流行的VSCode或Jupyter等IDE开发工具。开发环境内置GIT代码管理工具，并拥有开发环境自动保存机制，开发者可以随时随地进行开发，而完全不必担心数据或代码丢失。极市平台可以把AI算法开发的环境搭建过程从「天」级别缩短到「分钟」级别，让AI算法开发不受时间、地点的约束。

线下开发的过程中通常算力资源有限，一方面存在资源抢夺、排队等候的情况；一方面可能存在资源空闲、资源浪费的情况。

极市平台创立了基于积分制的算力资源管理系统，在开发者参与编码、训练、测试的过程中，通过其消耗的积分来作为算力使用的计量，并通过一套算力资源实时监控系统保证算力资源的合理调度。例如在本次珠港澳大赛和打榜的任务中，算力利用率高达96%。

为了给开发者提供高质量真实场景数据，助力开发者生产出商用级品质的算法，同时也保障数据提供者的数据隐私和合规要求，极市平台开发了数据安全沙箱技术。其中，数据安全沙箱的网络安全策略管理系统，能够把训练、测试环境完全隔离，实现了在不泄漏数据的同时又能让算法工程师基于客户真实数据训练模型和评估算法质量。

为了帮助开发者实时监控训练和测试，极市平台的日志系统支持实时查看训练和测试的日志；并可通过可视化工具查看模型训练的指标，实现主动监控训练状态；同时也支持无人值守训练，错误消息通知、训练进展定制化提醒、训练结束通知等。让开发者无时无刻对自己的开发训练工作状态了如指掌。

完成算法的自动测试需要解决3个难题：

1、如何兼容不同算法框架；

2、如何让算法输入输出标准化；

3、如何正确评估算法性能及精度。

极市平台提供标准化封装框架EV_SDK，通过抽象出AI算法分析过程中涉及的初始化、输入、推理、输出等核心接口，形成一套兼容不同算法框架和算法任务的标准化工具。有了统一的封装框架后，一方面，可以解决自动测试及评估的难题；另一方面，算法工程化也可以实现标准化，由极市平台以安装包的形式进行标准化的部署落地。开发者只需要专注于模型的开发及核心算法逻辑的实现，不必关注繁琐的算法测试环节。

极市平台作为面向算法开发者的高度集成开发训练平台，助力开发者提高算法开发效率，增强算法模型的实用性和范化性，帮助算法快速工程落地。

过去5年，以极市平台为核心所建立起来的极市开发者生态，已经汇聚超20万海内外专业算法开发者。极市开发者生态帮助开发者丰富前沿算法知识、提升算法工程化能力、实现算法产品化和技术变现。极市希望与开发者们共同打造计算机视觉行业的生态圈，携手用算法改变世界

如果觉得有用，就请分享到朋友圈吧！