管交通、查违章：10+顶会冠军之后，百度推出城市视觉感知算法引擎

会员服务 ·

管交通、查违章：10+顶会冠军之后，百度推出城市视觉感知算法引擎

2021 年 8 月 2 日 机器之心

机器之心发布

机器之心编辑部

百度城市感知四大核心技术构筑的「城视引擎」背后，是 10 多项城市视觉领域顶会冠军。

作为中国唯一同时拥有「世界文化遗产」、「世界记忆遗产」、「世界自然遗产」三项世界遗产桂冠的城市，丽江因其得天独厚的自然环境和文化魅力，是人人向往的东方秘境。

这样一座已有千年历史的城市，在发展过程中面临着难题：怎样才能在保护古迹与历史风貌的同时，同时让现代化城市管理更好地服务居民与游客的需求？解决问题的过程中，人工智能成为了主角。

2021 年 5 月，百度智慧城市参与建设的「智慧丽江」城市大脑正式上线运行，在文化旅游和社会治理方面取得了突出的成绩。

此前运行的半年多时间里，城市大脑中对城市管理事件的智能识别与处置已经自动闭环近 2000 条，有效提高了城市管理效率。而在景区管理中，百度的技术不仅可以实时感知丽江景区的承载量和客流量，还能识别旅游车辆是否偏离路线、频繁停靠购物商店。

百度「城视 CityScope」算法引擎。

和丽江一样，近年来越来越多的城市开始享受百度 AI 技术赋能智慧城市建设所带来的安全、便捷与高效。在城市大脑中，有双智慧的眼睛被称为「城市感知」——依托于百度领先的人工智能技术能力，构建起「城视（CityScope）」城市视觉感知算法引擎，更好地整合城市系统和服务，优化城市管理方式。

十余项顶会冠军、四大核心技术

要实现「城市感知」，首先需要捕捉城市中的视频化影像，由 AI 分析出当下正在发生什么，最后再由 AI 协助人类做出相对应的决策。在这一过程中会产生许多的问题，比如公路上的障碍物可能影响路况影像提取，训练不足的 AI 可能无法判断出当下发生的事件。因此，城市感知是一个难度极高、相当综合的 AI 应用命题。

百度夺得多项「城市感知」相关国际顶级赛事冠军。

为了让感知更加迅速、判断更加准确，百度视觉技术团队针对城市视觉技术领域持续进行技术迭代和创新。自 2019 年以来，百度在城市视觉领域已累计获得 10 余项顶级赛事的世界冠军，仅在 2021 年上半年，百度就获得了 CVPR 2021-AI CITY 挑战赛异常事件检测、车流统计任务两项比赛，CVPR 2021-UG2 + 挑战赛烟雾环境物体检测比赛，ICMR 2021-ROD 毫米波雷达检测挑战赛等比赛的冠军。

百度在 CVPR 2021-AI CITY 挑战赛的任务画面。

目前，百度「城视（CityScope）」城市视觉感知算法引擎集成了数据、训练工具、算子以及部署工具四大核心技术，为智慧城市、智能交通提供一站式的视觉算法与应用能力，不仅提升资源利用效率，也为城市居民提供更优质的衣食住行生活体验。

在数据方面，城视引擎实现了多场景不同来源数据融合，包括路口与高速监控场景，无人机视角，车载视角等，并提供针对监控视角 2D&3D 障碍物定位、火灾烟雾检测等任务的数据仿真技术。

训练工具方面，基于百度飞桨深度学习框架，城视引擎提供 20 多个预训练模型，同时集成了包括剪枝、蒸馏、量化、搜索等一系列模型定制化压缩工具。此外，结合百度 BML 平台打造用户自训练平台，可以完成用户端训练数据、模型迭代流程闭环，赋能智慧城市感知模型高效率持续迭代。

算子方面，基于预训练模型，城视引擎封装了人脸识别、人体分析、车辆分析、遥感视觉 4 个方向多达 30 多个核心算子，其中多项算子在多次竞品测评中取得行业第一，获得多项行业权威认证。

部署方面，基于百度 PaddleLite 飞桨部署工具，城市引擎支持算子在端侧、边缘侧、云端 3 大类多达 10 + 种不同平台部署，已经验证和完整支持从 Mobile 到 Server 多种硬件的支持需求，包括 ARM CPU, ARM GPU, Huawei NPU, Intel X86 CPU, NV GPU 等，全方位支持感知算子在不同应用场景灵活部署。

撬动千万级场景化数据，多领域应用实践落地

在强大的技术与产品能力支撑下，百度逐渐构建起了基于多视角、多维度的城市视觉感知技术，为构建更智能的城市生活、服务、管理提供支持。在丽江市，百度已经帮助旅游城市丽江实现了智慧化的「1+1+4+N」的架构设计，即 1 张神经感知网络，1 个城市智能云平台，4 个中台（AI 中台、数据中台、感知中台、交互中台），N 个应用场景。

百度打造的智慧丽江城市大脑指挥中心。

以城市违章事件智能发现场景为例，丽江智慧城市大脑能够通过系统对 AI 摄像头收集到的数据进行智能识别城市违章事件，如垃圾暴露、机动车违停、占道经营等，再通过工单系统推送给市级、区级、街道、社区执法人员与网格员，让违章事件能够在第一时间获得高效、及时处理。

在城市交通方面，百度城视引擎重点解决了确定道路与车辆、行人等交通要素状态，及它们之间关系的问题。在百度全天候车路协同解决方案中，面向公路隧道出入口、分合流区、施工作业区、弯道等道路特殊场景以及恶劣天气，可以实现公路全天候感知、全要素识别、全用户触达。

除此之外，近年来热度颇高的无人驾驶也是百度城市视觉感知技术的重要应用领域之一。百度城视引擎不断迭代优化相关感知技术，持续反哺车路协同融合解决方案，提升无人驾驶的安全性。以百度发布的全球首款 L4 级量产自动驾驶巴士「阿波龙」为例，可提供一站式、覆盖车辆全生命周期、全业务闭环的智能接驳服务，目前已落地全国 21 个城市，累计运营超 12 万公里、载客 12 万余人。