新闻  |   论坛  |   博客  |   在线研讨会
骁龙 820A汽车 机器学习
车载技术工程师 | 2018-10-24 19:07:20    阅读:193   发布文章

2017年国际消费电子展上,高通公司推出了多项计划,以进一步推动智能互联汽车领域的发展,包括使用高通Snapdragon 820A为下一代大众信息娱乐系统提供动力,宣布在德国进行Cellular V2X试验,揭示出一种新的高端带宽千兆LTE用于车辆,并演示Snapdragon 820A如何为联网汽车带来更高水平的智能。


Qualcomm Snapdragon 820A超越了信息娱乐


Snapdragon 820A提供完整软件堆栈的增强功能,支持多种操作系统和框架,包括汽车级LinuxAGL),QNXAndroidSnapdragon 820A处理器不是您典型的信息娱乐处理器。它旨在使汽车公司能够将基于机器学习的信息ADAS和用户界面个性化集成到汽车中,并使用名为Qualcomm Snapdragon神经处理引擎的深度学习软件开发工具包(SDK)。神经处理引擎SDK旨在有效利用Snapdragon处理器的异构计算功能-为汽车制造商提供功能强大,高能效的平台,以提供更高水平的汽车智能。它实际上打开了大量创新信息ADAS用例的大门,从智能环绕视图监控到感应和可驱动空间计算,自然语言处理/理解,HMI定制和个性化用户配置文件。可能性是无止境。

以下是2017年国际消费电子展的一些演示,展示了高通和汽车技术公司如何利用Snapdragon 820A的设备机器学习功能提供智能信息ADAS功能。



通过Qualcomm Drive Data Platform重新定义驾驶

高通公司展示了高通驱动数据平台,该平台汇集了高级驾驶辅助系统(ADAS)和下一代汽车服务(如共享移动和自动驾驶)所需的技术创新。在2017年国际消费电子展上,我们展示了地图众包和关键安全警报用例-展示了基于Snapdragon 820A上运行的神经处理引擎的交通标志,车道标记,道路坡度,驾驶员注意力分散和前向尾随事件的检测。

图片.png

插图 1: Nauto对车队管理的驾驶员行为监控


Nauto演示了Snapdragon 820A的实时机器学习功能,用于车队管理和驾驶员监控用例。 该演示使用安装在汽车挡风玻璃内侧的配备Snapdragon 820A的售后设备。 该设备具有双摄像头系统,集成惯性传感器,GNSSLTE连接。 该算法在Snapdragon 820A上运行 - 融合来自智能传感器阵列的数据,以分析驾驶员行为,监控车辆活动并实时跟踪环境状况。 所有这些都是使用不同的神经网络模型完成的,这些模型使用神经处理引擎在Snapdragon 820A上同时运行。 该演示展示了该算法的功能,可以在驾驶员不专注时持续监控驾驶员并向车队经理发送警报,并根据不同的事件(如严苛的制动,尾随和/或加速)为驾驶员生成总体安全评分。


图片.png

使用Qualcomm Snapdragon 820A处理器和Snapdragon神经处理引擎,Nauto能够为车队提供连接摄像头,具有独特的高级功能,包括用于实时驾驶员分心和尾随检测的CNN


ZongMu Tech的统一深度神经网络用于语义分割和目标检测

ZongMu展示了在困难的城市场景中同时检测各种物体类别,例如车辆,行人和自行车,以及使用语义分割的自由空间计算。 该演示使用ZongMu专有的统一深度神经网络,同时输出多类物体检测和道路语义分割。 该网络模型在基于HDR图像传感器的Snapdragon 820A ADP连接汽车摄像头上实时运行。 该系统利用神经处理引擎通过Snapdragon 820A的异构处理核心优化执行网络。 ZongMu计划不断添加更多类别的物体检测和语义分割,以便汽车能够完全感知周围环境。


图片.png

我们非常高兴能够演示我们的统一神经网络模型,该模型同时执行检测和分割,并使用汽车级相机实时在Snapdragon 820A上运行。 我们看到的性能非常出色,这是通过非常高效的功耗实现的。 Qualcomm Snapdragon神经处理引擎是一个非常灵活的框架,具有丰富的工具集,使我们能够移植我们的定制网络模型。

-- ZongMu首席执行官兼创始人Rui Tang


RT-RK的汽车机器视觉SDK

RT-RK通过在Qualcomm Snapdragon 820A上使用其汽车机器视觉(AMV)软件开发套件,展示了智能环绕视图以及驾驶员监控。 AMV框架有效地融合来自多个摄像头和汽车传感器的信息,为信息娱乐系统带来信息安全功能。 该框架允许汽车生态系统通过利用神经处理引擎和Symphony SDKSnapdragon 820A的异构核心上高效运行感知和机器学习,构建基于多传感器的信息ADAS解决方案以及信息娱乐功能。

图片.png

RT-RKAutomotive Machine Vision软件开发套件(SDK)中,我们提供了通过将每个管道阶段专用于不同的计算核心(CPUDSPGPU)来并行执行多个信息ADAS算法的可能性。 AMV还抽象所有汽车传感输入,并使用Qualcomm神经处理引擎和Symphony SDK将异构计算核心用于机器学习和计算机视觉。 Snapdragon 820A是我们SDK的绝佳基础。

-- Nikola TeslicRT-RK LLC首席执行官


这些只是高通公司如何为联网汽车带来新的智能水平的一些例子,为未来始终连接的自动驾驶汽车铺平了道路。


参与讨论
登录后参与讨论
推荐文章
最近访客