视觉检测领先者
全国咨询热线:13812953225

威盛电子唐亮:产学研整合-推进下一代智能驾驭人才培养 CCF-GAIR 2020

发布时间:2023-08-14 15:54:21 人气: 来源:bob平台官网入口
案例介绍

  雷锋网按:2020 年 8 月 7 日,全球人工智能和机器人峰会(CCF-GAIR 2020)正式开幕。CCF-GAIR 2020 峰会由我国核算机学会(CCF)主办,香港中文大学(深圳)、雷锋网联合承办,鹏城实验室、深圳市人工智能与机器人研讨院协办。

  本次峰会智能驾驭专场上,威盛电子高档技能总监唐亮,为与会者们带来了一场精彩纷呈的“产学研整合-推进下一代智能驾驭人才培养”陈述。

  实践上,威盛电子在车载范畴,凭仗嵌入式及核算机视觉范畴的研讨作用做了许多关于智能驾驭方面的作业,首要针对商用车队、矿卡、巴士等车型,以车载AI体系及车载AI双镜头监控仪为硬件根底,配套DMS驾驭员监控、ADAS辅佐驾驭、SVS全景环视、传感器交融等软件算法,并针对校园开展有威盛任我行智驾科研渠道。

  依据威盛任我行智驾科研渠道原型无人车体系,在关闭园区指定范围内,可以做到主动行进抵达意图地。一起经过激光雷达、超声波雷达、惯性导航等,现已可以自主避障,完结了 L4 等级的主动驾驭。

  一起,唐亮称现在相关技能人才培养,许多大学都处于科普阶段,现在我国的人工智能范畴人员缺口是 500 万,威盛期望经过自己的尽力,凭借威盛任我行智驾科研渠道以及体系,协助百万学子走入 AI 和主动驾驭工业。

  大家好,我是威盛电子的唐亮。我今日介绍的标题是“产学研整合-推进下一代智能驾驭人才培养”,首要介绍威盛任我行智驾科研渠道。讲演内容包含三部分:一是介绍威盛电子;二是介绍威盛电子在人工智能方面做的作业;三是介绍威盛任我行智驾科研渠道。

  威盛电子建立于 1987 年,是嵌入式渠道及解决方案供应商。公司总部在 1992 年从美国迁至台北市。CEO 是陈文琦,现在有 2000 多名职工,具有专利 6000 多个。

  国内涵北京、深圳、上海、台北等地设有研制中心,国外在美国奥斯丁和福利蒙特市设有研制中心,东京有出售分部。

  威盛电子 1987 年建立至今,从最底层的 CPU、GPU、芯片组规划,到自行研制嵌入式主板,最终成功研制嵌入式体系。现在把核算机视觉、人工智能结合进来做终端智能化作业,一路走来将近 30 多年的进程。

  30 多年的时刻,开端威盛首要触及范畴都在 PC 范畴,主做体系规划、I/O 集成、无线网络连接等。最近十年咱们会集在人工智能方向,结合深度学习,增加了许多人工智能功用,完结了从传统嵌入式渠道到人工智能嵌入式渠道改变的进程。

  现在威盛人工智能作业许多是在视觉方面,依据 GPU 的堆集,视觉上首要做物体辨认,应用于智能工厂,比方硅片辨认、流水线瑕疵产品的辨认等。

  视觉范畴天然少不了人脸辨认,所以威盛做了许多关于人脸辨认方面的尽力,许多产品现已落地。语音方面,不论是在线仍是离线语音处理,也已落地了许多项目,尤其在智能家居、智能医疗方面有许多实践项目落地。

  车载范畴,借用嵌入式范畴的作业作用和视觉研讨作用,在辅佐驾驭方面的作业首要针对:DMS、驾驭人身份辨认、ADAS 方面,已有 Mobile360 系列产品落地。

  威盛电子人工智能首要会集在边际端,意图是为完结终端智能化,在智能制作、智能医疗、智能商务、智能交通等各个范畴都有人工智能方面的产品落地。

  与校园、厂商协作进程中,需要把代码、项目、技能移交给对方,假如仅仅把源代码给对方,这样做很可能无法顺畅交代,原因在于开发流程、编译环境以及运用习气不同,中心缺少一个完好的体系做这件事。

  依据这些要素,为便利输出技能,威盛凭借在人工智能范畴的经历堆集,开发出任我行智驾科研渠道。该渠道功用包含:用户办理、代码办理、开发测验、编译环境、主动布置等一系列的流程东西,一起也包含人工智能模型练习、模型优化、主动标示等人工智能方面的根底东西。

  对外接口一方面是面向用户操作的人机界面,可以在该渠道做编译、开发等作业。另一方面是对终端的拜访接口,可以完结终端的办理、数据上传、数据剖析以及主动更新等。

  在底层,渠道相同供应了跨渠道的布置才能,可以布置到私有服务器上,也可以布置到公有云上,并供应扩展功用。

  凭借这套人工智能开发渠道,可以很好地把威盛技能结合在一起,输出到科研校园、科研单位或许协作伙伴。

  任我行智驾渠道有一部分是车载视觉开发渠道。可将车载视觉的:硬件、软件、代码、SDK,渠道相结合。硬件部分,车载视觉控制器选用高通 820 的芯片,可以接到 9 个摄像头,完结人工智能、视频拼接等操作,运用渠道可以开发智能座舱等。假如仅仅想在小的范畴做研制,比方需要做 ISP 功用提高调整,有了这个渠道一两天时刻就可以完结布置。

  有了车载视觉开发渠道就可以开发关于主动驾驭方面功用,如:路途交通标志辨认、盲点监测、前车防撞预警、3D 环视/行车记载等。

  除在应用层开发,该套体系也能调整人工智能模型、物体检测、行人检测、面部检测、调整模型和练习资料。

  DMS 作为驾驭员行为监测体系,经过图画输入,对面部、身体形状切割,把信息输入到深度卷积神经网络,辨认各种不同的行为,并剖析这是损害驾驭仍是安全驾驭。有了 DMS,就可以完结深度神经网络的图画辨认功用,捕获司机驾驭行为并自定义报警,现在现已可以辨认 十几种驾驭行为。

  环视体系作为现在的标配,当拿到一致模块直接上车就可以运用。Tier 1 在这个范畴现已做的十分好,拿到完好的开发包,可以自己调整,最多接 9 路摄像头,正常的线 路就可以了,前后左右。有些摄像头数据拿过来可以做标定作业,经过拼接了解整个流程,做任何想要做的工作。有了 SVS 代码,也可以了解核算机视觉动态拼接是怎样完结的,了解要害点在哪里,如想在里边做小的调整,这些可以进行完结。

  ADAS 范畴有许多辅佐功用,依据此,威盛在开发渠道上开放了接口,便于学习、了解。包含盲点检测、前车防撞等,都是依据视觉、毫米波雷达等对物体间隔、对物体的判别,依据这些信息做逻辑剖析。

  当下主动驾驭大热,出路也十分光亮,研讨主动驾驭的公司十分多,但主动驾驭研讨的组织用手指就可以数出来,没有经济实力做相关研讨很难,威盛所做的便是供应核算渠道,结合代码、控制器、无人车、传感器,全体打包主动驾驭开发渠道。

  威盛电子开发的原形体系在关闭园区指定范围内,可以做到主动行进抵达意图地。一起经过激光雷达、超声波雷达、惯性导航等,现已可以自主避障,完结了 L4 等级的主动驾驭。

  威盛任我行智驾科研渠道的根底,是构建在人工智能开发渠道之上,把主动驾驭技能放进去变成主动驾驭开发渠道,把车载视觉放进去便是车载视觉开发渠道,构成可供教育运用的开发渠道。

  可以看到全我国的校园,最上层是 235 所科研院所(不含大学),593 所大学可以接收研讨生,2956 所高等学府、1.01 万所中专。大学包含大专在内,都是以理论知识为主,做科研的是少量,更多是做科普。

  威盛期望到达的作用并不仅仅是把渠道拿出去做科研,而是期望更多做技能方面的 AI 公司参加,把任我行渠道作为一个科普渠道,经过开发渠道把威盛的技能变成规范化的开发包,供应校园或科研组织运用。

  经过规范化开发包的方法,协助第三方教育组织有才能开发依据人工智能的教案、教具,让更多的人可以触摸人工智能,学习人工智能。

  现在我国的人工智能范畴人员缺口是 500 万,威盛方针是期望经过智研渠道以及体系,协助百万学子走入 AI 工业,这个时刻可能是 5 年、10 年,但这是威盛电子尽力的方向,第一步先从主动驾驭和辅佐驾驭开端。