美舍2021年开始向汽车领域扩张。目前已有多款产品推至智机汽车等量产车型。在汽车行业,美舍深度融合人工智能和视听技术,提供覆盖画质增强、视频智能创作、车内娱乐交互、AI识别和处理的全链路技术解决方案。
2022年12月6日,在由Gaspar Automotive主办,中国(上海)自由贸易试验区临港新区管委会指导,上海金桥临港综合区投资发展有限公司协办的2022第四届智能驾驶舱及用户体验大会上,北京美舍网络科技有限公司产品总监刘伟介绍了美舍目前在汽车领域的图像、视频处理方案,并将音视频技术移植到汽车上。汽车具备视频编辑处理能力,同时可以对汽车的摄像头采集的图像进行分析识别,并可以与汽车的硬件进行联动,为用户带来更加场景化、智能化的驾驶体验,如智能语音数字人机交互、室内环境光控制等。
刘一|北京美舍网络科技有限公司产品总监
以下是发言摘要:
我演讲的题目是“智能车载图像与视频处理的创新与应用”,主要围绕美颜相机在汽车图像与视频处理中的整体方案展开。我会尽量用简洁的方式和大家分享美颜相机的优点和特点。
美舍的发展历程和经营范围
在讲整体产品方案之前,先简单介绍一下美舍公司的情况。北京美舍网络科技有限公司是一家专注于提供视音频整体解决方案的科技公司。起步于广播行业,长期扎根于互联网行业,逐渐扩展到汽车领域。我们长期为广电领域提供服务,电视节目中看到的很多音视频技术,包括电影制作,都是美舍提供的。
2017年,美舍向互联网厂商和手机厂商提供产品。2021年,美舍开始将我们的技术扩展到汽车领域,现在已经有多款车型量产了美舍的产品,比如智记L7。美舍的产品分为六大领域,1。音频和视频处理SDK,2。人工智能处理产品,3。云/PC视频处理解决方案,4。汽车和智能硬件解决方案,5。AR-数字人类产品,6。开发和设计服务。
目前,美舍在传统互联网和手机领域提供了70-80%的服务。汽车是我们新开发的领域,我们和国内很多互联网头部厂商合作,量产解决方案。在不久的将来,相信大家都能在车上看到和使用美舍的产品。
美舍在图像视频领域的独特解决方案。
基于美颜相机在图像和视频方面的技术能力,我们可以提供全链路的技术解决方案,包括视频编辑处理、画质增强、智能视频创作、车载娱乐和交互、AI识别和处理能力。通过以上功能模块,我们可以帮助用户完成摄像头采集、图像质量增强、视频内容创作以及后期自动识别等工作。
首先是图像和图像质量的增强。重点在于摄像头拍摄和预览的技术提升,最基础的就是图像校正算法。我们知道,很多车载摄像头都有校正功能或者其他算法点,但是美舍提供的核心功能是对画面的二次处理,以保证用户在预览时能看到非常完整的视频效果。整个方案最大的优点是计算功耗低。在我们的汽车客户中,很多都是使用美颜相机的校正算法,对车内相机的画面进行二次校正,使整个画面达到拍摄预览的高质量水平。
除此之外,我们还提供智能配色功能,统一不同终端拍摄场景的色调。美舍现在推出了自动处理算法,不需要特殊的产品校准……名词(noun的缩写)它可以通过AI自动检测画面中的问题,并对不同场景进行动态处理,达到专业的校正效果,提升整体画面质量。该算法占用的计算能力也非常小,因此可以用很低的计算能力进行实时处理。
除了以上,汽车的拍摄过程中还有一个问题:现在的汽车级相机在夜间拍摄时经常会出现噪音。鉴于此,我们将提供一套AI夜景增强算法:结合AI识别算法和色彩校正算法,自动判断可能出现的噪点问题,调整画面色彩。
另外,目前车载摄像头越来越多,单一使用这些设备并不能充分发挥其全部潜力。为了形成更好的用户印象和体验,美舍会提供一套多摄像头拼接算法,利用车辆上的多种摄像头,结合美舍校正、图像融合、智能拼接等处理算法,,最大程度消除变形问题,获得超广角、360度全视野的实时预览效果。
当拍摄和预览一辆正在行驶的汽车时,抖动总是一个大问题。在这种情况下,可以结合非光学防抖和光学防抖设备,结合美国的AI算法,识别画面中的抖动和模糊,让车内多场景设备达到专业级的拍摄和预览效果。
以上都是基于摄像头的基础处理,现在又多了一个方向:车载视频的智能创作。很多汽车厂商不仅将车辆定义为驾驶工具,还将其定义为记录风景的车辆。一次拍摄车辆的过程中会产生大量的视频,将这些视频交给用户进行人工剪辑和制作会带来很多创作上的问题。
那么,如何有限地提取精彩内容,完成艺术化的创意包装,就成了车载拍摄视频智能创作的一个明显痛点。鉴于此,美舍提供了一套智能剪辑方案,包括内容的AI检测、智能视频剪辑、后期配乐等。,方便用户在驾驶过程中保存和分享相对优质的内容。
用户只需导入视频,精美的照片会配合剪辑手法和音乐。该方案具有良好的扩展性,会根据车辆的使用习惯快速匹配场景,并随着用户的内容逐步扩展智能编辑方案,形成智能产品。
如果用户拍摄的是单调的行车视频,美舍还会考虑让视频更具娱乐性的方案,比如利用美舍的3D渲染引擎和AI天空分割技术,加入虚拟天空特效,让普通的行车视频更加丰富多彩。
美舍汽车领域解决方案
除了以上,美舍还在探索结合车载机的娱乐互动解决方案。首先,车内AR特效方案现在车内配备了很多摄像头。美颜相机与车内摄像头结合使用,可以提供完整的AR效果。在整个方案中,我们会充分考虑车内摄像头的广角,通过自动化的方案进行处理,形成高质量的车内拍摄效果。
除了这一块,美舍还将与车载语音系统结合,构建车载数字人,形成语音交互系统的延伸。使用3D渲染引擎,结合语音交互系统,反馈实时音频流、文字、动作等内容,实时驱动数字人体图像,升级整体座舱交互体验。
除了这些,AI的识别和处理能力是相机非常重要的优势。摄像头可以根据车辆各种摄像头采集的图像自动处理图像,如场景识别、人物识别、天空云识别、地标属性识别等。在内容属性明确的情况下,可以与汽车硬件联动,使汽车不需要完全依赖人工控制,可以自动帮助用户收集和生成内容,从而达到更好的人机交互体验。
从去年开始,美舍还在做车端信息匿名化领域的工作。许多车辆的数据需要匿名……在登上云或者离开车辆之前。基于法律法规的相关要求,美舍提供的方案可以覆盖检测到的人脸和车牌。整个方案针对车辆的需求进行了适配和优化,最大限度地减少了CPU资源的占用,可以在车辆规范芯片上完成这样的处理任务。
除了以上车辆端的应用和处理,我们注意到用户的车辆和手机经常有互联需求。例如,用户在车辆上拍摄的视频内容和照片可以发送回手机app进行预览。美颜摄影在手机领域可以充分发挥其传统优势。除了资源同步传输,视频还可以直接在手机上处理编辑、分享输出。
以上是美舍在汽车端产品方案的整体介绍。我们希望能够与不同的汽车厂商达成深度合作,让汽车不仅可以作为驾驶工具,还可以作为用户精彩生活的记录工具,加速汽车高度智能化时代的到来。
(以上内容来自北京美舍网络科技有限公司产品总监刘一于2022年12月6日发表的题为《智能汽车图像与视频处理的创新与应用》的主题演讲,由盖世汽车主办,中国(上海)自由贸易试验区临港新区管委会指导,上海金桥临港综合区投资发展有限公司协办..)美舍2021年开始向汽车领域扩张。目前已有多款产品推至智机汽车等量产车型。在汽车行业,美舍深度融合人工智能和视听技术,提供覆盖画质增强、视频智能创作、车内娱乐交互、AI识别和处理的全链路技术解决方案。
2022年12月6日,在由Gaspar Automotive主办,中国(上海)自由贸易试验区临港新区管委会指导,上海金桥临港综合区投资发展有限公司协办的2022第四届智能驾驶舱及用户体验大会上,北京美舍网络科技有限公司产品总监刘伟介绍了美舍目前在汽车领域的图像、视频处理方案,并将音视频技术移植到汽车上。汽车具备视频编辑处理能力,同时可以对汽车的摄像头采集的图像进行分析识别,并可以与汽车的硬件进行联动,为用户带来更加场景化、智能化的驾驶体验,如智能语音数字人机交互、室内环境光控制等。
刘一|北京美舍网络科技有限公司产品总监
以下是发言摘要:
我演讲的题目是“智能车载图像与视频处理的创新与应用”,主要围绕美颜相机在汽车图像与视频处理中的整体方案展开。我会尽量用简洁的方式和大家分享美颜相机的优点和特点。
美舍的发展历程和经营范围
在讲整体产品方案之前,先简单介绍一下美舍公司的情况。北京美舍网络科技有限公司是一家专注于提供视音频整体解决方案的科技公司。起步于广播行业,长期扎根于互联网行业,逐渐扩展到汽车领域。我们长期为广电领域提供服务,电视节目中看到的很多音视频技术,包括电影制作,都是美舍提供的。
2017年,美舍向互联网厂商和手机厂商提供产品。2021年,美舍开始将我们的技术扩展到汽车领域,现在已经有多款车型量产了美舍的产品,比如智记L7。美舍的产品分为六大领域,1。音频和视频处理SDK,2。人工智能处理产品,3。云/PC视频处理解决方案,4。汽车和智能硬件解决方案,5。AR-数字人类产品,6。开发和设计服务。
目前,美舍在传统互联网和手机领域提供了70-80%的服务。汽车是我们新开发的……fields,并且我们已经和国内多家互联网头部厂商合作,量产解决方案。在不久的将来,相信大家都能在车上看到和使用美舍的产品。
美舍在图像视频领域的独特解决方案。
基于美颜相机在图像和视频方面的技术能力,我们可以提供全链路的技术解决方案,包括视频编辑处理、画质增强、智能视频创作、车载娱乐和交互、AI识别和处理能力。通过以上功能模块,我们可以帮助用户完成摄像头采集、图像质量增强、视频内容创作以及后期自动识别等工作。
首先是图像和图像质量的增强。重点在于摄像头拍摄和预览的技术提升,最基础的就是图像校正算法。我们知道,很多车载摄像头都有校正功能或者其他算法点,但是美舍提供的核心功能是对画面的二次处理,以保证用户在预览时能看到非常完整的视频效果。整个方案最大的优点是计算功耗低。在我们的汽车客户中,很多都是使用美颜相机的校正算法,对车内相机的画面进行二次校正,使整个画面达到拍摄预览的高质量水平。
除此之外,我们还提供智能配色功能,统一不同终端拍摄场景的色调。美舍现在推出了自动处理算法,不需要专门的产品校准。它可以通过AI自动检测画面中的问题,并对不同场景进行动态处理,达到专业的校正效果,提升整体画面质量。该算法占用的计算能力也非常小,因此可以用很低的计算能力进行实时处理。
除了以上,汽车的拍摄过程中还有一个问题:现在的汽车级相机在夜间拍摄时经常会出现噪音。鉴于此,我们将提供一套AI夜景增强算法:结合AI识别算法和色彩校正算法,自动判断可能出现的噪点问题,调整画面色彩。
另外,目前车载摄像头越来越多,单一使用这些设备并不能充分发挥其全部潜力。为了形成更好的用户印象和体验,美舍会提供一套多摄像头拼接算法,利用车辆上的多种摄像头,结合美舍校正、图像融合、智能拼接等处理算法,,最大程度消除变形问题,获得超广角、360度全视野的实时预览效果。
当拍摄和预览一辆正在行驶的汽车时,抖动总是一个大问题。在这种情况下,可以结合非光学防抖和光学防抖设备,结合美国的AI算法,识别画面中的抖动和模糊,让车内多场景设备达到专业级的拍摄和预览效果。
以上都是基于摄像头的基础处理,现在又多了一个方向:车载视频的智能创作。很多汽车厂商不仅将车辆定义为驾驶工具,还将其定义为记录风景的车辆。一次拍摄车辆的过程中会产生大量的视频,将这些视频交给用户进行人工剪辑和制作会带来很多创作上的问题。
那么,如何有限地提取精彩内容,完成艺术化的创意包装,就成了车载拍摄视频智能创作的一个明显痛点。鉴于此,美舍提供了一套智能剪辑方案,包括内容的AI检测、智能视频剪辑、后期配乐等。,方便用户在驾驶过程中保存和分享相对优质的内容。
用户只需导入视频,精美的照片会配合剪辑手法和音乐。该方案具有良好的扩展性,会根据车辆的使用习惯快速匹配场景,并随着用户的内容逐步扩展智能编辑方案,形成智能产品。
如果用户拍摄的是单调的驾驶视频,美舍还会考虑让视频更具娱乐性的方案,比如利用美舍的3D渲染引擎和AI天空分割技术,加入虚拟天空特效,使之更具娱乐性……普通驾驶视频更加丰富多彩。
美舍汽车领域解决方案
除了以上,美舍还在探索结合车载机的娱乐互动解决方案。首先,车内AR特效方案现在车内配备了很多摄像头。美颜相机与车内摄像头结合使用,可以提供完整的AR效果。在整个方案中,我们会充分考虑车内摄像头的广角,通过自动化的方案进行处理,形成高质量的车内拍摄效果。
除了这一块,美舍还将与车载语音系统结合,构建车载数字人,形成语音交互系统的延伸。使用3D渲染引擎,结合语音交互系统,反馈实时音频流、文字、动作等内容,实时驱动数字人体图像,升级整体座舱交互体验。
除了这些,AI的识别和处理能力是相机非常重要的优势。摄像头可以根据车辆各种摄像头采集的图像自动处理图像,如场景识别、人物识别、天空云识别、地标属性识别等。在内容属性明确的情况下,可以与汽车硬件联动,使汽车不需要完全依赖人工控制,可以自动帮助用户收集和生成内容,从而达到更好的人机交互体验。
从去年开始,美舍还在做车端信息匿名化领域的工作。很多车辆的数据在上云或者出车之前都需要匿名化。基于法律法规的相关要求,美舍提供的方案可以覆盖检测到的人脸和车牌。整个方案针对车辆的需求进行了适配和优化,最大限度地减少了CPU资源的占用,可以在车辆规范芯片上完成这样的处理任务。
除了以上车辆端的应用和处理,我们注意到用户的车辆和手机经常有互联需求。例如,用户在车辆上拍摄的视频内容和照片可以发送回手机app进行预览。美颜摄影在手机领域可以充分发挥其传统优势。除了资源同步传输,视频还可以直接在手机上处理编辑、分享输出。
以上是美舍在汽车端产品方案的整体介绍。我们希望能够与不同的汽车厂商达成深度合作,让汽车不仅可以作为驾驶工具,还可以作为用户精彩生活的记录工具,加速汽车高度智能化时代的到来。
(以上内容来自北京美舍网络科技有限公司产品总监刘一于2022年12月6日发表的题为《智能汽车图像与视频处理的创新与应用》的主题演讲,由盖世汽车主办,中国(上海)自由贸易试验区临港新区管委会指导,上海金桥临港综合区投资发展有限公司协办..)
12月8日,有消息称,蜂巢能源拟向澳大利亚上市锂矿商STGEORGE投资近500万澳元(约合人民币2347
1900/1/1 0:00:00日前,据乘联会数据显示,11月乘用车生产2078万辆,同比下降67,环比下降9
1900/1/1 0:00:0012月8日,乘联会发布的最新数据显示,11月国内乘用车零售量为1649万辆,同比下降92,环比下降105,双双下降的情况体现了市场异常的走势。
1900/1/1 0:00:001、比亚迪高端汽车品牌仰望LOGO标识公布12月8日,仰望汽车正式官宣了自己的品牌LOGO。根据官方的介绍,仰望汽车标识的灵感来源为中国甲骨文中的“电”,这种蜿蜒曲折的字形就是中国最初的“电”字。
1900/1/1 0:00:0012月8日,宁德时代新能源科技股份有限公司(“宁德时代”)与本田技研工业(中国)投资有限公司(“本田”)宣布,本田在中国将于2024年至2030年间,
1900/1/1 0:00:00盖世汽车讯12月7日,意法半导体(STMicroelectronics)推出5款用于电动汽车的碳化硅(SiC)大功率模块,可提高性能和续航里程。
1900/1/1 0:00:00