欢迎进入欧宝手机网页版网站 !
产品中心
products center
当前位置:首页 > 产品中心
从计算影像到计算音频OPPO造芯的野心还有多大
来源:欧宝手机网页版    发布时间:2024-02-17 02:16:37
随着5G互联网的高度普及,各个维度的数据量激增,AI开始全方面覆盖生活各个场景,从图片到语音,从
产品详情

  随着5G互联网的高度普及,各个维度的数据量激增,AI开始全方面覆盖生活各个场景,从图片到语音,从影像到语义。AI带来的便捷化和个性化慢慢的受到欢迎,AI无处不在的背后,支撑的正是芯片带来的庞大算力,而随着芯片的功耗不断降低,这些AI芯片已经不仅限于云端的部署,而是进入到了更多的边缘侧。

  在这一趋势下,慢慢的变多的系统公司开始尝试涉足定制甚至自行设计芯片,从而将应用场景与基础芯片相耦合。

  OPPO在这方面做出了大胆尝试,2021年的马里亚纳X是一个最好的诠释,这颗独立影像专用NPU,成功应用于OPPO的Find X5、Reno8、Reno9等产品中,为广大购买的人带来计算影像的新体验。

  今年,OPPO的惊喜来自声音,在声学领域,OPPO推出了马里亚纳Y,希望再一次复制马里亚纳X的成功,这颗OPPO自行研发的蓝牙音频SoC,被寄予了厚望,旨在引领音频计算的新潮流。

  为什么OPPO这次会将重点放在声学市场?最直接的原因就是声学市场正在迅猛发展。根据Canalys的最新统计,2022年第三季度,全球个人智能耳机市场中,TWS 是唯一显示出增长的类别。而在TWS市场常年位居第一的苹果,很大程度上是由于其定制的芯片极大增强了用户体验。

  严格意义上来说,苹果H1芯片与AirPods Pro广为流行的2019年,成为计算音频概念兴起之年。如今,计算音频开始迈入个性化的阶段。随着流媒体、播客以及在线会议等,关于声音的内容越来越多,TWS正在为消费的人带来全天优质的音频体验。这些优质体验的背后包括了无损音频,空间音频,主动降噪等功能的不断改善。苹果也顺势推出H2芯片,以继续增强用户的音频体验。

  如空间音频,传统上虚拟空间的渲染是基于一套预设模型,就像购买成衣西服,虽然精致,但细节处难免还会有不合身。而新一代的空间音频,可以根据用户个人的头型和耳廓形状,定制HRTF模型(Head Related Transfer Function,头部相关传递函数),获得最符合个人的听感,就像高级定制的西服,每一处细节都为用户的独特身材量身定制。

  同时,包括AI技术、环境感知、自然语义处理等诸多先进技术融入计算音频领域,这些个性化的计算音频自然离不开底层芯片技术的创新。

  再比如针对无损音频,Apple Music无损品质最高可达192kHz/24bit,,网易云等高解析音频可达96kHz/24bit。在这种数据要求下,需要最多9Mbps的传输速率,即便压缩一半体积,也需要4.5Mbps,因此目前的蓝牙很难满足如此高规格的传输速率,消费者只能被迫选择有线设备聆听无损音频。

  马里亚纳Y是OPPO拥抱音频计算的第一步,拥有比肩苹果H2的性能,在这种高起点下,我们相信OPPO未来有可能生产出媲美AirPods Pro系列的TWS耳机。

  正如OPPO芯片产品高级总监姜波所说,OPPO自研芯片的目的并不是要替代供应链,而是要寻找用户价值,并以芯片为载体,体现计算的价值,体现出OPPO对用户价值的探索。“假设我们现在有了一些芯片供应商,OPPO自己做可以降低一半成本,但这绝不是我们做芯片的出发点。”他说道。

  OPPO自研的蓝牙音频SoC——马里亚纳Y的三大特点,正是OPPO解决音频计算痛点的方案,更是用户价值探索的具体体现。

  首先,为了更好的无损音频体验,解决目前蓝牙传输速率不足的核心问题,马里亚纳Y采用了自研的12Mbps超高速蓝牙,速度为标准蓝牙的四倍,能够覆盖目前最高规格的192kHz/24bit无损音频的超大数据量。

  为了配合12Mbps的蓝牙,OPPO还开发了URLC(Ultra-Resolution Lossless Codec)高性能编解码技术。其支持最高192kHz/24bit的特性,使其可以与12Mbps蓝牙完美配合。此外,相较于其他最高60%压缩率的无损编解码方案来说,URLC的无损压缩率可达50%,可更好地节约传输带宽。

  同时,URLC编解码支持80Kbps~10Mbps动态码率,这种灵活的调节模式,使蓝牙可以根据环境信号状态动态精准的调节编码率,从而兼顾了音质和传输。

  马里亚纳Y除了URLC之外,还兼容包括蓝牙5.3、LE Audio的LC3编解码、LHDC、LDAC高清编解码,以及SBC和AAC传统编解码,从而使其灵活应对所有的蓝牙场景。

  其次,为了增强计算音频的体验,马里亚纳Y集成了590 GOPS的NPU。基于这个NPU,OPPO不只可以实现更好的空间音频、主动降噪等表现,还在业内首创了端侧的声音分离技术。

  目前,音频计算主要依赖DSP处理方式,这既包括音乐播放、EQ调整、编解码等,也包括空间音频、主动降噪等先进功能。

  音频计算正在拥抱AI,比如谷歌在2022年人工智能年度活动上,公布了谷歌全新的音频生成框架AudioLM,Meta已提供的Acoustic Sythesis工具,通过AI的能力对不同视觉环境做出相应的声音反馈,从而提升环境/场景模拟的保真性和沉浸感。

  随着音频计算的AI化,NPU比DSP具有更高的能效比,更高的算力,以及更灵活的架构和升级能力。马里亚纳Y的NPU为590 GOPS算力,DSP为25 GOPS算力,尽管这还是业界最高的音频DSP。超过20倍的算力提升,给未来的音频端侧应用增加了更多可能。

  OPPO首创的端侧声音分离技术,正是利用了NPU强大算力。声音分离技术可以从一段完整的音频数据中,识别和分离人声或其他特定乐器的声音。目前最多可以分离生成四条独立的音轨——人声、鼓声、贝斯、其他。声音分离技术可以实现个性化的音频方案。比如可以实现自定义全景声,甚至是万能全景声。万能全景声是个极大增强用户体验的功能,很多过去制作的音乐理论上不支持“杜比全景声”等格式,而现在,马里亚纳Y可以在端侧实时将音轨分离并重新渲染,从而将任意普通音频,转化成立体声、环绕声或者全景声,形成极具沉浸感的听觉体验。

  NPU和声音分离技术的应用还有很多可能,比如,利用声音分离技术,提取人声和噪音,实现更加纯净的通话降噪效果;又如,利用声音分离技术对老电视剧的人物对话进行增强;或者是利用这一技术实现更加随时随地的卡拉OK体验。

  第三,则是马里亚纳Y率先采用了台积电的N6RF射频工艺,N6RF是台积电2021年推出的专为射频领域优化的先进工艺,将先进的 N6 逻辑制程的功耗、效能、面积优势带入到射频解决方案中。

  尽管N6RF的主要定位放在了5G 与WiFi 6/6e等主力射频战场,但时至今日,采用N6RF的产品只有三款,分别为马里亚纳Y,苹果的H2以及苹果的GPS。

  “这颗芯片无论是投入成本,还是市场ROI,从商业角度上看都是非常不划算的。”姜波告诉媒体。在芯片设计领域拥有2000人规模的OPPO,其目标也不止影像或音频计算这些垂直市场。

  马里亚纳Y是OPPO是第一次试水射频和连接技术。相比数字电路或者模拟电路而言,射频市场需要的经验与积累是最多的。在设计考量时也需要仔细权衡,挑战工艺极限或者设计创新性电路结构,这极大考验研发设计人员的经验积累;

  另外,台积电的N6RF至今只有一年半的时间,虽然是先进制程的分水岭,但成熟应用还不是很多,客观上也没有经过市场的充分验证,足见OPPO团队在射频开发领域的实力不可小觑。

  而且,考虑到未来N6RF的目标射频市场,以及未来射频与连接技术的多样化,OPPO的芯片也许会有更多的惊喜。

  其次,这也是OPPO首次涉足SoC的开发。和马里亚纳X协处理不同,马里亚纳Y是OPPO首个SoC芯片解决方案,完整地负责一个蓝牙音频设备的所有功能。这标志着OPPO首次打开了连接芯片设计的新领域,具备了蓝牙连接的软硬件全套能力,也意味着OPPO首次具备了计算+连接能力的蓝牙SoC平台设计能力。

  正如姜波所述,OPPO团队始终保持着一颗循序渐进的平常心,在自研芯片的道路上尊重客观规律,隔绝外界的压力,不妄想弯道超车,坚信长期主义,做好了十年磨一剑的准备。

  在万物计算,万物互联的时代,每个系统厂商都有掌握核心科技的理由和动力。作为行业领先的系统公司,OPPO从马里亚纳X的成功获得了市场认可,这也使其有信心推出马里亚纳Y。

  透过一系列的产品,OPPO一方面提升了用户体验,另外则是通过一系列的尝试来打磨团队,增强定义及设计芯片的能力,逐步掌握从AI到连接等各式各样的技术。

  从马里亚纳Y公布出来的芯片数据,我们有理由期待搭载该芯片的耳机,可以真正迎来音频计算的新时代。尽管OPPO对于未来的芯片规划闭口不提,我们更长远的期待或好奇是OPPO将如何继续挖掘市场空白,不断通过底层创新打造出自己的特色。

  关键字:OPPO引用地址:从计算影像到计算音频,OPPO造芯的野心还有多大

  下一篇:Pixelworks逐点半导体为iQOO Neo7竞速版智能手机深入优化视觉体验

  据报道,最近获得工信部批准的型号为 PENM00 的 OPPO 手机可能是即将推出的 Reno6 Pro+ 旗舰产品。网站显示了这款手机的图片和规格,也透露了一些关于 Reno6 Pro+ 的信息。 据爆料,这款基于骁龙 870 芯片的智能手机预计将配备双立体声扬声器和 X 线性振动马达。 而工信部列出的 Reno6 Pro+ 显示,它拥有 5000 万像素的主摄像头。这款 5000 万像素的相机配有 1600 万像素的超广角镜头,1300 万像素的长焦镜头,以及 200 万像素的深度传感器。 这款手机的电池为 4500mAh,支持 65W 快速充电。它的外形纤细,厚 7.9 毫米,重 188 克。在正面,它采用了 6

  集微网消息(文/罗明)手机厂商们对京东是又爱又恨,爱的是自家产品放在京东上销量有保障,恨得是京东这货经常充当猪队友的角色,提前把自家的产品相关信息给曝光了。去年京东独家首发的预热海报曝光了锤子新机坚果Pro2的外形,时间到了今年,京东依旧不知悔改再次充当了猪队友的角色。 此次,被京东“坑”的厂商是有“国际大厂”之称的绿厂OPPO,京东曝光的是OPPO旗舰机型Find9与OPPO R13。 至于京东是怎么曝光的,我们打开京东APP——找到我的钱包——找到京东闪付,点击进入——查看京东闪付支持的设备清单。 下拉列表,找到OPPO,这个时候你就见证了奇迹,OPPO的Find9与R13位列其中。 鉴于猪队友京东以往的曝光准确度

  在高通北京召开的Qualcomm中国技术与合作峰会上,OPPO CEO陈明永透露,OPPO三年前就开始进行5G方面的研发,与高通合作密切,将第一批推出5G手机。 陈明永强调,OPPO不一定是第一个,也会是前一两个做出5G产品的手机厂商,而且会体验非常好。 OPPO还宣布成为高通“5G领航”计划的合作伙伴,共同探索5G网络时代的移动技术创新。 通过“5G领航”计划,高通将为OPPO提供完整的射频前端解决方案。 据官方数据,OPPO 2017年在中国市场手机出货量增长超过10%,海外增长更是超过20%,照此推算全球有可能超过1.2亿台。

  导语 面对未来高度不确定的发展环境,慢慢的变多的企业感受到了增长的压力,如何在不确定的环境中寻找增长点是高层管理者们当下面临的巨大挑战。精一战略ONE模型揭示了企业在不确定环境中获得韧性增长的基本原则。 当下,如何能够在高度动荡的环境中获得持续增长成为企业领导者们关注的核心线年爆发的新冠疫情对全球经济的发展带来不利影响,2022年突发的俄乌冲突无疑是雪上加霜,让全球经济复苏的希望更加渺茫。疫情、战争等多重危机的叠加影响让那些未有核心竞争优势的企业陷入增长困境,不少企业家们对未来的命运感到“战战兢兢、如履薄冰”。 在动荡的环境中,企业领导者们需要意识到,唯有提高企业的“韧性”才能抵御外部危机的冲击,从而

  2018年已经过去,这一年的手机市场谈不上风云变幻,可也不算波澜不惊。手机的整体出货量仍处于滞涨阶段,但国内的手机生产厂商一举发力,在出货占比等重要数据中逆市上升,备显强势。相较之下,苹果、三星等海外厂商则有所受压,略现疲态。 2019年被称为5G元年,不难想象各大厂商将在5G风潮下展开新一轮竞争,届时手机市场的格局或许将重新洗牌。总而言之,谁能结合5G技术为用户带来绝对意义上的创新,谁就有机会抢占更大的话语权。 今天,国内领先的手机生产厂商OPPO于西班牙巴塞罗那举办了2019 OPPO创新大会。期间,OPPO展示了旗下首款5G手机,并与优秀的海外运营商共同宣布启动 “OPPO 5G登陆行动”,携手将5G体

  5G手机首次亮相 /

  核心观点:科技大爆炸,大企业拥有的技术优势越来越明显,可以左右每一个人的生活。如果仍然推崇“凶、狠、猛、诈”、“不分是非,只论输赢”的丛林法则式的商业,破坏的不仅仅商业本身,更会伤害到每一个消费者。OPPO创始人兼首席执行官陈明永提出“致善”是作为科技平台型企业的担当。 “OPPO的品牌信仰,是‘科技为人,以善天下’。” 时隔一年,OPPO创始人兼首席执行官陈明永再次亮相自家“未来科技展”,并发表了“跃迁·致善”的演讲。 与去年定义OPPO成为了万物互融的科技公司不同,此次陈明永首次提出将“善”作为OPPO品牌信仰的核心词。 作为一家科技企业,将“善”作为品牌信仰,确实让很多人难以理解。不过,在笔者看来,这是OPPO提出科技跃迁战

  2021年12月14日,中国,深圳——今日,OPPO广东移动通信有限公司(简称“OPPO”) 在INNO DAY 2021上正式推出全新一代智能眼镜Air Glass(简称“OPPO Air Glass”)。它搭载OPPO自研微型光机和前沿的Micro LED,以及定制衍射光波导技术,支持触控、语音、手势和头动操控四种交互方式。作为OPPO三年来推出的第三代智能眼镜,OPPO Air Glass的诞生标志着智能眼镜真正从玩具进化为工具。 OPPO研究院院长刘畅表示,“未来,智能眼镜将成为继手机、手表之后,个人生活中最重要的‘第三块屏幕’。我们非常高兴能够推出OPPO Air Glass,一款令消费者真正触手可及的智能眼镜。”

  Air Glass智能眼镜正式发布 /

  OPPO:“美因苛求”的逻辑与路径 沈建缘 “这是最近3年来,OPPO推出的最好的产品。”3月17日,在OPPO新款产品R9的上市发布会上,OPPO副总裁吴强说。他确信,这款被OPPO称为“全新闪充专家”的智能手机,将以更为出色的外观设计、更为精湛的制造工艺,重新定义国内智能手机的设计制造标准。伴随着OPPOR9的上市,OPPO升级的企业品牌理念“美因苛求”同时发布。 “对于美,每个人都有不同的定义和标准。在OPPO看来,美不是单纯的外表漂亮,不是简单的配置堆砌,不是跟风复制的盲目追求。极致的美,是坚持用纯粹和专注的态度雕琢产品,只做令人惊艳、信赖的手机。”吴强说。 有竞争性地满足需求

  _USB_Audio_Dac_Driver_release_Ver3.34_build23

  _USB_Audio_Dac_Driver_release_Ver3.34_build23

  mp3的。其实内容极为有用

  A115 元件图.pdf

  MPS电机研究院 让电机更听话的秘密! 第一站:电机应用知识大考!跟帖赢好礼~

  电源小课堂 从12V电池及供电网络优化的角度分析电动汽车E/E架构的趋势

  虽然这款产品与市面VR产品显示效果都要好,但当人们实际拿到产品,才发现槽点满满。...

  2月5日消息,自2019年受到制裁以来,华为的销售份额一直在下降,据Counterpoint中国智能手机周销量模型追踪最新数据,华为在2024年的前两周 ...

  专家表示,弯曲的屏幕不仅很酷,还使手机更耐用,掉落时更不容易破碎。图片来源:Mobiles co uk网站全球科技界正借助各种人工智能(AI)绘 ...

  1月26日消息,根据苹果公司今天发布的新闻稿,为了遵循欧盟《数字市场法案》规定,计划2024年3月起,为27个欧盟国家用户所带来侧载、第三方应 ...

  苹果将首发台积电2nm工艺!iPhone 17 Pro的A19 Pro先用

  1月25日消息,苹果作为台积电最大客户之一,多年来都会首发新工艺,且实现很长一段时间的独占。比如目前iPhone 15 Pro已经发布四个月,但 ...

  Ceva宣布与印度排名第一的音频和可穿戴品牌boAt建立战略合作伙伴关系 携手提升无线音频

  采用Corning® Gorilla® Armor,三星 Galaxy S24 Ultra开创耐用性和视觉清晰度新标准

  Melexis 推出集成红外带通滤波器 QVGA 分辨率飞行间传感器芯片

  有奖直播:人机互动介面和机器视觉应用上的最佳助手--瑞萨电子 RZ/G, RZ/A 和 RZ/V SoC系列

  只为汽车更安全,下载 TI DRV3000系列产品手册,抢楼截图入好礼喽!

  站点相关:基带/AP/平台射频技术面板/显示存储技术电源管理音频/视频嵌入式软件/协议接口/其它便携/移动产品综合资讯论坛惊奇科技

联系我们
contact us
QQ咨询
欧宝手机网页版
  • 地址:秦皇岛市海港区西港北路85号
  • 邮编:066000
  • 电话:+86 0335-3630075
  • 手机:15076089501(微信同步)
  • 客服:QQ2025645401
  • 邮箱:info@fronlead.com
添加官方微信
版权:欧宝手机网页版   冀ICP备16002023号-4     sitemap.xml  
COPYRIGHT () 欧宝手机网页版