江南在人工智能技术飞速发展的当下,多模态大模型加速向行业深耕,为更大范围满足AI产业创新融合需求,12月20日,星宸科技以“Leading AI Everywhere”为主题的“2024开发者大会暨产品发布会”在深圳湾万丽酒店隆重举办。
星宸科技董事长兼总经理林永育、天瞳威视产品总监田江涛、腾讯云音视频物联网总经理龙一民出席了大会并进行主题演讲,星宸科技低功耗影像处理、智慧车载、智能机器人、智能音频处理、智慧视觉、智能感知产品及技术也陆续发布,为与会者献上了一场兼具创新实践与前沿洞察的AI盛宴。
本次大会场外还特别设置了芯片展示区、技术展示区、智慧家庭展区、智慧出行展区、行业应用展区、3D感知展区、解决方案展区、暗房等8大特色展示区域,让与会专家、开发者亲身体验星宸科技最新的技术成果和产品的高水平表现。
星宸科技董事长&总经理林永育去年指出,“AI大模型在端侧加速落地已成必然趋势!”仅一年时间,行业再次发生翻天覆地的变化,云端模型运行成本高的痛点加速凸显,本届活动上林永育强调,端侧将成为承接大模型接入的端口,人机交互升级、应用场景拓展、多传感融合正为AI创新应用带来全新机遇。
为此,林永育指出,星宸科技始终围绕“感知+计算”理念,在承袭智慧视觉底层技术的基础上,继续协同合作伙伴洞察客户需求,持续推出合理算力、合理功耗、架构创新、数据安全的更强端边侧AI产品,为AIoT、机器人、智能汽车、智能眼镜、智能家居、智慧办公、智慧工业、智慧商业、智慧教育等领域AI创新应用提供开放的、易用的解决方案。
针对多模态大模型快速融合发展的趋势,“成立7年来,星宸科技已成为AI视觉落地的全球领先者。”林永育继续表示,“公司未来将深入场景耕耘、扩大生态合作、持续价值创造,不断推出更强端边侧AI产品方案,赋能各行各业,与产业共赴万亿级AI市场。”
在如上演讲中,林永育预判智能汽车市场收敛、产业化加速的趋势愈发显现,就此,天瞳威视产品总监田江涛于会上发表《国产智驾的机遇与挑战》的主题演讲,与开发者共话如何迎接智驾新蓝海。
田江涛指出,在汽车智能化快速发展的过程中JN SPORTS,行业已进入全面淘汰赛阶段,将充分考验车企的成本、技术、资金、用户、舆论等综合竞争力。为此,天瞳威视致力于为主机厂提供世界级自动驾驶能力的CalmCar软硬一体解决方案。
紧接着,田江涛详细介绍了天瞳威视自动驾驶解决方案的软硬一体能力、场景覆盖、高阶智驾、感知技术、端到端大模型、完整工具链、工程落地、量产交付、客户群等技术能力及落地能力。田江涛表示,“我们有丰富的产品量产经验,公司在聚焦量产项目的同时,也在持续加大创新投入。”
本次大会上,腾讯云音视频物联网总经理龙一民通过《基于智能眼镜应用腾讯的平台赋能》的主题演讲,着重分享腾讯云在以智能眼镜为代表的可穿戴领域的AI赋能能力。
龙一民认为,多模态大模型时代下,I/O接口将会朝着“跟我说、听我说、让我看、用我搜、让我管”的“五个我”标准化方向发展,这就要求智能终端要具备低延时、方言、网络搜索、内容生成、内容管理等丰富的能力。
在这样的背景下,腾讯云平台针对智能眼镜应用提供了微信、腾讯会议、语音交互、视频直播、近场通信、空间计算等赋能支持,同时与星宸科技联手打造多模态大模型时代下的智能眼镜I/O标准化及应用生态,并就“五个我”进行针对性的能力提升。龙一民表示,“智能终端设备是对‘人’的延展,设备能力的提升是为了让人们的生活变得更美好。”
目前智能眼镜正朝着小型化JN SPORTS、低功耗、高画质的方向发展,亟需高性能芯片方案与之匹配,星宸科技凭借其专业级影像处理技术,再次推出SSC309QL等新一代创新解决方案,并由星宸科技AIoT产品线负责人陈立敬在《低功耗影像处理技术及智能产品介绍》主题中,对SSC309QL在智能眼镜领域的创新应用进行全面的剖析与分享,陈立敬表示,“智能眼镜是未来AI大模型落地的最佳载体。”
陈立敬通过比对的方式全面展示SSC309QL的优越性。SSC309QL采用了chiplet技术内置一颗LPDDR4(2Gb)的高集成方案,面积较采用外挂DDR的AR1减少了24%,宽度缩小20%;同时SSC309QL在进行相同规格视频格式录像时的整机功耗预计为600mW,较AR1的下降了50%;而且采用软硬结合的低功耗技术架构实现“全天候随心录”功能,SoC功耗低至30mW。
重要的是,基于SSC309QL开发的智能眼镜方案更简洁,大幅降低开发门槛,助力智能眼镜加速向千亿级市场挺进。会上陈立敬同时披露,SSC3010等下一代更高性能的智能眼镜芯片方案也已提上开发日程,将聚焦更优秀的图像处理、更小的封装、更低的功耗、更好的AI处理能力。
紧接着,星宸科技智慧车载产品线负责人贺晓明针对当下最火热的汽车智能化应用重磅发布《智慧车载产品及技术》。
贺晓明结合机构数据分析认为,未来5~8年,L2~L3级ADAS将呈快速发展趋势,将带动智能感知与感知计算芯片需求的快速增长。星宸科技在SAC8542、SAC8539、SAC8904的基础上,今年又推出 SAC8712、SAC8901两颗新方案,未来还将推出满足更高算力需求的SAC8902、SAC890X等方案。
分享中,贺晓明既介绍了星宸科技针对不同需求的智驾芯片解决方案,又深度剖析了NPU、ISP、算法工具链等自研技术的特色及优势,贺晓明表示,公司通过“产业链合作开发”的模式,提升了开发的便利性,保证了方案应用的灵活性和合作伙伴价值最大化,目前公司正加速实现入门及腰部市场的差异化和智能化进展。
与智能眼镜一样,扫地机器人等消费级机器人近年热度持续高涨,特别是在AI技术加持下,预计今年全球扫地机器人销量仍保持8%~10%的增量,视觉避障及视觉识别机型也加速向低端机普及,带动机器人专用AI SoC芯片需求量激增。
会上,星宸科技智能机器人产品线市场负责人陈晔通过《智能机器人产品及技术》主题分享,详细介绍了星宸科技机器人AI SoC芯片在多核异构、高扩展性软件系统、高效自研IPU、丰富开源模型、低光环境应对能力、图像矫正及拼接等方面的技术特点及优势。陈晔总结为“多”“高”“宽”,其中“多”指多传感融合、多核异构、多系统并行运行,“高”指高效AI处理器、高清图像还原,“宽”指宽视角支持。
介绍中,除了第三代家用扫地机主控芯片SSU9383CM新品,陈晔同时披露了星宸科技覆盖端侧轻智能、端侧大模型、边侧智能、边侧大脑的机器人主控芯片5年规划路线图,陈晔表示,“星宸科技以家用扫地机为入口,以感知+智能为核心,打造覆盖各类型机器人产品的SoC产品线。”
语音已成为多感知融合的重要信息来源,在AI技术加持,其重要性日益凸显,会上星宸科技智能显示产品线市场负责人王帅分享了深度AEC(回声消除)、人声分离、深度音质提升、AI声纹、深度去混响等AI语音处理技术的特色及优势,“传统语音信号处理技术存在模型弹性差、受硬件限制、效果提升难等痛点,而利用深度学习的语音信号处理方案自适应能力强,摆脱硬件限制,能够适配各种AI语音应用场景。”
王帅同时分享了星宸科技SSD235X等新一代底层AI音频SoC硬件以及与大象声科合作的解决方案。
据介绍,SSD235X是行业第一颗带AI算力(1Tops)的纯音频/物联网SoC主控芯片,支持12路音频输入、输出,提供高采样位宽以及高采样频率,整合了手机/Pad技术,提供有动态功耗调整功能,具有高性能、高音质、低功耗三大特点,保障高品质音效的同时,支持为不同场景提供语音智能化改造能力。
紧接着由星宸科技智慧视觉产品线市场负责人李林带来《智慧视觉产品及技术:摄像头-小荷才露尖尖角》主题分享。
随着应用功能的不断丰富,AI处理需求的持续增长,导致AI芯片的运行功耗持续上升,限制了摄像头的适用场景。对此,星宸科技基于成熟SDK,推出了支持AOV等极致低功耗的芯片产品,同时兼具超高性价比,满足多摄摄像机、带屏摄像机、智能门锁、运动相机等低功耗设备长续航运行需求。
会上,李林以SSC308、SSC301为例详细介绍了星宸科技的低功耗解决方案。
在新一代AI-ISP图像信号处理引擎加持下,星宸科技SSC388等视觉产品线对夜视能力、高反差光照场景、高速运动场景的成像能力都得到了质的飞跃,为深度AI应用提供了优质的图像支持,加速“多模态大模型或LLM应用”在端边侧的导入及创新。
SSC388同时是一颗大幅优化了Transformer网络性能的端侧多模态大模型芯片,借助多模态大模型技术,解决了很多原有技术无法解决的行业痛点,李林表示,“相信在AI ISP和多模态技术的加持下,将会发挥出更广的想象空间,因此说,摄像头的智能应用才刚刚开始。”
多感知融合不仅需要音频、视频,也需要精确的距离信息,特别是在机器人应用场景中,距离信息已成为不可或缺的一环,星宸科技也就中远距离应用场景相关的iToF、dTOF技术方案提供了丰富的产品。
星宸科技3D感知产品线市场负责人马叶诗介绍,星宸科技3D感知产品线 Driver IC等iTOF产品矩阵,新一代dTOF系列产品正在开发中。与竞品相比,星宸科技JM iTOF系列产品线的生产工艺、e等多个核心指标达业界领先水平,实现了极佳的探测精度和准度应用效果,且典型场景下的平均功耗不及竞品的50%,具备更优的低功耗效果。
配合SSC9211等主控芯片,星宸科技3D感知TOF+ ISP系统解决方案广泛应用于高端投影仪市场,可实现梯形矫正、自动对焦、画框对齐、自动避障、智能护眼等创新应用。此外在人脸识别、智能看护、智能会议、机器人等越来越多的智能场景都能看到3D智能传感的应用。
马叶诗表示,“未来公司将持续推出更多更先进的3D感知产品,结合公司智能计算领域的积累,打造感算一体系统方案JN SPORTS,进一步推动3D感知在更多应用场景创造价值。”
圆桌论坛环节,在华登资本管理合伙人王林主持下,深圳机器人协会专职秘书长谭维佳、诚迈科技(南京)股份有限公司高级产品总监朱芳、赋之科技(深圳)有限公司VP David Xia、大象声科(深圳)科技有限公司算法专家闫永杰等4位嘉宾共同就“人工智能技术与感知技术发展,对行业产生的催化作用”主题展开对话。
据深圳机器人协会谭维佳介绍,过去十年机器人密度增长了19倍,机器人产业也备受市场关注,但渗透率至今仍较低,其中工业机器人的渗透率只有4%,谭维佳认为,智能化程度低是限制机器人渗透率提升难的最重要影响因素,智能化也是决定机器人更像“机器”还是更像“人”的决定性因素,目前机器人与人工智能两大产业正在产业、技术等维度上进行打通,未来希望机器人跟人工智能能够更深度融合。
赋之科技David Xia从机器人赛道选择的角度展开分享。据介绍,赋之科技由于成立时间晚,各细分赛道竞争激烈,成立即面临赛道抉择的问题,偶然机会发现宠物陪护机器人具备较强的发展空间,赋之科技经调研及海外首次众筹确认了市场真实需求,目前已在全球收获60多万个用户。David Xia表示,加大研发创新、提高市场敏锐度、紧贴用户需求固然重要,深度拥抱AI也是必不可少的竞争手段,而且不能浮于表面,而是要把AI技术具象化,通过提升用户体验来提升企业竞争力。
大象声科闫永杰结合所处的算法行业表示,伴随深度学习技术持续突破,将会打破音频降噪的技术瓶颈,大象声科成立起就聚焦前端音频降噪技术,并实现了回声消除、人声分离、深度音质提升、AI声纹、深度去混响等技术突破,因此闫永杰认为,推进技术革新是公司的第一重价值。第二重价值则是交互体验的大幅提升,通过声纹识别技术实现非说话人声音、周围噪声等杂音消除,提升交互质量。第三重价值是对整个行业的推动。
诚迈科技朱芳则基于开源鸿蒙的开发经验对操作系统的架构、功能、性能变化展开分享。据介绍,诚迈科技基于开源鸿蒙操作系统推出了HongZ OS,该OS首先采用分层架构,能够根据资源和设备情况对系统进行精简,使系统效率最优化;其次采用分布式部署,支持跨设备部署;第三是在能耗、系统流畅性方面均进行了底层优化开发,大幅提升了设备的性能及用户的使用体验。朱芳强调,“通过AI技术可以解决很多用户痛点,而且可以很好地延伸至不同的领域,提升各行各业的智能化水平。”
伴随圆桌论坛结束,星宸科技2024开发者大会暨产品发布会也成功落下帷幕,公司将继续携手行业伙伴,共同探索AI创新的无限可能,推动科技与产业的深度融合,为构建智能世界贡献更多的中国智慧和中国力量。返回搜狐,查看更多