IMG Series4 NNA帮助先进的AI软件大幅提升图像和视频的分辨率
英国伦敦 - 2022年5月17日 - Imagination Technologies与Visidon Oy联合推动移动、数字电视和汽车市场的嵌入式应用向基于深度学习的超分辨率过渡。凭借这项人工智能(AI)技术,用户可以通过先进的算法将低分辨率图像和视频的分辨率提高到4K和8K。IMG Series4 NNA能够在系统级芯片严格的功耗和散热要求下,以更高的效率实时完成此类苛刻的流程。
Imagination的IMG Series4神经网络加速器(NNA)通过其Tensor Tiling技术为先进的AI图像处理软件带来强大的计算性能与领先的能效。结合Visidon在深度学习视频增强网络领域的专业知识,该解决方案能够帮助原设备制造商将尖端AI增强技术应用于图像修复和着色,通过上采样(up-sampling),将低分辨率源数据还原为高分辨输出,大幅降低视频传输带宽。。
Visidon首席技术官Matti Niskanen表示:“Visidon解决方案的两大支柱是高能效和高性能。我们十分惊喜地看到我们的深度学习网络能够在Imagination的IMG Series4 NNA上如此轻松地运行,同时也被处理高计算工作负载时所保持的整体能效所震撼。我们希望双方能够进一步深化合作,共同开辟AI超分辨率技术的未来。”
Imagination产品管理总监Gilberto Rodriguez表示:“Imagination和Visidon都在保证性能和功耗的前提下构建技术。我们十分高兴能够与Visidon共同推动先进AI图像处理技术的发展,使原设备制造商能够使用领先的IP和软件提供超分辨率应用。希望我们两家公司的合作将为移动、数字电视和汽车系统级芯片领域的创新带来新的机会。”
IMG Series4 AI计算引擎采用Tensor Tiling技术,能够在系统带宽低并且需要高推理速度的情况下运行Visidon超分辨率解决方案组合中的主要算法——卷积神经网络。
Visidon开发了一套基于深度学习的超分辨率网络,可将视频传输的分辨率升级和修复到现代显示器要求的4K(2160p)和8K(4320p)分辨率。Visidon超分辨率技术在保留图像细节的同时,增加视频帧尺寸,实现了优于行业标准放大算法的超高输出质量。Visidon一般通过将超分辨率与降噪技术相结合来避免噪点的增加,同时保留逼真的细节与清晰度。
好文章,需要你的鼓励
OpenAI首席执行官Sam Altman表示,鉴于投资者的AI炒作和大量资本支出,我们目前正处于AI泡沫中。他承认投资者对AI过度兴奋,但仍认为AI是长期以来最重要的技术。ChatGPT目前拥有7亿周活跃用户,是全球第五大网站。由于服务器容量不足,OpenAI无法发布已开发的更好模型,计划在不久的将来投资万亿美元建设数据中心。
阿里巴巴团队提出FantasyTalking2,通过创新的多专家协作框架TLPO解决音频驱动人像动画中动作自然度、唇同步和视觉质量的优化冲突问题。该方法构建智能评委Talking-Critic和41万样本数据集,训练三个专业模块分别优化不同维度,再通过时间步-层级自适应融合实现协调。实验显示全面超越现有技术,用户评价提升超12%。
英伟达推出新的小型语言模型Nemotron-Nano-9B-v2,拥有90亿参数,在同类基准测试中表现最佳。该模型采用Mamba-Transformer混合架构,支持多语言处理和代码生成,可在单个A10 GPU上运行。独特的可切换推理功能允许用户通过控制令牌开启或关闭AI推理过程,并可管理推理预算以平衡准确性和延迟。模型基于合成数据集训练,采用企业友好的开源许可协议,支持商业化使用。
UC Berkeley团队提出XQUANT技术,通过存储输入激活X而非传统KV缓存来突破AI推理的内存瓶颈。该方法能将内存使用量减少至1/7.7,升级版XQUANT-CL更可实现12.5倍节省,同时几乎不影响模型性能。研究针对现代AI模型特点进行优化,为在有限硬件资源下运行更强大AI模型提供了新思路。