2018年9月26日 北京—在今日举行的“携手共创未来数据科技;京东与英特尔,大数据合作备忘录签约仪式”上,英特尔与京东共同分享了在大数据分析领域的合作成果,以及将要展开的全新合作。具体而言,京东正在为建立高级数据分析能力而着力打造下一代可扩展的大数据平台,京东和英特尔除了在软件领域展开深入合作外,京东大数据也在计算、存储、网络等领域充分利用英特尔下一代硬件产品;京东大数据团队在大数据领域创新的同时,将持续推动开源社区和整个行业在数据分析领域的进步。
京东与英特尔成立数据计算联合实验室(左:裴健,京东集团副总裁,大数据与智能供应链事业部总裁;右:马子雅,英特尔公司软件和服务部门副总裁,数据分析部门负责人)
京东集团副总裁,大数据平台负责人翁志 (Dennis Weng)表示:“京东的目标是在大数据架构领域成为业界领先的互联网企业,实现京东大数据成本和效率有机的平衡和提升,将京东大数据技术带入行业领先地位。 基于与英特尔在软、硬件方面的全面合作,并借助京东公有云平台,建立并增强通过京东云将大数据分析服务覆盖到外部客户、对外输出大数据分析的相关能力,助力京东公司层面的角色转型。”
京东正在着力打造提供最佳性价比的下一代大数据平台,在虚拟化技术、存储计算分离、存储压缩技术等计算资源横向智能扩展上发力,在AIops等领域进行深耕。其中也包括通过英特尔先进的技术为支撑,对大数据基础架构进行升级。
京东和英特尔在软件领域进行了重要合作,推动英特尔优化过的开源软件的普及应用,诸如Apache Spark on Kubernetes及其相关的框架和工具套件、Adaptive Execution、存储和计算分解、Spark工作负载优化等。结合京东的海量大数据应用,京东和英特尔已经联手对这些项目进行了深度定制,在统一的数据分析和AI流水线上加速并简化了方案开发,并在某些特定场景下发挥了巨大的效能。
“我们正在进入一个先进的数据分析时代,使用复杂的算法和模型以及应用不断增长的数据量和更复杂的数据集正在成为主流。 我们看到传统人工智能与大数据分析的集成越来越多,以解决更复杂的问题,”英特尔公司副总裁、英特尔开源技术中心总经理Imad Sousou表示, “我们与京东利用英特尔在可扩展计算、持久内存、网络和开源软件优化方面的平台创新进行高级分析,并合作开发下一代大数据平台,这是解锁数据智能和加速深入洞察之路的重要一步。”
京东大数据团队也在计算、存储、网络等领域充分利用英特尔下一代硬件产品。京东将会在英特尔®至强®可扩展平台基础上建立基于英特尔的新一代硬件产品,如英特尔傲腾固态硬盘以及英特尔傲腾数据中心级持久内存等,以完成架构升级,降低运行成本,增加集群整体效能。
京东在大数据领域的创新不仅有利于京东自身数据分析能力的提升,也有助于开源社区和整个行业的各种成功应用案例,与英特尔携手推动数据分析的改进。
好文章,需要你的鼓励
OpenAI首席执行官Sam Altman表示,鉴于投资者的AI炒作和大量资本支出,我们目前正处于AI泡沫中。他承认投资者对AI过度兴奋,但仍认为AI是长期以来最重要的技术。ChatGPT目前拥有7亿周活跃用户,是全球第五大网站。由于服务器容量不足,OpenAI无法发布已开发的更好模型,计划在不久的将来投资万亿美元建设数据中心。
阿里巴巴团队提出FantasyTalking2,通过创新的多专家协作框架TLPO解决音频驱动人像动画中动作自然度、唇同步和视觉质量的优化冲突问题。该方法构建智能评委Talking-Critic和41万样本数据集,训练三个专业模块分别优化不同维度,再通过时间步-层级自适应融合实现协调。实验显示全面超越现有技术,用户评价提升超12%。
英伟达推出新的小型语言模型Nemotron-Nano-9B-v2,拥有90亿参数,在同类基准测试中表现最佳。该模型采用Mamba-Transformer混合架构,支持多语言处理和代码生成,可在单个A10 GPU上运行。独特的可切换推理功能允许用户通过控制令牌开启或关闭AI推理过程,并可管理推理预算以平衡准确性和延迟。模型基于合成数据集训练,采用企业友好的开源许可协议,支持商业化使用。
UC Berkeley团队提出XQUANT技术,通过存储输入激活X而非传统KV缓存来突破AI推理的内存瓶颈。该方法能将内存使用量减少至1/7.7,升级版XQUANT-CL更可实现12.5倍节省,同时几乎不影响模型性能。研究针对现代AI模型特点进行优化,为在有限硬件资源下运行更强大AI模型提供了新思路。