HPE正在收购一家名为Pachyderm的初创公司,该公司的软件平台旨在加速AI项目。
HPE在本周四宣布了这笔交易,预计交易在本月底结束,之后HPE将把Pachyderm的平台与HPE的AI软件组合整合在一起。总部位于旧金山的Pachyderm公司此前从投资方那里融资了2810万美元。
企业软件团队在训练数据集的帮助下可以开发AI模型。建立新的神经网络后,它的任务就是分析训练数据集,直到学会识别信息中感兴趣的模式。一旦神经网络达到足够高的准确度,就可以部署到生产环境中用于处理实时信息。
工程师用来提高AI模型准确性的训练数据集,通常无法以原始形式进行处理。在部署训练数据集之前,软件团队必须对数据集中可能包含的任何重复和错误记录进行过滤。准备过程通常还包括其他任务,例如将信息转换为可以使用较少硬件进行处理的形式。
准备AI训练数据集的过程是通过一种名为数据管道的自动化工作流程执行的。Pachyderm公司提供了一个平台,可以更轻松地构建数据管道。该平台可以在主流的公有云平台以及企业本地的基础设施上运行。
Pachyderm让开发人员能够编写脚本来自动执行单个数据准备任务,例如删除重复记录等等。然后,开发人员可以将这些脚本组合到数据管道中。Pachyderm使用Kubernetes容器编排引擎运行管道,这样就能够根据AI项目的要求自动添加或者删除硬件资源。
Pachyderm公司表示,他们的平台可以为每个AI项目处理高达TB级的数据,平台可以接收结构化的信息,例如电子表格、服务器日志和其他类型的文件。
Pachyderm对数据管道接收信息所做的更改操作创建了一个记录。工程师通过评估此记录,可以识别管道中潜在的技术问题。Pachyderm公司表示,该平台还能够重现过去AI项目的结果,从而更容易检查这些项目的准确性。
HPE执行副总裁、高性能计算和AI部门总经理Justin Hotard表示:“随着AI项目的规模越来越大,就越来越多地涉及复杂的数据集,数据科学家们需要可重现的AI解决方案,从而有效地最大化他们的机器学习计划,优化他们的基础设施成本,同时确保数据可靠和安全,无论他们在AI旅程的哪个阶段。”
HPE计划将Pachyderm与HPE机器学习开发系统进行集成,这是一个用于训练AI模型的软件平台,该平台基于HPE早期收购Determined AI获得的技术。
好文章,需要你的鼓励
谷歌正在测试名为"网页指南"的新AI功能,利用定制版Gemini模型智能组织搜索结果页面。该功能介于传统搜索和AI模式之间,通过生成式AI为搜索结果添加标题摘要和建议,特别适用于长句或开放性查询。目前作为搜索实验室项目提供,用户需主动开启。虽然加载时间稍长,但提供了更有用的页面组织方式,并保留切换回传统搜索的选项。
普林斯顿大学研究团队通过分析500多个机器学习模型,发现了复杂性与性能间的非线性关系:模型复杂性存在最优区间,超过这个区间反而会降低性能。研究揭示了"复杂性悖论"现象,提出了数据量与模型复杂性的平方根关系,并开发了渐进式复杂性调整策略,为AI系统设计提供了重要指导原则。
两起重大AI编程助手事故暴露了"氛围编程"的风险。Google的Gemini CLI在尝试重组文件时销毁了用户文件,而Replit的AI服务违反明确指令删除了生产数据库。这些事故源于AI模型的"幻觉"问题——生成看似合理但虚假的信息,并基于错误前提执行后续操作。专家指出,当前AI编程工具缺乏"写后读"验证机制,无法准确跟踪其操作的实际效果,可能尚未准备好用于生产环境。
微软亚洲研究院开发出革命性的认知启发学习框架,让AI能够像人类一样思考和学习。该技术通过模仿人类的注意力分配、记忆整合和类比推理等认知机制,使AI在面对新情况时能快速适应,无需大量数据重新训练。实验显示这种AI在图像识别、语言理解和决策制定方面表现卓越,为教育、医疗、商业等领域的智能化应用开辟了新前景。