010-82449668

EN 中文

Alluxio 与 Intel 强强联手,跑出新速度!

Alluxio与Intel合作推出基于NVM+Xeon的混合云解决方案

开源云数据编排软件开发商 Alluxio 宣布与英特尔公司合作推出面向市场的解决方案,该解决方案提供配备第三代英特尔至强可扩展处理器和英特尔傲腾持久化内存 (PMem) 200 系列的内存加速层。该解决方案支持大规模的高性能分析和 AI 流水线,同时通过更加无缝管理靠近计算层的本地存储层中的数据,从而最大限度降低总拥有成本 (TCO)。英特尔傲腾持久化内存为 Alluxio 托管数据提供经济高效的存储,同时通过计算和存储分离的架构以提高性能。

“随着 Alluxio 数据编排系统管理的数据量呈爆炸式增长,英特尔提供的高效内存和存储介质具有巨大的附加值,” Alluxio 创始人兼首席执行官李浩源表示。配备英特尔®傲腾™ 持久内存 200 系列的英特尔® 第三代至强® 可扩展处理器每插槽可提供高达 6TB 的总内存以及平均比上一代高 32% 的内存带宽。使用应用直通(App Direct)模式下的持久化内存提供一个特性:允许应用程序直接访问存储,能够让 Alluxio 高效地访问块存储层以提供数据访问加速。

该解决方案建立在 Alluxio 与英特尔的战略合作之上,旨在改善客户在数据管理和处理方面的体验,例如针对英特尔深度学习加速和内置在最新英特尔至强可扩展处理器中的 AI 加速技术的优化。在最新版本中,Alluxio 改进了对 POSIX API 的支持,以进一步加速机器学习 (ML) 和人工智能 (AI) 工作负载,以及用于云对象存储上的新存储连接器。Alluxio 将把这些解决方案推向市场,以帮助推动下一代数据、分析和人工智能应用落地。

“我们很高兴与 Alluxio 合作,帮助他们将创新解决方案推向市场,”英特尔傲腾集团数据平台集团副总裁兼总经理 Alper Ilkbahar 说, “高级分析和人工智能应用程序计算技术的进步在数据访问层带来了性能挑战。Alluxio 数据编排平台与英特尔傲腾持久内存相结合,具有独特的优势,可以加速和简化跨多个环境的数据访问层管理。”

Alluxio在数据索引和模型分发中的核心价值与应用

在当前的技术环境下,搜索、推荐、广告、大模型、自动驾驶等领域的业务依赖于海量数据的处理和复杂模型的训练。这些任务通常涉及从用户行为数据和社交网络数据中提取大量信息,进行模型训练和推理。这一过程需要强大的数据分发能力,尤其是在多个服务器同时拉取同一份数据时,更是考验基础设施的性能。

南方科技大学分享:大数据技术如何赋能大模型训练及开发

南方科技大学是深圳在中国高等教育改革发展的时代背景下创建的一所高起点、高定位的公办新型研究型大学。2022年2月14日,教育部等三部委公布第二轮“双一流”建设高校及建设学科名单,南方科技大学及数学学科入选“双一流”建设高校及建设学科名单。

Shopee 在 Alluxio 加速 AI 训练的实践与探索

Shopee是东南亚领航电商平台,覆盖新加坡、马来西亚、菲律宾、泰国、越南、巴西等十余个市场,同时在中国深圳、上海和香港设立跨境业务办公室。2023年Shopee总订单量达82亿,2024年第二季度总订单量同比增长40%,增势强劲。