来源: 腾讯云开发者社区摘要: 7月25日,腾讯云在DataFun Agentic AI Summit上正式发布智能数据湖计算平台AI DLC,成为国内首个在同一平台上同时提供生产级Spark+Ray全托管服务的智能数据湖计算平台。平台搭载三大自研引擎(TCRay提供Ray全托管与GPU弹性调度、Xpark处理多模态数据、Meson提供C++原生加速),支持一份算力同时承载大数据处理与AI训练推理,统一数据、元数据与权限。据腾讯云大数据团队验证,统一平台将训练迭代周期从月级压缩至周级,运营成本降低约60%。
为什么对数据平台重要: AI DLC的发布标志着国内数据平台从"数据平台+AI平台"的双集群分离模式正式走向统一架构。此前Spark跑CPU集群做ETL、Ray跑GPU集群做训练,数据在OSS/HDFS/Iceberg之间反复搬运——高达80%的GPU算力空闲等待数据加载。AI DLC让Spark与Ray共享同一份数据、算力与权限,零拷贝完成从数据处理到模型训练的全流程。这也是国内厂商首次推出对标Databricks Lakehouse AI路线的生产级产品,可能加速国内企业从双集群架构向统一数据底座迁移。