全部博文 - Alluxio 官方的个人空间 - OSCHINA - 中文开源技术交流社区

Alluxio 官方

认证官方账号

3.6K

经验值

3.6K

开源豆

关注私信

连击天

fork: star:

加载中

挑战随着 AI 技术的不断进步，模型训练所需的数据量呈爆炸式增长，模型复杂度也大幅提升，从早期简单的机器学习模型到如今的大规模深度学习模型。AI 平台在数据访问上面临的主要痛点包括：底...

alluxio storage 存储系统 support fuse 分布式缓存系统 mlperf 深度学习 accelerator

12/03 18:00

18

分享嘉宾孙颢宁 Shopee Data Infra 分布式存储开发工程师分享大纲 AI 平台面临的挑战 Alluxio 加速AI 训练的实践 Alluxio 的性能探索 Alluxio 的大版本滚动升级未来规划观看完整分享 AI...

alluxio fuse worker netty hdfs memory tcmalloc glibc 数据处理 buffer truncate client dataset

11/22 15:28

534

AI 3.4新版发布：提升性能、增强资源管理并优化数据缓存策略 , , ,

alluxio support china oschina

11/19 18:30

0

我们很高兴地宣布 Alluxio 面向数据分析的Enteprise Data 3.2 企业版正式发布！随着数据量持续呈指数级增长，数据平台团队在维持查询性能、管理基础设施成本和确保可扩展性方面面临巨大的挑...

alluxio kubernetes documentation 文件系统 support https 数据存储 netty grpc 可视化

11/14 13:54

0

今日，业界领先的数据平台提供商 Alluxio 宣布，推出全球首创的高性能分布式缓存一体机 X-Cache A1（以下简称：X-Cache A1），并在刚刚结束的“2024中国数据与存储峰会”上，凭借其创新的设计...

alluxio 数据处理存储系统数据存储 hdfs cachea1 support 人工智能 doit 大数据

11/08 16:30

0

嘉宾介绍张松昕，南方科技大学统计与数据科学系研究学者，UCloud 顾问资深算法专家，曾任粤港澳大湾区数字经济研究院访问学者，主导大模型高效分布式训练框架的开发，设计了 SUS-Chat-34B 的...

数据处理大数据 youtube 分布式系统 pipeline 并行文件系统开源 alluxio sora llama

10/11 18:12

528

在当前的技术环境下，搜索、推荐、广告、大模型、自动驾驶等领域的业务依赖于海量数据的处理和复杂模型的训练。这些任务通常涉及从用户行为数据和社交网络数据中提取大量信息，进行模型训练和...

alluxio 推荐系统自动驾驶搜索引擎 alluxioenterpriseai 计算机视觉 bert 数据处理

09/24 17:32

284

👉 Alluxio Enterprise AI on K8s 部署教程 👈 链接为Alluxio Enterprise AI on K8s 部署视频教程。下面内容将通过文字方式主要介绍如何通过 Operator（Kubernetes 管理应用程序的扩展）...

alluxio operator yaml fuse etcd docker kubernetes spec worker registry grafana storage bitnami

09/23 10:27

590

👉 Alluxio Enterprise AI on K8s测试教程 👈 链接为Alluxio Enterprise AI on K8s FIO测试视频教程。 fio 是业内常用的磁盘与文件系统性能测试工具，下面内容将通过文字方式介绍Allux...

alluxio node fio fuse yaml worker etcd 文件系统文件系统性能测试工具 image 虚拟机

09/23 10:24

290

混合云架构，带来便捷与挑战知乎目前是典型的混合云架构，数据和服务都分布在不同的机房：离线机房：专为满足大数据相关业务方需求而设计的离线计算服务中心。其主要职能是部署离线调度、...

alluxio fuse hdfs worker 大语言模型 operator 文件系统 grpc 数据处理其他 unionstore

09/20 16:38

964

在AI模型训练尤其是大模型领域，存储系统的性能和稳定性直接决定了模型训练、推理、部署任务的效率和成本。随着全球AI行业的爆发带来的数据规模的快速增长，如何高效管理和利用这些数据成为A...

alluxio 存储系统 ray 生命周期管理工具机器学习平台分布式缓存系统 zero

09/11 18:15

283

近日，Alluxio 创始人兼CEO李浩源被 Datanami 评为 2024 BigDataWire 焦点人物（People to Watch ）。Datanami 是一家专注于 AI、大数据和分析领域的头部新闻门户网站。其“焦点人物”专栏重...

alluxio 大数据大语言模型机器学习计算引擎自动驾驶存储系统

08/28 18:08

65

分享嘉宾刘礼铭 bilibili 人工智能资深工程师刘礼铭，毕业于浙江大学，负责B站 AI 机器学习平台。分享提纲 B站 AI 训练场景介绍； Alluxio 如何提升 AI 训练效率；未来规划 👉 观看完整...

alluxio 机器学习平台 hdfs 存储系统 meta fluid 文件系统大数据 boss 数据存储

08/13 12:06

1K

分享嘉宾：孙涛 - 中汽创智智驾工具链数据平台开发专家关于中汽创智：中汽创智科技有限公司（以下简称“中汽创智”）由中国一汽、东风公司、南方工业集团、长安汽车和南京江宁经开科技共同...

alluxio fuse 自动驾驶 worker 存储系统 sidecar juicefs 文件系统 docker 元数据层

08/02 14:13

786

近日，Alluxio 数据平台与火山引擎对象存储 TOS 实现集成。结合 Alluxio 的数据加速能力以及火山引擎对象存储 TOS 的海量、低成本特性，双方将共同为用户提供经济高效的存储及 AI 加速解决方...

alluxio 数据存储数据处理大数据 support 存储服务分布式架构架构师 10eb

07/20 10:00

92

2025届校招开启｜加入 Alluxio 就趁现在！ , , ,

alluxio support china oschina

07/11 18:34

118

2024年7月4日至7日，由外交部、国家发展和改革委员会、教育部、科学技术部、工业和信息化部、国家互联网信息办公室、中国科学院、中国科学技术协会和上海市人民政府共同主办的世界人工智能大...

alluxio 人工智能云计算大数据 gitlab xreal saas 人工智能平台运营管理系统

07/01 18:28

164

Alluxio Enterprise AI 3.2版本发布｜3大亮点抢先看【读写性能强劲提升】🔝 1⃣️以Alluxio FUSE为基础的POSIX API接口带来的读吞吐和IOPS性能增强，助力大模型训练中，极速加载Checkpoin...

alluxio zero 生命周期管理工具文件系统 ray 存储系统 python checkpoint alluxiofuse

06/25 18:25

54

近日，Alluxio分布式缓存系统完成了与XSKY星辰天合的 XEOS V6.4 对象存储的兼容性测试，旨在解决数据管理和加速方面的挑战。双方进行了深度的产品对接和联合开发，将 Alluxio 分布式缓存系统...

alluxio 数据存储分布式缓存系统 xeos 大数据存储系统数据管理平台

06/05 11:28

1.7K

六一在即，小朋友们想必早就摩拳擦掌了大朋友们也別急，小编有一穿越门，推开即是童年 ⬇️ 充满童年多巴胺的快乐来自Alluxio 关于Alluxio的身世传说 Alluxio是全球首个分布式超大规模数...

alluxio 开源 support 大数据存储系统云计算 amp china oschina 989ehillsdaleblvd

05/31 15:22

93

没有更多内容

加载失败，请刷新页面

©OSCHINA(OSChina.NET)

工信部

开源软件推进联盟

指定官方社区

社区规范

深圳市奥思网络科技有限公司版权所有

粤ICP备12009483号

顶部