达坦科技DatenLord的个人空间 - OSCHINA - 中文开源技术交流社区

1、背景在达坦科技实习期间，笔者开发了一个RDMA用户态驱动，用于与达坦科技自研的BlueRDMA进行交互。整个驱动分为内核态和用户态两个部分，内核部分做的仅仅是将必要的内存空间暴露给用户态...

cache https rust 其他 memory assert ringbuf tail 设计模式 gdb jib k linux github c/c++head

硬件加速

09/13 15:30

34

0

Xline是什么？我们为什么要做Xline？ **Xline是一个基于Curp协议的，用于管理元数据的分布式KV存储。**现有的分布式KV存储大多采用Raft共识协议，需要两次RTT才能完成一次请求。当部署在单个...

xline https 重复数据删除 grpc github client index once watch refactor rust etcd 性能优化

Xline

08/29 22:35

54

0

Xline是什么？我们为什么要做Xline？ **Xline是一个基于Curp协议的，用于管理元数据的分布式KV存储。**现有的分布式KV存储大多采用Raft共识协议，需要两次RTT才能完成一次请求。当部署在单个...

xline https 重复数据删除 grpc github once index watch client refactor etcd 性能优化 rust

Xline

08/29 22:35

58

0

2024 RISC-V 中国峰会将于8月19日至25日在杭州黄龙饭店隆重举行。峰会采用“主会议+技术研讨会+展览展示+同期活动”的创新形式，将有超过20场同期活动在8月19日至25日期间同步进行。 RISC-V...

https 敏捷开发 v risc-v rust jib chisel github datenlord cloud tech2024risc pyuvm zhihu

硬件加速

08/16 20:41

56

0

达坦科技始终致力于打造高性能 Al+ Cloud 基础设施平台，积极推动AI应用的落地。达坦科技通过软硬件深度融合的方式，提供高性能存储和高性能网络。为 AI 应用提供弹性、便利、经济的基础设施...

https github rust terminus 开源 jib verification shady831213 icdesign cloud datenlord vhost

前沿技术分享

08/08 19:59

64

0

我们是谁？达坦科技始终致力于打造高性能Al+ Cloud 基础设施平台DatenLord，积极推动AI应用的落地。DatenLord通过软硬件深度融合的方式，提供高性能存储和高性能网络。为AI 应用提供弹性、便...

面试 https linux 加密算法自动化测试网络协议调试工具 chi linux内核

达坦动态

08/06 00:19

68

0

Table of Contents 1. Xline运行时性能问题 2. 异步运行时和阻塞操作 3. Runtime调度问题 4. 性能测试 4.1 测试结果分析 5. 如何正确实现？ 6. 何时能够在Runtime上阻塞 7. 总结在异步运行时...

runtime tokio xline executor async rust benchmark encode build loop tonic 其他 bench rocksdb task

Xline

07/25 22:39

70

0

为了更全面地向大家介绍Xline的进展，同时促进Xline社区的发展，我们将于2024年7月31日北京时间11:00 p.m.召开Xline社区会议。欢迎您届时登陆zoom观看直播：会议号: 975-8012-1637 会议链接...

xline https rust github platform 开源性能优化 xline0 rifl zoom curp 99d8b75938e41

Xline

07/25 22:16

41

0

本系列文章将带领读者逐步了解Linux操作系统下的RDMA子系统。本篇文章作为系列的第二篇，将深入内核态驱动程序的代码，主要介绍如下内容： Driver的初始化流程几个重要verbs回调函数的简介 ...

device https attr 操作系统 rdma _link layer linux linux操作系统 init jib github 机器学习

硬件加速

07/25 22:00

67

0

达坦科技始终致力于打造高性能Al+ Cloud 基础设施平台，积极推动 AI 应用的落地。达坦科技通过软硬件深度融合的方式，提供高性能存储和高性能网络。为 AI 应用提供弹性、便利、经济的基础设施...

开源 https 开源社区 glcc 系统工具 help 发送邮件编程语言操作系统测试工具

硬件加速

06/28 22:57

61

0

我们是谁？达坦科技始终致力于打造高性能Al+ Cloud 基础设施平台DatenLord，积极推动AI应用的落地。DatenLord通过软硬件深度融合的方式，提供高性能存储和高性能网络。为AI 应用提供弹性、便...

机器学习面试 https 数据可视化 pandas 深度学习框架决策树 pytorch

达坦动态

06/28 22:13

72

0

本文为翻译文章，原文为： Resiliency at Scale: Managing Google’sTPUv4 Machine Learning Supercomputer。由于字数过长，文章分为两期发布，本片涵盖原文后半部分4～9节，前三章节请参考...

cube reduce z 虚拟通道 https 其他机器学习 tpuv4 大型语言模型文件系统 rust

硬件加速

06/22 19:11

98

0

摘要 TPUv4（张量处理单元）是谷歌用于机器学习训练的第三代加速器，采用定制的三维环形互连，部署为 4096 节点的超级计算机。在本文中，我们将介绍设计和运行软件基础设施的经验，这些软件基...

cube borg index z tpuv4 https 编译器机器学习调度程序 torus 其他 libtpunet linux系统

硬件加速

06/13 21:17

72

0

摘要现代高性能计算和人工智能计算解决方案经常使用 GPU 作为其主要计算能力来源。这就为 GPU 应用程序的存储操作造成了严重的不平衡，因为每一个此类存储操作都必须向 CPU 发出信号并由 CP...

文件系统 https 其他用户空间文件系统 fuse gpu4fs btrfs 重复数据删除操作系统

硬件加速

06/02 13:38

92

0

为了更全面地向大家介绍Xline的进展，同时促进Xline社区的发展，我们将于2024年5月31日北京时间11:00 p.m.召开Xline社区会议。欢迎您届时登陆zoom观看直播：会议号: 832 1086 6737 密码: 4...

xline https github rust once client 开源 etcd curp rifl xlinecommand feature zoom refactor raft

Xline

05/24 21:15

56

0

1、重构概述在Xline 0.7.0中，我们完成了对Xline代码库中进行了一次较大的重构。这次重构在某些性能测试中甚至使得Xline获得了近20倍的性能提升。在本文中我会讲解Xline中重构后命令执行流程...

xline client etcd tokio rocksdb runtime 其他 async worker grpc fsync witness https follower

Xline

05/17 17:33

65

0

开源之夏（英文简称“OSPP”）是中科院软件所“开源软件供应链点亮计划”指导下的系列暑期活动。达坦科技自开源之夏创办首期起每年参与，积极鼓励在校学生积极参与开源软件的开发维护，培养和...

开源 blue https lumina github docs rust 测试工具 linuxkernel rdma help index summer cuda jib

达坦动态

05/11 15:59

91

0

本文提供了一个设计模式的综合概述，涵盖了设计模式的必要性，基本原则以及23种常见模式的概括性描述。结合Rust语言自身的特性，重点阐述了Rust中Builder，Combinator，RAII,Typestate(stat...

rust 设计模式 builder https json guard 其他 serving lang none match github hashmap server

硬件加速

04/30 14:01

148

0

Table of Contents 实现区间树的起因区间树实现简介插入/删除查询重叠操作使用Safe Rust实现区间树问题 Rc<RefCell<T>> i. 线程安全问题其他智能指针 i. Arc<Mutex<T>>? ii. QCell 数组...

xline rust 其他 etcd benchmark qcell delete node search refcell mutt crate high qcellowner sync

Xline

04/23 16:40

72

0

本系列文章将带领读者逐步了解Linux操作系统下的RDMA子系统。本篇文章作为系列的第一篇，将从全局视角介绍如下内容： RDMA简介用户态和内核态驱动的关系驱动代码的目录结构 1、RDMA概念简介...

core https rdma github linuxkernel rust 操作系统内核网络应用构建系统 build

RDMA干货合集

04/15 11:43

86

0

达坦科技DatenLord

技能雷达

Gitee 贡献

博客数据统计

OSCHINA 社区

在线工具

攻略

QQ群

公众号

视频号