加载中
RDMA编程养成记

高性能分布式文件系统FastCFS从今年7月份开始适配RDMA 网络,经过4个多月的预研、开发和测试,通过 ibverbs和rdmacm原生支持RDMA的FastCFS 5.0于11月22日发布。 RDMA编程初学者可以了解一下R...

FastDFS V6.11发布,支持IPv6

分布式文件系统FastDFS V6.11发布,主要改进包括: 1)支持IPv6,且支持IPv4和IPv6双栈模式。tracker.conf和storage.conf中增加了配置项address_family,默认为IPv4优先,具体配置说明参见源...

FastCFS V5.0发布,原生支持RDMA

经过4个多月的预研、开发和测试,FastCFS 5.0终于和大家见面了。FastCFS 5.0使用ibverbs原生方式适配了RDMA网络,可以充分发挥RDMA网络的低延迟和高吞吐特性。在此特别感谢 @Frank 提供IB环境...

FastCFS V4.3发布,小改进和bug修复

经过3个星期的研发和测试,高性能分布式文件系统FastCFS 4.3发布了。V4.3主要是2个小改进和7个bug修复。 2个小改进如下: 1)fastdir存储引擎的children容器默认为sortedarray,新支持了ski...

FastCFS V4.0发布,支持单机PB级存储

经过整整4个月的潜心研发,FastCFS V4.0终于与大家见面了。V4.0主要改进:faststore引入存储插件,存储节点以有限内存(如32GB)支持上百TB的存储空间。如果单机要支持PB级的存储空间,出于性...

基于FastCFS的NFS搭建及常见问题排查

通过 POSIX 兼容性测试的v3.7发布后,FastCFS完全可以作为NFS的后端存储,推荐使用FastCFS v3.7.1及后续版本。FastCFS的搭建参见gitee上的 FastCFS项目官网 ,本文着重介绍FastCFS作为后端存...

FastCFS 3.7.1发布,支持用户附加组

FastCFS v3.7.1发布,支持用户附加组,完全符合POSIX标准,解决了在FastCFS的fuse client上跑NFS(套娃模式)可能碰到的访问权限问题。 v3.7.1改进和修复的问题如下: [fdir] service_stat ...

FastCFS在eRDMA与传统网络环境下对比测试分享

FastCFS 是一款强一致性、高性能、高可用、支持百亿级海量文件的通用分布式文件系统,可以作为MySQL、PostgresSQL、Oracle等数据库,k8s,KVM,FTP,SMB和NFS等系统的后端存储。 数据库作为I...

FastCFS 3.7.0 发布,通过 POSIX 兼容性测试

FastCFS 3.7.0 发布,主要通过了 POSIX 兼容性测试以及修复了 7 个 bug,FastCFS 的稳定性进一步提升。 POSIX 兼容性测试使用开源项目 pjdfstest,共有 8 千多个 test case,只有极少数 case...

FastCFS实战半年成长记

今年5月份A公司打算用FastCFS替换MooseFS,主要出于两点考虑:1. 国产化替代;2. FastCFS不存在单点问题,并且有作者提供支持,用起来更加省事和放心。A公司主要使用MooseFS作为后端存储跑q...

FastCFS亿级小文件存储案例分享

近期一家金融企业使用FastCFS存储CVS格式的账单数据,文件不大,但数量较多,目前文件数超过一亿,还在持续增长中。。。因文件数较多,该用户开启了FastDIR的存储引擎插件,实现秒级重启并且...

FastCFS V3.6.1 发布,主要为 bug 修复和小改进

FastCFS V3.6.1 发布,这个版本主要为 bug 修复和一些小改进: 1)集群管理工具 fcfs.sh 支持 Ubuntu 和 Debian; 2)使用最新的 libserverframe 库(v1.1.19 支持 FastDFS v6.09); 3)修复...

FastDFS V6.09 发布,整合网络框架 libserverframe

FastDFS V6.09 发布,主要改进:引入网络框架库 libserverframe,替换原有的 tracker nio 和 storage nio 两个模块。 2015 年 libserverframe 从 FastDFS 的 nio 模块抽取出来,现在 FastDF...

FastCFS v3.6发布,文件读写性能大幅提升

历时3星期的研发,FastCFS v3.6发布了,文件读写性能提升明显,尤其顺序写相信会惊艳到大家,感兴趣的朋友可以用 dd或scp等工具体验一下飞一般的感觉。我们租用3台阿里云本地SSD ECS 和 1台普...

FastCFS V3.5.1发布,写入数据过半数自适应

FastCFS V3.5.1发布,主要支持两副本写入数据过半数自适应模式:如果两个节点都可用,则采用过半数确认机制,否则写入一个节点即可。友情提示:双副本情况下为了防止脑裂,建议使用公共选举节...

FastCFS数据一致性配置和实践

FastCFS今天发布了v3.5,支持多数派数据复制,在网络不稳定或者系统繁忙等情况下,仍可保证数据一致性和可靠性。FastCFS v3.5从机制上保证了数据一致性,在实际使用中我们该如何进行软硬件配...

FastCFS V3.5 发布,支持多数派数据复制

经过一个多月紧锣密鼓的研发,FastCFS v3.5发布了。v3.5主要完成了异常情况下保证数据一致性的改进工作:数据提交采用多数派确认机制保证在高负载等不稳定情况下数据一致性和可靠性;实现了数...

FastCFS V3.4 发布,支持双活互备防脑裂

历经一个半月的紧张研发和测试,V3.4发布了。V3.4主要改进: 1. 引入选举节点,双副本防脑裂(即双活互备防脑裂,保证数据一致性); 2. fdir和fstore的binlog去重及历史数据清理,减少不必要...

分布式文件系统FastCFS里程碑版本V3.3发布

经过一个半月的紧张研发和测试,FastCFS V3.3如期发布了。V3.3是一个里程碑版本,正常重启和kill -9强杀,系统稳定性和数据一致性,均得到了充分测试和保障。V3.3主要改进为: 1. [fstore] ...

程序中如何禁用Linux文件预读和缓存机制

本文主要供C/C++开发人员参考,其他技术人员酌情自取。 文件预读和缓存机制在Linux下是默认开启的。对于随机读,预读机制往往会导致读放大。如果应用程序自己实现了数据缓存,通常就不再需要...

没有更多内容

加载失败,请刷新页面

返回顶部
顶部