业务背景
当前线上业务有数百TB级别的监控数据,使用https://www.taosdata.com/处理。在搭建TDEngine集群时,我们希望可以使用CurveFS作为它的存储后端。本次的测试目标主要有两个:获取TDEngine的io模型,存储TDEngine对存储性能的要求
测试数据
-
从日志可以看到,TDEngine落到磁盘的IO以多文件顺序小写为主
-
从监控可以看到, TDEngine在curvefs上的qps只有本地盘的1/4
测试结论
需要对多文件小io顺序写这种场景性能瓶颈进行分析(瓶颈点有可能是在kernel-fuse)