BIM族数据属于半结构化数据, 其数据结构相对松散且可变, 难以使用传统关系数据库进行存储和查询。本文以FastDFS分布式文件系统和Drill实时查询引擎为基础, 在BIM资源库下针对族数据的存储和查询构建了的分布式数据处理平台。经测试, 较传统以关系数据库为核心的非分布式系统, 存储性能和查询性能均有较大提升。

国内的BIM相关技术在近几年发展迅速, 随之高速增长的BIM数据对存储系统的高可用性、负载均衡、横向扩容等功能也提出了更高的要求。本文就BIM行业内某公司需求, 设计并实施了以FastDFS为主HDFS为辅的分布式文件存储系统。该公司主要存储BIM数据中常见的.rfa文件和.rvt文件, 其中, .rfa文件的大小在KB级, 而部分.rvt文件则体量较大。主流分布式存储系统HDFS适合存储大文件, 为节省研发HDFS针对小文件存储算法方面的成本, 本文引入了适合存储中小型文件的轻量级分布式存储系统FastDFS, 以此为主要存储系统, 并部署HDFS, 存储大文件, 为公司之后优化HDFS小文件存储, 迁移全部存储平台至HDFS, 并在此之上建立分布式计算平台打下技术基础。本文在两个存储系统之上布置了配有Keepalived模块的Nginx反向代理服务器, 统一用户存取入口, 在保证系统负载均衡和高可用性能力的同时封装了WebAPI, 依据文件大小, 将BIM数据分别存入FastDFS和HDFS。经测试, 新系统较原系统在存储性能方面有较大提升, 并增添了高可用性、负载均衡、横向扩容等功能。