基于D-thinker系统的Greppy字串搜索系统

基于D-thinker系统的Greppy字符串搜索系统具有搜索速度快,数据处理量大等优点,并且随着参与运算的节点数的增加能够线性的增大数据处理量并保持较快度的搜索速度。D-thinker系统所需硬件平台为普通PC服务器,具有成本低,性价比高的特性,这使得构建Greppy系统的成本大大降低。在实际测试中搜索200GB数据所需要的时间为5s,当搜索数据增加至400GB,节点数也相应增加的情况下搜索时间为7s。D-thinker系统使Greppy搜索能够在数据量增加而搜索时间相对保持快速成为可能。只要节点数目足够,即可在较短时间内从TB及PB级数据中得到所需结果。现阶段Greppy系统已经处于稳定开发状态,正一步步通过优化来达到大数据低耗时的目标。