智能电网海量数据实时搜索技术研究.pdf

《智能电网海量数据实时搜索技术研究.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、r中图分类号：TP274文献标志码：B文章编号：2095—641X(2016)12-0038—08DOI：1O16543／j2095—641xelectricpower．ict2016．12007智能电网海量数据实时搜索技术研究吴秋莉，郭丽娟，吕泽承，邬蓉蓉广西电网有限责任公司电力科学研究院。广西南宁530023)摘要：为满足智能电网对海量状态监测数据搜索的实时性要求，文章结合智能电网海量状态监测数据特点，提出一种分布式实时数据库动态索引技术。将NoSQL数据库的分布式索引技术、并行处理技术以及高可用性技术(HA)与当前多个单体数据库构建的存储网络相结合。采用动态反馈

2、机制自动完成节点间的负载均衡，通过并行计算构造动态索引，实现了电网状态监测点数据在分布式环境中的快速检索与自调整功能。并通过屏蔽底层数据库网络的复杂结构，为用户提供了统一的数据搜索接口。测试结果表明，该技术满足智能电网业务系统对数据库搜索的实时性和扩展性要求。关键词：分布式实时数据库；动态索引；动态反馈；负载均衡；高可用性{j探索，艾献【l】"对综合ll化系统rl数据写入的特、．沦述r琏J：f』、】仃I：l，J1If数．i随钾能卜q的世速发展，躲洲系统接收的数过内仃lf将数缓仔，然人数J乍的』4j：使f[J数执种炎世迷增打【J，泐lll。佝化数据的系统的[Ilf悱；足

3、献[3]摊⋯IJ’JIL-J分nI=史ffIlf储成为uJ坼决的『rIJ题之一传统寅时数系统的海能质㈨监测数僻川’棠，将IIM索引技术上。"埘基1：父系的构化数，数据缩后仃分式中勾务L，测JLf{1J建的非中勾化数索引存性能fII数据库资源『站仃数特IfIlcf¨义什索，I，捉lJ收效串；川，J‘曲鄙难以满能电网的发，尤献[4]提⋯．l一人数fJ‘索‘，：fJf1JJ1II,j。r{：方面”。，￡Ijf持海数r、分』＼=C结果作为I}1I'lfJ站集，新jJj-卫咖【JLI余份、nJ‘功念州、r吖川的动怠索，Jl技术的则白：接返求，从而减少r人；的埘历1J!¨益高涨川

4、I岛实时悱数时，无衙r咖的重复汁tl：．挺“r查问效率；艾献[5]遗传{Ⅲ芷务·的络构及刚小!怵仔储存个拟退火}合钟：泼一tI融人小1境{芝、ji对混合：；J】I《’’l，I1．ill4箭⋯现满载、l情况，搜索n0f}1心索进f改逊，丛丁陔l：法提⋯J一1系统小Ifl断Ij14纾的条件下，』-I1仃处：系统仔fcf}收进的分fI』咖优化法，成少分m式数据咋一总：及吱n,J数fJJ0IIi：能力会随符fJ}迁务数的增cfIJ的代价，提J湘效率]Ji⋯f线性地良好扩总之．研究作侧承丁海h数据的织、1满足能l_Ui岛级应川的实时‘求，研究人以及搜索钟：法的优化和改进‘¨1．

5、针刈‘的址‘i从实时数、分fisst：仔储以技索，』『：法等方面进·体心Jl解决的实时-J题．术从午1能ff基金项目：南方电网公司重点科技项目“基于大数据分析的数据存储状‘．建市适合电J人数据分忻的电网主设备安全预警决策平台开发”fGX2014—川实时搜索系统200251小艾所迩的海数据¨、¨唑索系统(LGRea宙墨rti1110Search，LGRS)ii"埘能lU刚分析业务t个杖(陔仪fIlf代陔If<．洲一的数流久俐f发的-ll1f的、多维的、交f的搜索、统计、分小，据监测点崾进{JflIi?：III='it运I忻系统，i·rIJ,lk符海I-数据的统汁分凋)：

6、fj，』‘捉‘的戈『Ilf索‘案．il：万级维、亿2)埘lili．i1,0lD列按ft{j-JtfH-It!，然级数缎成乃观放人优先级队列，十i-』il人的人队列：3)从f允级队0-f-扶j4}l川-lD，)ijl’钟：发l动态索引信息的存储lD的哈希fi。f，ijJj发：0lD一敛rj：[1币夫f1fj0I』J介=,IkI'l"J分n』it,J‘教i索，jlfJ【制l仃J特位置：眯^J之15-．1：状态川点数包简．数和海址4)循从优缄队列-f叫⋯所仃测，，成小迦(『』lI『冬l波数l迁什)，上的数捌操作·敛性哈希&的＆{二；址。人ff上I：数的，人台／f必欠心系5J

7、1仃撕的洲II,怯人系统f『1f，·兀：新逃优统I』、j邮fJI《纡、0延f状怎．『』l】Ii订没箭存满、级队0，按步j求3Jfjn0II&-4一、逃{芦_l‘太-f吖火设nIJ；教{=lt系统J时海数的时化，、{fItIt'j‘．f暂Ⅲ0ID)JIllJtJ‘l’‘。入，以技、ll，纾系统攫供il,j‘的状态洲数fl化：咖。fi决这特定川数系统J上仃离效6)＆llJj’：0·j丛⋯I1'J‘．1l^将}1t、翻『l】的、-功忿索引机制衷rtf『勺位¨火日J删除【!lJ【J‘，i发f将tJ’f』I的{‰洲011动态索引存储·、使jlJ；能『的洲数烈t