资源描述：
《电力大数据高速存储及检索关键技术研究与应用_杨德胜.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。
1、测试工具与解决方案2014.3电力大数据高速存储及检索关键技术研究与应用123杨德胜,陈江江,张明（1.安徽南瑞继远软件有限公司,230088;2.江苏瑞中数据股份有限公司,2100003.国网电力科学研究院,211100）摘要：针对电力数据体量大、种类庞杂、横跨专业多等特点而引起的系统访问响应不及时的现状，本课题以生产、运营、营销、管理等各环节业务需求为研究对象，通过分析产生系统性能问题的原因，以大规模数据存储、大规模数据检索、即时处理等技术为基础，从电力大数据的访问特征、大数据高速存储、检索以及流计算即时处理等层面，
2、研究面向电力大数据特征的高速存储体系结构、索引体系结构以及流计算即时处理技术，实现电力大数据处理的原型系统并进行验证，补充和完善技术研究成果，提升公司业务系统性能。关键词：电力大数据；数据存储；数据检索；流计算PowerBigDataHighspeedDataStorageAndRetrievalAndApplicationOfKeyTechnologies123YangDesheng,ChenJiangjiang,ZhangMing(1.AnhuiNariSoftwareCo.,LTD.,230088;2.ChinaR
3、ealtimeDatabaseCo.,Ltd,210000；3.StateGridElectricPowerResearchInstitute,211100)Abstract：Largebodyofdataforelectricity,speciescomplex,multisystemaccessfeaturesacrosstheprofessionalandtimelyresponseisnotcausedbythestatusquo,subjecttotheproduction,operations,marketi
4、ng,managementandotheraspectsofthebusinessrequirementsforthestudy,theanalysisgeneratedbythesystemcauseofperformanceproblemsinlarge-scaledatastorage,large-scaledataretrieval,real-timeprocessingtechnology,thecharacteristicsofelectricpowerfromlargedataaccess,high-spe
5、edlargedatastorage,retrievalandstreamingrealtimeprocessingandotheraspectsofcomputing,bigdataresearchforelectricitycharacteristicsofhigh-speedmemoryarchitectures,indexingarchitectureandreal-timeprocessingstreamcomputingtechnology,aprototypesystemforlargedataproces
6、singpowerandverify,supplementandperfectthetechnologyresearchtoimprovebusinessperformance.Keywords：PowerBigData;DataStorage;DataRetrieval;StreamComputing0引言能化电力系统在大数据时代下价值形态的跃升。本课题根据文献研究成果，围绕公司业务应用中面临的实际电力企业的数据已告别以往数据类型较为单一、增长较为缓问题和迫切需求以及业务应用中亟待提升的方向，研究面向电力慢的时代，随着
7、SG-ERP和智能电网建设的开展和深入，数据量以大数据特征的高速存储体系结构、索引体系结构以及流计算即时几何级增长的速度在增长（由TB级向PB级转变），数据来源更加处理技术，解决系统建设与运行各环节所面临的技术难题，探索复杂和多样（结构化、非结构化和半结构化），如何充分利用应用各技术的应用以期实现突破，为电力大数据技术在公司系统的应这些巨量的多样化数据，对其进行深入分析以便提供大量的高附用提供有效指导和切实支撑。加值服务，需要应用大数据的理念与技术。另外，大数据是能源变革中电力工业技术革新的必然过程，而不是简单的技术范畴
8、，大1电力大数据高速存储、检索及流计算即时处数据不仅仅是技术进步，更是涉及整个电力系统在大数据时代下理技术研究与应用发展理念、管理体制和技术路线等方面的重大变革，是下一代智1.1电网典型业务系统数据存储/检索/计算的技622014.3测试工具与解决方案术架构分析总结，研究电网业务检索业务的类型分类与特征；基于上面的两
