大数据可视化分析平台介绍

《大数据可视化分析平台介绍》由会员上传分享，免费在线阅读，更多相关内容在应用文档-天天文库。

1、大数据可视化分析平台一、背景与目标基于邳州市电子政务建设的基础支撑环境，以基础信息资源库（人口库、法人库、宏观经济、地理库）为基础，建设融合业务展示系统，提供综合信息查询展示、信息简报呈现、数据分析、数据开放等资源服务应用。实现市府领导及相关委办的融合数据资源视角，实现数据信息资源融合服务与创新服务，通过系统达到及时了解本市发展的综合情况，及时掌握发展动态，为政策拟定提供依据。充分运用云计算、大数据等信息技术，建设融合分析平台、展示平台，整合现有数据资源，结合政务大数据的分析能力与业务编排展示能力，以人口、法人、地理，人口与地理，法人与地理，实现基础展示与分析

2、，融合公安、交通、工业、教育、旅游等重点行业的数据综合分析，为城市管理、产业升级、民生保障提供有效支撑。二、政务大数据平台1、数据采集和交换需求：通过对各个委办局的指定业务数据进行汇聚，将分散的数据进行物理集中和整合管理，为实现对数据的分析提供数据支撑。将为跨机构的各类业务系统之间的业务协同，提供统一和集中的数据交互共享服务。包括数据交换、共享和ETL等功能。2、海量数据存储管理需求：大数据平台从各个委办局的业务系统里抽取的数据量巨大，数据类型繁杂，数据需要持久化的存储和访问。不论是结构化数据、半结构化数据，还是非结构化数据，经过数据存储引擎进行建模后，持久化

3、保存在存储系统上。存储系统要具备高可靠性、快速查询能力。3、数据计算分析需求：包括海量数据的离线计算能力、高效即席数据查询需求和低时延的实时计算能力。随着数据量的不断增加，需要数据平台具备线性扩展能力和强大的分析能力，支撑不断增长的数据量，满足未来政务各类业务工作的发展需要，确保业务系统的不间断且有效地工作。4、数据关联集中需求：对集中存储在数据管理平台的数据，通过正确的技术手段将这些离散的数据进行数据关联，即：通过分析数据间的业务关系，建立关键数据之间的关联关系，将离散的数据串联起来形成能表达更多含义信息集合，以形成基础库、业务库、知识库等数据集。5、应用开

4、发需求：依靠集中数据集，快速开发创新应用，支撑实际分析业务需要。6、大数据分析挖掘需求：通过对海量的政务业务大数据进行分析与挖掘，辅助政务决策，提供资源配置分析优化等辅助决策功能，促进民生的发展。采用新型MPP数据库+Hadoop的融合架构，使用MPP处理PB级别的、高质量的结构化数据，同时为应用提供丰富的SQL支持能力;使用Hadoop处理海量半结构化、非结构化数据，从而满足用户多种数据的处理需求。智慧政务：基于分布式计算、存储框架，面向政府不同价值的数据源，通过采集、存储、建模、挖掘等大数据技术，在社会保障、公共安全、人居环境、劳动就业、文化教育、交通运输

5、、综合治税、消费维权、精准扶贫等领域开展大数据应用，优化公共资源配置，提高公共服务水平。帮助政府促进经济发展、完善社会治理、提升政府服务管理能力、服务改善民生，培育壮大新兴产业。如下图所示的政府综合决策分析系统，利用大数据分析平台，采集并分析多个部门共享上传的业务数据，为政务部门提供决策支持。如下图所示的政府效能监察大数据系统，通过对各类政务服务事项，全市各个部门单位的政府网上办事流程进行多维度，高效的及时监察、分析，从而对办事效率低下的职能部门和审批人员实现高效监督；找出设置不合理的办事流程，促进政府办事流程的优化。实现政府部门网上办事多维度的数据分析挖掘，

6、秒级展现效果，让决策者一目了然发现问题，提升政府的服务水平。基础信息融合应用展示分析基于政务大数据平台开发或构建的各类系统如四大基础库系统、业务主题库系统，通过政务大数据平台信息枢纽的作用，各系统不需要再与任何政府部门业务系统对接，而直接从政务大数据平台关联形成数据，为政府业务办理提供支撑。三、视频云结构化分析系统视频云结构化分析系统可实现视频中车辆和活动目标的结构化信息提取，提取属性丰富，精确度高；支持智能结构化分析后文本信息和图片信息的存储和检索；支持动态扩容，智能分析性能随着设备数量增加呈线性增强；支持第三方标准视频流的接入和智能分析应用；支持本地录像的

7、智能分析；系统自带IE界面，提供智能检索、数据统计、布控报警、任务管理、资源管理、集群管理、系统校时、日志查询等功能。1.车辆大数据分析车辆图片以图搜图车辆以图搜图是基于图片的搜索模式，通过图片建模后特征向量的比对分析，并且在被搜索图片中选择特征区域进行二次比对，从图片库中检索出符合条件的图片，并根据相似度返回比对结果。准确率比单纯建模后特性限量比对高50%。过车数据处理服务过车数据处理包括过车数据检索、智能研判、OD分析、统计分析等几大类。过车数据检索过车数据检索是通过全文检索技术，对海量过车数据进行快速检索，支持精确查询、模糊查询、多条件组合查询。支持千亿

8、过车数据中秒级查询到结果。过车数据检索