大数据分布式管理在公安交通管理综合平台中的应厍

(整期优先)网络出版时间:2015-03-13
/ 1
本文介绍针对公安交通管理综合应用平台(简称综合应用平台)面临的海量数据管理、数据深度应用的迫切需求,以面向大数据的分布式平台Hadoop为基础,组合应用分布式存储系统Hbase、并行计算框架Spark、资源管理平台Yarn、数据转递工具Sqoop等成熟技术,搭建的适应公安交通管理行业的分布式大数据管理平台;并分别针对结构化、非结构化的交通管理业务数据在该平台上的写入、读取操作进行了模拟测试。