智慧城管大数据项目简介.docx
智慧城管大数据平台项目简介XX科技股份有限公司编制目录-、智慧城管大数据平台项目背班3二、客户情况及市场情况31客户情况32市场情况4三、技术选型错误!未定义书签。四、项目团队构成错误!未定义书签。五、团队成员技能需求错误!未定义书签。一、智慧城管大数据平台项目背景政府是国家机器的根本,政府的办公效率是一个国家兴国安邦的试金石,当今社会,随着信息技术和互联网的广泛应用,在国家治理和政府办公方面,以“互联网”和移动互联为基础的政务变革,使政务模式和工作方式发生了根本性的变化。为顺应新形势下的政务发展,加快推进政府单位信息化的建设,提高政府为民办事的效率,我公司结合多年的信息化系统集成和云计算以及大数据整合方面的经验,在本次电子政务的信息化建设中,以该政府单位具体需求为主导,以信息化为支撑,以新技术、新媒体为突破,切实把推动提升该单位的电子政务处理、监管和服务水平为出发点。积极落实以民生服务为根本,数据治理为核心,网络安全为保障的信息化发展战略举措,夯实“互联网”背景下贵单位的信息化构建的基础。信息时代让政府服务的资源调用量增大、社会对政府服务的需求提高,政府机构需要加速变革增加公众参与度;而政府机构职能转变也需要信息技术的支撑来实现“思维方式、工作方式”的转变。二、客户情况及市场情况1 .客户情况从近几年来爆发的数据安全事件看,城市的大数据安全仍然受到严峻的挑战。首先,基础设施是城市大数据的坚固支撑,但数据机房的等级保护、运维人员的安全操作、数据行为的合规审计都是不容忽视的安全漏洞来源。其次,大数据倡导城市中多系统的共建共享、互联互通,泛在化的网络广泛应用,使得通讯信息直接暴露在自然环境中,信息完整性损害风险陡增,这就对大数据加密、传输和解密的过程提出了挑战。镀后,隐私保护问题也越来越突出。用户隐私数据被非法买卖、移动互联网陷阱随处可见、市民检索记录被用于精准广告推销,这些隐私保护问题可能随时导致一个城市的数据瓦解乃至崩溃。为此,首先要构建城市数据安全保障体系。加强大数据环境下城市信息安全认证体系建设,会同城市管理各相关部门做好安全顶层设计,有效保障数据采集、传输、处理等环节的可控性、可用性、完整性、保密性。围绕城市应用系统安全、数据基础设施安全、云计算平台安全、数据通信安全、数据灾备安全、数字身份认证等方面,探索建立城市管理大数据安全保障体系。2 .市场情况习近平总书记在中共中央政治局实施国家大数据战略第二次集体学习时强调,各级领导干部要加强学习,懂得大数据,用好大数据,增强利用大数据推进各项工作的本领。城市管理要像绣花一样精细,大数据是一枚可用的绣花针。大数据技术能够对城市运行中各种类型的数据快速分析计算,为城市管理精细化提供了新的治理工具。数据能够将城市中的人、地、事、物、情和组织连接起来,将数字、文本、图像、视频、音频、温度和气味等不同视角、不同渠道、不同途径采集的城市管理信息连接起来,将过去和现在不同时间维度上产生的数据连接起来,通过广泛连接将分散、无用的城市管理数据组织成创造知识和智慧的富矿。目前上海、杭州等城市正在大力推进“城市大脑”建设,城市大脑不应只是对特定领域城市运行基础数据的收集、存储和使用,未来或将实现全覆盖、全过程和全天候的数据连接。三、技术选型 CDHZF1.umeKafka数据采集,结合数据流技术对接各类应用系统及数据库的数据资源 CDH/HDFS文件类数据整合与存储,HADOOP技术路线 CDHHBSE格式类数据整合与存储,HADOOP技术路线 CDH/HIVE数据清洗 HADOOP数据清洗工具 CDHSPRK离线数据开发及处理 F1.INK实时数据开发及处理 CDH/SPARK数据服务及安全 CDH/YARN+CM数据负载及集群管理 CDH/HIVESparkM1.数据分析及智能 TAB1.EAU针对数据分析及智能提供自助式或嵌入式的可视化分析图表 E1.ASTICSEARCH针对数据分析及智能提供面向用户的全局数据探索或面向应用的全局数据搜索 HADOOPYARN针对数据服务及安全类应用的定制开发提供微服务运行环境技术管理工具四、项目团队构成姓名性别学历职称专业工作单位项目中的分工*年工作时同()筌字成员A男本科高级大数裾工程师应用电子技术XX科技股份有限公司项目管理12成员B男本科高级大数据工程师体肓医学技术总设12成员C男本科中级软件工程肝计算机科学与技术软件开发12成员D男本科高级大数据讲陆计算机科学与技术软件开发12成员E男本科中级软件工程师数学与应用数学软件开发12成员F男本科高级运维工程师信息管理架构设计12五、团队成员技能需求(I)成员A云计算、大数据商级工程师擅长:负责企业级云计算、大数据平台项目,大数据应用开发项目的立项、论证、验收等项目过程管理,云计算和大数据相关通识性培训。项目经历:区域医疗云计算中心、重庆三峡银行大数据平台、电信分析云项目、重庆移动业务支撑大数据平台建设。(2)成员BC1.oUdCra大数据专家高级软件工程师长期从事技术管理工作,对技术团队的管理和认识有自己独到的见解,善于将人员提升和管理经营有机结合。擅长技术:Windows,1.inuxxExchange,数据库、Hadoops项目管理等系统开发与管理。(3)成员C商级软件工程师擅长技术:网络通信、网络安全、数据库操作、dui1.ib、cc+o(4)成员D市皴软件工程师擅长技术:Py1.hOn爬虫程序开发、Python数据分析、1.inux系统管理、大数据存储与管理、Hadoop大数据开发、Sca1.a函数式编程、数据挖掘、云计算平台架构、Exce1.高级数据分析、图像识别、机器学习、分布式计算、数据可视化分析等。(5)成员E大数据分析师擅长技术:R语言统计分析、EXCe1.数据分析、Q1.ik数据可视化、数据可视化建模、概率论与数理统计。(6)成员FQOudera大数据专家而领软件测试工程师曾在上海惠普、IBM、MOTORO1.A,北京融信恒通等公司任职,擅长技术:hadoop平台设计、运维,熟悉yam、hdfs/HA、mapreducev1.v2,f1.ume,SqOOp、pig、impa1.a、hive、zookeeper,等相关组件集群的搭建和维护管理。