数字XX建设项目（智慧城建）需求说明.docx

数字XX建设项目（智慧城建）需求说明一、项目建设内容本项目旨在围绕“强功能、补短板、惠民生”的核心理念，基于韧性城市建设理念，致力于构建XX市智慧城建一体化数据资源平台和重点领域业务系统，实现住建领域全生命周期的数字化管理。通过本项目基于“1+1+1+N”系统架构设计，结合“一个智慧城建时空大数据库”+“一个智慧城建时空大数据平台”+“一个智慧城建综合管理平台”+“N个应用场景”建设内容，构建的通用化的动态更新的数据底座，面向业务的智能应用开发，提升行政审批、住房保障、房地产管理、城乡建设、建筑业管理、城乡风貌、园林管理等住建多个部门工作效率提升，面向公众提高办事效率，增强生活服务，提高群众满意度，推动XX市韧性城市建设进程。二、项目建设周期合同签订后28个月内完成全部工作并通过采购人验收，并于20XX年X月全部投入使用。三、技术要求3.1 建设背景XX市智慧城建综合管理平台的建设，是顺应国家“十四五”规划和数字化转型战略的重要举措，也是构建韧性城市的重要环节。在“新型城镇化”和“智慧城市”建设的背景下，韧性城市理念逐渐成为推动城市高质量发展的核心方向。韧性城市强调以数据驱动、智能化技术和协同治理能力应对城市风险和复杂挑战,实现城市运行管理的可持续发展和快速恢复能力。1 .政策背景国家战略指引：国家和省委对数字政府建设作出重大部署。2024年5月，国家数据局会同有关部门对外发布关于深化智慧城市发展推进城市全域数字化转型的指导意见，意见围绕总体要求、全领域推进城市数字化转型、全方位增强城市数字化转型支撑、全过程优化城市数字化转型生态以及保障措施等5个方面着力推进城市全域数字化转型。国务院关于推进新型城市基础设施建设打造韧性城市的意见(中办国办,2024.11)明确提出为深化城市安全韧性提升行动，推进数字化、网络化智能化新型城市基础设施建设，打造承受适应能力强、恢复速度快的韧性城市，增强城市风险防控和治理能力。地方需求驱动：XX市作为长三角经济带的重要节点城市，需要在快速城镇化的背景下增强城市管理的科学化、精细化、智能化水平，通过构建智慧城建平台，实现多维度的城市体检和动态监测。2 .韧性城市建设的必要性(1)提升抗风险能力：应对极端气候、地震等自然灾害的频发，城市基础设施的抗灾能力和恢复能力成为住建领域的核心需求。智慧城建平台将通过对房屋建筑、地下管网等设施的全生命周期动态管理,为韧性城市建设提供坚实基础。(2)实现资源优化调配：韧性城市需要高效的资源管理能力，通过智慧城建平台的资源整合和数据联动，能够在常规管理和突发事件中实现动态调配和精准决策。(3)构建社会协同治理：智慧城建平台将汇聚政府、企业、居民的力量，实现信息共享与协同治理。通过开放数据接口和公众参与功能，全面提升城市韧性建设的社会化水平。3 .智慧城建对韧性城市的支撑作用(1)数据驱动的城市体检：构建“城市体检”评估系统，建立包含生态宜居、安全韧性、城市活力等指标的统一数据库，提供实时监测、风险预警和科学决策支持。(2)全周期安全管理:智慧城建平台引入智能感知技术和大数据分析能力，实现从规划、建设到运营的全生命周期安全监管，保障房屋建筑、交通设施等关键基础设施的稳健运行。(3)智慧决策与快速响应：基于智慧城建平台的应急管理功能，结合韧性提升规划，可快速制定灾害应急预案并高效执行，提升城市运行的恢复力。4 .技术驱动与创新实践先进技术支撑：平台充分运用物联网、大数据、人工智能、云计算等前沿技术，形成智能化的城市管理体系，助力韧性城市的动态建设与持续优化。创新场景应用：以“一张图”技术为核心，打造智慧场景，实现多部门联动，形成“用数据说话、用数据决策、用数据管理”的创新模式。5 .发展目标XX市智慧城建平台不仅是一项技术工程，更是城市管理理念的全面升级。项目旨在增强城市应对风险的能力、资源利用的效率和社会协同的深度，为创建宜居、韧性、可持续发展的现代化城市提供核心支撑。平台的建设将为智慧城建树立长三角地区的标杆示范。3.2 建设清单3.2.1软件建设功能清单序号系统名称功能模块功能描述或任务描述数量单位智慧城建时空大数据库1数据中台-数据管理数据同步数据源批量同步：数据静态同步支特主流关系数据库、非关系型数据库、分布式数据库、流数据等多种类型的数据源1套2增量同步：从数据源获取增量数据。3数据同步作业管理、类型转化协助客户掌握数据采集汇聚的技术，实现数据按周进行自动更新。4支持定时触发。5支持对于同步的表格进行映射配置。6支持对于同步作业进行告警配置，包括告警是否开启、告警内容、通知人配置信息。7支持对于同步作业的运行环境进行检查。8支持异构数据源之间的数据同步，并自动进行数据类型的转化。9支持用户根据实际使用情况对于静态全量同步作业进行自定义调度。10数据对比和运营监控支持对于源端和目标端的数据进行数据量和数据内容的对比。11对比方式支持全量数据对比和增量数据对比。12可以对数据抽取速度进行限流。13支持对于运行中的对比作业进行监控。14管理数据操纵数据操纵数据就是对数据库中对数据进行增加、删除、修改、清空等操作。15并发控制支持多版本并发控制(Multi-VersionConcurrencyControl,MVCC)oMVCC为每个数据库会话提供了事务隔离，确保每个查询事务都能看到一个数据的一致性视图，即数据快照，而不受其他并发事务的影响。这种机制确保了在并发环境下，查询(读取)操作获取的锁不会与写入操作获取的锁发生冲突，从而保证了数据库在多用户环境下的高性能。16事务管理事务允许将多个SQL语句捆绑在同一个操作中。事务中的所有SQL要么全部执行，要么全部不执行。事务允许将多个SQL语句捆绑在同一个操作中，确保这些操作要么全部成功执行，要么全部不执行，从而维护数据的完整性。17回收空间支持定期对MVCC事务并发模型的已删除或更新的数据进行回收操作，确保清空这些数据所占用的空间。18查询数据查询操作支持查询功能，支持查询计划，支持函数查询等操作。19聚集下推支持通过将聚合操作下推至数据源来减少传输和处理数据的开销，从而提高查询性能和效率。聚集下推的实现原理在于在查询执行过程中尽早执行聚合操作，并将这些操作下推至数据源进行处理。20数据裁剪支持数据裁剪(DataSkipping)的优化功能，在数据库运行查询语句时，通过预计算每个块(block)中列聚集信息，在执行期间跳过非必要的数据块，减少数据读取量提高查询性能。21预聚集支持预聚集功能，在数据插入的同时计算数据列的聚合(Aggregate)信息，并将其预先保存，以供后续查询使用。22导入导出导入数据文件支持集成了多种数据上传工具，并支持ETL.ELT和zero-ETL等数据入库及转换任务。用户可以通过平台从本地上传CSV或text文件中的数据到目标表并对数据进行分析。23格式化数据文件在导入和导出数据时，用户必须指定数据的格式。支持允许用户指定其数据格式，可以是文本(text)格式或者逗号分隔值(CSV)格式。为了确保本平台能够正确读取，外部数据必须经过适当的格式化。24字符编码支持包括ISo8859系列等单字节字符集以及EUCUTF-8、Mule内部编码等多字节字符集。25管理数据库对象数据库支持创建、修改、查看、删除数据库。26表支持创建、查看、删除表。27分区表支持创建、加载、验证、查看分区表。28Schema支持创建、查看、删除Schemao29序列支持创建、修改、引用、删除序列。30角色属性支持通过角色(Role)来管理对数据库的访问权限。角色可以代表单个数据库用户或用户组。角色不仅可以拥有对数据库对象(例如表和函数)的访问权限，而且还可以将其拥有的权限赋予给其他角色。访问控制支持按照业务属性对权限进行管控。数据库由多个Schema组成，而每个Schema又包含了表、函数等SQL对象。当数据库对象被创建时，它31权限控制们会被分配一个所有者，这个所有者通常是执行创建操作的SQL命令的角色。在初始状态下，只有所有者或者超级用户能够对这些对象执行操作。其他角色在被分配了相应的权限之后，才能对这些SQL对象执行操作。32管理优化按需启停支持按需扩缩容，按需启停，实现计算资源配置最优化，提升数仓的敏捷性和弹性，打开无限数据计算空间，更好地赋能业务发展。33数据压缩支持自适应压缩能力，降低硬件成本。通过支持ZSTD、HLLsparserepresentation、DeltaEncoding,在通用数据、元数据、字符串类型数据上大幅降低的存储大小。34数据开发调度提供一站式集成开发环境，满足大数据环境下的开发、调度、运维等需求。35数据数据开发隔离具备开发、生产空间隔离，可以对空间中数据、资源、代码和配置进行隔离功能。开发数据开具备团队协同开发功能，能够实现代码版本管36平台发代码理、多人协同模式下的代码锁管理和冲突检测机锁定制。37数据开发图形具备通过图形化的拖拉拽方式、零编码交互完成数据的转换、过滤以及工作流开发功能，便于自化主管理作业的部署以及生产监控运维。38数据开发运行管理具备工作流运行管理功能，能够管理工作流执行路径，包括但不限于串行、并行、分支条件，并应具有从此处开始运行功能。39数据开发导入导出具备工作流的导入导出功能，包括但不限于工作流、自定义函数、资源文件和模型等，可实现离线备份和异地发布。40数据开发版本管理具备版本管理功能，能提供工作流和工作节点的版本查看及版本回滚。41数据开发工作节点管理可对已删除的工作节点或工作流进行恢复。42任务调度管理具备调度管理功能，包括一次性调度与周期性调度，其中周期性调度应支持按分钟、小时、日、周、月、年调度，工作流可跨周期依赖。43任务启停具备启停功能，支持工作流重跑；支持补数据，可通过设置工作流运行的起止时间，来达到导入历史数据的目的。44数据运维具备数据运维大盘功能，能够直观的展示各空间工作流运行情况，包括但不限于任务运行情况、任务出错排行和空间任务数量排行等，从各个维度展示系统的过去一段时间内的运行情况。45数据作业管理具备作业管理功能，能实现作业状态查询、启停操作，并支持引擎告警和工作流告警策略配置，可通过邮件方式发送告警。46数据清具备内置的数据清洗和过滤组件。数据过滤组件洗过滤应包括但不限于长度过滤、正则过滤、标准值域过滤、空值过滤、比较过滤；数据清洗组件包括但不限于字典标准化、自定义清洗。47数据清洗规则具备规则库相关功能，能提供去除空白、空值过滤、全角半角转换、正则校验、长度校验、去重等内置规则，并支持规则自定义。系统整合及对接、数据治理48数据整合及治理服务存量系统数据适配涉路涉绿审批系统