智慧城市大数据能力平台项目建设方案.docx

《智慧城市大数据能力平台项目建设方案.docx》由会员分享，可在线阅读，更多相关《智慧城市大数据能力平台项目建设方案.docx（214页珍藏版）》请在课桌文档上搜索。

1、项目编号:智慧城市大数据能力平台项目建设方案目录1建设背景、需求与现状分析91.1 项目建设背景及政策依据91.1.1 大数据能力平台已成为智慧XX市建设的必要基础91.1.2 建设大数据是构建XX市城市大脑的重要组成部分91.1.3 建设大数据能力平台是落实市级大数据发展政策要求101.2 项目建设需求分析111.2.1 全域数据汇聚，推动政务业务的数据协同111.2.2 多维数据分析，精准支撑社会服务与管理121.2.3 深入数据洞察，辅助社会治理与高效运行131.2.4 智能数据服务，促进产业经济与社会发展141.3 当前平台现状分析151.3.1 平台建设现状151.3.2 平台不足分

2、析162项目整体建设规划方案172.1 XX市大数据建设体系规划172.2 大数据平台定位与价值规划182.3 项目建设目标与内容规划182.3.1 项目建设目标182.3.2 项目建设内容192.3.2.1 完善大数据能力平台建设202.3.2.2 建设XX市政务数据资源中心212.3.2.3 建设XX市大数据赋能应用212.4 总体项目解决方案规划232.4.1 平台建设方案规划242.4.2 数据资源中心建设规划252.5 项目总体实施方案规划252.6 大数据治理运营规划262.6.1 治理体系与实施原则262.6.2 数据治理组织建设272.6.3 数据治理制度规范282.6.4 治

3、理运营通用流图292.6.5 数据治理实施流程292.6.6 数据治理关键心法303大数据能力平台建设方案313.1 平台建设方案总体概述313.1.1 平台建设内容范围313.1.2 平台总体功能架构323.1.3 平台各部分架构关系333.2 数据治理平台建设方案333.2.1 数据治理概述333.2.1.1 数据治理论述343.2.1.2 数据治理流程363.2.1.3 治理过程产出373.2.2 平台总体建设383.2.2.1 建设方案架构383.2.2.2 平台功能架构393.2.2.3 数据治理开发流程403.2.3 数据标准管理403.2.3.1 数据标准管理规范403.2.3.

4、2 数据元管理423.2.3.3 标准代码配置423.2.3.4 常用规则配置423.2.4 元数据管理433.2.4.1 元数据管理内容433.2.4.2 元数据管理分类433.2.4.4 元数据管理流程443.2.4.5 元数据管理功能443.2.4.6 元数据血缘分析463.2.5 数据质量管理473.2.5.1 质量模型配置473.2.5.2 质量规则管理473.2.5.3 方案配置调度483.2.5.4 质检结果查看493.2.5.5 质检分析报告503.2.6 数据工厂管理513.2.6.1 流数据处理523.2.6.2 数据开发平台533.2.7 统一调度管理543.2.8 数据

5、资产管理553.2.8.1 数据资产注册管理553.2.8.2 数据资产分类管理603.2.8.3 数据资产目录管理613.2.9 数据智能分析623.2.9.1 数据标签管理623.2.9.2 数据血缘分析653.2.9.3 数据探索工具653.2.9.4 关联度分析663.3 AI能力平台建设方案663.3.5 AI能力平台概述673.3.6 AI能力平台之智能标注平台683.3.6.1 智能标注平台框架683.3.6.2 标注流程693.3.7 Al能力平台之自动化机器学习平台703.3.7.1 产品架构703.3.7.2 数据处理逻辑71/、口口目匕7*13.3.3.4 产品优势723

6、.3.4 AI能力平台之开放平台733.3.4.1 平台功能733.4 GIS基础平台建设方案753.4.4 总体建设方案753.4.4.1 平台核心组件763.4.4.2 核心引擎方案763.4.4.3 资源网关方案773.4.5 平台管理方案793.4.5.1 平台数据流向793.4.6 平台功能建设793.4.6.1 核心功能模块803.4.6.2 平台功能展示803.4.7 平台特点与价值833.5 数据可视化平台建设方案843.5.4 总体建设方案843.5.4.1 平台定位853.5.4.2 平台总体架构853.5.4.3 平台技术架构863.5.4.4 可视化流程863.5.4.

7、5 核心应用流程863.5.4.6 与数据平台关系873.5.4.7 大屏展示数据流873.5.5 平台功能建设883.5.5.1 功能架构883.5.5.2 功能组件883.5.5.3 关键功能883.5.5.4 功能展示903.5.5.5 平台功能特性913.6 安全管理平台建设方案923.6.4 总体建设方案概述923.6.4.1 总体安全保障方案923.6.4.2 平台建设架构设计933.6.5 密码应用改造943.6.5.1 设计目标及原则943.6.5.2 密码方案总体架构953.6.5.3 安全设计963.6.5.4 密码技术方案1073.6.5.5 管理体系设计1123.6.5

8、.6 运维体系设计1123.6.5.7 安全与合规性分析1133.6.6 统一身份和权限管理1153.6.6.1 统一用户管理1153.6.6.2 统一认证服务1153.6.6.3 统一权限管理1153.6.6.4 统一审计管理1173.6.7 统一的敏感数据发现1173.6.8 统一的数据脱敏管理1183.6.9 统一的分类分级管理1193.6.10 统一的加密秘钥管理1193.6.11 统一的安全审计分析1203.7 统一运维平台建设方案1213.7.4 总体建设方案1213.7.4.1 平台架构设计1223.7.5 监控资源管理1223.7.6 基础资源监测1233.7.7 应用服务监控

9、1243.7.8 数据质量监控1243.7.9 监控告警管理1253.7.10 日常巡检管理1263.7.11 平台运维管理1263.8 运营指挥大屏建设方案1283.8.4 建设方案1283.8.5 建设内容1283.8.5.1 应用设计1293.8.5.2 分析展示1293.8.6 呈现效果1314大数据资源中心建设方案1334.1 中心总体定位设计1334.1.1 总体设计1344.1.1.1 区域模型设计1354.1.2 设计原则1354.1.3 设计思路1364.1.4 数仓设计1374.1.5 数据安全1374.2 建设XX市数据湖1394.2.1 数据湖数据架构1394.2.2

10、数据湖数据范围1414.3 建设XX市基础库1424.3.1 人口基础库建设1424.3.1.1 建设方案概述1424.3.1.2 数据整合方案1434.3.1.3 人口全息档案1444.3.1.4 人口关系图谱1644.3.1.5 人口全息视图1674.3.1.6 人口信息统计1674.3.1.7 人口信息查询1684.3.2 法人基础库建设1684.3.2.1 建设方案概述1684.3.2.2 数据整合方案1704.3.2.3 法人多维画像1724.3.2.4 法人统一视图1834.3.2.5 法人信息统计1844.3.3 空间地理库建设1854.4 建设XX市主题库1864.4.1 主题

11、库建设方法1864.4.1.1 主题库建设概述1864.4.1.2 主题库建设方法1874.4.2 建设城市码主题库1904.4.3 建设应急主题库1904.4.3.1 应急主题库概述1904.4.3.2 管理对象主题库1924.4.3.3 灾害事件主题库1925大数据赋能应用建设1945.1 Al赋能数据治理1945.2 Al赋能交通治理1955.3 Al赋能路政治理1975.4 Al赋能工地管理1995.5 Al赋能城市安全2005.6 Al赋能市场监管2015.7 Al赋能智慧旅游2035.8 Al赋能智慧农业2045.9 Al赋能全民健康2051建设背景、需求与现状分析1.1 项目建设

12、背景及政策依据1.1.1 大数据能力平台已成为智慧XX市建设的必要基础2021年伊始要加快推进国家规划已明确的重大工程和基础设施建设，其中要加快5G网络、数据中心等新型基础设施建设进度，“新基建”概念呼之欲出。“新基建”是服务于国家长远发展和“两个强国”建设战略需求，以技术、产业驱动，具备集约高效、经济适用、智能绿色、安全可靠的现代化基础设施体系。近年来，我国高度重视新型基础设施建设，不断加快并完善5G基建、大数据中心、人工智能等领域的“新基建”建设布局。以“新基建”牵引，夯实经济社会高质量发展的“底座”和“基石”，对于引燃“十四五”产业动力新引擎、助力数字经济发展、构建智慧和谐社会具有重要意

13、义。为了切实推动“新基建”产业发展，提升XX市“数字经济”的比重，结合国家对“互联网+政务服务”建设的指导方向和我省数字政府建设的工作需求，搭建XX市大数据能力平台是最终形成智慧XX市的城市大脑过程中承上启下的一步。1.1.2建设大数据是构建XX市城市大脑的要组成部分通过建设XX市大数据平台都建设，为XX市经济发展、政务服务与社会治理进行全方面的赋能，全面推动政府数字化都转型，并为构建XX市城市大脑奠定基础。城市*滥自理n /心。 /CHMjr政再离我运行KmrmJiZMHiKhm /.M Al；W 1S尸/ 1.1.3建设大数据能力平台是落实市级大数据发展政策要求市级大数据局要以“无条件共享

14、、按需求使用”为原则，加大所有市直属部门、各区县和主要公共服务单位大数据资源归集共享力度，建设大数据“资源湖”，完善人口、法人、空间地理、信用信息、电子证照、城市感知、行为事件等公共基础数据库；围绕政务服务、企业经营、市场监管、社会保障等主题，梳理相关领域信息数据，构建主题数据库；整合共享各部门业务数据库，对接融合科研机构、公共事业单位、互联网企业等社会数据；按照省统一标准规范，建设大数据地市分结点，并通过省市两级数据共享交换平台的互联和数据资源目录对接来实现数据的共享。依托大数据能力平台建设数据资产化管理体系，实现数据资产分级分类管理，促进公共数据有序开放与规范管理，围绕医疗卫生、教育文化、

15、物流产业、社保就业、科技创新、信用服务、市场监管、地理空间信息等社会治理和民生服务重点领域，促进公共数据有序开放与规范管理。制订数据资源开放管理制度，建立技术标准、信用体系、安全保护和保密审查等制度和机制。通过建设大数据能力平台，实现对数据资源的全流程全链路的整合和处理，包括在数据工厂内的数据开发、监控运维、数据地图服务、数据质量、资产管理、数据服务和安全等，实现数据汇聚和数据上云；并对数据进行符合数据标准和模型的治理，支持数据模型物理化及跨项目复制；能够对数据进行打标签，并生成数据画像；实现对数据的全链路展示和全景监控，并实现对全市信息资源的管理。1.2 项目建设需求分析基于大数据能力平台，

16、对全量数据采集、清洗、治理、标准化，建立数据治理标准化体系，实现数据质量监控、数据运维、数据成本管理、血缘影响分析、数据权限控制等，对全市数据进行全生命周期管理，为各应用提供全量、标准、干净、智能的数据，推进数据的有序管理与共享交换。加强数据分析与梳理，提升汇聚数据的关联效应，实现海量数据的质量自动稽核和安全管理，为数据应用提供可靠有效的基础支撑。建设包括政务服务、决策保障、跨域协作、经济调节、市场监管、社会治理、公共服务、环境保护等领域专项大数据分析与可视化展示应用。大数据“资源湖”可为各部门的决策分析提供数据基础，各部门无需自建大规模数据仓库，只需开发算法模型，基于“资源湖”加载算法，即可

17、获取分析结果。大数据能力平台以数据为基础，以数据全链路加工流程为核心，提供数据汇聚、研发、治理、服务等多种功能，既可满足平台用户的数据需求，又能为上层应用提供各种行业解决方案。1.2.1 全域数据汇聚，推动政务业务的数据协同形成统一的跨部门、跨地域、跨层级的信息交换共享机制，全面汇聚全市各类公共数据，逐步实现立体化、多层次、全方位的数据服务体系，有效支持电子政务公共服务能力提升。IIll提供跨网络、跨网闸等复杂网络环境，实现批量、实时多源异构数据的便捷同步或接入，系统提供完善的数据接入配置、任务运行监控、数据对账等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇

18、聚需求。支持基于业务场景的流程配置，跨多种异构存储/计算平台快速部署和复制。数据工厂提供一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。数据工场赋予用户仅通过单一平台即可实现数据传输、数据计算、数据开发、数据分享的各类复杂组合场景的能力。提供完善的数据集成、数据开发、监控运维、数据质量、数据地图、数据资产管理、数据服务。智能数仓支持构建数据标准和质量规则，并将其贯彻到数据质量探查、分析、保障的全过程中，将散乱的多源异构数据加工成标准、干净的数据资产，确保数据的完整性、一致性、准确性、可用性，通过客观量化评估指引数据治理工作的螺旋式上升过程。算去服务算法服务基于大数据开发的数据智

19、能应用搭建提供一站式的算法/数据研发管理平台。1.2.2 多维数据分析，精准支撑社会服务与管理基于大数据平台的全局宏观数据分析，形成城市级的宏观数据主体分析应用，有效支持领导决策、政策研究以及资源投放。智版签能够将治理后的数据以业务化视角进行建模、查看、管理及使用，并提供业务衍生标签的自定义功能，为上层应用提供统一的标签数据目录和标签调用接口，支持沉淀回收上层应用制作的模型标签，实现高价值标签共享复用。画像分析画像分析可基于智能标签提供的标签体系进行多维度分析，按照业务需求圈定特定群体范围，实现对复杂群体数据的简易化统计、筛选、加工、沉淀，建立单实体全方位个性化档案，通过可视化线索分析来实现对

20、于目标群体的精准定位。1.2.3 深入数据洞察，辅助社会治理与高效运行利用大数据平台，基于感知层（摄像头，传感器等物联设备）的实时事件的感知、研判及传递，形成捕获一响应一处理的联动体系，支撑城市智慧运行。市公安O。市急救中心枪业荤位大数蜒平台 事件感知&实时处理懂W亍人手EC :勰: it9lA MJSSaMOisfiA W WSftSV Ai &)/内2.4.1 平台建设方案规划我们将基于主流的大数据技术框架对当前的XX市数据共享交换平台进行完善与扩建，为XX市构建一个强大的大数据管理与应用平台。具体，对于本次XX市大数据能力平台的建设规划与架构设计如下：IHK港独军M（大IHKIt力平台）

21、MMm政太力平安全保体系中 监控 堆护各类3大共交xmttwa（M）IMBMB云2.4.2 数据资源中心建设规划通过汇聚全市内各单位公共数据形成市级数据湖，同时经过数据清洗、转换、融合、治理后高质量的公共数据资源库，并基于相关应用需求构建各类应用基础、主题、专题、标签等数据库，由此构建出层级清晰、功能区域划分合理的XX市大数据资源中心。具体，对于XX市大数据资源中心的建设规划如下：2.5 项目总体实施方案规划对于本次XX市大数据能力平台的建设，将结合XX市大数据的建设现状，牢牢抓住XX市大数据应用的痛点，以云计算、大数据、物联网、区块链、人工智能等技术为支撑，以“统筹规划、集约建设、共享共治”

22、为原则加强XX市大数第25页共205页据顶层设计。具体，在本次项目中我们将按照“总体规划一步到位，项目分步实施，数据赋能逐步升级”的原则，落实数据交换共享和协同应用需求，逐步提升XX市大数据能力平台能级。初期先完成大数据能力平台的搭建，后续依托基础平台的建设成果，逐步完善丰富XX市大数据资源池、运营平台、管理机制、运维支撑、组织保障体系和典型智慧应用的建设。具体，对于本次XX市大数据能力平台项目建设的实施方案规划如下：块一目标、晶典阚 构电体虱.妁设.共事共治、持续运ti2.6 大数据治理运营规划2.6.1 治理体系与实施原则2.6.2 数据治理组织建设数据治理工作离不开强有力的组织保障，政府

23、必须构建专门的数据治理管理团队，由专门的数据治理管理团队成为组织大数据战略的制定者、推动者和实施者，负责组织内数据资产的开发和利用，通过数据推动组织业务的创新和发展。信息化领导小组数据治9实施部/数据治理管理是业务部门和IT部门共同的职责；/在组织最高的信息化领导小组之下设立数据治理管理领导小组；/治理部门可以是实体部门，也可是业务和IT技术部联合组成的虚拟团队。数据治理典型团队架构数据归集组 数据模型设计组 数据分析组基础模型开发组应用横型开发组数据质量管理组数据对接组平台开发组数据漕洗组需求管理组运行维护组数据安全管控组/整个数据治理团队的建设中可通过引入平台与治理运营供应商来共同组建，并

24、可引入一个项目总集方负责日常运营工作；,建议需求、质量与安全管理工作由组织内部人员来负责。2.6.3 数据治理制度规范数据治理相关的技术与管理流程规范规定了数据中心与业务部门，以及各系统之间的数据归集、数据模型设计、数据模型开发、数据资产体系框架构建、部署规范、数据安全运维管理以及数据共享的相关要求，指导整个组织展开大数据的管理与应用。/数据规范是指对政务核心数据进行有关存在性、完整性、质量及归档的测量标准，为评估政务数据质量；/数据治理需要管理和制度的有力支撑，需结合组织现状，制定对应管理办法、流程、认责体系，并颁布相关规章制度。2.6.4 治理运营通用流图ttRABffiNMM H*蜗M2

25、.6.5数据治理实施流程2.6.6 数据治理关键心法IlB-宏义Ira沿理与IKm关的技术，业第与重2FXjF*炬,，墟”煌会送Ii技术、ea手段,来保这WlS的Jl建与铁行3大数据能力平台建设方案3.1 平台建设方案总体概述3.1.1 平台建设内容范围在现有平台基础上，按照项目建设目标，完善整个XX市大数据平台能力与功能建设，让平台可以支撑整个XX市大数据管理与应用。具体建设内容包括：建设数据治理平台建设大数据治理子平台，提供数据标准管理、元数据管理、数据质量管理能力，实现对数据的规范治理与管理；提供数据工厂能力，实现对归集的数据进行清洗、加工，支撑业务的数据应用需求。建设Al能力平台建设市

26、级公共人工智能平台，提供包含机器视觉、语音识别、自然语言处理等基础模型为主的通用Al引擎以及满足城市交通、路政治理、城市安全、市场监管、智慧旅游、智慧农业等智能场景应用所需的算法库，结合机器学习算法、深度学习算法、多维分析，在海量数据中计算、分析和建模来挖掘出数据价值，输出统一的公共算法服务能力，统筹匹配各部门聚焦的业务需求，更高效的从数据中获取应用价值。建设GlS基础平台建设数据地理信息服务平台，依托市级空间地理底图和各类图层信息台，建立统一的地名地址标准和数据库，叠加“一标多实”各类要素数据，实现各类地理数据资源的有序关联，完善地图更新和转换联动机制，支撑全市各部门对地图的统一服务需求。建设数据可视化平台建设数据可视平台，提供基于拖拽的强大格式定义、可视化报表与图形化定义能力，支持用户非常方便控制报表中内容的精确布局，也可以很方便地制作各种不同维度的报表内容