合成作战指挥平台建设方案.docx

合成作战指挥平台建设方案一、项目概述3二、建设内容31 .数据汇聚系统32 .数据治理系统33 .数据融合与共享系统34 .可视化展示系统45 .公安宏观态势监管平台46 .可视化指挥调度系统47 .I-I口息展zj,系统48 .融口通彳口目理系统.49 .城区精细化三维地图5三、项目建设清单5四、主要系统功能模块参数需求181 .数据治理模块需求182 .融口数模块需求253 .可视化展示模块需求294 .城区精细化三维地图制作34一、项目概述为响应时代的号召，为贯彻中央大数据发展战略，为探索大数据在公安情报分析中的深层次应用，拟建设合成作战指挥平台，将现有各个业务系统数据融合，并进行数据关联分析与多维碰撞，为情报分析和分析对象快速定位提供支撑工具，坚持情报先行，在充分发挥传统情报工作作用的基础上，加强涉恐情报归口管理，积极运用大数据、云计算技术，着力提升情报感知、研判、分析能力，从海量的人流、物流、信息流中及时发现涉恐线索，做到预警在先、预防在前、敌动我知、先发制敌。二、建设内容1 .数据汇聚系统提供针对一场三站数据的通用采集集成处理功能。对结构化数据、非结构化数据、半结构化数据进行采集，实现数据抽取、数据转换、数据修正、数据脱敏、数据加载功能。2 .数据治理系统有效的保证信息的可用性、一致性及安全性，确保及时、准确的数据支持和服务，加实现数据标准、数据模型、数据质量、主数据等数据管理项目功能。3 .数据融合与共享系统提供的标准规范的数据融合共享管理平台，向各警种、各部门提供跨系统、多样化、定制化的统一管控体系平台，提供了多样化的业务能力，促进各应用系统的高效稳定运用。4 .可视化展示系统利用计算机图形学，图像处理技术以及大数据技术，通过简单拖拽、配置编排出可视化应用页面的大数据可视化设计平台，并支持公安业务的可视化运用展示。5 .公安宏观态势监管平台基于公安宏观态势监管平台的需求和地图，实现包括警情可视化监控、警力可视化监控、卡口可视化监控在内的功能。同时对重点区域进行监控，进行整体宏观态势监管在内的公安宏观态势监管运用。6.可视化指挥调度系统基于指定地图直观展示人员位置、车辆位置、事件位置、监控探头、网格、重点区域等信息。实现全局资源可视化调度、视频可视化监控等相关功能，全面提升指挥中心的全局掌控感。7 .综合信息展示系统通过实时地获得警情、预警、情报、警力信息，支撑对全局状态与趋势一屏掌握；实现对下级公安消防辖区多维度观察与警力状况整体把握；支持对重特大警情事件的重点关注。兼顾指挥中心工作监督与评估需要，体系化展示工作强度、状态与相关统计。8 .融合通信管理系统新建整个公安融合通信调度系统。以IP通信技术、软交换技术为支撑，通过对内部办公电话等有线调度支撑环境、350M数字集群、PSTN公网手机等无线调度支撑环境等系统资源整合，实现对这些不同体系、不同制式设备的整合，屏蔽系统间的差异化，并最终向可视化指挥调度平台提供统一的业务调用接口。9 .城区精细化三维地图对主城区约50多个平方公里左右的范围进行精细化的三维地图建模，需要对范围内建筑、道路、公园水体等进行倾斜摄影测量及三维模型制作，三维场景需要进行精细化修整。设计航飞分辨率为5cm,测区周边有较多农田及水体。要求基于倾斜摄影测量的实景三维建模技术手段对指定区域进行外业航飞及像控测量，并将采集的数据进行自动化三维建模，生成可视化三维场景；并对实景三维模型进行精细化建模及网格化（单体化）处理，完成测区建筑网格化及场景模型精细化渲染，满足智慧城市的开发和应用。三、项目建设清单1.硬件设备类清单序号名称描述数量单位（一）融合调度指挥硬件部分1软交换设备1）机架式设备，采用专业通信嵌入式架构及专业通信CPU设计，采用专用电信级硬件平台，支持IP+TDM双总线，单机支持主控单元1÷1冗余备份、电源1+1冗余备份、资源板1÷1冗余备份；套12）软交换设备可支持1+1双机热备、异地热备组网及云平台架构；最大支持100OO调度用户；最大支持32E1接口，最大可支持到88路FXO环路中继接口，最大可支持到176路FXS接口。3）设备自身须同时支持如下协议：七号信令、中国一号信令、R2、Q.SIG、ISDN-PRKSIP、H.323>H.248、MGCPo4）支持与IPPBX、传统程控交换机等语音资源的接入和互通。5）系统基于标准的SIP协议，支持350M数字集群系统、的对接及融合。6）支持G.711,G723,G.729等语音编码方式；7）提供500调度用户授权、64路会议用户授权、32路并发录音授权。应具有国家工业和信息化部颁发的“软交换设备”进网许可证和对应检测报告；2综合应用服务器专用服务器,含WINSERVER2008操作系统,2U标准上架,，内存28G,硬盘1T,接口2*LAN、2*C0M、RAID0,1,10,5,扩展槽PCIE-1X/PCIE-4X/PCIE-16X,交流电源。台23音频网关与会议室调音台对接，实现通过会议室话筒呼叫350M集群终端、手机、固定电话功能。14IP电话I）SIP话机，支持SIP2.0（RFC3261）及相关RFC协议；套62）支持2条SlP线；显示分辨率：128x64像素；支持12个可编程键；3）支持G.711A/ULaw>G.722>G.723G.729、G.726等编码方式；4）支持呼叫转移、呼叫转接、保护保持、呼叫等待、三方通话等SlP应用；5）具备灵活拨号、支持热线号码、空主叫拒接、黑名单拒接、限制呼叫、免打扰、来电显示以及拨号规则的灵活配置；6）支持LDAP企业通讯录，XML的网络电话簿、Web拨号，键盘锁、紧急呼叫；（一）融合调度指挥定向购买软件部分1调度服务软件1）支持通信、指挥、呈现、录音等综合指挥调度功能；套12）在同一客户端集成IP语音等调度模式及操作界面，可点击或触控方式自由切换操作界面且支持界面及操作按钮隐藏功能；调度员可随时点击工作人员对应图标，一键选择发起会话、会议、监听、强拆、强插等调度指令。3）支持灵活的分组管理，根据内部人员架构或事件关联人，可在调度台上对成员进行分组，建立固定组和临时组，随时选择对应组发起会议、搜索用户等；4）支持多级协同调度，提供上下级调度平台的权限分配及管理，并可指定调度台的级别及可调度用户。调度台之间可以协同工作，满足分等级、多级调度中心的协同指挥调度需求；2会议服务软件提供群呼、会议等基础支撑能力。最大支持256方音频会议。套13录音服务软件实现全系统实时录音、查询、回放。最大支持256路并发录音。套14350M集群接入网关软件具备与350M集群交换中心的协议控制，信令及语音交互。同时具备对本地所有集群终端单呼、组呼、动态重组、监听、插话等调度功能。350M集群厂家提供APl开发接口，统一通信调度系统通过与350M集群系统的接口开发，实现调度台对集群终端的点击呼叫、组呼、通话监听、动态重组等指挥调度功能。（包含群集核心网对接所需的板卡和软件接口费用）套15智能统计分析D统计分析业务功能可根据时间周期、呼叫类型（组呼、选呼、会议通知）、主被叫号码等类型进行灵活的分类统计。根据统计类型可查看所统计内容，统计内容以图标或数值的方式进行呈现并显示接通、未接通、接通挂断等详细信息。套12）统计报表不限于饼状图、柱状图等形式。可查看发起通话终端的ID号码以及人员姓名，参加通话人员数量，通话开始、结束时间、接通挂断原因等详细信息。6智能语音点名录制好语音通知内容，或文字转语音通知内容，通过调度台群发点名，系统自动呼叫固话、手机、集群终端，终端收听通知后，按键回复确认，调度台具有统计功能。呼叫集群终端，集群终端收听录音通知后，无需回复消息确认。套17统一通信调度系统接口软件为第三方平台提供接口软件，可视化平台或勤务报备系统通过该接口软件调用系统功能，为可视化平台提供通讯录、一键点呼、临时编组群呼、动态重组群呼、圈选编组群呼等通信调度功能。套1(三)公安合成作战指挥平台服务器设备1数据采集汇聚服务器CPU:Intel至强/单路/16核/2.IGHz,内存：64G,磁盘：ITB台22数据治理服务器CPU:Intel至强/单路/8核/2.IGHz,内存：64G,磁盘：ITB台23合成作战指挥可视化平台服务器CPU:Intel至强/单路/8核/2.IGHz,内存:64G,磁盘：ITB台2（四）融合调度指挥系统终端部分1多媒体一体机调度台1）桌面式可拆卸支架安装方式，角度需可调，CPUIntel15及以上，内存24G,硬盘212OGSSD硬盘;台12）液晶屏223寸,分辨率21920*1080。触摸参数:投射式电容技术（电容触摸屏），响应时间W5ms,触摸有效识别L5mm,理论点击次数5000万次,寿命60000小时。3）调度席位自带两个高品质IP调度话机；支持VGA和HDMI双显卡输出；2调度客户端软件具备调度呼叫、排队、挂机、监听、强插、强拆、代答、群呼、会议、通讯录、状态呈现等呼叫和控制功能。支持分级权限控制，实现多级调度。套62.定制开发类采购清单序号应用系统功能模块名称单位数量名称1数据汇聚系统1、元数据采集（支持对元数据采集任务进行新增、编辑、删除、开始、停止、查看详情等操作；模块122、支持的数据源包括OraCIe、MYSQL、DB2、SQLServer,达梦，PG、HBase>HDFS、Hive）模块132、展示汇集中心数据总量、接入部门个数、接入系统个数、汇集表个数、接入部门占比分析、接入系统占比分析。模块143、汇集总量按接入部门分析、汇集总量按接入系统分析模块154、展示近一周汇集量分析、部门贡献度T0P5模块16数据治理系统1、参考数据治理与统计，展示数据合格率、问题修复率、治理过程分析（治理数据量、正确数据量、问题数据量、清洗数据量）、问题数据占比分析a模块172、治理数据近一月趋势分析、数据合格率按接入部门分析、数据合格率按接入系统分析。模块183、质量规则（支持对质量规则进行新增、编辑、删除、启用、停用、变更、变更历史记录查看、规则配置等操作；在规则配置页面支持清洗，校验以及安全三种类型的节点，模块1其中清洗包括空值填充、字母大小写转换、精度清洗、去除不合理值、替换不合理值、组合规则清洗，校验包括空值校验、字母大小写校验、精度校验、不合理值校验、组合规则校验，去重校验组件，安全支持数据安全加密；支持CDC增量校验的配置，主要根据时间戳和标志位两种方式；数据库类型支持OraCIe、MYSQL>DB2、SQLServer,达梦，PG）9问题数据（根据问题数据负责人进行问题数据查看以及处理）模块110质量报告（按年、季度、月为维度展示治理情况，包括概述、治理情况、分析、结论；具体参考数据质量报告保真。）模块111数据魔方（支持通过立方体显示魔方，根据关键字查询结果并平铺展示，突出匹配的结果；点击某一个魔方后，进入到详情页面，可通过数据视图和图形视图两个维度查看数据。）模块112数据融合与共1、参考融合数据分析，展示融合数据按目录分析、融合数据展示（融合数据总数、融合数据容量、实体表个数）模块113享系统2、展示本月更新、上月更新、本月创建、上月创建的融合数据量。模块1143、参考数据服务分析，展示服务请求次数按部门分析、数据共享量按部门分析，共享数据展示（共享数据总条数、共享文件总个数）模块1154、请求次数按服务分析、共享量按服务分析。展示服务分类占比、服务请求次数T0P5、服务共享量T0P5模块116可视化展示系统L可视化设计器（热力图、条形图、柱状图、面积图、折线图、阶梯瀑布图、饼图、环形图、南丁格尔玫瑰图、雷达图、散点图、树状图等）模块1172.基础管理（支持用户权限管理，支持按地区、部门、角色、用户组、用户等四种方式组合授权，支持数据权限过滤，支持外部访问认证机制，支持节假日管理）模块1183.布局/主题（支持图表主题管理，多用颜色风格随意切换，多种布局可创建为模板功能，支持动态背景功能，背景可自由切换）模块1194.GIS功能（支持自定义图层及属性；支持GIS标注功能；支持创建空间数据存储模块120支持OGC标准服务发布；支持自定义底图功能，支持常用天地图、google.高德三种底图；支持位置检索定位功能；支持事件响应，可以通过图层元素的点击，与外部图表或者系统进行联动）模块1215.全景视图（参考数据全生命周期全景图，分别展示接入部门、汇集中心、融合中心、治理中心、共享中心。分别展示汇集数据、治理数据、融合数据、共享数据的数据总量。）模块122公安宏观态势监管平台整体态势展示：基于公安现有的卡口和相关人员统计数据，从宏观上感知到的人口新增变化情况、卡点情况、警力部署情况、车辆数据情况、防区人车物的情况、重点人员、重点事件、重点车辆的所有系统感知到的城市整体展示，并根据的实际管辖县、所进行调整和筛选。并可以根据实际业务需求展示单一主题的变化。（一期含城区40平方公里2.5D电子地图的航拍）模块123卡点监管展示：在线卡点重点关注县城的卡点的负责警力、过车、过人及卡点发生的重要事件，展示目前卡点信息，展示特定卡点的基本信息，展示卡点的实时过车数据，展模块1示选定的卡点的核查的人员信息（核查人员的信息可以通过警务通获取）。24重点事件反馈：重点事件位置、涉事人员、涉事车辆、附近警力、附近卡口等内容，重点事件内容展示包括事件名称、类型、发生时间、地点、涉及人员、事件简述。模块125重点车辆跟踪：包含车辆基本信息、车辆违章信息、车辆历史轨迹信息、图片展示、车辆跟踪（视频调阅）、车辆行径预判等。模块126一人一档，重点人员追踪：从各所的维度，包含重点人员过往24小时轨迹、基本信息及异常信息（例如旅馆同住、手机信号跨区、涉疆人员等）、对比摄像头信息数据、周边警力部署、历史活动热力图等信息。实际的重点情况是涉稳人员的概况、分布、涉稳重点人员离开的情况（出行方式、手机信号离开的）涉毒重点人员的概况、聚集、异动（例如：同住、同定位、同人像），异常时段的异动模块127外地重点人员流入的情况（住宿、交通、上网情况）。模块128核心区域重点监管：核心区域非白名单人员模块1进入，发现核心区域进入非白名单人员产生告警。29可视化指挥调度系统全局资源可视化，将全局资源进行可视化展/KO模块130即时可视化视频接口接入模块131位置传感设备集成调度模块132P-GIS专项运用调度开发模块133历史视频数据调用展示运用模块134重要人员及轨迹数据调用展示模块135重要车辆及轨迹数据调用展示模块136综合信息展示系统值班信息与勤务等级；今日重大事件与天气；重点关注警情；勤务状态；街面巡逻警力；警情分布；警情分区统计；警情分类统计；分时警情；考核统计（终端在线率是多少、警务终端在线率、在线在岗等情况，点呼率情况等）接处警统计模块137城区精细化三维建模5公分航空摄影项138高精度像控点采集项139全自动空三及自动建模项140三维模型场景精细化处理项141建筑物网格化（单体化）处理项142模型分层分户项143属性数据挂接入库项1四、主要系统功能模块参数需求1 .数据治理模块需求1）符合J2EE规范，支持JDBC、JNDKXMLWebServices.JSON,川S等数据标准；符合SOA技术架构设计，采用组件复用和框架技术，以SOA面向服务的架构为基础，具备松散耦合、可重用服务、标准化的接口等特性，可与其他应用无缝、高效集成。2）支持运行在X86架构的通用PC服务器上；支持运行在基于POWer芯片的PoWerLinUX服务器上。3）产品采用通用的程序设计语言和运行支撑环境，可移植性高，具有跨厂商、跨平台适配的能力，支持云平台、Windows.Linux、Unix、中标麒麟等主流操作系统厂商的运行环境。4）元数据管理能力支持独立的元数据模型管理，元数据模型支持基于OMGCommonWarehouseMetamodel（CwM）元数据协议标准管理。支持基于CWM元数据标准实现对业务元数据、技术元数据、管理元数据的统一管理和存储。支持通过解析脚本，自动形成技术元数据之间的血缘、影响和全链关系。支持元数据订阅，并根据元数据变更情况进行告警通知支持元数据版本管理及版本对比，支持元数据关系的版本对比。元数据分析：提供影响分析、血缘分析、全链分析、关联分析等功能，支持业务元数据和技术元数据关联关系自动解析，提供友好的图形展示分析功能。支持元数据权限管理，可按照用户和角色进行授权，权限颗粒度细化到按照列和行进行授权。支持元数据地图的全景关系展示，可下钻到表、字段级别查看血缘关系。以元数据为核心，对外提供统一元数据接口，智能驱动治理业务衔接，形成数据标准、质量标准、安全标准、服务标准。5）数据标准管理能力依据数据访问频率、数据引用情况、数据唯一性、元数据属性、等进行智能识别，基于技术元数据的分类作为样本进行训练，智能生成数据元标准和数据集。智能生成数据元与技术元数据、数据集与技术元数据的关联关系。支持针对数据元标准的规则配置，包括类型，长度，值域，正则表达式，数据范围。支持内置国标、行标信息，支持对国标、行标的引用支持代码集分类管理；支持多级代码管理；支持代码导入导出。支持根据技术元数据及内容批量生成代码集。编码规则：可视化的编码规则设计，支持分段设计编码规则，主数据编码按照规则自动生成，无需手工填写。支持数据标签的定义、变更和审核；支持标准指标、标准维度的定义、变更和审核。6）数据质量管理能力支持对国内外主流关系型数据库、MPP数据库的数据进行质量管理，包括Oracle、DB2SQLServerMysql>PostgreSQL>达梦数据库、南大通用数据库、神通数据库；GreenPIUm、LibrA、Gbase8a,神舟通用MPP支持质量规则的启用、禁用，支持质量问题责任人设置。提供可视化图形界面，支持根据质量规则，智能生成单表或整库的质量流程，使用人员无需编码，可以灵活、方便地定制出各种数据质量流程。产品内置15种数据校验组件，支持拖拽的方式快速构建各种数据校验流程化设计。校验组件涵盖数据格式校验、数据范围校验、正则表达式、值域校验、字段值缺失、唯一性校验、记录数缺失、SWitCh/case、主外键一致性校验、字段值比对、身份证校验、及时性校验、精度校验、JavaScript、Java；支持校验规则的自定义，支持校验流程分支设计。部分组件支持跨数据库的数据之间的校验。支持数据质量任务到行/列级别数据校验结果打标能力，支持血缘分析能力。支持质量校验流程的在线调试及数据预览。提供全量同步，增量同步等多种模式校验数据。支持问题数据闭环流程处理：问题数据综合治理，可通过邮件通知数据责任方，及时处理，已修复的问题数据将在下一次调度周期内重新校验。提供按表和按数据维度的问题数据详情查看；提供单次执行过程的问题报告。探查和识别数据，可以针对数据进行准确性、完整性、唯一性等类别进行自动识别，自动生成质量报告，提升数据管理水平。可按照年、月、季度等时间维度，也可按照每个数据源的维度生成质量报告,支持质量报告的下载支持质量评估模型的构建，按照评估模型计算出质量评分结果。7）调度中心能力提供强大、统一的调度引擎，支撑各种复杂的任务调度流程的高效运行，为海量的异构数据校验和数据同步提供保障。支持手动触发、计划任务触发以适应人工参与、自动化无人工干预的批量数据校验、同步等多种场景。支持调度配置，支持配置分钟级、小时级、天级、周级、月级的策略，支持按需配置出任意的执行周期。针对所有任务配置时间和任务以往运行时长智能推荐用户任务调度周期，达到系统资源最优化，避免数据处理洪峰。支持动态修改任务状态、暂停/恢复任务，以及终止运行中任务,即时生效；调度采用中心式设计，调度中心基于集群QUartZ实现，可保证调度中心HA；任务分布式执行，任务执行器支持集群部署，可保证任务执行HA；一致性：调度中心保证集群分布式调度的一致性，一次任务调度只会触发一次执行；邮件报警：任务失败时支持邮件报警，支持配置多邮件地址群发报警邮件；状态监控：支持实时监控任务进度；支持在线查看调度结果，并且支持实时查看执行器输出的完整的执行日志，让系统分析人员能够快速分析校验任务的执行状态、执行成功、执行失败情况。按照接口规范，快速灵活的接入大数据计算引擎或者第三方任务进行调度执行。8）数据共享能力支持通过Web界面即可完成数据服务接口的服务发布、审核、共享，无需编程人员开发代码。支持服务目录在线查阅，支持对服务授权管理。支持从Http接口获取数据，支持推送数据到配置的数据库中。支持内嵌数据服务调试功能，可基于自定义的条件格式和数据内容调试服务接口支持服务数据在线下载。支持基于最细粒度的数据共享接口：最小数据单元，即信息项，比如身份证，姓名等。以数据交换共享机制为依托，对信息项进行无条件共享和条件共享，以及不予共享。支持数据脱敏：规则配置简单易用，支持替换，截断，掩码，重排，日期偏移取整脱敏规则的配置。支持数据安全规范和策略，识别并标记敏感数据，制定针对敏感数据的使用权限，制定用户对敏感数据的访问权限，确保数据资产在使用过程中具有适当的认证、授权、访问和审计等控制措施。9）资产管理能力支持对数据资产全生命周期管理，根据自定义策略，可将数据及关联的文件进行自动化的清理和归档。支持政务资源目录管理：支持对目录内容采用灵活的多级目录配置方式，可对资源信息进行维护，形成各类平台之间信息资源物理分散、逻辑集中的信息共享模式，实现以目录树的形式展现标准信息，实现目录内容快速定位。支持政务资源目录的编目、汇总、上报以及发布服务的功能。支持通过数据查询等功能提供OracIe>DB2SQLServerMysqkPostgreSQL>Greenplum>达梦数据库、神通数据库、HiVe（SDCHadOOp、HDP、星环TDH、华为FUSiOninSight）数据的SQL查询能力。支持主数据的双模式管理，可实现对分散式管理模式下的主数据的审核，变更、分发管理、实现对集中式管理模式下的主数据新增、修改、禁用、启用、审核、分发、版本等管理。支持多种视角对数据资产进行查看，可以查看到具体的表、数据以及数据的浏览和共享次数等。支持数据地图功能，支持从宏观角度可视化查看各存储介质之间数据流向关系，支持从数仓分层到数据库的下钻及相关信息的展示,支持数据库逐层下钻。支持基于主题的数据台账，基于元数据的信息管理，提供数据资源目录检索。10）建模能力支持模板式的数仓分层分主题域的构建，内置多行业的数仓分层和主题域模板。支持逻辑模型的构建，提供基于数据标准快速建表，导入Pdrn,Erwin等文件快速生成逻辑模型的能力。支持表结构和表关系创建，支持快速获取数据库中已存在的表结构。支持OraCle、MYSQL、SQLServerPG、DB2、达梦、MPP、Hive、HBase建模设计。支持异构数据库之间表结构同步，快速构建数据模型。支持根据已有数据库的物理模型关系自动生成ER图。11）消息中心能力提供统一消息机制，智能生成任务，导入任务等后台运行，无需等待，可监控后台运行任务的进度和执行结果。统一告警中心提供统一的告警中心，当元数据、数据标准、元数据质量、数据质量、调度任务、存储空间产生变更或是达到阈值，则对相关责任人产生告警通知。13）统一工作台根据角色和权限，提供统一工作台，无需进入后台功能，一站式操作，完成所有工作。提供操作导航，向导式指导用户使用系统。14）安全管理能力支持安全认证：支持基于TVebSerViCe方式的用户安全认证。实现基于安全认证的数据资源管理管理和访问管理支持基于角色的菜单操作功能权限管理。系统日志功能能够记录用户访问系统操作的时间、请求方法、系统模块以及操作详情等。15）支持集群部署，支持集群环境并行处理任务，允许将任务部署在多台服务器上并发执行，从而将任务处理分摊到多台服务器上，提高数据处理效率。16）支持通过菜单方式集成其他系统操作页面，支持单点登录，统一管理和访问权限控制。2 .融合数据模块需求D符合J2EE规范，支持JDBC、JNDKXML.WebServicesJMS、JSON、JMS等数据标准；符合SOA技术架构设计，采用组件复用和框架技术，以SOA面向服务的架构为基础，具有松散耦合、可重用服务、标准化接口等特性，可与其他应用无缝、高效集成。2）产品采用通用的程序设计语言和运行支撑环境，可移植性高，具有跨厂商、跨平台适配的能力，支持云平台、WindOWs、LinuxUnix、中标麒麟等主流操作系统厂商的运行环境。3）丰富的接入适配能力：具有优秀的开放性，支持国内外主流的关系型数据库，包括:OracIeDB2>Teradata、SQLServer>Sybase>InformixMySQL>PostgreSQL>Greenplum>Netezza>Vertica>Teradata>人大金仓数据库KingbaseES、南大通用Gbase、华为Libra、达梦数据库DM、神通数据库等。支持普通文本、CSV、XML、EXCe1、JSOn等多种格式的文件的接入。支持HTTP、JMS>FTP、WebSerViCeS等协议和其他应用系统进行交互。4）产品内置180余种转换和作业组件，支持拖拽的方式快速构建各种数据集成流程化设计。转换组件主要涵盖空值替换、数据校验、常量值、值映射、字段选取、数据去重、排序、字符切割、字符替换、拆分字段、值运算、值连接、范围划分、行列转换等复杂处理；作业组件主要涵盖文件处理，大数据处理，配置处理条件，自定义脚本等任务配置组件。5）提供全量同步、增量同步等多种模式抽取数据。增量同步涵盖触发器、标识位、时间戳、全量比对等方式。兼容HadOOPSqoop,支持基于SqoOP的数据迁移能力。6）支持FIUnIe实时采集日志信息，具有高可用性、高可靠性，能够分布式地采集、聚合和传输海量日志。支持在日志系统中定制各类数据发送方，并可将采集到的数据存储到HDFS、Kafka等数据源中。7）支持通过Load模式写入OraCle、PostgreSQL华为MPP、Greenpluni等数据源。8）提供强大的调度引擎，支撑各种复杂任务调度流程地高效运行，为海量的异构数据集成提供保障。支持关系型数据采集、大数据采集（HbaSe采集）、文件数据采集、接口数据采集任务的统一管理和调度。支持手动触发、计划任务触发，应用于人工参与、自动化无人工干预的批量数据同步等多种场景。计划任务触发支持通过依赖任务触发任务调度。支持调度配置，包括分钟级、小时级、天级、周级、月级等粒度,支持按需配置执行周期。支持调度的路由策略配置，以满足资源的合理利用。支持任务的阻塞策略功能，以保障任务正常运行。支持将资源库中的作业和转换自动注册到任务管理界面。9）支持集群部署，支持集群环境并行处理任务。允许将任务部署在多台服务器上并发执行，从而将任务处理分摊到多台服务器，以提高数据处理效率。支持的并发任务数大于100Oo10）支持跨网络跨机房的数据集成，支持跨物理隔离网闸设备的数据集成。11）支持可视化转换和作业监控调度：在WEB可视化界面上统一调度ETL任务和实时采集任务，支持任务的启用、停止、立即执行和终止操作。支持可视化任务监控：在界面中可视化地监控任务运行详情、数据处理流程、任务执行日志、步骤度量和历史详情，并提供实时报警。支持系统资源监控，支持对任务详情、任务运行详情等进行统计；支持对系统中添加的服务器资源进行监控，监控内存、CPU使用率、网络I/O、磁盘I/O等资源情况。14）支持数据加密：通过在数据传输过程中对数据加密，达到数据安全传输的目的。15）支持安全认证：支持基于WebSerViCe方式的用户安全认证。16）提供可视化图形界面，使用人员无需编码，既可以灵活、方便地定制出各种数据集成流程，又能减少手工代码的错误，还可以利用调试预览及时发现潜在错误，提升集成质量，同时，可对ETL服务器和资源库进行管理，全面提高集成速度。17）支持多用户协同配置数据集成流程，多人操作同一资源库不发生死锁现象。遵循restful风格标准消息传递机制。19）提供插件式、可扩展的组件管理机制。自定义开发的组件以插件的方式快速集成到产品中，便于灵活使用。20）提供Java、HTTP、REST等多种封装形式的监控管理接口，方便用户快速将监控管理功能集成到自己的平台中。支持通过接口启动、恢复任务，支持通过接口获取、推送数据，支持获取监控日志信息。21）支持通过菜单方式集成其他系统操作页面，支持单点登录，统一管理和访问权限控制。22）资源库管理支持新增资源库，包括资源库的连接信息，是否自动注册等。并且支持接入多个资源库。如勾上自动注册，系统会将资源库下的转换和作业自动在调度中心中生成草稿状态的任务。支持对资源库连接信息进行修改，包括密码和是否自动注册属性。支持对资源库进行删除操作，删除资源库时给出对应提示。删除资源库后，相应的任务一并被删除。支持新增、删除、编辑目录管理，目录发生变化后，在所有的资源库中同步。3 .可视化展示模块需求（一）UE基础平台技术指标要求D支持多数据源接入：支持标准的JDBC接口，能直接对接各种主流关系型数据库系统，包括OraCIe、SQLServer.MySQL.POStgreSQL、国产人大金仓、达梦、南大数通GbaSe8a/8t、神通数据库、华为MPP等；支持文本数据（Excel、CSV）的直接导入分析；支持hadoop-hive、华为Fl等大数据平台数据源接入。2）支持实时数据可视化，同时提供三种方式：数据库定时执行SQL的准实时数据提取、定时通过调用第三方接口获取准实时数据、通过接口实时接收第三方接口实时发送的数据。3）支持图形界面拖拽式地进行数据建模，支持星型和雪花模型，支持多条件下的多表关联；同时支持自定义SQL建模，可以通过编写SQL的方式构建数据模型，并且SQL语句中支持自定义参数。4）支持自定义计算字段，内置丰富的计算函数（不少于30个），包括：总体标准偏差、样本标准偏差、总体方差、样本方差、累运算、IF条件、CASE条件、空值判断等，并且，这些函数之间可以采用逻辑表达式方式进行组合，以组成复杂的计算函数。5）预置表计算能力，表计算函数包含：总额百分比、差异百分比、累积和、同比增长值、同比增长率、环比增长值、环比增长率等，这些函数能在配置页面时直接选择使用，无需再编写SQL语句或者函数。6）支持拖拽式的自由编排设计工具，通过拖拽即可实现灵活的可视化页面设计，所见即所得，页面支持静态预览和动态预览。布局方式为自由布局，非表格或者九宫格形式的布局。提供多种主题样式，页面中的所有图表支持一键式主题切换。7）提供除了按钮、下拉、单复选、文本输入框、文字控件等普通Web交互组件外，还应具备特殊WEB交互组件，包括但不限于：开关组件、树形（层级树、递归树）组件、Tab容器、图片轮播组件、轮播容器、导航容器、图像矩阵、tips容器、下载组件、查询组件、查询容器、iframe（内部框架）组件、数据源组件、时钟组件、时间轴组件、相对时间组件等。8)提供样式类组件，包括：贝塞尔曲线、线条、矢量图标、边框、装饰、画笔等组件。画笔组件支持自由画直线、曲线，并且提供多种动态效果。9)支持2D矢量地图，包括：分布地图、迁移地图、标注地图、热力图。并支持下钻，层级包含：世界、中国、全国34个省/市/自治区以及300个以上重要的地市。10) 提供3D矢量地图组件，同时支持通过导入SVG图片和GeojSon文件，自动生成自定义的3D矢量地图。该地图的能力支持:内置至少4种样式，8种及以上的光点样式；支持下钻配置；地图可配置旋转、悬浮、缩放、拖动漫游，并设置投影、发光等3D效果；支持类似GlS地图一样在地图底图上，叠加多个图层，图层的类型包含标注图层、热力图层、迁移图层。11) 支持2.5D的图表组件，包括：2.5D饼图/玫瑰图、2.5D柱状图/条形图、2.5D柱状堆积图、2.5D面积图、2.5D混合图。饼图和玫瑰图相互切换，柱状图和条形图相互切换。12) 支持以容器组件为依赖，将图表的展示样式进行三维旋转设置，以便呈现出类似三维布局效果。三维旋转支持按X、Y、Z轴的自定义组合配置，同时内置水平向右、水平向左、左上方、右上方等样式。13) 提供数字转盘组件，可以作为装饰效果，也可以绑定数据展示。支持至少2种皮肤，每种皮肤支持至少4种样式选择。14) 支持对每个组件进行灵活的事件响应设置，包括：鼠标单击、双击、划过、进入、移出、数据加载开始、数据加载完成、控件初始化、选中、内容变化等。15) 支持事件动作：联动、跳转、弹出窗口、关闭窗口、服务调用动作。并支持采用JaVaSCript、JSON等脚本语言进行自定义动作编程。同一事件支持多个事件响应，每个事件响应可联动不同的组件。联动时，可以对每个组件进行各种组件动作配置，包含：刷新数据、设置是否显示、设置组件值等。在事件中进行参数传递时，可直接配置各组件属性参数和事件参数在各个组件和动作之间的传递，无需通过单独定义的页面参数。16)