SZSD13 0002—2024城市智能中枢 算法协同接入要求.docx

ICS35.240.01CCS1.70SZSD数字山东工程标准SZSD1300022024城市智能中枢算法协同接入要求UrbanintelligentcenterIeqirementsofalgorithmcollaborativeaccess2024-04-15发布2024-06-01实施临沂市大数据局发布目次前言0I范困12规范性引用文件13术语和定义14缩略语15总体架构26算法管埋36.1算法展示与杳询36.2 算法封装46.3 算法发布66.4 外部算法注册/注销66.5 算法导入77算法库77算法类别77.2 算法存储87.3 算法元数据87.4 算法生命周期98算法服务91.1 算法词度91.2 算法配置99用双管理109. 1权限管理109.1 算法统计分析109.2 算法审核1010算法开放接口1010. 1算法管理接口1010.2算法服务接口11-Z.-A刖三本文件按照GB/T1.12020$标准化工作导则第1部分：标准化文件的结构和起草规则8的规定起草.谢注意本文件的某些内容可能涉及专利.本文件的发布机构不承担识别专利的员任。本文件由崎沂市人数据局提出并归口.本文件起草单位：临沂市大数据局、山东浪潮新基建科技有限公M、临沂市大数据中心.本文件主要起草人：熊云峰、英杰、庄绪路、解桂林、李龙、周波、郝建和、冯兵池、吕厚雨、孙凤巧.城市智能中枢算法协同接入要求1范围本文件确立了临沂市多种类型算法统一管理、统一服务和配置的算法协同接入要求.本文件适用于彼沂市多种智能算法协同应用的规划、设计、建设与运行维护。2规楚性引用文件下列文件中的内容通过文中的规箍性引用而构成本文件必不可少的条款.其中.注日期的引用文件.仅该日期对应的版本适用于本文件；不注日期的引用文件，其G新版本(包括所有的修改单)适用于本文件。DB37/T4613.I2023智抵城市基咄设施第1部分：城市智能中枢总体要求3术语和定义下列术语和定义适用于本文件.3.1算法协同接入algorithmcolIaborationaccess将多种来源的算法按照统一格式进行封报、发布、注册、导入、管理与配置等，向用户提供T攵的算法服务方式.3.2算法包algorithmpackage将律法代码及相关依赖项、资源配置、常助说明等附同信息按照统一格式封装为可复用、可部*的一种文件形式。城市智能中枢urbanintelIigcnthub运用云计灯、大数掘、人工智能等技术构建的为城市运行提供科学决策和指挥调便能力的平台里人工智能中枢,是数字政府、数字社会和数字经济的载体,汇集政府、企业和社会等数据.进行融合计律,感知城市生命特征，城市的全域精准分析、粘体研判、办同指挥和科学治理提供支掾，侏源：DB37/T4613.1-2013.3.!J4缩略语下列缩略谱适用于本文件.AI:人工智能(ArtificialIntelligence)JSON:JavaScript对象标记语吉(JavaScriptObjectNotation)URI:统一资源标识符(universalresourceidentifier)5总体架构力鲁JV图1算法协同接入椎架。法协同接入框架包括算法管理、算法库、算法机务、配置管理及算法开放接1.J组成.具体描述如8）算法管理：算法协同接入的主要功能组件，包括算法展示与宜询、算法封装、算法发布、外部算法注册/注销、算法导入等：1）算法展示与查询：展示所管理各类算法及算法相关屈性信息.提供多种查询算法的方式：2）算法封装：将不同类型算法按照统一的格式或方式封装为标准算法包,算法协同接入框架可以识别并安袋（加教）算法包.算法封装简化算法的使用和管理，并提供一致的接口和功能：3）算法发作：将算法按照可公开访问的方式发布到算法协同接入框架，便于算法使用方杳泡、下毂、安装柬贸；I）外部算法注册/注销：外部算法可以注册（加教）到算法协同接入框架，算法使用方可以在框架下管理和运行调试外部算法.对不再使用的外部算法框架可以注销（删除/下架）.5）算法导入：导入算法代码版本，并按算法版本管理；b）算法库：描述算法库分类管理尊法的要求.以及算法相关存砧、配置等方面的要求,包括算法类别、豫法存储、算法元数据、算法生命周期：c）算法服务：为算法使用发提供相关算法服务，包括但不限于算法调度、算法配建等：1）算法调度：对外部提供可视化的任务编持和词度能力,实现不同算法协同工作：2）算法配置：为保障算法正常工作,对算法场景、"法使用条件.规则等方面的配置要求：d）配置管理：对各算法进行统一配置管理，包括权限管理、舞法审核、舞法统计分析：1）权限管理：是对管那舞法协同接入的人员权限进行配置和管理：2）算法审核：针对人工智能算法涉及个人睨私,安全风险、知识产权风险等.提出算法审核要求：3）算法统计分析：描述算法使用和运行等方面的统计和分析；C）算法开放接口：描述算法协同接入时外接口功能，包拈算法管理接口和豫服务接口等：f）律法开发和运行框架：支撑律法开发和实际运行算法的应用框架,算法饼同接入框架为算法开发和运行框架提供多类型、多算法接入,算法开发和运行框架对算力资源进行算力调度.算力资就为算法开发和运行框架提供算力支找.注：本文件描述了总体架构中实爆部分的技术要求，不涉及电战部分的技术要求，6算法管理61算法展示与查询6.1.1基本要求算法展示与育询展示各类算法相关属性信息，包括但不限于以下舰本要求：a）应支持展示和查看算法的算法名称、版本号信息、算法类别、场景类型、激活状态、使用说明等信息，具体见表1：b）应支持通过算法列表、算法缩略图等多种方式查询算法具体信息及运行详情：c）应支持展示卯法模型的描述内容、语言结构、实例文档等信息；d）应支持按照徵法类别、场景类型、算法类型、关键字、算法分析所衙的数据源类型、W法分析输出目标类型等一种或多种条件进行筛选或组合在洲，并支持记录导出.表1算法先本属性信息Jltt播遂尊法名杉场示尊法名杉.如打架斗皎行为发现、违规停车发现等.版本信用用个算法对应的版本号信期.算法类别媒示算法门网分类.如行为分析类算法,统计类算法等.场妣类型口出场景用于管理算法R体应用，-个究法可在彩和双注场景标线.激活状态展示灯法激活状态信息，如已注册激活、未激活.已过期等状态信恩.使用说明展示算法符介信息、详细功能说明等.61.2算法展示算法展示对所管理的各类算法及其属性信息,能以清晰和直观的方式进行展示.便于用户快速浏览和了解可用的籁法，从而做出合适的选择，应满足,以下要求：a）算法分类展示：算法按照不同的分类标准进行分组展示，如类型（分类、回归、聚类等）、领域（自然谱言处理、计算机视觉等）或其他自定义的分类方式：b）算法列衣展示：在每个算法分类下，以列表的形式展示所管理的算法，列表中包含算法的基本信息，如名称、作者、版本等；c）匏法详情展示：在算法详情页中展示更全面的W法信息，包括眸法描述、适用场景、主要功能、优势和限制等：d）算法属性信息：展示算法的属性信息,如算法参数、给入输出格式、模型大小、训练数据要求等：e）示例和演示：为尊法提供示例和演示，以柄助用户更好地理解算法的工作原理和应用场景，示例可以是简单的代码片段或者实际的数据案例，演示可以是豫法在此实环境中的运行效果展示：；f）算法标签和关雄诃：为算法添加标签和关犍词,以便用户通过标签或关键词搜索特定类型或特定功能的算法：g）算法评价和评分：允许用户为姆个算法进行评价和打分，以反映其使用体裟和性能，这些评价和部分可以帮助其他用户更准确地选择合适的算法.并提供参考和决策依据.6.1.3算法交询算法杳询提供多柠自询曾法的方式，使用户能鲂根据特定衢求和条件快速找到符合要求的算法，应满足以卜要求：a）关雄字搜索：允许用户通过输入关键字进行算法搜索.用户可以筠入算法名称、关雄词、领域或其他相关描述.系统物根现输入的关迸字匹配算法名称、描述、标签等相关信息，并返回与关键字匹出的算法列友：b）高级搜索：提供诲级搜索选项，允许用户按照更详细的条件进行算法杳询.用户可以选择算法类31（分类、回归、聚类等）、领域（自然语言处理、计算机视觉等）、开发者、版本号或其他自定义的筛选条件来查询：C）筛选和排序：在查询结果页面，用户可以使用筛选和排序功能进一步细化结果.用户可以根掘算法属性（如模型大小、训练数据要求）或用户评分等条件进行崎选，并根据名称、作者、更新时间等地性进行排序；d）相似算法推荐：基于用户的查询历史和算法评价数据,系统可以提供相似算法推荐功能.根据用户查询的算法或相关条件、系统会推荐其他相似类型或功能的算法，帮助用户发现可能符合需求的其他匏法选择；e）智能建议和补全；在用户输入查询关键字时，系统可以提供智能建议和补全功能，根据已有的算法库和用户的输入，系统仝自动提示相关的算法名称、关键词或领域，楮助用户更快逑地完成查询：O用户评价参考：为每个查询结果展示用户评价和评分,以提供参考和决策依据.用户可以查看其他用户对该算法的评价和使用体骁，从而更好地了解獴法的优势和限制.62算法封装算法封装应满足以下要求：a）应支持不同类型算法遵循统格式时装为标准算法包，算法包格式可以是种约定的目录结构或打包格式,以确保算法包的一致性和可用性：b）蚱法协同接入框架可以识别并安装（加我）W法包，算法包应支持统命名规范、目录结构规范、配祝规范，包含算法代码、依赖库等她本部分：c）应支持将算法工程（包括算法的代码和相关资源通过工具或脚本施建为算法包，通过编译、依赖项管理、资源发制等过程生成算法包文件，算法工程可支持NOde.js、Python,CC.Java等开发语言：d）应支持将算法工程打成压缩文件包（比如ZiP文件格式），上传到算法称同接入平台；C）应支持算法包依赖管理，如果算法工程引入笫三方依赖，可根据开发语言类型，将笫三方依横和算法工程文件封包成压缩文件包（比如ZiP文件格式），或将第三方依赖和算法工程文件,起封包井端谛成UJ执行文件（比如jar文件格式）；f）应支持对一个或多个原子匏法进行封装，可包括但不限于贪法模型、算法形式化描述文件、灯法程序等，一个算法包应只包含一种类型的计算设备的修法模型和算法程序：g）算法包应包含说明文档和示例，包括算法的介绍、多数说明、输入输出格式、使用示例等：h）以法包应支持版本管理，Ia个算法包应有唯一的版本号,支持管理和跟踪不同版本的算法包，可选择和切换不同版本的算法：i）应支持算法包命名要求和目录结构要求，"法包名称包含算法标识、厂商代号和版本号等伯息，目录结构要求见表2,算法属性信息要求见表3：J）亢支持在云原生环境进行算法封包，将算法工程（包含依鞭项）及其运行环境打包为便携式容器镜像，提供运行时环境,可在支持容器的平台上部署和运行.袤2算法包目录结构要求目*«»文件/子目:Wft/内再说，bin必选算法程序文件存放算法程序、算法模里等文件script必选券法管理算法程序自动、停止和状态奇询抑本data可选算法标识为目录存放川子演示算法功能效果的样本敢如METAT近必选以算法标现为目录cover封面附件资料目录，存放展示口法能力封面的视国文件CCmdtion应用场班附件资料目录,存用械示算法能力应用场景的说明文件na11iimx？11tinfo,json中法W性信息嫡述文件crhnicalinfo,js<)11究法技术怡息描述文件*3算法属性信息要求Jl性内客雌算法标识系统自动生成第法应用版本算法版本9仅息.遵循ill义版本管理编向规则算法应川屣示名称中文,不超过128B算法场景类型标笠新培标签标识（id）宽法应用类型视钝流解析、图片流帜所等算法应用描述倡总算法功能简介.不越过2KB律法应用图标FWG格式图片,MKB以内算法作否以法作名侑思或所有并侑息算法应用授权算法授权项倍总"法授权状态系统返臼资源配置参数指定算法运行时所甯要的帙件资源,包括CPlj核故讷存/G冏卡类型及数业等性能配置参数指定算法运行时fife达到的计算能力.如桃籁以Wftk为的位（区分不同分拚率）律法许可i£。法所ftIll的许可皿方式及许可证文件输入说明下发任务时用户输入配置静数的模式描述看出说明用户自定义输UlaJ分的Json粮式描述6.3算法发布算法发布应满足以下要求：a）应支持在算法发布前进行验证和审核；b）验证过程可包括但不限于对算法代码进行海态分析,检查算法的合规性利安全性，以确保算法的质fit和可用性：c）审核过程应由相关管理人员或专业团队进行，确保算法符合设定的发布标准和要求：d）应支持符算法按照6.2算法封装方式发布到算法协同接入框架,供算法使用方查询、下载、安装配带.；e）应支持将算法版本发布，可支持菸于版本的更新：f）应支持算法按照统一流程规范进行发布，提供而应发布说明和测试说明：R）发布说明应包含算法名林、版本号、作者、发布时间、功能点描述、场景边界、支持硬件等信总：h）应支持发布算法的权限管埋,可以设定公开访问的算法，供所有用户使用，读拧设定私自算法，只允许特定用户或组织访问和使用：i）测试说明应包含算法性能测试、处理性能测试、精度等娘等信息；j）应支持算法版本的查询、转让、下我、注怕（下架）等功能：k）应支持免法使用方在律法发布信息基础上进行算法可用性管埋、安装限置等：1）应支持对已发布的算法进行状态监控，包括算法的运行状态、调用次数、性能指标等，64外部算法注册/注销6.4.1 外部算法注册外部算法注册应满足以下要求：a）应支杼外部算法主动注册到统一调度平台,注册过程应百平分分配的秘期.秘仰可作为准入、加密签名使用；b）在注册过程中应提供外部匏法的利关信息，包括但不明于算法名称、路径、依赖项、输入输出格式等：c）应支持心跳,主动上报外部算法状态：d）应支持外部算法对自身资源使用情况进行上报.用于支持多个外部尊法服务书点间的资就i同度：e）应支持外部算法服务上报算法结果、算法运行状况、算法异常现象等：f）外部算法通过调用接口可以上传尊法应用包及授权相关信刖完成算法加载：g）算法协同接入框架应支持提供冏试环境,进行外部算法的用包管理、算法任务管理等相关功能的调试验证；h）外部算法注册和注销时应迸行认证，认证方式应支持数字认证方式：642外部算法注销外部算法注销是构不再使用的外部算法从算法平台中注销或删除.应满足以下要求：a）应支持对外部算法服务迸行注销（下架），外部修法提供方应支持功能调试，下架后的外部算法府不在框架内展示：b）对于已启动运行的算法,应先停止运行后再进行下架操作：C）应支持从算法平台中移除外部匏法的相关信息和配置，包括但不限,算法的注册信息、路径、依穆项等：d）在注销过程中技支持由用户选择是否删除与该外部算法相关的数据和文件：e）如果其他算法或应用程序依赖于该外部算法,在注俏过程中应支持提供特告或提示信息.确保注销操作不会影响到其他功能的正常运行，支持用户根掘需要决定是否解决依赖顶问时或典整相关配置；f）外部算法注镣后，应支持执行相应的清理操作,包括但不限于择放占用的资源、刷除相关的文件或数据等，确保注销的外部算法不再占用资源.6.5算法导入算法导入应满足以下要求：a）应支持算法通过导入的方式导入到极务落箍：b）呼入成功后应支持任务配祝下发：C）应支持导入己注册算法在俄更新版本：d）应支持按梵法版本或分支管理，或覆盖已有算法版本或分支：e）应支持算法版本之间的切换,包括同一算法多次更新升级版本的管理、多版本共存管理等：D应支持IZ法分析服务机群感知算法版本的变化，并更新本地算法：8）宜支持在线编辑代码、文件引入、上传压缩包等多种代码必人方式，支持的语言可包括NOdejs、PyIhun、CC+%JaVa等：h）应支持对导入的己注册算法版本进行推理服务资源、动态调度算法服务部潞等进行统一管理，i）根据用户的需求和算法的更新情况选择导入方式：j）应支持用户通过5Z法的唯一标识、名林、路径等伯息进行识别和选择.在管理界面中查看已注册的算法，并选择要存入的算法：k）写人算法后应支持脸证和审核的证算法的合法性，井根据需要更新算法的相关信息和配置：D应支持按律法分支管理,若选择按照新的算法分支导入算法,符创建新的算法分支,并将导入的算法作为该分支的部分，方便用户在不同分支上进行售法的开发、测试和调试；m）应支持第族己有算法，若选界将IR已有的售法版本或分支，将更新现仃口法的利关信息和配宜.并用导入的舞法替帙原有算法.确保簿法的更新得到及时应用：n）应支持对导入算法的启用和禁用、参数配置、调试选项设置等，可通过统一管理界面，对外部算法进行管理与配置；o）宜支持物更新后的算法逐步引入并发布到生产环境,以降低潜在的风险和影响.根据灰度发布计划，逐步扩大更新算法的发缶范附和受影响的用户，保证稳定性的同时，逐步背换旧算法。7算法库71算法类别1.1.1 存储管理存储管理应满足以下要求；a）应支持按不同类型的对象设置不同的存储策略，允许存储空间进行管理：b）应支持设置存储对接、加密方式；c）应支持对存储情况进行监控，包括读写性能、存储空间等，发生异常时进行告警：d）应支持时存储空间、读写性能等进行统计。1.1.2 任务管理任务管理应湎足以下要求：a）应支持为不同应用场景匹配不同算法仔务,以应用场景形式分类管理算法；b）应支挣接受算法协同框架下发的任务指令,包括但不限于任务启动、停止、更新、查询、网除、配置指令等：c）应支持为上层应用提供算法任务管理服务，可以手动创建留法任务，也支持通过上层应用调用自动创建任务.7.2 算法存储毋个算法源代码文件应具有资源跖径标识，资源路任由统一资源标识符URI标识。7.3 算法元数据7.3.1 算法分类算法分类应满足以下要求：a）算法分类应保持稳定.时于不稳定的分类应以标签形式体现：b）分类的结构为：标识号id名称name父分类标识号ParCn1.id7.3.2 算法标赛算法标签酒足以卜要求：a）算法标签包括货定义的内置标签、自定义标签等：b）标签的结构为：标识号id名称name分类categoryc）内置标签可包括以下结构：潟程语音和版本.示例：<lnnguage_version><language>框架名称和版本.示例：<frameworkversion><fra三ework>适用的行业，示例；<industry_id><in<iustry>7.3.3 算法基本信息算法地本信息结构包括但不限于：名称、版本、参数、存储位置、依赖、描述等。7.3.4 指标信息指标信息结构包括但不限于：存续时长、下我总次数、下我总人数、生近周下我次数、最近一月下毂次数、最多下载月份.7.3.5 评估矩阵应选取可灵活订制的指标组成的矩阵，设定不同指标的权由，根据计眸公式，算出绘合分数，保合反映该算法的状况.7.4 算法生命周期眸法从使用到归档的生命周期内应谡循规范流程，应满足以下要求：a）应按照舞法存在区域划分为在线区、近线区、离城区，近线区和离线区在于归档要求；b）算法不同区域间移动应有产格的权限管理,记录操作日志：C）使用期间应提供服务，归档期间仅提供查闻服务；d）在线区算法没书被使用满足一定时间阈位时，应停止服务.并将算法代码和无数据一起转移至近线区：e以法在近线区存在达到一定时间阈值时.陶将算法代码和元数据一起转移至黑线区.8算法服务8.1 算法调度算法调度应满足以下要求；a）应支持按任务情况进行算法调度，将相关算法在统一资源池内进行调度：b）基于资源动态调度机制.应支持按优先级调度分配,优先调度优先级高的任务：C）应根据上层业务的实际需求，动态、按需加敦W法模型：d）应支持胆据任务计划或指令进行多种算法的调度；e）应支持按照算法库规定的接口标准，通过界面交互方式实现可觇化的任务编排、多修法编排，灵活按需调度、按需分配资源池中的算力资源：O陶支持同类算法模型的资源更用.合理利用计算资源：g）应支持加载、择放、调度、运行、监控相应的算法，满足算法任务、律力资源的动态分配需求：h）应支持将多种豫法统一、按需分配计兜资源，提升资源的整体利用率：i）应支持对算力资源使用情况、运行状态进行监控。8.2 算法配置算法配置应满足以下要求：a）应支持舞法分类，根据应用场景选择律法库中对应的算法种类，包括第三方算法：b）应支持算法包信息的基本操作,包括但不限于增加、剧除、修改、查询等：c）应支持配置规则类型，选择可下发任务的具体算法仓原事件：d）应支持龙置任务ID；e）应支持配置算法参数，下发任务指定的算法多数，根据算法充附格式配置算法参数；f）应支持配置算法包的初始化信息，包括尊.法包跖径、处理结果回调函数、初始化金数、运行环境伯恩等：g）应支持配置任务优先级，创建任务时标定的任务优先级，任务调度时会根据任务优先级优先调度：h）对需要归置触发事件的舞法,应支持配置触发时间，能比触发事件的时间及持续发生时间：i）对福要泡置触发事件的算法，应支持配置算法触发事件的间隔时间.9配置管理9.1 权限管理权限管理应满足以下要求：a）权限管理应湎足DB37/T4613.1-2023中6.6的要求；b）应支挣多种访问控制方式,包括但不限于管理用户使Hl的登录端IP地址、管理用户多点登陆等：c）应支持权限控制的亟本操作，包括但不限于添加、回收、查看、修改、删除等权限：d）应支持用户组银结构管理及权限控制，92算法统计分析算法统计分析应满足以下要求：a）应支持监测和统计分析所有分析节点的算力使用情况、当前任务数、运行算法类型和详情数据等：b）应支持监测和统计分析算法事件情况,包括但.不限于事件数量、事件分布等：c）应支持多种数据展现形式.包括但不限于饼图、折线图.柱状图等.93算法审核算法审核应满足以下要求：a）应支将人工审核算法运行结果，用于打法训练、时优：b）应支持以算法为维度的审核开关,按施搬漉参与审核：C）应支持自定义审核结果，包括但不限于正检、i吴检，还能包括i£熨正检、Ri谈检等自定义标签：d）应支持审核结果的分类统计.10算法开放接口9.2 算法管理接口算法管理接口应满足以下功能要求：a）算法封装管理接口应支持调用算法封装相关接口进行管理，包括但不限于算法包封装格式配置、算法包上传、算法包制除、算法包近询等功能：b）算法应用实例管理按11应支持调川算法应用实例管理接口进行管理,包括但不限于算法应用实例创建、删除指定算法应用实例、度取指定算法应用实例伯息详情、更新指定算法应用实例等功能：c）算法任务按口应支持调用律法任务相关按口实现任务管理，包括但不限于舞法任务创建、算法任务删除、任务对象配置、查询任务列表、查询任务详情、任务状态回调等功能：d）算法应用估息接口应支持两用口法应用信息相关接口进行管理，包括但不限于列举展示算法应用信息、删除指定算法应用、获取算法应用详细信息、笄法应用信息更新等功能：e）算法应用授权接口应支持调用眸法应用授权接IljS行授权信息笆理，包括但不限于获取比法授权信息、算法授权状态等功能.9.3 算法服务接口算法服务接口应满足以下功能要求：a）克法调度任务接口应支持调用调度相关接口实现算法调度服务，包括但不限于算法调度任务相关配置、任务编柞、换取算法解析资源、资源田置修改等，b）口法开发接口应支持调用算法开发相关接口支押开发工作.支持包括但不限于算法给入输出格式、算法运行实例、算法应用包调试等.c）算法配刊接口应支持调用算法配置相关接口进行算法配置，支持包括但不限于算法限混格式查看、修改算法配置参数、删除指定算法配置信息等.