一、项目概况1.1项目建设目标在统筹规划、数据驱动、应用导向、有序推进的原则基础上,充分运用大数据、云计算、人工智能等新信息技术手段,按照“部省联动、上下协同”建设思路,充分利用现有农业农村大数据资源,整合在用农业农村部及厅本级自建85个应用系统数据资源及各类涉农数据资源,在统一的农业农村大数据标准规范体系下,构建集采集、治理、共享、分析、决策等为一体的新疆农业农村大数据平台,初步建成“区、地、县、乡、村”五级农业农村数据采集服务体系,建立农业农村数据共享交换机制,有效提升现代信息技术在农业农村领域的应用程度,为农业农村管理者提供数据可视化监测管理手段,提高自治区农业农村科学决策、农业监管和政务服务能力,形成“用数据说话、用数据决策、用数据管理、用数据创新”的行政管理服务机制,为全面推进乡村振兴、加快农业农村现代化提供有力支撑。 1.2项目建设需求根据农业农村部制定的《农业农村大数据业务架构》相关要求,以“3+N”为总体框架,建立“新疆农业农村大数据规范体系、农业农村大数据应用支撑体系、农业农村大数据一张图,以及N个应用”为核心的新疆农业农村大数据平台,旨在整合、汇聚自治区涉农数据资源,构建自治区农业农村大数据资源体系,逐步建立完善涉农信息资源目录,逐步实现涉农数据的精准采集、预警、分析、决策辅助、业务协同和数据的共用共享。 二、项目技术需求2.1新疆农业农村大数据规范体系提供与新疆农业农村大数据平台建设相关规范的编制服务,包含管理规范、数据规范、技术规范、安全规范和应用规范五类。如下表所示: 序号 | 规范类别 | 规范编制需求 | 1 | 管理规范 | 包括平台建设管理规范、平台运维管理规范 平台实施管理规范、平台验收规范等。 | 2 | 数据规范 | 数据资源目录规范、资源分类与编码规范、 元数据规范、数据库建设规范、数据采集规范、 数据治理规范、数据分析规范等。 | 3 | 技术规范 | 数据汇聚技术规范、系统数据接入规范、 数据开发技术规范、数据共享交换技术规范等。 | 4 | 安全规范 | 基础设施安全规范、网络安全保障规范、 数据安全保障规范、统一认证服务规范等。 | 5 | 应用规范 | 应用组织规范、应用流程规范、 应用安全规范、应用使用规范等。 |
2.2新疆农业农村大数据应用支撑体系新疆农业农村大数据平台应用支撑系统包含数据资源中心、数据采集、数据治理、数据管理、分析计算、技术支撑、共享交换和统一门户等模块。需求如下: 2.2.1 数据资源中心通过制定和执行科学分类、标准统一、流程规范的数据组织方案,依据数据使用目的,按照农业农村业务梳理建设信息要素和数据分级分类规范,构建新疆农业农村大数据平台数据资源中心,包括原始数据层、数据仓库层、数据集市层、数据算法模型库/标签库。数据资源中心数据来源包含但不限于: 序号 | 数据来源 | 1 | 65个国家农业农村信息系统数据及国家农业农村 制式统计表单数据; | 2 | 20个厅本级信息系统数据; | 3 | 自治区相关单位业务系统涉农数据,如自治区自然资源厅 地理空间地图数据、自治区气象局农业气象数据等; | 4 | 统计数据资源,包含新疆统计年鉴、新疆农业调查年鉴、 中国农业年鉴(新疆部分); | 5 | 其他涉农数据。 |
2.2.2 数据采集根据自治区农业农村厅现有信息化平台现状,结合数据更新频率、更新方式等特点,打造数据采集体系,将农业农村全域资源抽取至大数据平台资源库中,实现业务数据的汇聚和多源异构数据的横向、纵向的汇聚融合,实现数据资源的统一管理、统一整合和统一监控。信息系统数据采集采用旁路采集方式,功能主要包括采集填报、采集内容管理、采集方式管理、集成策略管理、任务监控管理等内容。具体要求如下: 序号 | 指标项 | 指标要求 | 1 | 数据源管理 | 1.数据库连接:系统应支持连接达梦、人大金仓、 Oracle、MySQL、SQL Server等主流数据库 进行数据采集;系统应具备新增数据库连接功能, 用户通过输入数据源名称、数据源类型、 JDBC URL、用户名、密码等参数建立数据库连接; 系统应可对数据库是否连接成功进行测试, 并可对已有数据库连接的查询、筛选以及编辑等操作。 2.文件服务器:系统应提供对文件服务器 连接的管理,系统支持FTP和SFTP等协议类型; 用户应能够通过输入文件服务器名称、协议类型、 服务器IP、端口号、用户名、密码等参数 新建文件服务器连接;系统应提供对已有 文件服务器连接的查询、筛选、编辑等操作。 3.接口数据源:系统应支持以接口形式对 具备数据交互接口的IT系统进行数据采集; 系统应实现对接口数据源的管理功能, 用户可通过配置数据源名称、数据源类型、 URL、请求方式等参数新增接口数据源, 在所有参数输入完成后系统能够对新增接口 数据源进行验证;接口数据源类型应包含 但不限于含遥感数据服务、气象服务等接口。 | 2 | 离线数据采集 | 1.系统应具备离线数据采集功能,可实现 对业务数据填报配置,实现手动填报任务 采集或定期自动采集; 2.系统应具备对业务表单的单表或多表进行 离线采集,能够对表内的所有字段或指定 字段进行采集,具备自动或手动建立填报 表单与目标表间的字段对应关系,同时能够 以数据追加、数据覆盖、数据更新三种方式 对目标数据库进行数据更新。 | 3 | 实时数据采集 | 1.系统应具备实时数据采集功能,针对变化 频率较高的数据,利用无侵入式数据采集 技术,实现待接入数据的实时同步采集, 而不影响原有系统业务及性能; 2.系统应具备对数据表指定字段或全部 字段进行实时采集,支持自动或手动建立 源表与目标表间的字段对应关系,同时能够 以数据追加、数据覆盖、数据更新三种方式 对目标数据库进行数据更新; 3.系统应具备单表数据同步、批量数据同步、 整库数据同步功能,应具备对实时数据采集 任务的新增、编辑、删除、查询、启用、 停用等操作。 | 4 | 接口采集 | 1.系统应具备接口数据采集功能,针对具备 数据交互接口的农业农村各业务部门现有 信息化平台及物联网设备,应能适应其数据 传输的接口规范,包括但不限于常见HTTP、 WebService 接口API等; 2.系统应具备对接口采集任务的新增、编辑、 删除、查询、启用、停用、执行、监控等操作。 | 5 | 文件服务器采集 | 1.系统应具备文件服务器采集功能,针对 文件服务器进行数据采集; 2.系统应具备文件服务器采集任务的新增、 搜索、删除、编辑、配置等操作; 3.系统应具备配置数据来源,配置目标数据源, 配置任务调度操作; 4.系统应支持SFTP、FTP等多种协议类型配置 数据来源; 5.系统应具备通过选择文件服务器类型, 选择目标数据源,选择文件路径,选择命名规则, 选择更新方式等操作配置目标数据源; 6.系统应具备按照数据追加、数据覆盖、 数据更新三种方式对目标数据库进行数据更新。 | 6 | 数据文件采集 | 1.系统应具备数据文件采集功能,数据文件 采集主要面向农业农村各业务部门工作过程 中积累的表格文件数据; 2.系统应实现文件数据的导入,满足多类型 复杂报表数据的汇聚,具备新增、搜索、删除、 编辑、配置任务等操作。 | 7 | 互联网数据采集 | 1.系统应具备互联网数据采集功能,对于 有固定来源的网络数据抓取,利用“爬虫”技术, 实现数据动态监控和定向收集; 2.系统应具备对互联网数据采集任务的新增、 搜索、删除、编辑、配置等操作; 3.系统应支持Xpath Helper等扩展程序加载; 4.系统应具备采集结果预览,提供任务配置、 导出数据至本地功能。 | 8 | 物联网采集 | 1.系统应具备物联网数据采集功能,实现基于 无线传感器网络技术(2.4G、433M、GPRS、 NB-IOT)、传感器技术和计算机监控软件 技术的数据采集功能; 2.系统应支持多种类型和不同厂家的物联网 采集设备集成,实现采集设备的管理和采集 数据的查询与统计,实现对特定场所的环境 数据、在线状态、视频数据进行无线采集、 传输、预警和监测。 | 9 | 采集状态监控 | 系统应具备对数据采集过程进行实时监控功能, 具有显示同步记录数、目标数据源总条数、 目标数据源总量、实时同步速率、平均同步速率、 同步数据记录监控、同步数据速率监控等能力。 |
2.2.3 数据治理数据治理功能是通过对多源异构数据进行标准化处理和融合处理提升数据价值密度。功能主要有数据抽取、数据转换、数据清洗、数据去重、数据补全、数据关联、数据融合、数据比对等,可通过清洗、关联、比对等数据处理过程实现数据的标准化处理以满足数据应用需要的数据资源。数据治理系统支持图形化的拖拽方式,方便开发人员进行数据开发,需要支持图形化工作流,方便管理人员理解数据处理逻辑和实施运维监控。具体要求如下: 序号 | 指标项 | 指标要求 | 1 | 数据质量管理 | 1.质检模型管理:系统应实现对数据检查规则与数据进行关联,构建数据治理模型,治理模型由对应的稽核数据库、数据表、字段及治理规则构成;系统应具备按模型名称关键字模糊搜索和按规则树规则分类筛选稽核质量模型;系统应具备新增、删除和刷新质量模型功能。 2.质检规则管理:系统应具备质检规则管理功能,系统内置通用的治理规则,同时支持治理规则的自定义,支持按规则名称关键字模糊搜索定位具体稽核规则,支持稽核规则批量删除和单个删除的操作;质检规则管理应包含质量规则管理和质量类别管理功能。 3.质检任务调度:系统应具备质检任务调度功能,支持对稽核任务进行自动化处理和定时调用或触发两种方式进行调度处理;系统应具备对质检任务调度列表按任务名称关键字搜索,具有新增、删除和刷新任务等功能。 4.质检执行监控:对质检任务执行情况进行监控。 5.结果分析报告:系统应具备对质检的结果进行统计分析功能,解决“4W”问题:该数据是否异常、该场景在哪里发生、该数据什么时候发生异常和为什么发生异常等;系统应实现对某时间段内质检任务数、质检规则数、正在执行数、执行失败数、数据异常数和数据警告数的直接数据呈现,提供质检任务趋势变化、数据异常和质量质检结果的直观可视化图表呈现。 6.质检问题管理:系统应具备质检问题管理功能,实现对系统使用者或数据中心开发者遇到的问题及解决方案,进行收集和整理,形成知识库,便于项目过程改进;质检问题管理应具备对在数据质检过程中遇到问题的录入、查询、编辑和删除功能。 | 2 | 数据处理系统 | 1.数据处理监控:系统应具备数据处理监控功能,应能够展示数据处理情况总览,同时具备对数据库可用资源、当日数据处理情况、当日任务执行情况、热门处理组件进行统计分析。支持以图标可视化形式进行展示。 2.数据库连接:系统应支持连接达梦、人大金仓、Oracle、MySQL、SQL Server等主流数据库进行数据采集;系统应具备新增数据库连接功能,用户通过输入数据源名称、数据源类型、JDBC URL、用户名、密码等参数建立数据库连接;系统应可对数据库是否连接成功进行测试;可对已有数据库连接的查询、筛选以及编辑等操作。 3.工作空间:系统应具备工作空间功能,数据治理人员可以建立个人工作空间,在个人工作空间中实现工作流配置;系统应具备对数据处理工作流进行管理,包括工作流的分组、新建、编辑、删除、查询等操作。 4.工作流配置:系统应具备工作流配置功能,可通过可视化编排工具,拖拽数据处理组件,构建数据处理工作流,选择要处理的数据源,并按照任务定期自动执行数据处理工作;工作流配置功能应包含但不限于组件连接、配置、运行、检查、查看结果、返回、放大、缩小、保存、撤销、重做。 5.处理配置管理:数据治理组件应数据治理能力,提供数据源组件、数据清洗组件、数据加工组件和自定义组件;数据源组件应具备库表输入、库表输出功能;清洗组件应具备空值替换、数据过滤、数据去重、字符清洗功能;加工组件应具备行转列、列转行、集合、连接、排序、合并列、拆分列、字段类型转换、字符格式转换功能;自定义组件应具备SQL自定义组件功能;系统应支持自定义组件,针对当前数据处理组件进行管理,支持用户上传组件;提供组件分组维护和组件维护等管理方式;支持按照树形结构分组管理组件,分组可以在树形结构上实现增删改操作,组件管理在右侧表单维护,可以对组件进行新建、编辑、删除和移动操作。 6.任务调度:系统应具备创建任务组功能,在任务组中可以选择多个工作流,任务调度可以选择执行周期,支持对任务的新建、编辑、删除、启用、运行、监控等操作;系统应具备统一的清洗转换调度与处理机制,如执行任务的调度、设备资源的调度、执行情况监控、异常处理恢复机制等,对清洗的进度进行实时监控。支持对异常处理进行恢复的机制。 | 3 | 元数据管理 | 1.元数据发现:系统应具备对元数据的查看和完善功能,针对数据仓库中新建的数据库、数据表、字段产生的数据元数据进行识别发现,以列表形式展现是识别结果,支持对元数据信息进行完善。 2.元数据管理:系统应提供数据元数据、接口元数据、数据处理元数据的管理功能,具备对各类元数据的分类、管理、审核、查询、浏览、编辑等功能。 3.元数据分析:系统应具备元数据分析功能,提供表级、字段级元数据血缘分析和影响分析;1)血缘分析应能够对指定元数据的起源及其推移位置的分析,能够反应数据的来源与加工过程,并描述数据在不同过程中发生的情况,帮助分析信息的使用方式并追踪用于特定用途的关键信息位;2)影响分析应能够帮助用户迅速了解分析对象的下游数据信息,快速掌握元数据变更可能造成的影响,以便更有效的评估变化该元数据带来的风险,帮助用户高效准确的对数据资产进行清理、维护与使用。 4.元数据地图:系统应具备元数据地图功能,依托元数据的实体信息和元数据间关系信息,对层级、数据库、数据表、字段之间复杂关系进行分层解耦,形成多层的知识图谱,利用数据来反馈业务能力,明晰两者如何协助来达到最终业务管理的目标。 5.元数据检索:系统应具备元数据检索功能,实现对数据仓库中的技术元数据、业务元数据、管理元数据的全文检索等;系统应以先进的分词搜索技术为核心,采用分布式多线程并发指令执行体系结构,实现元数据的快速全文检索。 6.元数据监控:系统应具备元数据监控功能,能够对元数据管理系统中涉及的技术元数据、业务元数据、管理元数据等信息进行全方位实时监控;系统具体监控内容应包括但不限于对数据仓库中各层级库表的数量、各类元数据的变化情况、指标、字典表的数量及其变化,以及元数据服务状态、服务调用的统计分析等。 |
2.2.4 数据管理数据管理是对数据资源全生命周期进行过程控制和质量监督。功能主要有数据表管理、数据安全管理、数据资源编目等。 序号 | 指标项 | 指标要求 | 1 | 数据表管理 | 1.数据表管理需按照资源目录定制内容,在对应数据仓库中建立表结构,实现资源目录业务描述和字段数据定义。 2.创建数据层:系统应能够将表内容与元数据绑定形成对应的层级关系,确定资源目录标准,为表管理中的调用、转换、集成等提供统一标准。 3.创建数据库:系统应能够将表和数据库进行关联方便后续对表进行增加、删除、修改、查询等操作。 4.创建表:系统应能够在数据仓中根据业务需求创建相关的表,创建完成的表将和业务系统相关联。 5.配置表管理:系统应可定制表结构内容,形成固定的资源表规范,数据项内容可以按照表结构类型配置数据内容,包括但不限于数据编码和数据涵义;数据项应可扩充目录内容,提升目录内容有效性。 6.字段设置:系统应可对配置处理后的数据目标表字段进行设置。 7.接入管理:系统应可对接入的连接数、接入的数量进行管理。 8.版本管理:系统应可对数据库表变更前后变化情况进行追溯。 | 2 | 数据安全管理 | 1.权限管理:数据安全保证数据全生命周期的安全,在数据全生命周期内既要保证数据的高使用率也要保证数据本身的安全,系统应提供对数据进行分级分类管控功能,通过数据分级分类,对涉及敏感内容、隐私内容、定位信息等内容的记录和字段进行分级别的访问限制,防止敏感信息的扩散,杜绝手段滥用的风险; 2.数据加密:系统应可通过加密算法和加密密钥将农业农村大数据平台表管理中的敏感的数据转变为密文数据,或通过解密算法和解密密钥将密文恢复为明文,数据加密应可利用密码技术对信息进行加密,实现信息隐蔽,从而起到保护信息的安全的作用; 3.数据脱敏:系统应实现对农业农村大数据平台的数据脱敏管理,根据数据安全等级对敏感数据进行模糊化处理,特别是对身份证号、手机号、卡号等个人敏感信息以及农业农村地理坐标数据、业务敏感数据等都需要进行数据脱敏。实现不同密级用户间间共享数据资源的脱敏,尤其是高密级数据进行必要的脱密处理。管理员可以根据安全要求设置数据的脱敏级别,系统应提供相应的管理界面供管理员进行设置和更改,可实现数据的部分脱敏、完全脱敏和不脱敏,具备数据源端脱敏、加载前脱敏、加载后脱敏等多种数据脱敏实现方式,提供多种脱敏恢复机制。 4.数据审计:系统应提供数据审计功能,包括审计业务流程控制、审计模型管理、操作管理、网络与信息安全管理、审计数据生存周期管理、文档与审计数据管理等。 | 3 | 数据资源编目 | 1.资源编目:系统应具备资源编目功能,基于农业农村业务部门现有数据资源,以信息资源目录标准提供对资源的编目和分类标签功能,建立资源管理分类体系,以此为基础将所有数据资源进行编目挂接,支撑资源的快速查询定位,系统具备多级编目。 2.目录审核:系统应具备对数据资源目录的审核功能,可对本级用户提交的目录与数据资源进行审核操作,审核通过后即可进入目录服务库。使得本级用户对本地的资源目录进行有效监管,确保提供数据资源的合理性、准确性,为后续上行工作做好准备。 3.数据上行及审核:为数据上行流程提供审核功能,下级编制好目录后,提交上级单位执行上行操作后,上级用户对目录及资源进行质量审核,审核通过后即可拉取数据至本级大数据中心,同时进入目录服务库。 4.目录服务:系统应具备目录信息查询搜索功能,为目录信息使用者提供获取资源目录信息的手段和接口,包括但不限于目录列表、服务列表、数据目录检索等功能;并可将目录发布到共享订阅门户,方便其他单位或者机构对农业农村数据的申请调用;系统应可形成目录图谱,具备对辖区内全部的数据资源目录进行浏览与查询操作;系统应提供目录和图谱两种查看形式,图谱以资源之间的关联关系展现各资源节点之间的从属关系,目录形式按资源目录树提供目录的及挂载的数据资源的展现,方便决策层对管辖范围的农业农村数据资源目录结构和各类农业数据有清晰、直观的了解。 5.变更日志:系统应提供日志分析功能,提供基于管理中心的操作员、操作时间、操作对象、具体操作以及操作结果、操作明细、耗时、失败异常信息等契合业务的记录模式、操作请求和返回内容记录功能;系统应提供流程日志、数据传输统计日志、调度日志、服务日志、文件传输日志、操作日志等类型的日志分析。 6.统计分析:系统应提供对数据资源的统计和分析功能。 | |
2.2.5 分析计算围绕农业农村的业务决策需求,基于业务系统、高分遥感、物联网、互联网等多源涉农数据资源,利用信息技术提供基础的大数据计算分析,主要包含BI可视化系统和AI建模系统。 序号 | 指标项 | 指标要求 | 1 | BI可视化系统 | 1.系统应可根据海量数据,提供多业务主题分析场景,并能够以仪表盘、图表、表格、地图等方式进行呈现;应提供不同视角下的可视化大屏报表,通过关键数据分析,以拖拽的方式即可快速搭建可视化大屏;应可对业务指标数据检索与展示,实现精细化多维分析,让相关管理人员能够轻松掌握业务动态; 2.系统应提供数据源配置管理功能,可对数据来源进行配置管理,应支持传统关系型数据库MySQL、PG、达梦、人大进仓等,并提供接入适配器,可解析GeoServer等外部系统的衔接和数据叠加。 3.系统应提供多种可视化组件,为新疆农业农村大数据平台提供基础的组件和模块,包括但不限于图表组件、地图组件、媒体组件、表格组件、文字组件等组件,并开放第三方组件接口,允许第三方组件按照规范接入和应用。 4.系统应提供可视化设计功能,具备智能化布局和组件的自由排版功能,能够在短时间内快速完成大屏设计,同时能够根据自定义需求以拖拽方式自由调整布局,搭建出个性化、层次感、空间感的大屏可视化页面,并可实现数据的动态展示;系统应具备易用、适用、可靠等特性,支持PC、电子大屏、PAD等可视化展示应用场景。 | 2 | AI建模系统 | 1.系统应提供全流程一体化的智能模型研发、运行和管理平台,包括数据管理、特征工程、模型构建与评估、模型发布、模型实时服务、模型管理等一整套的机器学习建模和模型管理服务功能,提供数据管理、模型管理、模型训练、预测服务等核心能力。 2.数据管理:以数据为原料,提供结构化与非结构化数据的存储、版本化管理、协同标注等服务;具备智能化数据标注功能,支持图像、文本、视频、音频等多种数据类型的标注以及多模态的混合标注,并提供标注内容组件和题目组件; 3.模型管理:系统应具备协同模型开发、超参数搜索、模型评估、多模型比对等能力,通过模型仓库对模型资产进行版本化管理,实现模型的可复现,降低模型开发的门槛;模型管理应包括用户模型和模型仓库等。 4.模型训练:系统应实现 AI 开发运维的流程全自动化,通过自动化提升端到端 AI训练开发,包括可视化建模和交互式建模;可视化建模应可通过拖拉拽DAG图的方式,连接建模流程,进行参数配置,并训练模型,实现零代码开发人工智能服务;系统提供的算法组件包括但不限于:传统机器学习组件包括数据预处理、特征工程、统计分析、时间序列、文本分析及网络分析等算法组件;深度学习框架组件包括TensorFlow、Caffe、MXNet及PyTorch等深度学习框架;交互式建模应采用微服务架构,并集成开源JupyterLab组件,以插件化的形式进行深度开发,可进行Notebook Coding编写、交互式调试及运行,方便、快捷的满足研发需要。 5.预测服务:系统应可基于构建的业务模型实现预测服务,快速获得模型训练效果,应包括在线预测和离线预测功能;在线预测应可将用户的“模型服务”以 Web Server 的方式运行,并支持 HTTP 访问方式,提供预测功能;离线预测应可提供用户模型的预测任务能力,可以根据用户数据,启动单次、多次的定时跑批任务,来检测模型的实际效果。 |
2.2.6 技术支撑序号 | 指标项 | 指标要求 | 1 | 任务调度 | 1.任务调度:系统应具备任务调度功能,实现对已授权开发者在系统中创建的计算、查询、采集等各种任务的集中式统一管理,以达到对任务的可建、可控、可查及可追溯等的目的;系统应可实现基于主流任务管理组件进行工作流或者任务的分配和调度执行,应可通过拖拽将多个任务编排成任务流,使得多个任务在任务流中按照编排的顺序执行。 2.任务服务:系统应提供任务服务接口,实现任务的定义、编排和执行等功能。 3.资源配置:系统应具备资源配置功能,支持通过服务器文件、关系型数据、数据仓库和接口服务执行数据采集、治理、交换和计算等任务。 4.资源管理:具备资源管理功能,为第三方开发者获取接口服务授权的申请和审批等。 | 2 | 大数据集群管理 | 系统应具备大数据集群管理功能,应可采用Ambari运营管理工具来支撑整个大数据平台的稳定运行,应能实现界面化的创建大数据组件,自动化安装部署扩容,统一集中的配置管理以及大数据平台实时监控等功能。 | 3 | 资源监控 | 1.系统应具备机房监控功能,实现对机柜、机房能耗、机房环境等资源的监控功能,可与第三方动力环境监控厂商软件对接;能够对温湿度、烟感、防水、UPS、精密空调、视频、机柜容量统一管理。 2.系统应具备资源监控功能,实现对服务器上的进程应用、服务接口API、监测数通设备(如交换机、路由器、打印机)、文件、端口、日志、Docker容器、数据库、数据表等资源进行在线化监测,并支持Web SSH(堡垒机)、指令下发批量执行、告警信息推送(如邮件、钉钉、微信、短信等),包括但不限于监控概要、主机管理、进程管理、端口管理、文件防篡改、日志监控、Docker管理、数据源监控、数据表管理等功能。 3.系统应可通过集中监控,帮助运维部门和人员实现全天候自动检测,可以及时、快速发现故障,通过事件关联分析,结合问题管理,实现快速分析影响范围及定位故障根源、有效的预防或者自动修复故障,从而提升运维响应能力,变被动式管理为主动式运维。针对通过事件、变更无法解决的问题,设计问题管理流程,可以通过发起问题流程,寻求解决问题的办法。 4.系统应可提供系统运行情况实时、定期分析报表,并具有丰富的统计报表输出功能,满足系统管理人员订制生成日报、周报、月报等运营报告。包含故障类报表、性能类报表、资源类报表的统计分析功能。 | 4 | 统一身份认证 | 实现对农业农村大数据平台涉及到的所有用户进行统一维护管理,并通过统一授权功能实现针对不同访问权限要求,按角色、用户组不同维度授权管理。统一身份认证包括统一用户管理、统一授权管理及单点登录等功能。 |
2.2.7 共享交换在系统数据整合、梳理的基础上,以部门业务信息数据为基础,通过多种方式实现自治区横向单位涉农数据及自治区农业农村厅内部业务数据与新疆农业农村大数据平台的统一对接、交换、汇聚、清洗和转换,建立跨部门的“物理分散、逻辑集中”的数据共享交换中心,实现农业农村数据从分散管理到统一集中管理,实现跨部门、跨层级、跨应用的数据的端到端可达,并通过农业农村大数据平台提供统一的涉农信息共享交换服务。 序号 | 指标项 | 指标要求 | 1 | 服务管理平台 | 服务管理平台包含但不限于以下功能: 1.数据集管理:系统应提供数据集管理功能,能够对分散、异构数据源中的数据进行一定的整合处理,形成一个可以用于展示的数据表;用户应可根据添加或导入的数据源,创建需要的数据集,维护更新频率、是否共享、提供单位等属性,包括但不限于数据集的新增、修改、删除等功能,支持SQL 语句创建数据集和单表创建等数据集创建形式;系统应支持连接多种数据源,包括达梦、人大金仓、MySQL、SQL Server、Oracle、Hive、PostGIS等主流数据库。 2.服务管理:系统应具备服务管理功能,实现对服务的服务新增、编辑、删除、查询、发布、撤回等操作。 3.分组管理:系统应具备分组管理功能,实现数据集的自定义分组,用于将数据集分组管理,具备多级服务分组功能。 4.服务审核:系统具备服务审核功能,针对用户的服务订阅申请进行审核操作,支持多节点审核,主要审核的信息包括申请人、字段、维度、使用期限、用途等内容,审批方可以对使用期限进行修改。 5.服务监控:系统具备服务监控功能,提供服务监控和用户监控,便于运维监控人员监控数据服务使用情况,保障服务安全运行。 | 2 | 服务订阅平台 | 1.系统应提供服务订阅平台,通过平台可将农业农村业务部门数据资源编目数据发布至共享门户,相关用户通过门户按需申请涉农数据,防止共享数据在传输过程中完整性受到破坏; 2.共享目录:基于数据资源目录提供可公开的数据共享目录,用户可在订阅门户查询所需的共享目录组织结构及挂接的资源信息,可查看资源详情; 3.最新动态:提供最新动态和热门动态,最新动态可按照发布时间动态更新展示最新发布的数据,用户可实时查看最新的数据动态,可根据需求进行数据申请;热门动态可按照数据申请量对数据由高到低排行,展示数据申请量TOP10的数据,方便用户可实时查看热门数据动态,根据需求进行数据申请; 4.数据文件:提供Excel/Xml/CSV等文件格式的申请,各级用户订阅门户可展示农业农村大数据资源目录下可申请的数据资源,提供对本地区数据资源目录按照标准目录和主题分类进行资源查询,提供按照访问量、申请量、下载量、更新时间等排序,提供数据字段选择与数据维度的筛选,便于用户指定申请的数据项与数据范围; 4.数据接口:提供接口申请服务,各级订阅门户可展示农业农村大数据资源目录下可申请的数据接口,提供对本地区数据资源目录按照标准目录和主题分类进行资源查询,提供按照访问量、申请量、下载量、更新时间等排序,提供数据访问授权管理,用户申请必须通过认证后才能访问数据。提供数据字段选择,便于用户指定申请的数据项与数据范围; 5.个人中心:提供我的收藏、我的申请功能,显示用户收藏和申请的数据文件和数据接口,在收藏列表可进行取消收藏操作;申请列表可看到用户申请的数据接口审核状态,用户在接口使用有效期内进行接口调用与接口数据同步操作。 | 3 | 共享交换对接范围 | 1.包含农业农村部大数据平台以及其他65个涉农信息系统等; 2.厅本级自建信息系统; 3.自治区政务、自然资源厅、统计局、水利厅、气象局、乡村振兴局等政府部门相关信息系统; 4.其他涉农单位相关信息系统。 |
2.2.8 服务门户政务门户依托自治区农业农村厅协同办公系统进行升级改造成自治区农业农村厅政务门户,自治区农业农村政务门户是农业农村业务应用系统的统一登录窗口,是自治区各级农业农村管理部门完成OA协同办公、业务办理、政务管理的综合门户,政务管理门户可实现与自治区农业农村厅各业务处室、厅属各单位已建相关信息系统之间单点登录和应用集成、门户集成,是自治区农业农村业务数据的集中展现,支持按照地州、区县不同级别分级分权管理用户,以及种植、畜牧等不同业务处室用户设置不同的应用系统门户界面。 序号 | 功能模块 | 功能需求 | 1 | 栏目设计 | 根据自治区农业农村厅政务管理需求,对政务管理门户栏目进行设计,包含但不限于个人首页、代办消息、通知公告、政策文件、资料下载等栏目,并提供对用户账号密码统一管理功能,如账号名称、账号密码的管理和账号密码重置等功能。 | 2 | 应用导航 | 1.政务管理门户为各级管理部门用户提供统一登录应用系统的入口。自治区农业农村厅在用业务平台统一身份认证登录。 2.本项目各业务系统以及自治区农业农村厅在用的已有相关信息系统之间通过建立应用集成,实现应用系统单点登录;相关用户一次登录系统,即可访问权限内的相关应用。应用系统登录支持输入用户账号与密码、二维码、Ukey、数字证书、验证码双因子验证等方式进行登录。 | 3 | 协同办公 | 在政务管理门户中集成OA协同办公功能,通过与自治区农业农村厅已建OA办公系统对接,实现自治区农业农村厅内部人员方便快捷地共享信息及高效协同工作。 | 4 | 网上信访 | 在农业农村政务管理门户建设信访模块,整合通过多源渠道(如PC端、手机APP、微信等)接收和受理的群众信访诉求进行统一登记管理,实现农业农村信访的多渠道拓展,同时运用信息化手段进行分流、调度、转送、督办、反馈,最大程度地方便信访群众和相关业务部门。包含但不限于诉求查询、诉求分类、诉求调度、诉求预处理、信访件查询、信访件数据修改、监控预警与提醒、综合统计等功能。 |
服务门户本项目对现有集约化平台中的新疆维吾尔自治区农业农村厅官方门户进行升级改造,服务门户(新疆维吾尔自治区农业农村厅官方门户)是自治区农业农村工作宣传和展示、信息资讯、公共服务的统一窗口,为全区各类生产经营主体、农民、社会公众统一提供信息服务的综合平台。公共服务门户建设以农业农村对外综合服务信息数据为基础,将可开放的农业农村工作、农业生产及其他涉农信息资源推送到服务门户,为生产经营主体、农民及社会公众提供多种信息展示和公开查询等便民服务。 公共门户相关用户通过一次身份认证,即可访问权限内对外服务相关应用,主要功能包含服务栏目设计、应用系统导航,自治区农业农村厅在用平台统一身份认证登录等。 序号 | 功能模块 | 功能需求 | 1 | 栏目设计 | 根据自治区农业农村厅公共服务需求,对公共服务门户栏目进行设计,包含但不限于首页、要闻动态、政务公开、办事指南、互动交流、业务工作办理等。 | 2 | 应用导航 | 统一登录:提供生产经营主体及社会公众用户登录农业农村大数据平台对外服务应用的统一登录窗口 公共服务展示:将可开放的农业农村政务、生产及其他涉农信息资源推送到公共服务板块,为生产经营主体、农民以及社会公众提供农业新闻、法规宣传、农技宣传、品牌农业、市场价格、农业科研成果推广等内容。 公开服务查询:通过调用本项目“一张图”建设中相关板块,为有查询需求的企业、公众等提供可视化的查询功能。用户通过GIS地图直观的展现方式,展示就近农技培训机构、农贸交易市场、农业经营主体、投入品经营门店、农业项目等的基本信息、地理位置信息、分布情况等,可按机构名称、地址等进行搜索查询。 |
移动门户移动门户分为管理端和服务端,通过APP、微信公众号、小程序等为自治区各级农业农村部门提供有差异化的服务。 序号 | 功能模块 | 功能需求 | 1 | 移动端APP | 以移动APP为载体,通过统一展示、分项查看、全局查询、简单易用的方式,面向各级管理部门提供以关键指标数据展示、综合数据查询、GIS地图、业务提醒为重点的政务服务移动平台,实现农业农村工作可视化分析及动态展示,能够为用户随时随地动态掌握全局、及时发现问题、科学分析决策提供全方位支持;面向生产经营主体和社会公众用户提供数据采集、信息查询、政策法规宣传等服务,并为用户提供统一的登录授权认证。 1.管理端APP包含基础数据查询、重点工作办理、主题分析、GIS地图展示和业务办理提醒等功能。 2.服务端APP结合生产经营主体、社会公众的使用情景,主要提供登录认证、数据采集、信息查询和政策与法规宣传等功能。 | 2 | 微信公众号+小程序 | 微信公众号+小程序应能够完美支持app的各种功能,在微信内随用随开,不用下载,同时具有出色的使用体验,为用户提供便捷、丰富的消息推送、业务办理、内容订阅等服务。 |
2.3 新疆农业农村大数据“一张图”基于整合汇聚的自治区农业农村数据资源,将数据统一集成,资源合理规划,业务科学归并,对信息资源进行有效组织加工和处理,利用数据挖掘和展现技术将农业农村工作数据进行抽取提炼和分析挖掘,提供面向各级领导的数据辅助决策功能,包括农业农村不同领域数据展示,突出自治区农业农村重点工作成效和成果。利用GIS技术,结合专题数据,实现面向种植业信息化、畜牧业智能化、畜牧业智能化、渔业智慧化、新业态多元化等领域的辅助决策能力。 通过打造符合决策支持和数据直观性要求的决策分析和地图融合服务,发挥大数据及空间地理信息科学技术优势,实现查询统计、动态图表、分层钻取、多图聚合等功能,构建农业农村大数据“一张图”。 序号 | 指标项 | 指标要求 | 1 | 服务管理系统 | 提供大数据“一张图”服务管理系统,实现地图渲染、 服务发布、地图切片等功能,要求基于GeoServer 实现二次开发,通过服务的方式,面向网络 客户端提供GIS数据服务,能够将矢量数据、 栅格数据、高程数据等地理空间数据发布 成符合OGC标准的地理空间数据服务, 实现地理空间数据在浏览器端的查询、展示、 分析等功能,系统功能从模块化划分的角度可 分为数据、服务、瓦片缓存、安全等功能。 | 2 | 基础服务系统 | 基础服务系统包含但不限于以下功能: 1.图层管理:系统具备对图层目录配置及产品 推送记录管理功能,支持“一张图”基础应用 平台展示的基础图层及业务专题图层目录 结构进行设置、调整等相关操作;系统 应具备影像、矢量、高程等空间地理 数据的浏览,实现多图层的叠加浏览, 可以控制图层的可视性、图层的顺序, 对图层可视化样式、透明度等进行设置, 实现指定图层(位置)的快速定位、 坐标定位以及图层符号化配置等操作。 2.地图操作:系统应提供快速制图功能, 通过预先设定模板实现,对“一张图”组成 图层的显示内容、显示比例范围、渲染方式 和标注样式进行设置,形成地图制图模板, 用户只需导入数据源套合模板即可完成同 模板制图,并可将当前浏览图层或图层 分析结果输出为常用格式图片。 3.数据浏览:系统应能够实现各种地图 数据的加载、保存等操作,可以将自己 需要的显示区域和显示状态保存起来。 要求提供的工具具有放大、缩小、固定 比例放大、固定比例缩小、漫游、前一视图、 后一视图、当前显示比例、长度量算、 面积量算等功能。 4.综合查询:系统应能够实现对地图上 的要素进行点击查询或统计,可以展示 查询或统计到的信息和相关的图片等功能。 系统具备点查询、拉框查询属性查询等 多种数据查询方式。 5.空间分析:系统应提供地图分析功能, 可基于时空数据提供常见的缓冲区分析、 叠加分析和卷帘分析等空间分析;用户 可通过导入的项目范围、选择的专题数据、 输入分析条件等多种方式,查询分析出满足 要求的数据结果,并结合数据输出可视化的 数据成果;系统应可对所执行的叠加分析、 缓冲分析等地图分析任务进行管理,标示任务 状态包括执行完成、正在执行、执行出错等; 支持对执行完成的任务进行结果查看等。 | 3 | 一张图专题应用 | 1.种植业一张图:包含种植业基本情况 (种植业生产情况分析、种植结构统计分析、 种植区域情况分析、农作物苗情分析、土壤 墒情监测分析、产量评估分析)、特色产业 情况、灾害预警(气象灾害信息展示、自然 灾害监测预警展示、病虫害监测展示)等。 2.畜牧业一张图:充分利用新疆畜牧兽医 大数据平台链接,实时对全区畜牧产业产前、 产中、产后各链条、各环节进行动态监测展示, 包含畜牧业生产情况统计、畜禽养殖、标准化 示范场、畜禽屠宰加工、动物卫生监督、 畜牧兽医站等。 3.渔业一张图:包含渔业养殖、养殖水域 (养殖池塘、宜渔湖泊、坑塘、宜渔水库、 宜渔河沟等)、水生野生动物保护区、 涉渔水利工程、渔业经营主体、水产苗种 生产单位、水产品质量监管、渔业安全生产等。 4.种业一张图:包含新疆种业企业信息展示、 种子基础信息展示、业务系统整合展示等。 5.农机一张图:包含农机生产监测 (农机化发展分析、农机及驾驶人情况分析)、 农机生产管理(农机作业情况、跨区作业情况)、 农机补贴监测(购机补贴政策实施情况分析、 农机深松深耕作业补贴项目实施情况分析)等。 6.农经权一张图:包含新型农业经营主体 (新型农业经营主体查询、新型农业经营 主体统计分析、新型农业经营主体认证 备案及示范评级)、清产核资信息、土地 流转数据统计、土地抵押数据统计等。 7.农业产业化一张图:包含产业园区布局 规划、一二三产业融合、特色产业集群、 农垦产业等。 8.农业生态环保一张图:包含农业面源 污染分析展示、野生植物资源调查和 监测数据分析展示、秸秆利用成效分析展示、 农膜回收成效分析展示。 9.农业科教一张图:包含基层农技推广 体系建设情况、农业科技成果转化、 农业科技合作和关键技术攻关、自治区 高素质农民培育信息等。 10.农业重大项目一张图:包含项目地点、 项目推进建设情况、详情查看、投资信息展示、 项目推进信息展示等。 11.市场流通一张图:包含市场信息动态监测 分析、农产品价格走势、农产品流通展示等。 12.智慧农业一张图:包含环境数据展示、 视频数据展示、农业农村业务展示、 水肥一体化自动控制展示、构建农情监测体系等。 13.数据驾驶舱 1)辅助决策:数据驾驶舱的决策支撑 作用主要体现在通过数据驾驶舱建设实现 涉农部门、单位之间工作的数据化、 在线化,管理人员通过数据驾驶舱可以 快速掌握其关注工作的基本情况, 并可快速定制展示界面,为决策者提供 科学、真实、准确的数据支撑。以农业农村 数据为依据,融合数据分析、模型构建、 一张图展示等进行业务决策,达到帮助、 协助和辅助决策者的目的。通过建立种植业、 畜牧业、特色农产品等大数据分析模型, 以及土地信息、农业生态环境、质量追溯等 专项工作任务分析模型,为农业生产、 动物疫病防控、农产品质量安全等农业 农村工作决策提供科学的数据支持, 实现新时期农村社会治理及公共服务创新 的工作目标要求。 2)指挥调度:依托自治区农业农村 视频会议系统(可实现区、地、县各级 部门之间视频会议)、自治区农业农村厅 内部视频会议系统(实现十个办公区 之间的视频会议)、农业领域安全 生产视频调度平台、自治区农作物 病虫疫情监测信息调度管理平台进行 融合,通过GB28181-2016中RTSP、 onvif协议,将已建设视频监控、 视频会议、调度平台等视频信号 集成到数据驾驶舱进行展示, 可将整合到平台的前端视频信息 输入到GIS系统,在GIS地图上显示 出监控点的位置,并通过分布式调 度系统将整合视频监控信息在电子 地图界面上方便直观的调用和控制 前端监控的视频信息。 3)业务监管:随需调用各类 “一张图”场景,面向各类农业农村 业务应用,通过数据管理、监测配置、 预警配置、报表配置,满足业务监管要求。 4)统计分析:将各类统计分析数据 集成到数据驾驶舱,可在决策过程 中随需调用各类统计分析后的结果 数据并在大屏中进行展示,为决策者 提供充分的可参考的依据。 5)信息检索:通过直接检索、 间接检索、智能检索等多种信息检索 技术或方法,从数据库快速、准确检索 出用户所需要的信息。并根据检索模型 进行相应的排序计算方便用户进行搜索。 |
2.4新疆农业农村大数据“N个应用”2.4.1智慧填报认真落实中央、自治区“为基层减负”的工作要求,在农业农村部大数据平台填报统计系统基础上进行本地化升级,打造可随需而变和个性化定制的自治区农业农村智慧填报应用,实现采集报表、采集指标、采集范围、采集频度、采集周期等的动态管理和配置;建立覆盖区、地、县、乡、村五级的纵向数据填报制度,完善相关涉农数据填报、传输、共享机制,形成上下协同、运转高效、调度灵活的数据填报体系,为自治区农业农村厅基层用户提供信息填报、信息推送服务。同时,基于新疆农业农村厅数据填报现状,定制业务数据填报模板。系统支持对采集填报状态的监控、对已有数据统计查询、对已有数据填报的推送、对填报数据的审核校验等功能;支持PC端、手机APP端使用。智慧填报应用支持与IPv6技术适配。 序号 | 功能模块 | 功能需求 | 1 | 个人工作台 | 填报工作台为基层用户提供个性化工作台,包含代办信息管理、工作全局展示和动态公告。 1.待办信息管理:待办信息管理功能展示用户的待办列表信息,包括填报待办信息和审核待办信息。 2.工作全局展示:普通用户登录后在个人工作台页面显示当前采集工作全局进展情况和采集数据饱和度等信息。从而能够实现各级用户查看当前工作进展情况,并为管理部门进行数据填报工作考核提供依据。 3.动态公告:在个人工作台首页动态的滚动展示已经发布的公告,鼠标移动公告文字内容处,滚动效果停止,点击公告内容即可查看公告详情内容。。 | 2 | 基础代码管理 | 通过基础代码管理实现对基础元数据代码以及元数据类型的新增、编辑、删除、查询、展示、停用、启用等功能。 | 3 | 填报指标管理 | 填报指标管理可按照填报的业务进行详细的划分,将每个填报业务划分为多个指标进行填报,并对划分后的指标进行管理,包含但不限于对临时指标、历史指标、有效指标进行管理。 1.临时指标管理:主要对临时、未发布的指标进行管理,包括指标的新增、编辑、删除、查询、展示、发布、配置子指标、配置列表、查看等功能。 2.历史指标管理:主要管理历史发布的指标,支持历史指标的自动推送功能。新指标发布后,原来的新指标则变为历史指标,同一个业务的历史指标可以有多个,包括指标的复制、查询、列表展示、查看等功能。 3.有效指标管理:对发布生效的指标进行管理,同一个业务的有效指标只能存在一个,包括指标的复制、查询、列表展示、查看等功能。 | 4 | 定制报表管理 | 定制报表管理提供自定义报表功能,主要包括报表定义和报表设计。 1.报表定义:提供报表的添加、修改、删除、查询、预览填报表、生成物理表、上传审核汇总报表模版、查看报表审核汇总样式等功能。 2.报表设计:通过报表设计工具根据报表定义的横向和纵向指标生成展现的报表样式,支持可视化的报表设计界面,支持在浏览器直接设计。 | 5 | 填报任务管理 | 将需要填报的方案和填报单位、填报流程进行关联,包括但不限于业务的新增、编辑、查询、填报单位分配、列表数据展示、采集频率配置等功能。 1.可对填报方案名称、方案编码、方案描述、填报频率、操作频率、主题、方案类型等进行新增和编辑。 2.支持通过方案名称进行方案的快速查找。 3.支持对填报单位的批量分配和单独分配。 4.列表展示数据项包括但不限于业务名称、业务描述、主题、流程、填报单位、操作(编辑、选择流程、分配填报单位)等。 5.根据方案需求为每个方案提供灵活的采集频率配置功能,采集频率包括次、日、周、月、季度、半年、年等。 | 6 | 填报状态监控 | 对填报状态进行监控,包括填报进度监控和填报任务监控等。 1.填报进度监控:实现实时监控当前下已经下发的填报任务的整体进展情况,统计截止到当前时间需要填报的记录数、当前时间已经上报的记录数、正在审核的记录数、审核未通过的记录数以及已填报未上报的记录数。 2.填报任务监控:实时查看单个填报任务的上报情况。并可通过查询条件来查询具体某条采集任务的报送情况信息,查询条件包括但不限于业务名称、填报周期、填报单位、填报日期、填报状态等。 | 7 | 数据填报管理 | 提供填报数据的新增、修改、删除、详情查看、列表展示、数据计算、数据校验、数据上报、数据导入等功能。 1.新增、修改、删除的数据可在数据表单中实时同步。 2.已填报数据的列表展示功能,列表展示数据项是在表单管理中动态配置的。如果用户需要修改列表展示的数据项,则需要管理人员在表单管理中进行表单列表数据项的修改。 3.为用户提供数据计算功能,自动推送系统计算结果,提高用户的数据填报速度,减少由于手工计算导致的数据错误,确保数据的准确性。 4.为用户提供数据校验功能,以确保数据的录入的准确性,数据校验可提供是否必填、是否数据错误、是否数字、是否正整数、电话号码、汉字、身份证号码、日期格式、是否英文字母等多种形式的数据校验功能。 5.为用户提供已填报方案数据的上报功能。方案上报功能只能是下级用户提交给上级用户。 6.为用户提供通过表格类型进行数据导入的功能,为用户提供方案导入模板,以规范用户输入数据的规范性;为用户提供数据项填报的样例模板,以提高用户的填报工作效率。 7.针对每个采集方案中的所有变更信息进行实时动态跟踪记录,方便管理人员查看数据变更前、变更后的数据变化值及修改数据的人员和修改时间,为填报数据的动态化管理分析提供科学依据。数据足迹涉及信息的创建、变更及删除三个层面的内容。可对数据足迹信息进行展示,展示范围包含操作人、操作时间、变更项、变更值及原有值等信息。 8.各级用户填报的数据需要提交到更高级别的用户进行审核,本级农业农村部门负责对辖区内下级农业农村部门上报的数据进行审核,按地州、区县、乡镇、村队以及重点经营主体等不同填报用户类型分别设定不同的填报审核流程。 9.提供统计分析报表的导出功能,可以根据不同的查询条件对区、地、县、乡、村五级用户提供不同的查询条件查询和对查询结果的导出,方便各级用户的操作,导出格式支持excel、wps等。 | 8 | 种植业定制报送板块 | 针对种植业采集特殊需求进行填报功能的定制开发。包含种植业采集指标设计、采集流程设计、采集周期设计、填报监控设计、统计分析、数据审核校验等。 | 9 | 重点工作任务管理板块 | 通过对自治区农业农村厅各处室及厅属各单位的重点工作任务信息以及工作汇报信息的管理,及时掌握自治区农业农村厅承担的自治区政府重点工作、以及农业农村部公布的6大项、47个小项重点工作的任务动态和工作进展,对工作任务执行情况进行动态监测并及时催办。主要包括工作任务管理、工作进度管理、工作汇报管理、工作验收管理、任务统计分析等功能模块。 | 10 | IPv6应用 | 实现智慧填报应用的IPv6出口侧试点建设。 |
2.4.2项目管理根据《自治区农业农村厅农业项目管理办法》(试行),建设项目管理应用,项目管理应用在农业农村部大数据平台农业建设项目管理系统基础上进行本地化升级。项目管理应用是针对厅、地、县三级农业农村部门使用的应用,适用于农业农村厅管理的中央预算内投资、中央及自治区财政相关转移支付资金投入农业项目的组织、投资、实施、监督和绩效管理应用,其应用成果为“农业重大项目一张图”提供基础数据支撑。 序号 | 功能模块 | 功能需求 | 1 | 政策发布 | 政策发布应能够与政务管理门户集成,将相关政策发布内容通过政务管理门户进行展示。政策发布展示内容包括但不限于政策制度、发展目标、申报指南、年度投资计划等内容。 | 2 | 信息公示 | 对发布的项目进行公示,主要包含项目公示牌、办理结果信息公示、公告公示、意见建议等内容。 | 3 | 项目储备库 | 项目储备库提供储备项目申报、储备项目申报审核、储备项目统计查询、储备项目分类管理、。 1.储备项目申报 各地(州、市)农业农村局根据中央及自治区农业农村政策、农业农村现代化规划及各类行业规划,结合本地区农业农村发展和项目建设实际情况,提出拟入库项目,通过项目申报模块对项目进行申报。项目申报模块可提供项目基本信息的在线填报,以及项目申报材料的上传和下载功能。 2.储备项目申报审核 自治区农业农村厅各对口业务处室对各地上报的项目进行初审、筛选和排序后,组织专家对申请入库的项目进行评审,综合评价后确定入库项目。申报项目审核模块可查询和导出已申报项目的列表和项目基本信息,提供在线填写初审意见、评审意见等,初审通过后方可对项目进行评审,评审通过后完成项目审核进行项目入库操作。 3.储备项目统计查询 支持按照项目名称、项目类别、申报单位、负责人等条件对入库项目进行组合查询,功能包括查询、导出。按照年度统计新疆维吾尔自治区涉农方面的项目储备的数量。按照项目储备的类别进行统计项目的数量。 4.储备项目分类管理 按照年度投资计划对入库项目按照农业基本项目、财政专项项目和多元化投资项目进行分类管理,分类可包含农业基本项目、财政专项项目、多元化投资项目,可根据项目单位(法人)、项目管理单位、项目审批单位、项目审核单位角色划分。 5.储备项目文本管理 对入库项目文本进行管理,包含可行性研究报告及批复和项目实施方案及批复。提供对项目文本的上传、下载、在线浏览等功能。 | 4 | 项目前期管理 | 对项目前期工作进行管理,项目前期工作包含编制、审批项目可行性研究报告或实施方案等。建立相应专家咨询和评审机制,提升可研报告、初步设计和实施方案的编制水平,确保项目实施具有可操作性、符合地方实际。项目前期管理功能包含项目分类管理、项目上报管理、项目审批管理、项目审查管理等。 | 5 | 项目实施管理 | 针对项目实施过程进行管理,包含但不限于项目进度管理、项目合同管理、项目资金管理、项目绩效目标管理、项目变更管理等功能。 | 6 | 项目验收管理 | 对项目验收过程进行管理,项目完成后申请项目验收,提交项目成果、文档资料和项目总结报告等,相关管理人员对项目验收通过后,项目的所有文档将进入项目档案库进行永久的保存,并不请允许再修改。 | 7 | 项目档案管理 | 项目档案管理可按项目文件资料、招投标档案、施工档案、监理档案、合同档案、财务档案及相关报告等栏目整理归档,提供已归档项目资料的查询、统计功能。 | 8 | 项目服务管理 | 可根据项目服务单位权限,提供信息录入、审核、统计、分析、预警等功能,支持在线填报和附件(流式、版式、图片)上传和下载。 | 9 | 固定资产管理 | 针对种植业采集特殊需求进行填报功能的定制开发。包含种植业采集指标设计、采集流程设计、采集周期设计、填报监控设计、统计分析、数据审核校验等。 | 10 | 绩效考核管理 | 项目管理单位、项目审批单位对项目实施过程和资金使用情况分别进行考核,搭建绩效考核指标体系及预警模型。包含但不限于绩效指标管理、绩效运行监控预警、绩效评价等功能。 | 11 | 项目评价 | 项目审批单位、第三方评价机构对项目实施成效进行评估评价,为项目审批单位、第三方评价机构提供信息录入、统计、分析、状态、预警等功能,支持在线填报和附件(流式、版式、图片)上传和下载。 |
2.4.3人才库管理自治区农业农村人才库是指农业农村厅及下属单位涉农人才信息的综合,通过人才库管理应用实现对农业人才信息的录入、抽取、审核等。 序号 | 功能模块 | 功能需求 | 1 | 人才信息录入 | 实现多种方式录入人才信息,可通过文件导入、系统对接、在线录入等方式进行人才信息的录入,可对同名人才信息的查重、删除、增加功能。 | 2 | 信息公示 | 对发布的项目进行公示,主要包含项目公示牌、办理结果信息公示、公告公示、意见建议等内容。 | 3 | 人才信息管理 | 对自治区农业农村厅人才库中人才信息进行管理,包括姓名、性别、出生日期、职称、最高学历、专业水平、科研成果、专利获取、基金资助、人论著发表、留学经历等信息。 | 4 | 人才库管理 | 实现对人才库数据的操作和维护,包含对农业农村人才的新增、修改、删除等操作,提供对农业农村人才的搜索、基本信息查看功能。 | 5 | 人才抽取 | 按照预先定制的条件随机地抽取人才,实现对抽取结果的保存、报表打印等功能,可定义随机抽取算法、抽取策略和屏蔽策略,可临时指定或抽取备用专家。 | 6 | 通知管理 | 可通过短信、语音等方式将抽取结果通知到相关专家。 | 7 | 查询统计 | 支持多条件的查询,包括按照姓名、性别、单位、职称、最高学历等进行查询,并可按照专家所属领域的类型进行数量统计,以及统计每年人才库中人员的总数量。 |
2.4.4资料库管理农业农村资料库是指跟自治区农业农村厅及下属单位涉农资料信息的综合,依据电子资料管理及利用特点,提供资料库目录、资料上传、资料查询、资料下载和资料库管理等功能。在农业农村资料库中的资料文件类型包括文本、图片和音视频文件等。 序号 | 功能模块 | 功能需求 | 1 | 资料库目录 | 资料的分类目录分类可参照农业农村部官方网站中数据专栏进行分类,包含统计资料、农业综合资料、农业生产资料、农业市场资料、科技与推广资料、资源环境资料、分析报告资料、全球农业资料和其他资料等。 | 2 | 资料 上传 | 对自治区农业农村厅及厅属各单位用户通过资料上传功能对新增资料信息进行上传,上传包含单个文件或批量上传功能。依据资料目录规则,支持批量上传、同名资料的查重、删除、增加等功能;可对上传资料进行审核,对资料中涉及的敏感词汇、人名等进行甄别,不允许该类资料的上传。 | 3 | 资料 查询 | 自治区农业农村厅及厅属各单位用户能够对资料库中的资料进行多条件查询,可按照资料名称、上传日期、资料类别等分别进行查询。 | 4 | 资料 下载 | 自治区农业农村厅及厅属各单位用户能够对资料库中的资料进行本地下载。 | 5 | 资料库管理 | 1.资料接入:资料接入的来源主要为农业农村部有关新疆地区的农业农村资料、自治区农业农村厅及厅属各单位的涉农资料。支持将资料信息按照对应的资料目录通过接口的方式直接引入,上传资料时支持同名资料的查重、删除、增加等功能。 2.资料查重:自治区农业农村厅及厅属各单位能够对照资料的名称进行查重和标记。 3.资料销毁:自治区农业农村厅及下属单位能够对本单位上传错误的资料进行删除。 4.资料找回:自治区农业农村厅及厅属各单位能够对于误删除的资料进行资料信息的还原。 5.资料统计:自治区农业农村厅及下属单位能够按照资料的类型统计用户资料的下载数量,以及资料库中资料的总数量等。 |
2.5 新疆农业农村大数据平台技术服务序号 | 服务项 | 服务内容 | 1 | 数据资源目录梳理服务 | 按照国家农业农村部和本项目数据 规范要求,对自治区农业农村厅 所拥有的数据资源进行系统性 梳理,形成新疆农业农村数据资源目录。 | 2 | 数据治理服务 | 1.数据调研:对自治区农业农村厅 各业务系统进行系统的调研, 摸清各业务系统数据家底情况, 了解各业务系统数据分布情况, 便于对各业务系统的数据资源目 录进行梳理。数据调研应包含但 不限于自治区农业农村厅正在使用 的国家农业农村部65个业务系统和 自建的20个业务系统的数据资源 情况,应涵盖新疆农业农村大数据 平台信息资源规范的全部内容。 2.数据清洗:通过数据治理模块 对所有数据进行分析,对有数据 质量问题的数据,进行清洗, 保证数据一致性和缺失值;数据无 效值的处理;对于数据缺失值的 处理(赋默认值、剔除、数据修正) ;根据不同的表字段开发出相应的 数据清洗任务,并进行关联;通过 SQL语句对数据进行清洗加工。 3.数据标准化处理:根据标准数据 元素和字典对接入至数据治理系统 中的数据进行标准化;通过智能 算法建立表字段与数据元素的自动 关联匹配;对数据元素进行版本化 管理,以便可以根据需求进行变更; 配置源数据字典与标准数据字典的 映射关系;建立表字段与数据元素的 关联关系。 4.数据比对、处理:源数据接入至 数据治理系统中的数据量对比, 分析在数据接入时是否有数据缺失; 指标数据对比,相同的指标值应该相同; 不同分层之间的数据条数、格式对比; 对重复的数据进行剔除,保证数据 唯一性,减少数据冗余;对全表字段 做Group by消除重复数据;对问题 数据进行保存,并把保存下来的 数据反馈至各源业务系统负责部门; 对有问题的数据进行修正,如对 主键为空的数据进行修正;对有问题 的数据进行修改,可采用手工修正 与程序修改相结合方式。 5.数据模型服务:根据业务要求开发 逻辑模型;根据业务要求开发物理模型; 模型的修改和删除;数据模型的优化服务, 按业务需求对数据模型分析,优化数据 分析速度。 6.数据库建仓:农业农村厅涉农 原始数据层、数据仓库层、 数据集市层、数据算法模型库/ 标签库的数据建仓服务。 | 3 | 数据分析服务 | 提供数据模型分析服务,建立 农业宏观分析模型、农业产业 市场监测分析、农机设施分析 模型等模型,为农业农村厅各处室、 单位提供数据模型研究分析能力支撑。 1.农业宏观分析模型:整合区、地、县、 乡镇、村各级涉农资源,汇聚了农业 宏观经济数据,如:农作物总播种面积、 农林牧副渔总产值、农村居民人均 纯收入等建立宏观数据分析模型, 业务应用及数据分析,辅助宏观决策。 2.农业产业市场监测分析模型:农业 产业市场监测分析主要利用市场流通、 生产等环节建立数据集,通过数据模型, 充分考虑生产对市场的供给能力以及 市场需求量对生产力的影响。 3.农机设施分析模型:通过对农机 设施数据建立分析模型,掌控农村 经营历年来的数据,整理分析农机 的投入使用和发展的现状及趋势, 从农机的发展水平、农机监理、 购机补贴、服务主体等角度入手 分析农机的发展、日常运作等的情况。 | 4 | 数据上图服务 | 通过采用空间地理信息科学技术, 结合查询统计、动态图表、分层钻取、 多图聚合等技术手段,实现与非 空间的农业专业信息和基础地理 信息数据进行空间化关联,并通过 数据统一集成、资源合理规划、 业务科学归并和大数据建模分析等 进行有效地组织加工和业务化处理, 在地图上以渲染、画点、画带等形式 展示各类农业资源和农业生产情况, 全面展现新疆农业农村业务数据, 为各级领导精准掌握新疆农业农村 发展各项政策措施的落实情况提供可 视化数据支撑,为自治区农业农村厅 决策者提供透明化的管理手段和决策依据。 1.地理信息空间化服务: 1)地块信息空间化是实现农业 生产经营基础信息(人-地-产物) 管理的重要抓手和依据,为农业 农村一张图、业务应用提供基础 图层支撑。地块信息空间化通过 采用深度学习技术,利用高分辨 率卫星的遥感影像,自动识别地块 的天然分界线,对其进行精准划分。 通过地块的测算对土地的实际属性、 规划范围及面积进行精确确定,为 农业的管理提供详实的地块信息。地块 划分满足如下技术指标:农田数据区域 层级要求划分为自治区级、地州级、 区县级、乡镇级、村级、地块级。 2)以现有土地确权或者其他途径获取 土地矢量数据和影像图为基础, 对服务范围划定区域的耕地进行 图层与地块信息整合(农业农村厅 已有的土地信息数据:地块承包 租赁信息、地块种植信息、项目信息等) ,地块信息要详细到各承包户所承包的 地块。本项目仅针对自治区某县级 地区试点制作地块信息。 2.主体信息空间化服务: 主体信息空间化主要是将数据库 中涉农主体领域的数据进行集成 整合和科学归并,然后采用大数据 建模技术进行高效分析,并根据实际 需要基于信息资源目录进行数据分析 结果展示,通过资源目录为用户 提供分析结果下钻查询展示、地图 与图表联动分析展示、成效指数分析 展示等大数据分析展示手段,从而为 决策者提供不同维度的分析结果展示 和决策数据支撑。 3.统计信息空间化服务: 统计信息空间化主要是将数据库中 涉农统计数据和业务报表数据进行 集成整合和科学归并,便于采用大 数据建模技术进行高效分析,并根据 实际需要基于信息资源目录进行数据 分析结果展示,通过资源目录为用户 提供分析结果下钻查询展示、地图与 图表联动分析展示、成效指数分析展示 等大数据分析展示手段,从而为领导 提供不同维度的分析结果展示和决策 数据支撑。 4.服务范围:根据5.3节相关内容和 要求完成12张新疆农业农村“一张图” 展示及数据驾驶舱建设。 |
|