Research on the Construction of Agricultural Big Data Information Collection Platform

doi:10.11924/j.issn.1000-6850.casb2021-0245

Abstract

Abstract:

Agricultural big data has become an important means to promote agricultural transformation and upgrading and improve production decision-making. Based on the comprehensive analysis of the significance and objectives of the construction of agricultural big data information collection platform, this paper puts forward the construction idea and overall framework of agricultural big data information collection platform, describes the information collection mode and content mode of the platform, and designs the core functions of the system. The study aims to promote the construction of agricultural information resource system by building agricultural big data information collection platform, and lay the foundation for the development and application of agricultural big data industry.

Key words: agricultural big data, information collection, collection content, function design

CLC Number:

F323
S126

LI Tingting, MA Juanjuan, ZHANG Jianhua. Research on the Construction of Agricultural Big Data Information Collection Platform[J]. Chinese Agricultural Science Bulletin, 2022, 38(3): 158-164.

Figures/Tables 3

References 11

[1]	国务院. 国务院关于印发促进大数据发展行动纲要的通知[EB/OL]. http://www.gov.cn/zhengce/content/2015-09/05/content_10137.htm , 2015.
[2]	郭雷风. 面向农业领域的大数据关键技术研究[D]. 北京:中国农业科学院, 2018.
[3]	卢文林, 李秀峰. 全国基层农技推广信息化平台农技咨询数据库的构建[J]. 中国科技成果, 2013(2):38-39.
[4]	卢俊玮, 高志强. 稻谷全产业链大数据采集平台的研发与应用[J]. 农业展望, 2019(6):55-59,66.
[5]	温孚江, 宋长青. 农业大数据应用、研究与展望[J]. 农业网络信息, 2017(5):31-36.
[6]	张保岩, 赵丽华, 辛北军. 天津市“三农”大数据平台构建[J]. 江苏农业科学, 2020, 48(17):245-249.
[7]	陶佰睿, 李春辉, 苗凤娟, 等. 基于云端的农业大数据采集与管理系统浅析[J]. 工业和信息化教育, 2016(9):81-89.
[8]	孙洪民. 基于大数据的智慧农业物联网系统研究[J]. 南方农机, 2019, 50(23):83.
[9]	宋长青, 温孚江, 李俊清, 等. 农业大数据研究应用进展与展望[J]. 农业与技术, 2018(22):153-156.
[10]	孙忠富, 杜克明, 郑飞翔, 等. 大数据在智慧农业中研究与应用展望[J]. 中国农业科技导报, 2013, 15(6):63-71.
[11]	王光武, 周纯玉, 贺宝华. 基于辽宁12316 农业大数据采集体系的研究[J]. 安徽电子信息职业技术学院学报, 2020(3):13-19.

序号	接口形式	接口说明
1	WebService接口	Webservice是一个web的应用程序,具有独立性、低耦合性等特征。Webservice是使用当前广泛应用的XML标准来描述、发布、协调和配置各种相关应用程序,是可以用作开发分布式,具有互操作性能的应用程序。Webservice技术,将运行在不同机器上的不同应用在不用依靠附加的、专门的三方、硬件条件下,即可实现相互之间交换数据或集成。
2	JDBC接口	JDBC是一种用于执行SQL语句的JavaAPI,它可以为当前市面上的多种关系型数据库提供统一的访问,它是由一组用Java语言编写的类和接口组成。
3	MapService接口	MapService接口是一套基于JavaScript全新升级的应用程序接口,为开发者提供了快速调用在线地理信息服务的通道,包括快速创建地图、调用地图、POI搜索以及在地图上添加覆盖物等服务。
4	中间库接口	中间库接口即指源系统提供中间库,并保障中间库与相关业务系统数据一致。中间库接口按照业务层面的需求和相关数据的特征特性,分为全量抽取、增量抽取,新增抽取则作为增量抽取的一种特例。为保证对源系统数据提供方的压力最小化,应在源系统网络环境中设置前置机,用于中间库的部署。
5	文件接口	数据提供方抽取业务系统数据,利用数据生成程序生成接口文件,然后放置到数据提供方接口服务器上。数据接收方从数据提供方接口服务器得到接口文件,并进行校验后,加载至农业大数据信息采集平台。
6	非结构化数据	可以通过文件目录的形式访问专题文件、图片、视频、电子文档等非结构化数据。

序号	接口形式	接口说明
1	WebService接口	Webservice是一个web的应用程序,具有独立性、低耦合性等特征。Webservice是使用当前广泛应用的XML标准来描述、发布、协调和配置各种相关应用程序,是可以用作开发分布式,具有互操作性能的应用程序。Webservice技术,将运行在不同机器上的不同应用在不用依靠附加的、专门的三方、硬件条件下,即可实现相互之间交换数据或集成。
2	JDBC接口	JDBC是一种用于执行SQL语句的JavaAPI,它可以为当前市面上的多种关系型数据库提供统一的访问,它是由一组用Java语言编写的类和接口组成。
3	MapService接口	MapService接口是一套基于JavaScript全新升级的应用程序接口,为开发者提供了快速调用在线地理信息服务的通道,包括快速创建地图、调用地图、POI搜索以及在地图上添加覆盖物等服务。
4	中间库接口	中间库接口即指源系统提供中间库,并保障中间库与相关业务系统数据一致。中间库接口按照业务层面的需求和相关数据的特征特性,分为全量抽取、增量抽取,新增抽取则作为增量抽取的一种特例。为保证对源系统数据提供方的压力最小化,应在源系统网络环境中设置前置机,用于中间库的部署。
5	文件接口	数据提供方抽取业务系统数据,利用数据生成程序生成接口文件,然后放置到数据提供方接口服务器上。数据接收方从数据提供方接口服务器得到接口文件,并进行校验后,加载至农业大数据信息采集平台。
6	非结构化数据	可以通过文件目录的形式访问专题文件、图片、视频、电子文档等非结构化数据。

序号	功能模块	功能说明
1	基础代码管理	基础代码管理包括基础代码分类和管理。基础代码分类管理包括对代码分类的增删改查以及停用/启用。基础代码管理包括基础代码的添加、启用/停用、修改、删除以及查询。
2	采集指标管理	指标管理包括指标分类管理和指标维护。
		（1）指标分类管理：是对指标按照某种规则进行分类,便于后期按分类来进行统计分析,该功能主要包括指标分类的添加、修改以及查询。另外指标分类可以添加多级。
		（2）指标维护：包括指标的增删改查等功能。
3	报表管理	报表管理包括定义和设计两块。报表定义指提供对于报表的增删改查、以及后期预览填报时期报表和生成的物理表,后续作为上传审核汇总的报表模版、查看各类报表样式等功能。报表设计功能主要是通过报表设计工具,将指标分为横纵向进行展现的报表样式,报表设计工具为用户提供一个可视化的设计界面,B/S架构,便利性强。
4	采集方案管理	采集方案管理包括采集范围管理、指标、表单与校验规则、方案、任务下发等功能。
5	采集状态监控	系统监控包括监控采集进度和任务两个模块。
		（1）监控采集进度：实时监控系统已经下发的采集任务的整体进展情况,统计内容包括采集任务已经填报、上报、正在办理、未办理以及未上报等相关基点数。同时对所有未上报的采集区（人）等进行催报,催报内容的发送方式根据采集方案中定义的类型来选择。
		（2）监控采集任务：实时查看单个采集任务的执行情况,通过方案名称、填报期别、填报单位、填报级别、填报日期、填报状态等查询条件,查询采集任务的报送情况,其中方案名称可以支撑模糊查询。
6	个人工作台	个人工作台包括待办工作、消息查看等功能。
7	填报管理	填报功能包括数据层面上的填写、计算校验、自审、上报、导入导出等功能。
8	查询与统计	查询与统计功能包括对原始填报内容查询、上报内容的统计查询、以及汇总后内容查询,同时包含高级、绩效查询和数据共享管理等功能。
9	数据导出	数据导出功能主要是基于报表工具中的数据导出功能而设计,可以导出文件类型有Excel、Word、PDF等。
10	数据打印	数据打印是基于报表工具中数据打印功能而设计,能提供常见的打印预览、直接打印等功能。

序号	功能模块	功能说明
1	基础代码管理	基础代码管理包括基础代码分类和管理。基础代码分类管理包括对代码分类的增删改查以及停用/启用。基础代码管理包括基础代码的添加、启用/停用、修改、删除以及查询。
2	采集指标管理	指标管理包括指标分类管理和指标维护。
		（1）指标分类管理：是对指标按照某种规则进行分类,便于后期按分类来进行统计分析,该功能主要包括指标分类的添加、修改以及查询。另外指标分类可以添加多级。
		（2）指标维护：包括指标的增删改查等功能。
3	报表管理	报表管理包括定义和设计两块。报表定义指提供对于报表的增删改查、以及后期预览填报时期报表和生成的物理表,后续作为上传审核汇总的报表模版、查看各类报表样式等功能。报表设计功能主要是通过报表设计工具,将指标分为横纵向进行展现的报表样式,报表设计工具为用户提供一个可视化的设计界面,B/S架构,便利性强。
4	采集方案管理	采集方案管理包括采集范围管理、指标、表单与校验规则、方案、任务下发等功能。
5	采集状态监控	系统监控包括监控采集进度和任务两个模块。
		（1）监控采集进度：实时监控系统已经下发的采集任务的整体进展情况,统计内容包括采集任务已经填报、上报、正在办理、未办理以及未上报等相关基点数。同时对所有未上报的采集区（人）等进行催报,催报内容的发送方式根据采集方案中定义的类型来选择。
		（2）监控采集任务：实时查看单个采集任务的执行情况,通过方案名称、填报期别、填报单位、填报级别、填报日期、填报状态等查询条件,查询采集任务的报送情况,其中方案名称可以支撑模糊查询。
6	个人工作台	个人工作台包括待办工作、消息查看等功能。
7	填报管理	填报功能包括数据层面上的填写、计算校验、自审、上报、导入导出等功能。
8	查询与统计	查询与统计功能包括对原始填报内容查询、上报内容的统计查询、以及汇总后内容查询,同时包含高级、绩效查询和数据共享管理等功能。
9	数据导出	数据导出功能主要是基于报表工具中的数据导出功能而设计,可以导出文件类型有Excel、Word、PDF等。
10	数据打印	数据打印是基于报表工具中数据打印功能而设计,能提供常见的打印预览、直接打印等功能。