农业大数据信息采集平台建设研究

doi:10.11924/j.issn.1000-6850.casb2021-0245

中国农学通报 ›› 2022, Vol. 38 ›› Issue (3): 158-164.doi: 10.11924/j.issn.1000-6850.casb2021-0245

所属专题：现代农业发展与乡村振兴；智慧农业；数字乡村

• 农业信息·科技教育 • 上一篇

农业大数据信息采集平台建设研究

李婷婷¹(), 马娟娟², 张建华³()

¹农业农村部食物与营养发展研究所,北京 100081
²北京亿信华辰软件有限责任公司,北京100096
³中国农业科学院农业信息研究所/农业农村部农业大数据重点实验室,北京 100081

收稿日期:2021-03-10 修回日期:2021-06-03 出版日期:2022-01-25 发布日期:2022-02-25
通讯作者: 张建华
作者简介:李婷婷,女,1987年出生,山东潍坊人,助理研究员,硕士,主要从事食物营养与发展研究。通信地址：100081 北京市海淀区中关村南大街12号中国农业科学院8号楼,Tel：010-82105306,E-mail： litingting@caas.cn。
基金资助:
国家自然科学基金“复杂运动场景下棉花病害多模态视觉检测及严重程度评估研究”(31971792);公益性科研院所基本科研业务费专项“农业物联网设备研发及对农业无线传感网络方法的研究”(JBYW-AII-2020-07)

Research on the Construction of Agricultural Big Data Information Collection Platform

LI Tingting¹(), MA Juanjuan², ZHANG Jianhua³()

¹Institute of Food and Nutrition Development, Ministry of Agriculture and Rural Affairs, Beijing 100081
²Beijing Esensoft Corporation Limited, Beijing 100096
³Institute of Agricultural Information of CAAS/Key Lab of Agricultural Big Data, Ministry of Agriculture and Rural Affairs, Beijing 100081

Received:2021-03-10 Revised:2021-06-03 Online:2022-01-25 Published:2022-02-25
Contact: ZHANG Jianhua

摘要/Abstract

摘要：

农业大数据已成为推动农业转型升级,提高生产决策的重要手段。本研究在充分分析农业大数据信息采集平台建设意义与目标的基础上,提出了农业大数据信息采集平台的建设思路以及整体框架,描述了平台采集的信息方式、采集内容方式,并设计了系统的核心功能,试图通过搭建农业大数据信息采集平台,推动农业相关信息资源体系建设,为农业大数据产业发展应用奠定基础。

关键词: 农业大数据, 信息采集, 采集内容, 功能设计

Abstract:

Agricultural big data has become an important means to promote agricultural transformation and upgrading and improve production decision-making. Based on the comprehensive analysis of the significance and objectives of the construction of agricultural big data information collection platform, this paper puts forward the construction idea and overall framework of agricultural big data information collection platform, describes the information collection mode and content mode of the platform, and designs the core functions of the system. The study aims to promote the construction of agricultural information resource system by building agricultural big data information collection platform, and lay the foundation for the development and application of agricultural big data industry.

Key words: agricultural big data, information collection, collection content, function design

中图分类号:

F323
S126

李婷婷, 马娟娟, 张建华. 农业大数据信息采集平台建设研究[J]. 中国农学通报, 2022, 38(3): 158-164.

LI Tingting, MA Juanjuan, ZHANG Jianhua. Research on the Construction of Agricultural Big Data Information Collection Platform[J]. Chinese Agricultural Science Bulletin, 2022, 38(3): 158-164.

图/表 3

参考文献 11

[1]	国务院. 国务院关于印发促进大数据发展行动纲要的通知[EB/OL]. http://www.gov.cn/zhengce/content/2015-09/05/content_10137.htm , 2015.
[2]	郭雷风. 面向农业领域的大数据关键技术研究[D]. 北京:中国农业科学院, 2018.
[3]	卢文林, 李秀峰. 全国基层农技推广信息化平台农技咨询数据库的构建[J]. 中国科技成果, 2013(2):38-39.
[4]	卢俊玮, 高志强. 稻谷全产业链大数据采集平台的研发与应用[J]. 农业展望, 2019(6):55-59,66.
[5]	温孚江, 宋长青. 农业大数据应用、研究与展望[J]. 农业网络信息, 2017(5):31-36.
[6]	张保岩, 赵丽华, 辛北军. 天津市“三农”大数据平台构建[J]. 江苏农业科学, 2020, 48(17):245-249.
[7]	陶佰睿, 李春辉, 苗凤娟, 等. 基于云端的农业大数据采集与管理系统浅析[J]. 工业和信息化教育, 2016(9):81-89.
[8]	孙洪民. 基于大数据的智慧农业物联网系统研究[J]. 南方农机, 2019, 50(23):83.
[9]	宋长青, 温孚江, 李俊清, 等. 农业大数据研究应用进展与展望[J]. 农业与技术, 2018(22):153-156.
[10]	孙忠富, 杜克明, 郑飞翔, 等. 大数据在智慧农业中研究与应用展望[J]. 中国农业科技导报, 2013, 15(6):63-71.
[11]	王光武, 周纯玉, 贺宝华. 基于辽宁12316 农业大数据采集体系的研究[J]. 安徽电子信息职业技术学院学报, 2020(3):13-19.

序号	接口形式	接口说明
1	WebService接口	Webservice是一个web的应用程序,具有独立性、低耦合性等特征。Webservice是使用当前广泛应用的XML标准来描述、发布、协调和配置各种相关应用程序,是可以用作开发分布式,具有互操作性能的应用程序。Webservice技术,将运行在不同机器上的不同应用在不用依靠附加的、专门的三方、硬件条件下,即可实现相互之间交换数据或集成。
2	JDBC接口	JDBC是一种用于执行SQL语句的JavaAPI,它可以为当前市面上的多种关系型数据库提供统一的访问,它是由一组用Java语言编写的类和接口组成。
3	MapService接口	MapService接口是一套基于JavaScript全新升级的应用程序接口,为开发者提供了快速调用在线地理信息服务的通道,包括快速创建地图、调用地图、POI搜索以及在地图上添加覆盖物等服务。
4	中间库接口	中间库接口即指源系统提供中间库,并保障中间库与相关业务系统数据一致。中间库接口按照业务层面的需求和相关数据的特征特性,分为全量抽取、增量抽取,新增抽取则作为增量抽取的一种特例。为保证对源系统数据提供方的压力最小化,应在源系统网络环境中设置前置机,用于中间库的部署。
5	文件接口	数据提供方抽取业务系统数据,利用数据生成程序生成接口文件,然后放置到数据提供方接口服务器上。数据接收方从数据提供方接口服务器得到接口文件,并进行校验后,加载至农业大数据信息采集平台。
6	非结构化数据	可以通过文件目录的形式访问专题文件、图片、视频、电子文档等非结构化数据。

序号	接口形式	接口说明
1	WebService接口	Webservice是一个web的应用程序,具有独立性、低耦合性等特征。Webservice是使用当前广泛应用的XML标准来描述、发布、协调和配置各种相关应用程序,是可以用作开发分布式,具有互操作性能的应用程序。Webservice技术,将运行在不同机器上的不同应用在不用依靠附加的、专门的三方、硬件条件下,即可实现相互之间交换数据或集成。
2	JDBC接口	JDBC是一种用于执行SQL语句的JavaAPI,它可以为当前市面上的多种关系型数据库提供统一的访问,它是由一组用Java语言编写的类和接口组成。
3	MapService接口	MapService接口是一套基于JavaScript全新升级的应用程序接口,为开发者提供了快速调用在线地理信息服务的通道,包括快速创建地图、调用地图、POI搜索以及在地图上添加覆盖物等服务。
4	中间库接口	中间库接口即指源系统提供中间库,并保障中间库与相关业务系统数据一致。中间库接口按照业务层面的需求和相关数据的特征特性,分为全量抽取、增量抽取,新增抽取则作为增量抽取的一种特例。为保证对源系统数据提供方的压力最小化,应在源系统网络环境中设置前置机,用于中间库的部署。
5	文件接口	数据提供方抽取业务系统数据,利用数据生成程序生成接口文件,然后放置到数据提供方接口服务器上。数据接收方从数据提供方接口服务器得到接口文件,并进行校验后,加载至农业大数据信息采集平台。
6	非结构化数据	可以通过文件目录的形式访问专题文件、图片、视频、电子文档等非结构化数据。

序号	功能模块	功能说明
1	基础代码管理	基础代码管理包括基础代码分类和管理。基础代码分类管理包括对代码分类的增删改查以及停用/启用。基础代码管理包括基础代码的添加、启用/停用、修改、删除以及查询。
2	采集指标管理	指标管理包括指标分类管理和指标维护。
		（1）指标分类管理：是对指标按照某种规则进行分类,便于后期按分类来进行统计分析,该功能主要包括指标分类的添加、修改以及查询。另外指标分类可以添加多级。
		（2）指标维护：包括指标的增删改查等功能。
3	报表管理	报表管理包括定义和设计两块。报表定义指提供对于报表的增删改查、以及后期预览填报时期报表和生成的物理表,后续作为上传审核汇总的报表模版、查看各类报表样式等功能。报表设计功能主要是通过报表设计工具,将指标分为横纵向进行展现的报表样式,报表设计工具为用户提供一个可视化的设计界面,B/S架构,便利性强。
4	采集方案管理	采集方案管理包括采集范围管理、指标、表单与校验规则、方案、任务下发等功能。
5	采集状态监控	系统监控包括监控采集进度和任务两个模块。
		（1）监控采集进度：实时监控系统已经下发的采集任务的整体进展情况,统计内容包括采集任务已经填报、上报、正在办理、未办理以及未上报等相关基点数。同时对所有未上报的采集区（人）等进行催报,催报内容的发送方式根据采集方案中定义的类型来选择。
		（2）监控采集任务：实时查看单个采集任务的执行情况,通过方案名称、填报期别、填报单位、填报级别、填报日期、填报状态等查询条件,查询采集任务的报送情况,其中方案名称可以支撑模糊查询。
6	个人工作台	个人工作台包括待办工作、消息查看等功能。
7	填报管理	填报功能包括数据层面上的填写、计算校验、自审、上报、导入导出等功能。
8	查询与统计	查询与统计功能包括对原始填报内容查询、上报内容的统计查询、以及汇总后内容查询,同时包含高级、绩效查询和数据共享管理等功能。
9	数据导出	数据导出功能主要是基于报表工具中的数据导出功能而设计,可以导出文件类型有Excel、Word、PDF等。
10	数据打印	数据打印是基于报表工具中数据打印功能而设计,能提供常见的打印预览、直接打印等功能。

序号	功能模块	功能说明
1	基础代码管理	基础代码管理包括基础代码分类和管理。基础代码分类管理包括对代码分类的增删改查以及停用/启用。基础代码管理包括基础代码的添加、启用/停用、修改、删除以及查询。
2	采集指标管理	指标管理包括指标分类管理和指标维护。
		（1）指标分类管理：是对指标按照某种规则进行分类,便于后期按分类来进行统计分析,该功能主要包括指标分类的添加、修改以及查询。另外指标分类可以添加多级。
		（2）指标维护：包括指标的增删改查等功能。
3	报表管理	报表管理包括定义和设计两块。报表定义指提供对于报表的增删改查、以及后期预览填报时期报表和生成的物理表,后续作为上传审核汇总的报表模版、查看各类报表样式等功能。报表设计功能主要是通过报表设计工具,将指标分为横纵向进行展现的报表样式,报表设计工具为用户提供一个可视化的设计界面,B/S架构,便利性强。
4	采集方案管理	采集方案管理包括采集范围管理、指标、表单与校验规则、方案、任务下发等功能。
5	采集状态监控	系统监控包括监控采集进度和任务两个模块。
		（1）监控采集进度：实时监控系统已经下发的采集任务的整体进展情况,统计内容包括采集任务已经填报、上报、正在办理、未办理以及未上报等相关基点数。同时对所有未上报的采集区（人）等进行催报,催报内容的发送方式根据采集方案中定义的类型来选择。
		（2）监控采集任务：实时查看单个采集任务的执行情况,通过方案名称、填报期别、填报单位、填报级别、填报日期、填报状态等查询条件,查询采集任务的报送情况,其中方案名称可以支撑模糊查询。
6	个人工作台	个人工作台包括待办工作、消息查看等功能。
7	填报管理	填报功能包括数据层面上的填写、计算校验、自审、上报、导入导出等功能。
8	查询与统计	查询与统计功能包括对原始填报内容查询、上报内容的统计查询、以及汇总后内容查询,同时包含高级、绩效查询和数据共享管理等功能。
9	数据导出	数据导出功能主要是基于报表工具中的数据导出功能而设计,可以导出文件类型有Excel、Word、PDF等。
10	数据打印	数据打印是基于报表工具中数据打印功能而设计,能提供常见的打印预览、直接打印等功能。

农业大数据信息采集平台建设研究

Research on the Construction of Agricultural Big Data Information Collection Platform

RichHTML

PDF (PC)

可视化

摘要/Abstract

引用本文

使用本文

图/表 3

参考文献 11

相关文章 1

编辑推荐

Metrics

本文评价

关于本刊

作者中心

审者中心

在线期刊

联系我们