论文部分内容阅读
摘 要：衢州市农业农村大数据平台主要利用大数据、移动互联网、物联网等先进DICT技术，全面推进农业农村工作精准管理。合理运用互联网平台和大数据分析等现代信息技术，强化市农业农村局对各项工作的决策、指挥和管理。建立农业农村大数据中心，对数据进行专业化处理，实现各级相关行业部门针对农业农村信息共享和农业农村业务协作。
关键词： 农业农村；大数据平台；建设方案
一、项目建设内容
衢州市农业农村大数据平台建设工程总体建设任务包括：基础运行环境建设以及应用软件建设。其中，应用软件建设包括农业农村大数据中心、农业农村大数据决策指挥平台、数字乡村大数据服务平台和若干大数据应用。
衢州市农业农村大数据建设工程建设内容可归纳为建设“一个中心、两个平台、两个应用”。一个中心即建设农业农村大数据中心，两个平台即建设农业农村大数据管理平台和数字乡村大数据服务平台，两个应用即建设若干涉农应用平台，包括：智慧畜牧系统和精准扶贫系统。
1、农业农村大数据中心：一是建设大数据平台基础运行环境，为平台运行提供可靠、稳定、安全的基础硬件平台和基础软件平台。二是建设农业农村大数据信息资源库，涵盖“产业、管理、服务”等三大类主题数据资源，包括基础资源库、业务数据库、主题分析库、信息资源支撑库等。三是建设数据采集系统实现通过人工采集、年鉴数据迁移、表格数据导入、移动互联网设备、物联网设备等多种方式进行数据信息的采集。四是建设数据交换系统实现与农业系统、涉农单位等信息系统的数据交换共享和业务对接。五是建设目录管理系统实现对涉农信息资源目录进行高效管理。
2、农业农村大数据管理平台：一是建设大数据决策指挥系统，面向各级领导打造决策指挥舱，实现大数据分析功能，满足领导用数据决策的需求，同时，建设融合GIS和大数据技术的“农业农村一张图”，为决策层提供GIS地图数据分析，从而满足决策层挂图作战和精准决策的需要。二是建设大数据专题分析系统，以农业农村大数据平台业务数据库、主题分析库、业务应用系统为主导，面向各级领导和业务工作人员建设重点业务专题分析，实现对农业农村重点业务全过程、全系统、全要素的精准管理和服务。
3、数字乡村大数据服务平台：除了为政府部门科学管理农业发展提供数据支撑，还应满足广大社会公共获取信息、分享信息、利用信息的切实需要。将大数据中心可以公开的信息资源并整合电商、教育、交通、扶贫、市场等行业数据资源，通过互联网、移动互联网等渠道为广大人民群众及时提供服务农业生产、农村建设、惠民利民的信息。
4、应用系统：将“互联网+大数据”思维融入农业、农村发展进程中，面向不同的业务领域建设智慧畜牧和精准扶贫等应用系统。
二、建设效益分析
1、有效打破数据壁垒，推动数据整合、共享、开放和利用；
2、突出大数据、云计算技术优势，形成用数据决策的全新工作模式；
3、推进农业资源利用方式的转变，为农业供给侧改革提供动力；
4、加快信息化和农业现代化“两化”融合的步伐，整体提升农业管理信息化水平；
5、促进一二三产业融合步伐，扶持农业农村持续发展，让农民合理分享增值收益；
6、利用大数据分析成果，指导农民生产经营，提升农业信息服务能力。
7、提升农产品品质，保证餐桌安全，让社会公众分享建设成果。
三、总体设计
（一）技术架构
为解决各子平台之间的依赖耦合，衢州市农业农村大数据平台采用REST、ESB、HTTP进行解耦。各系统内部业务关联密切，采用SpringMVC框架进行开发。
Hadoop大数据集群和数据中心：该部分是数据处理和备份的核心系统，两系统数据采用共享和互备模式，大数据集群主要对高复杂、高关联、大数据量的数据进行运算，计算结果通过REDIS或Hbase提供给前端系统进行数据展示。数据聚合由数据交换共享系统和信息采集系统构成，主要对核心业务数据进行管理，方便系统进行业务处理和数据展示。
接口系统：该部分主要采取Webservice、REST接口和外部系统进行对接，主要任务完成系统间的数据转换。
业务数据展示系统：该部分主要包括农业农村大数据管理平台、农业农村大数据服务平台和N个大数据应用系统，主要是对Hadoop大数据集群和数据中心的数据和分析结构进行综合展示和数据缓存。
展示层：主要由政务服务平台和手机客户端组成，用户通过访问该部分进行数据交互和服务。展示层通过ESB总线与平台中的其他部分进行连接。
（二）部署架构
衢州市农业农村大数据平台各系统的运行离不开一个高效、安全、稳定的网络运行环境。根据当前我市实际情况。农业农村大数据平台需要部署到云平台上。
借助互联网，为区县农业局、乡镇农办、村级业务工作人员、基地信息采集人员等用户提供基于个人电脑、移动终端等多种渠道的信息采集、业务数据应用分析等服务；为决策部门提供基于移动终端的大数据决策指挥手机端服务；实现与农业系统、外部单位各系统之间的互联互通、信息共享。
（三）安全设计
平台依托于云平台现有安全防护措施及配套的網络安全防护设备相结合，仅在信息采集检测接收端设置安全防护措施。
平台安全防护设计主要包括系统用户访问权限控制、数据加密存储和其他措施完成安全防护工作。
1、访问权限控制
对用户访问网络资源的权限进行严格的认证和控制。系统采用了用户身份认证，对口令加密、更新和鉴别，设置用户访问目录和文件的权限，控制网络设备配置的权限等。并对重要涉密的数据进行加密防护，保障信息被人截获后不能读懂其含义。
2、数据加密存储
数据加密存储主要是对重要、保密和敏感的数据进行加密处理后存储，进一步提高数据的安全性。
3、数据存储安全
在系统数据库中存储的基础数据是非常宝贵的信息资源，一旦数据库硬件或软件被毁坏，将造成不可估量和无法返回的损失。因此，首先要保证存储设备和数据的安全，主要做好数据的存储环境的保护、数据的备份及恢复策略的管理。
4、应用系统数据安全
必须保证系统和信息的高安全性，采取必要的防范措施，使整个系统受到有意、无意的非法侵入而造成系统破坏的可能性降至最低程度。系统将具备完善的用户权限控制机制；完善的日志及跟踪功能，业务办理及敏感数据查询需做相应的记录；具备方便的数据备份及灾难恢复能力，可在服务器系统崩溃后最短时间内使系统恢复正常运行
（四）性能设计
衢州市农业农村大数据平台用户量较大，在大数据量处理的情况下，需要对平台的性能进行详细的设计，保障多用户访问时，能够保障平台的正常稳定使用。
提高软件平台的性能，好的软件架构设计是软件系统高性能的保证，一个好的软件架构系统应当要对新的软件业务有良好的兼容能力，具备良好的功能性、扩展能力、适应性。
结语：利用新技术引领衢州数字乡村、畜牧业以及精准扶贫等核心工作积极发展，推动农业技术进步、效率提升和组织变革，为加快实现农业现代化、夯实全面建成小康社会基础提供强大创新动力。
关键词： 农业农村；大数据平台；建设方案
一、项目建设内容
衢州市农业农村大数据平台建设工程总体建设任务包括：基础运行环境建设以及应用软件建设。其中，应用软件建设包括农业农村大数据中心、农业农村大数据决策指挥平台、数字乡村大数据服务平台和若干大数据应用。
衢州市农业农村大数据建设工程建设内容可归纳为建设“一个中心、两个平台、两个应用”。一个中心即建设农业农村大数据中心，两个平台即建设农业农村大数据管理平台和数字乡村大数据服务平台，两个应用即建设若干涉农应用平台，包括：智慧畜牧系统和精准扶贫系统。
1、农业农村大数据中心：一是建设大数据平台基础运行环境，为平台运行提供可靠、稳定、安全的基础硬件平台和基础软件平台。二是建设农业农村大数据信息资源库，涵盖“产业、管理、服务”等三大类主题数据资源，包括基础资源库、业务数据库、主题分析库、信息资源支撑库等。三是建设数据采集系统实现通过人工采集、年鉴数据迁移、表格数据导入、移动互联网设备、物联网设备等多种方式进行数据信息的采集。四是建设数据交换系统实现与农业系统、涉农单位等信息系统的数据交换共享和业务对接。五是建设目录管理系统实现对涉农信息资源目录进行高效管理。
2、农业农村大数据管理平台：一是建设大数据决策指挥系统，面向各级领导打造决策指挥舱，实现大数据分析功能，满足领导用数据决策的需求，同时，建设融合GIS和大数据技术的“农业农村一张图”，为决策层提供GIS地图数据分析，从而满足决策层挂图作战和精准决策的需要。二是建设大数据专题分析系统，以农业农村大数据平台业务数据库、主题分析库、业务应用系统为主导，面向各级领导和业务工作人员建设重点业务专题分析，实现对农业农村重点业务全过程、全系统、全要素的精准管理和服务。
3、数字乡村大数据服务平台：除了为政府部门科学管理农业发展提供数据支撑，还应满足广大社会公共获取信息、分享信息、利用信息的切实需要。将大数据中心可以公开的信息资源并整合电商、教育、交通、扶贫、市场等行业数据资源，通过互联网、移动互联网等渠道为广大人民群众及时提供服务农业生产、农村建设、惠民利民的信息。
4、应用系统：将“互联网+大数据”思维融入农业、农村发展进程中，面向不同的业务领域建设智慧畜牧和精准扶贫等应用系统。
二、建设效益分析
1、有效打破数据壁垒，推动数据整合、共享、开放和利用；
2、突出大数据、云计算技术优势，形成用数据决策的全新工作模式；
3、推进农业资源利用方式的转变，为农业供给侧改革提供动力；
4、加快信息化和农业现代化“两化”融合的步伐，整体提升农业管理信息化水平；
5、促进一二三产业融合步伐，扶持农业农村持续发展，让农民合理分享增值收益；
6、利用大数据分析成果，指导农民生产经营，提升农业信息服务能力。
7、提升农产品品质，保证餐桌安全，让社会公众分享建设成果。
三、总体设计
（一）技术架构
为解决各子平台之间的依赖耦合，衢州市农业农村大数据平台采用REST、ESB、HTTP进行解耦。各系统内部业务关联密切，采用SpringMVC框架进行开发。
Hadoop大数据集群和数据中心：该部分是数据处理和备份的核心系统，两系统数据采用共享和互备模式，大数据集群主要对高复杂、高关联、大数据量的数据进行运算，计算结果通过REDIS或Hbase提供给前端系统进行数据展示。数据聚合由数据交换共享系统和信息采集系统构成，主要对核心业务数据进行管理，方便系统进行业务处理和数据展示。
接口系统：该部分主要采取Webservice、REST接口和外部系统进行对接，主要任务完成系统间的数据转换。
业务数据展示系统：该部分主要包括农业农村大数据管理平台、农业农村大数据服务平台和N个大数据应用系统，主要是对Hadoop大数据集群和数据中心的数据和分析结构进行综合展示和数据缓存。
展示层：主要由政务服务平台和手机客户端组成，用户通过访问该部分进行数据交互和服务。展示层通过ESB总线与平台中的其他部分进行连接。
（二）部署架构
衢州市农业农村大数据平台各系统的运行离不开一个高效、安全、稳定的网络运行环境。根据当前我市实际情况。农业农村大数据平台需要部署到云平台上。
借助互联网，为区县农业局、乡镇农办、村级业务工作人员、基地信息采集人员等用户提供基于个人电脑、移动终端等多种渠道的信息采集、业务数据应用分析等服务；为决策部门提供基于移动终端的大数据决策指挥手机端服务；实现与农业系统、外部单位各系统之间的互联互通、信息共享。
（三）安全设计
平台依托于云平台现有安全防护措施及配套的網络安全防护设备相结合，仅在信息采集检测接收端设置安全防护措施。
平台安全防护设计主要包括系统用户访问权限控制、数据加密存储和其他措施完成安全防护工作。
1、访问权限控制
对用户访问网络资源的权限进行严格的认证和控制。系统采用了用户身份认证，对口令加密、更新和鉴别，设置用户访问目录和文件的权限，控制网络设备配置的权限等。并对重要涉密的数据进行加密防护，保障信息被人截获后不能读懂其含义。
2、数据加密存储
数据加密存储主要是对重要、保密和敏感的数据进行加密处理后存储，进一步提高数据的安全性。
3、数据存储安全
在系统数据库中存储的基础数据是非常宝贵的信息资源，一旦数据库硬件或软件被毁坏，将造成不可估量和无法返回的损失。因此，首先要保证存储设备和数据的安全，主要做好数据的存储环境的保护、数据的备份及恢复策略的管理。
4、应用系统数据安全
必须保证系统和信息的高安全性，采取必要的防范措施，使整个系统受到有意、无意的非法侵入而造成系统破坏的可能性降至最低程度。系统将具备完善的用户权限控制机制；完善的日志及跟踪功能，业务办理及敏感数据查询需做相应的记录；具备方便的数据备份及灾难恢复能力，可在服务器系统崩溃后最短时间内使系统恢复正常运行
（四）性能设计
衢州市农业农村大数据平台用户量较大，在大数据量处理的情况下，需要对平台的性能进行详细的设计，保障多用户访问时，能够保障平台的正常稳定使用。
提高软件平台的性能，好的软件架构设计是软件系统高性能的保证，一个好的软件架构系统应当要对新的软件业务有良好的兼容能力，具备良好的功能性、扩展能力、适应性。
结语：利用新技术引领衢州数字乡村、畜牧业以及精准扶贫等核心工作积极发展，推动农业技术进步、效率提升和组织变革，为加快实现农业现代化、夯实全面建成小康社会基础提供强大创新动力。