2 0 2 5 1 2 0 9 发 布 － － 2 0 2 6 0 5 0 1 － － 实 施 涉 农 网 络 舆 情 信 息 监 测 技 术 要 求 0 7 中 华 人 民 共 和 国 农 业 行 业 标 准 备 案 号 ： X X X X - X X X X Ｉ Ｃ Ｓ 3 2 . 2 4 0 . 9 9 C C S B 4 9 9 6 — 2 0 2 5 T e c h n i c a l r e q u i r e m e n t f o r m o n i t o r i n g a g r i c u l t u r a l n e t w o r k p u b l i c o p i n i o n i n f o r m a t i o n Ｎ Ｙ ／ Ｔ 中 华 人 民 共 和 国 农 业 农 村 部 发 布NY/T４９９６—２０２５ 目　　次 前言 Ⅱ 􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺 １　范围 １ 􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺 ２　规范性引用文件 １ 􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺 ３　术语和定义 １ 􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺 ４　总体要求 ２ 􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺 ５　基础库要求 ２ 􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺 ６　采集要求 ３ 􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺 ７　处理要求 ５ 􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺 ８　存储要求 ５ 􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺 附录A(资料性)　涉农关键词示例 ７ 􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺 参考文献 ８ 􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺􀆺 ⅠNY/T４９９６—２０２５ 前　　言 本文件按照GB/T１􀆰１—２０２０«标准化工作导则　第１部分:标准化文件的结构和起草规则»的规定 起草. 请注意本文件的某些内容可能涉及专利.本文件的发布机构不承担识别专利的责任. 本文件由农业农村部信息中心提出. 本文件由农业农村部农业信息化标准化技术委员会归口. 本文件起草单位:农业农村部信息中心、北京农信通科技有限责任公司. 本文件主要起草人:钟永玲、李想、郭志杰、张生璨、张珊、程海平、滕武超、余春燚、李婷婷、种微微、 陆风. ⅡNY/T４９９６—２０２５ 　 　 　涉农网络舆情信息监测技术要求 １　范围 本文件规定了涉农网络舆情信息监测技术总体要求,以及舆情信息监测基础库、舆情信息采集、舆情 信息处理、舆情信息存储的技术方法和要求. 本文件适用于涉农网络舆情信息监测流程管理和监测系统的规划及建设. ２　规范性引用文件 下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款.其中,注日期的引用文件, 仅该日期对应的版本适用于本文件;不注日期的引用文件,其最新版本(包括所有的修改单)适用于本 文件. GB/T２９７６５—２０２１　信息安全技术　数据备份与恢复产品技术要求与测试评价方法 GB/T３７７２２—２０１９　信息技术　大数据存储与处理系统功能要求 YD/T２６７３—２０１３　面向舆情分析的互联网数据采集与交换格式定义 YDB１４７—２０１４　互联网舆情监测与分析系统框架 ３　术语和定义 下列术语和定义适用于本文件. ３􀆰１ 涉农网络舆情　agriculturalnetworkpublicopinioninformation 公众、机构和组织通过互联网表达和传播的有关农业、农村、农民公共事务的情绪、意愿、态度和意见 的总和. ３􀆰２ 信源　informationsource 信息的来源或信息的发布者. ３􀆰３ 网络爬虫　webcrawler 一种按照一定规则,自动抓取互联网公开信息的程序或者脚本. ３􀆰４ 结构化数据　structureddata 以固定格式和结构存储的数据. ３􀆰５ 非结构化数据　unstructureddata 不具有预定义模型或未以预定义方式组织的数据. [来源:GB/T３５２９５—２０１７,２􀆰１􀆰２５] ３􀆰６ 主键　primarykey 数据表中的一个或多个字段,作为表中某一条记录的唯一标识. ３􀆰７ 轮询　polling 采集程序按照一定规律向服务器端发送请求进行查询. １NY/T４９９６—２０２５ ３􀆰８ 涉农信源库　agriculturalinformationsourcedatabase 专门用于存储、管理和检索网络上各种涉农信息发布来源的数据库. ４　总体要求 涉农网络舆情信息监测应至少包括以下４个部分: a)　基础库:应建立涉农信源库和涉农关键词库等基础库,以供采集时调用; b)采集:调用涉农信源库对涉农信源进行判定,重点监测信源应进行定向全量采集涉农网络舆情信 息,非重点监测信源应调用涉农关键词库利用关键词采集涉农网络舆情信息; c)处理:应对采集到的涉农舆情信息进行清洗,并至少进行归类处理和关联溯源处理; d)存储:将处理后的舆情数据按照结构化数据和非结构化数据分别存储在特定载体中,以备后续查 询分析使用. 一般业务流程架构见图１. 图１　涉农网络舆情信息监测一般业务流程架构 ５　基础库要求 ５􀆰１　涉农信源库 ５􀆰１􀆰１　涉农信源库建设要求 涉农信源库应包含主键、信源名称、信源URL[统一资源定位系统(UniformResourceLocator)]、字 符编码、权重、是否重点监测等字段.权重字段应按照重要性、相关度等指标对信源赋予分值,用于确定不 同信源的监测频率.涉农信源库建设应符合以下要求: ２NY/T４９９６—２０２５ a)根据工作需求、技术能力和资金情况等进行综合评估,建立必要的涉农信源库; b)提供信源的检索、增加、删除、排序、分类等功能; c)提供信源的导出、导入、数据交换等功能. ５􀆰１􀆰２　信源库信息集 信源库信息集应符合表１的要求. 表１　信源库信息集 序号数据元名称 标识 类型 是否允许为空 说明 １ 主键 id 数值型 否 唯一标识 ２ 信源名称 site_name 字符型 否 信源名字 ３ 信源URL site_url 字符型 否 信源网址 ４ 字符编码 encoding 字符型 否 信源的字符编码格式 ５ 权重 priority 数值型 否 信源的权重 ６是否重点监测 important 布尔型 否 是否为重点监测信源 ７ 注册地区 district 字符型 是 信源注册地区 ８ 网站分类 site_type 字符型 是媒体网站、门户网站、政府网站、 行业网站、其他类型 ９ 网站类别 site_level 字符型 是中央媒体、地方媒体、港澳台媒体、 外国媒体、其他类型 １０ 载体类型 carrier_type 字符型 是新闻、客户端、微博、微信公众号、 视频平台、论坛、博客、其他类型 １１ 创建时间 create_time 日期型 否 信息创建时间 １２ 是否启用 is_enable 布尔型 否 是否启用标记 􀆺 􀆺 􀆺 􀆺 􀆺 􀆺 ５􀆰２　涉农关键词库 ５􀆰２􀆰１　涉农关键词库建设要求 涉农关键词库建设应符合以下要求: a)根据工作需求、技术能力和资金情况等进行综合评估,建立涉农关键词库; b)提供关键词的检索、增加、删除、排序、分类等功能; c)提供关键词的导出、导入、数据交换等功能. ５􀆰２􀆰２　关键词库信息集 关键词库信息集应符合表２的要求. 表２　关键词库信息集 序号 数据元名称 标识 类型 是否允许为空 说明 １ 主键 id 数值型 否 唯一标识 ２ 关键词 keyword 字符型 否 关键词/字 ３ 权重 priority 数值型 否 等级 ４ 类型 sort 字符型 是 地域类、人物类、事件类、其他 ５ 创建时间 create_time 日期型 否 信息创建时间 ６ 是否启用 is_enable 布尔型 否 是否启用标记 􀆺 􀆺 􀆺 􀆺 􀆺 􀆺 ６　采集要求 ６􀆰１　通用要求 a)应确保在采集过程中涉农信源库和关键词库全部被有效调用,避免遗漏重要涉农舆情信息; b)　应设计合理的采集频次,并根据实际需要,动态调整网络爬虫的采集频次; ３NY/T４９９６—２０２５ c)应使用中文分词算法,根据涉农关键词,准确匹配涉农舆情信息; d)　应以满足实际业务需要为原则,合理设计采集方案和技术指标,以最小成本实现涉农领域及行业 内的舆情信息采集. ６􀆰２　采集内容要求 ６􀆰２􀆰１　新闻资讯类平台信息集 新闻资讯类平台采集内容应包括但不限于标题、正文、发布时间、发布主体、链接、作者、评论数量、转 载量、阅读量等信息,新闻资讯类平台信息集应符合表３的要求. 表３　新闻资讯类平台信息集 序号 数据元名称 标识 类型 是否允许空 说明 １ 主键 id 数值型 否 唯一标识 ２ 标题 title 字符型 否 信息标题 ３ 正文 text 字符型 否 信息正文 ４ 发布时间 publish_time 日期型 否 信息发布时间 ５ 发布主体 subject