(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210693367.0 (22)申请日 2022.06.17 (71)申请人 路米科技 （江苏） 有限公司 地址 213000 江苏省常州市天宁区北塘河 路8号恒生科技园2 9幢304室 申请人 北京羿娲科技有限公司 (72)发明人 祁智恒　 (74)专利代理 机构 成都鱼爪智云知识产权代理 有限公司 513 08 专利代理师 孔婷 (51)Int.Cl. G06V 10/774(2022.01) G06V 10/764(2022.01) G06V 10/44(2022.01) (54)发明名称 一种人机协同的半自动化图像数据标注系 统及方法 (57)摘要 本发明提出了一种人机协同的半自动化图 像数据标注系统及方法， 涉及人工智能技术领 域。 该系统包括： 前端将 任务请求发送至后台。 后 台将数据标注任务经由前端返回至用户端。 前端 获取待标注标签ID、 第一标签类型和关键点发送 至后台。 算法处理模块根据关键点和图片ID， 确 定第二标签类型和多边形顶点信息。 后台将待 标 注标签ID、 第一标签类型、 第二标签类型和多边 形顶点信息返回至前端， 前端 根据多边形顶点信 息， 生成并显示多边形。 确定标签最终类型。 实现 了算法和人协同完成待标注 图片中任一待标注 标签的图像标注的目的。 利用用户端、 前端、 后台 和算法处理模块的交互过程完成所有待标注标 签的图像标注， 以实现完成数据标注任务的目 的。 权利要求书2页 说明书9页 附图4页 CN 115019134 A 2022.09.06 CN 115019134 A 1.一种人机协同的半自动化图像数据标注系统， 其特征在于， 包括用户端、 前端、 后台 和算法处 理模块； 所述前端响应所述用户端的任务请求， 将所述任务请求发送至所述后台； 所述后台接收所述任务请求后， 将数据标注任务经由所述前端返回至所述用户端， 所 述数据标注任务包括 一张待标注图片且所述待标注图片具有唯一图片ID； 基于所述待标注图片， 所述前端响应所述用户端输入操作获取所述待标注图片中任一 待标注标签ID、 对应第一标签类型和关键点， 并发送所述待标注标签ID、 所述第一标签类 型、 所述关键点和请求多边形顶点命令至所述后台， 以使所述后台向所述算法处理模块请 求生成多边形； 所述算法处理模块接收所述请求多边形顶点命令， 根据所述关键点和所述图片ID， 生 成该待标注标签对应的多边形轮廓信息， 并根据所述多边形轮廓信息确定第二标签类型和 多边形顶点信息； 所述后台将所述待标注标签ID、 所述第一标签类型、 所述第二标签类型和所述多边形 顶点信息返回至所述前端， 所述前端根据所述多边形顶点信息， 生成并显示多边形至所述 用户端， 且所述用户端根据所述第一标签类型和所述第二标签类型确定该待标注标签的标 签最终类型， 以完成该待标注标签的图像标注； 针对所述待标注图片中所有待标注标签， 重复执行所述用户端、 所述前端、 所述后台和 所述算法处理模块的交 互过程， 直至 完成所述待标注图片的图像标注。 2.根据权利要求1所述的人机协同的半自动化图像数据标注系统， 其特征在于， 根据 所 述关键点和所述图片ID， 生成该待标注标签对应的多边形轮廓信息的步骤 包括： 基于所述待标注标签， 根据所述关键点中的正 点生成多边形整体 轮廓； 根据所述关键点中的负点确定所述多边形整体轮廓中的多余部分， 所述多余部分用于 对所述多边形整体 轮廓进行修 正； 根据所述多边形整体轮廓和所述多余部分， 确定该待标注标签对应的多边形轮廓信 息。 3.根据权利要求1所述的人机协同的半自动化图像数据标注系统， 其特征在于， 还包括 修正模块； 根据用户需求参数， 响应所述用户端操作判断是否 需要对该待标注标签的图像标注进 行修正； 所述修正模块用于若需要修正， 则按照预设标注方法对所述待标注标签的图像标注进 行修正， 直至该待标注标签的图像标注达 到用户需求 参数。 4.根据权利要求3所述的人机协同的半自动化图像数据标注系统， 其特征在于， 所述若 需要修正， 则按照预设标注方法对所述待标注标签的图像标注进行修正， 直至该待标注标 签的图像标注达 到用户需求 参数的步骤 包括： 所述前端响应所述用户端输入操作获取该待标注标签ID、 第三标签类型、 最新关键点 和第一最新多边形顶 点信息， 并发送所述待 标注标签ID、 所述第三标签类型、 所述最新关键 点、 所述第一最新多边形顶点信息和请求多边形顶点命令至所述后台， 以使所述后台再次 向所述算法处理模块请求 生成多边形； 所述算法处理模块接收所述多边形顶点命令， 根据所述最新关键点、 所述图片ID和所权　利　要　求　书 1/2 页 2 CN 115019134 A 2述第一最新多边形顶点信息， 确定第二 最新多边形顶点信息和第四标签 类型； 所述后台将所述待标注标签ID、 所述第三标签类型、 所述第 四标签类型和所述第二最 新多边形顶点信息返回至所述前端， 所述前端根据所述第二最新多边形顶点信息， 生成并 显示多边形至所述用户端， 且所述用户端根据所述第三标签类型和所述第四标签类型再次 确定该待标注标签的标签最终类型； 重复上述 步骤， 直至该待标注标签的图像标注达 到用户需求 参数。 5.根据权利要求1所述的人机协同的半自动化图像数据标注系统， 其特征在于， 所述用 户端根据所述第一标签类型和所述第二标签类型确定该待标注标签的标签最终类型的步 骤包括： 判断所述第一标签类型和所述第二标签类型是否一致， 若一致， 则选择所述第一标签 类型和所述第二标签 类型中的任意 一个作为该待标注标签的标签最终类型； 若不一致， 则响应用户输入操作确定标签最终类型为所述第 一标签类型或所述第 二标 签类型。 6.根据权利要求3所述的人机协同的半自动化图像数据标注系统， 其特征在于， 所述针 对所述待标注图片中所有待标注标签， 重复执行所述用户端、 所述前端、 所述后台和所述算 法处理模块的交 互过程， 直至 完成所述待标注图片的图像标注的步骤 包括： 响应所述用户端操作判断所述待标注图片中所有待标注标签的图像标注是否都符合 用户需求 参数， 若符合， 则完成所述待标注图片的图像标注。 7.根据权利要求1所述的人机协同的半自动化图像数据标注系统， 其特征在于， 所述用 户端还用于保存用户输入的所有关键点； 所述算法处理模块还用于保存多边形顶点信息 。 8.一种人机协同的半自动化图像数据标注方法， 其特 征在于， 包括如下步骤： S110： 响应用户请求获取数据标注任务， 所述数据标注任务包括一张待标注图片且所 述待标注图片具有唯一图片ID； S120： 基于所述待标注图片， 响应用户输入操作获取所述待标注图片中任一待标注标 签ID、 对应第一标签 类型和关键点， 并发送请求多边形顶点命令； S130： 接收所述请求多边形顶点命令， 根据所述关键点和所述图片ID， 生成该待标注标 签对应的多边形轮廓信息， 并根据所述多边形轮廓信息确定第二标签类型和多边形顶点信 息； S140： 根据所述多边形顶点信息， 生成并显示多边形， 且根据所述第一标签类型和所述 第二标签 类型确定该待标注标签的标签最终类型， 以完成该待标注标签的图像标注； S150： 针对所述待标注图片中所有待标注标签， 重 复执行步骤S120至步骤S140， 直至完 成所述待标注图片的图像标注。 9.一种电子设备， 其特 征在于， 包括： 存储器， 用于存 储一个或多个程序； 处理器； 当所述一个或多个程序被所述处 理器执行时， 实现如权利要求8所述的方法。 10.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 该计算机程序被 处理器执行时实现如权利要求8所述的方法。权　利　要　求　书 2/2 页 3 CN 115019134 A 3