使用文档

• 1: 新手入门
• 1.1: 新手入门[标注]
• 1.2: 完整的组织工作流程指南
• 2: 使用手册[标注]
• 2.1: 基础
• 2.1.1: 注册
• 2.1.2: 创建标注任务
• 2.1.3: 作业界面
• 2.1.4: 任务页面
• 2.1.5: 任务详情
• 2.1.6: 标注工具界面
• 2.1.7: 基础导航
• 2.1.8: 顶部面板
• 2.1.9: 控制栏
• 2.1.10: 标注对象栏
• 2.1.11: 标注工作区
• 2.1.12: 设置
• 2.1.13: 标注形状的类型
• 2.1.14: 形状模式 (基础)
• 2.1.15: 术语
• 2.2: 高级
• 2.2.1: 项目页面
• 2.2.2: 搜索
• 2.2.3: 组织
• 2.2.4: 形状模式(高级)
• 2.2.5: 用户角色
• 2.2.6: 用矩形标注
• 2.2.7: 用多边形标注
• 2.2.7.1: 手动绘制
• 2.2.7.2: 使用自动边界绘图
• 2.2.7.3: 编辑多边形
• 2.2.8: 用椭圆标注
• 2.2.9: OpenCV和AI工具
• 2.2.10: 自动标注
• 2.2.11: 备份任务和项目
• 2.2.12: 删除帧
• 2.2.13: 导出/导入数据集并上传标注
• 2.2.14: 快捷键
• 2.2.15: 筛选
• 2.2.16: 质检
• 2.2.16.1: 自动QA, 质检 & Honeypot(蜜罐)
• 2.2.16.2: 手动质检
• 2.2.17: 形状分组
• 3: 训练教程
• 3.1: 训练步骤
• 3.2: 训练任务页面
• 3.3: 训练任务详情界面
• 3.4: 各类模型标签Json源码
• 3.5: 模型验证
• 3.6: 导入模型

1 - 新手入门

1.1 - 新手入门[标注]

本节包含基础信息，并链接到快速入门所需的部分。

开始使用

要创建任务，请转到任务部分。点击创建一个新任务进入任务创建页面。 设置未来任务的名称。

使用构造格式设置标签:首先单击增加标签，然后输入标签的名称并选择颜色。

你需要上传图片或视频，以便将来注释。要做到这一点，只需拖放文件。

想了解更多信息，请访问 创建标注任务

标注

基础

点击提交 & 打开创建成功后会自动打开任务,点击提交 & 继续会继续停留继续创建任务

进入任务页面后，在jobs列表中打开指向该作业的链接。

为您的任务类型选择一个正确的部分并开始注释。

导出数据集

1. 要下载标注文件，首先必须保存所有更改. 点击保存按钮或按Ctrl+S快速保存标注.

2. 保存更改后，单击菜单按钮。

3. 然后点击导出数据集按钮。

4. 最后选择数据集的格式. 导出格式可从支持的格式列表中获得.

要了解更多信息，请访问导出/导入数据集 部分.

1.2 - 完整的组织工作流程指南

欢迎使用宜美智AI自训练系统，此页面是您的团队使用计算机视觉标注工具开始标注以及使用宜美智AI模型训练过程的地方。

本指南旨在为您的组织提供有效使用 宜美智AI自训练系统 所需的知识和最佳实践。

我们将引导您完成 宜美智AI自训练系统 工作流程的每个步骤，从初始设置到高级功能。

参阅:

• 工作流图表
• 组织的端到端工作流程

工作流图表

工作流程图从高层次概述了一般流程.

组织的端到端工作流程

要在您的组织内使用宜美智AI自训练系统，请按照以下步骤操作:

1. 在系统上创建一个帐户.
2. 建立 组织.
3. 切换到您创建的组织.
4. “邀请成员加入 组织” 并 受邀成员分配 用户角色.
5. “创建 项目”.
6. 创建 任务
   在此步骤中，自训练系统将自动创建作业.
7. 通过将标注人员名称添加到分配将任务分配给标注人员 并将 作业阶段 更改为 标注.
8. 标注人员将看到分配的作业并对其进行标注.
9. 通过将质检人员名称添加到分配将任务分配给质检人员 并将 作业阶段 更改为 质检.
10. 质检人员将看到分配的作业并报告问题。
    请注意，质检人员可以纠正问题，请参阅 质检
11. 检查问题，如果需要进一步改进，则将工作重新分配给验证人员或标注人员.
12. (可选) 训练标注数据
13. (可选) 训练完模型之后，可以验证训练模型
14. 导出数据.

2 - 使用手册[标注]

2.1 - 基础

2.1.1 - 注册

要开始在训练平台上标注和训练，您需要创建账户或登录到现有账户。

• 用户注册
• 账户登陆

如果需要创建帐号或登录，请进入登录页面:

备注: 网址是通常是服务器IP:8080

用户注册

要注册为非管理员用户，请执行以下操作:

1. 单击 创建账号.

   

2. 填写所有空白字段, 单击 创建账号 按钮.

从电子邮件自动生成用户名。如果需要，您可以编辑它。

账户登陆

要登陆您的帐户，请执行以下操作:

1. 转到登陆界面.
2. 输入用户名或电子邮件。密码字段将出现。
3. 输入密码，单击 登陆.

2.1.2 - 创建标注任务

要在自训练平台上标注，您需要创建一个标注任务并指定其参数。

要创建任务, 请在 任务 页面上单击 + 并 选择 创建一个新任务.

• 创建任务
  • 标签形状
  • 选择文件
  • 源码格式编辑标签
• 高级设置

创建任务

要创建新任务，请打开任务配置:

并指定以下参数:

1. 在 名称 字段, 输入新任务的名称.

   

2. (可选) 从 项目 下拉框, 为新任务选择一个项目.
   如果您不想将任务分配给任何项目，请将此字段留空。

   

   备注: 如果任务不属于项目，则以下步骤是有效的。
   如果任务已分配给项目，则项目的标签将应用于任务。

3. 在构造格式标签页上，单击增加标签。.
   标签构造器菜单将会打开:

   

4. 在 标签名字 字段, 输入标签名.

5. (可选)为了将标签的使用限制在特定的形状工具, 从 标签形状 下拉菜单中选择形状.

6. (可选)选择标签的颜色.

   

7. 单击 选择文件 上传标注文件.

8. 单击 继续 提交标签并开始添加一个新标签
   或者取消来终止当前标签并返回到标签列表.

9. 单击提交并打开提交配置并打开创建的任务,
   或者提交并继续，提交配置并开始一个新任务.

标签形状

标签(或类)是可以标注的对象类别.

标签形状 将标签的使用限制为特定的形状工具.

任意是不限制使用的默认设置,标记到任何特定的形状工具。

例如，你添加了:

• 用标签形状标记通孔，类型为椭圆
• 用标签形状标记缺口，类型为任意

因此:

• 通孔 标签将只适用于椭圆形状.

• 缺口 标签将适用于所有形状.

  

控制侧边栏上的工具 将仅限于选定的形状类型.

例如, 如果你选择 任意, 所有工具都是可用的, 但如果你为所有标签选择 矩形, 只有矩形工具会被修改 在侧边栏可见。

你可以根据需要改变标签的形状. 此更改不会影响现有标注.

例如，如果你使用多边形创建对象，然后更改 标签形状为椭圆，所有之前创建的对象将保留 多边形。但是，您将无法添加新的多边形 具有相同标签的对象。

选择文件

有几种方法可以上传文件:

文件源	详述
我的电脑	使用此选项从您的笔记本电脑或个人电脑中选择文件. 选择文件: 1. 点击选择文件字段: . 2. 选择要上传的文件.
文件共享连接	高级选项. 从本地或云共享文件夹中上传文件. 备注, 首先需要挂载一个文件共享.
远程数据源	暂未提供.
云端存储	暂未提供.

源码格式编辑标签

Json源码格式是高级用户处理标签的一种方式。

当需要将标签从一个独立任务复制到另一个独立任务时，它很有用.

备注: 请谨慎更改现有任务/项目的源码规范。 删除一些"id"属性将导致丢失现有的标注。 此属性将从您插入到此字段的任何文本中自动删除。

源码格式将标签数据呈现在 .json 格式, 可以选择编辑和复制标签作为文本. 确定 按钮应用更改, 重置 按钮取消更改.

高级设置

使用高级配置设置任务的其他参数 并定制它以满足特定的需求或要求.

可选参数如下:

单击保存并打开任务 提交 & 打开 .

要按顺序创建多个任务，请单击 提交 & 继续.

创建的任务将显示在 任务页面.

2.1.3 - 作业界面

在作业页面中，用户(例如，具有工作人员角色的用户)可以查看分配给他们的作业，而无需访问任务页面，

以及跟踪进度，排序和应用过滤器到工作列表.

在作业页面上，有表格显示作业列表. 每一行数据包括:

• 作业ID
• 项目名
• 任务名
• 已标注图像数量
• 阶段 and 状态
• 合格率
• 不良张数
• 工作人员.

要在新选项卡中打开该作业,按住Ctrl单击该作业ID.

在左上角有一个搜索栏，你可以使用它来查找被分配人员、阶段、状态等。

右上角有排序， 快速筛选和筛选.

筛选

应用筛选器禁用快速筛选器.

筛选器的工作原理与标注过滤器类似， 你可以从属性中创建规则 运算符 和值 并将规则 分组. 有关详细信息,请参阅 筛选部分. 了解更多关于日期和时间选择.

要清除所有筛选,请单击 清除筛选.

支持为作业列表的属性

2.1.4 - 任务页面

任务页面包含元素，每个元素与一个单独的任务相关。它们按创建顺序排序. 每个元素包含:任务名称，预览，进度条，按钮 打开, 菜单 动作. 每个按钮负责菜单中的动作特定功能:

• 导出任务数据集 — 下载特定格式的标注或标注和图像. 更多信息请参阅导出/导入数据集 部分.
• 上传标注 以特定格式上传标注. 更多信息请参阅导出/导入数据集 部分.
• 自动标注 — 未开发.
• 备份任务 — 将此任务备份到zip归档文件中. 更多信息请参阅备份部分.
• 移动到项目 — 将任务移动到项目(只能移动不属于任何项目的任务)。 如果标签不匹配，您可以在项目/任务中创建或删除必要的标签。 有些任务标签可以与目标项目标签相匹配.
• 删除 — 删除任务.

在左上角有一个搜索栏，使用它你可以找到任务的分配人员，任务名称等. 右上角有排序, 快速筛选和筛选.

筛选

应用筛选器禁用快速筛选器.

筛选器的工作原理与标注过滤器类似， 你可以从属性中创建规则 运算符 和值 并将规则 分组. 有关详细信息,请参阅 筛选部分. 了解更多关于日期和时间选择.

要清除所有筛选,请单击 清除筛选.

支持为任务列表的属性

按打开按钮进入任务详情.

2.1.5 - 任务详情

任务详情是一个任务页面，包含一个预览，一个进度条

以及任务的详细信息(在创建任务时指定)和作业部分.

• 接下来的操作可以在这个页面上看到:

  1. 更改任务的标题.
  2. 打开动作菜单.
  3. 更改问题跟踪器或打开问题跟踪器(如果指定了).
  4. 更改标签(仅当任务与项目无关时才可用).
  5. 分配给 — 用于将任务分配给一个人. 开始输入分配人的姓名或 从下拉列表中选择正确的人. 在用户列表中，您将只看到创建任务所在组织的用户.

• 作业 — 是特定任务的所有作业的列表。你可以在这里找到下一个数据:

  • 作业的名字和一个超链接.
  • 帧数 — 帧数区间.
  • 作业的阶段. 阶段由下拉列表指定. 有三个阶段: 标注, 质检 或者 验收. 这个值会影响任务进度条.
  • 作业的状态. 状态可以由作业内的菜单中指定的用户更改. 有几种可能的状态: 未开始, 进行中, 拒收, 已完成.
  • 开始时间 — 作业开始日期.
  • 持续时间 — 工作正在进行的时间量.
  • 分配人员是正在工作的用户. 您可以开始输入分配人的名字和/或从下拉列表中选择正确的人.
  • 复制.通过点击复制，你将把作业列表复制到剪贴板。 工作列表包含到工作的直接链接.

  您可以按状态筛选或排序作业，也可以按分人员.

点击作业部分中的链接开始标注. 在某些情况下，可以有多个链接。这取决于你的尺寸 任务和重叠大小和分段尺寸参数.

2.1.6 - 标注工具界面

主要用户界面

该工具包括:

• 页眉 - 固定标题用于导航和帐户设置;

• 顶部面板 — 包含导航按钮、主要功能和菜单访问;

• 工作区 — 显示图像的空间;

• 控制栏 — 包含导航图像、缩放的工具, 创建形状和编辑轨迹(合并、拆分、分组);

• 对象栏 — contains label filter, two lists: objects (on the frame) and labels (of objects on the frame) and appearance settings.

2.1.7 - 基础导航

1. 使用下面的箭头移动到下一帧/上一帧. 使用滚动条滑块滚动帧. 几乎每个按钮都有快捷键. 要获得有关快捷方式的提示，只需将鼠标指针移动到UI元素上.

   

2. 要导航图像，请使用控件侧边栏上的按钮. 另一种移动图像的方法是在没有标注对象的区域内按住鼠标左键. 如果按下了 鼠标滚轮, 那么所有的标注对象都会被忽略. 否则, 移动的将是高亮的边界框，而不是图像本身.

   

3. 如果数据集有Gerber图像,可以使用按钮显示Gerber来加载Gerber二值图跟原图对比

4. 可以使用侧边栏控件上的按钮来缩放感兴趣的区域. 使用按钮调整图像以适应工作空间中的图像. 你也可以使用鼠标滚轮来缩放图像 (图像将相对于当前光标位置进行放大).

   

2.1.8 - 顶部面板

菜单按钮

它是标注工具的主菜单。它可以用于下载，上传和删除标注.

按钮功能:

• 上传标注 — 上传标注到任务.

• 导出数据集 — 从任务中下载支持的格式之一的数据集. 你也可以输入一个自定义名称并启用保存图像 复选框，如果您希望数据集包含图像.

• 删除标注 — 调用确认窗口, 如果单击删除, 当前作业的标注将被删除 , 如果你点击选择范围，你可以删除范围帧上的标注，如果你激活复选框 仅删除轨迹的关键帧那么只会从选定范围内的曲目中删除关键帧.

  

• 打开任务 — 打开一个包含任务详细信息的页面.

• 切换作业状态 - 切换作业的状态 (未开始, 进行中, 拒收, 已完成).

• 完成作业 - changes the job stage and state to acceptance and completed / annotation and new correspondingly.

保存作业

保存当前作业的标注。该按钮有保存过程的指示.

撤销-重做按钮

使用按钮来撤销或重做操作.

播放器

转到第一个/最后一个的帧.

使用预定义的步长转到下一帧/上一帧. 快捷键: V — 后退一步, C — 前进一步. 默认步长是10帧 (更改账户菜单 - > 设置 - > 播放步长).

切换到下一帧/上一帧的按钮.

快捷键: D - 上一个, F - 下一个.

播放一组画面或一组图像. 快捷键: Space (更改为账户菜单 —> 设置 —> 播放速度).

转到一个特定的帧. 按 ~ 键聚焦到元素.

删除帧.

快捷键: Alt+Del

全屏

全屏播放模式。键盘快捷键是 F11.

信息

打开作业信息.

概览:

• 执行人 - 被分配作业的人.
• 起始帧 - 此工作业中第一帧的编号.
• 结束帧 - 最后一帧的编号.
• 帧数 - 作业中所有帧的总数.

标注的统计数据:

这是一个表格数量的已创建形状，按标签排序 (例如氧化) 以及标注的类型 (形状，轨迹). 以及手动和插值帧的数量.

UI切换器

切换用户界面模式.

2.1.9 - 控制栏

导航

导航块 - 包含用于移动和旋转图像的工具.

图标	描述
	光标 (Esc)- 一个基础的标注编辑工具.
	移动图像- 一个用于移动图像的工具，没有 编辑的可能性.
	旋转- 旋转当前帧的两个按钮 顺时针 (Ctrl+R) 和逆时针 (Ctrl+Shift+R). 你可以在设置中启用旋转所有图像来旋转作业中的所有图像

变焦

变焦块 - 包含图像缩放工具.

图标	描述
	调整图像- 将图像调整为工作空间大小. 快捷方式-双击图像
	选择感兴趣的区域- 放大选定区域. 您可以使用此工具快速放大框架的特定部分.

形状

形状块 - 包含所有创建形状的工具.

Icon	描述	章节链接
	矩形	形状模式; 轨迹模式; 按4个点绘制
	多边形	用多边形标注; 带有多边形的轨迹模式
	点	用点进行标注
	椭圆	用椭圆标注
	打开一个问题	质检 (仅在质检模式下可用)

2.1.10 - 标注对象栏

在对象侧栏中，您可以看到当前可用对象的列表

框架。下图展示了这个列表的样子:

形状模式

对象属性

筛选 输入框

如何使用筛选在高级指南中有描述此处.

对象列表

• 切换所有锁定属性 - 切换帧中所有对象的锁定属性.
• 切换所有隐藏属性 - 切换帧中所有对象的隐藏属性.
• 展示/折叠 所有 - 折叠/展示帧中所有对象的细节字段.
• 排序 - 对对象列表进行排序: 更新时间, ID - 升序, ID - 降序

侧边栏里的对象

可以通过选择标签属性来更改形状的类型。

例如，它可能如下图所示:

对象动作菜单

动作菜单调出按钮:

动作菜单包括:

• 创建对象URL - 在剪贴板上放置一个指向对象的链接。 打开链接后，该对象将被筛选.

• 复制 - 复制一个对象. 键盘快捷键是 Ctrl + C > Ctrl + V.

• 传播 - 将表单复制到多个框架 并显示一个对话框,您可以在其中指定复制对象的数量或要复制到的框架. 键盘快捷键是 Ctrl + B.
  有两种选择:

  • 向前传播 () 在N个 后续的 帧的相同未知创建对象的副本.
  • 向后传播 () 在N个 先前的 帧的相同位置创建对象的副本.

  

• 当背景 - 将对象移动到背景。键盘快捷键 - or _

• 当前景 - 将对象移动到前景。键盘快捷键 + or =

• 删除 - 删除对象。键盘快捷键 Del, Shift+Del.

形状可以被锁定，以防止它被修改或移动的意外。锁定对象的快捷方式: L.

一个形状可以被遮挡. 快捷方式: Q. 这种形状的边界是虚线的.

可以更改对象在帧上显示的方式(显示或隐藏).

切换固定属性 - 启用时，不能通过拖放来移动形状.

标签

在这个选项卡中，您可以锁定或隐藏特定标签的对象. 要改变特定标签的颜色, 你需要进入任务页面，点击编辑按钮选择颜色, 这样，您将更改任务中所有作业的标签颜色.

快速更换标签

您可以使用热键更改对象的标签. 为此，需要为标签分配一个数字(从0到9). 默认数字1,2…0被分配到前10个标签. 要指定一个数字，请单击侧边栏中标签名称右侧的按钮.

之后，您将能够为对象分配相应的标签 将鼠标悬停在它上面并按Ctrl + 数字(0-9).

如果你没有将光标指向该对象，按下Ctrl + **数字(0-9)**将设置所选标签为默认值，

这样你创建的下一个对象(使用N键)将自动分配这个标签.

外观

颜色 选项

更改标注的配色方案:

• 标注对象 — 每个图形都有一个随机的颜色

  

• 组 — 每组图形都有自己随机的颜色，未分组的图形是白色

  

• 标签 — 每个标签都有自己的随机颜色

  

你可以改变任何随机的颜色指向一个框架或一个对象栏.

更改标注中每个图形的不透明度.

选定填充不透明度 滑块

更改所选对象的填充透明度。

线宽 滑块 更改图形边线的线宽

轮廓边框 复选框

你可以通过点击滴管图标来更改特殊形状的边框颜色.

显示位图 复选框

如果启用，所有形状都显示为白色，背景为黑色.

隐藏对象侧边栏

隐藏 - 按钮隐藏对象的侧边栏.

2.1.11 - 标注工作区

在自训练平台中,工作区充当标注的中心枢纽 与图像、视频和各种工具交互可用于创建高质量的标注.

工作区包括以下元素:

参阅:

• 图像设置
  • 添加网格覆盖到图像
  • 改变图像的颜色设置
• 添加图层和z轴滑块
• 与对象交互

图像设置

图像设置面板是一个通用的工具，用于微调图像的视觉方面. 是否需要调亮图像，增加对比度，或者做其他调整，这个面板是你的首选.

此外，该面板允许您在图像上覆盖网格，以获得更精确的标注

备注: 调整图像设置只会改变图片的显示方式. 图像本身将保持不变.

默认情况下，图像设置面板是不可见的. 要访问它，请单击向上箭头 () 图标位于工作区底部.

添加网格覆盖到图像

要将网格添加到图像中，请执行以下操作:

1. 打开图像设置面板.
2. 找到并选中允许您在图像上覆盖网格的框.
3. 在尺寸字段中输入所需的数字，以毫米为单位指定网格单元格的大小.
4. 从颜色下拉列表中，选择网格的颜色.
5. 使用不透明度滑块来改变网格覆盖的透明度.

改变图像的颜色设置

要更改图像的颜色设置，请执行以下操作:

1. 打开图像设置面板.
2. 使用滑块更改颜色参数.

有四种颜色参数设置:

亮度增加和减少图像的整体亮度:

对比度是图像中亮度的范围，从最亮到最暗.

饱和度描述了颜色的强度.

要将设置重置为默认值，单击重置颜色设置

添加图层和z轴滑块

z轴滑块允许你添加标注层 同时隐藏位于后面的图层.

你也可以通过移动滑块到你需要的图层来在图层之间移动.

当同一帧中出现多个z层时，滑块会被激活。

点击滑块上的 + 添加一个新图层;

按下它，一个新的层被自动创建和激活.

你也可以使用 + 键和 - 键在层之间重定位对象.

与对象交互

工作区还具有以下特性:

• 右键单击对象将打开对象卡片. 这个接口包含了修改对象标签和属性的基础控件， 还提供了对操作菜单的访问.

  

• 右击多边形点将打开一个菜单, 你可以在其中删除点或设置起始点.

  

2.1.12 - 设置

打开设置可以打开标题中的用户菜单，选择设置项或按 F2.

设置有两个选项卡:

在播放器选项里您可以:

• C和V快捷键的控制步长.
• 控制空格/播放 按钮的速度.
• 选择画布背景颜色.您可以选择背景颜色或手动输入(RGB或HEX格式).
• 重置缩放以原尺寸显示每个图像或像以前一样缩小 (在插值模式下默认启用，在标注模式下禁用).
• 旋转所有图像复选框-切换所有帧或单个帧的旋转.
• 平滑图像复选框-放大图像时的平滑图像.

  smoothed	pixelized

在工作区选项中您可以:

• 启用自动保存 复选框 — 默认关闭.

• 自动保存间隔 (分钟) 输入框 — 默认15分钟.

• 显示所有插值轨迹 复选框 — 在侧边面板上显示每个插值对象的隐藏对象(默认关闭).

• 始终显示标注对象详细信息 - 在画布上显示对象的文本，而不仅仅是当对象被激活时:

  

• 文本的内容 - 设置标注对象的组成部分:

  • ID - 标注对象的标识.
  • 属性 - 标注对象的属性.
  • 标签 - 标注对象的标签.
  • 来源- 创建对象的来源:MANUAL、AUTO或SEMI-AUTO.
  • 描述 - 属性的描述.

• 文本的位置 - 文本定位模式选择:

  • 自动 - 标注对象详细信息将自动放置在空闲空间所在的位置.
  • 居中 - 如果可能的话，对象细节将嵌入到相应的标注对象中.

• 文本字体的大小 - 指定标注对象详细信息的文本大小.

• 自动边界 - 启用自动边界的多边形和折线在绘图/编辑. 要了解更多信息，请参阅本节 用多边形标注.

• 智能多边形裁剪 - 激活智能裁剪时编辑多边形 (要了解更多,请参阅本节 编辑多边形)

• 在图像上显示标记 - 显示/隐藏当前帧上的标记

• AAM (Attribute annotation mode)缩放外边距 输入框 — 在属性标注模式下定义形状的外边距(px为单位).

• 控制点大小 — 定义工具中任何可交互点的大小

• 多边形近似的默认点数 通过这个设置，你可以选择多边形的默认点数. 适用于无服务器interactors和OpenCV scissors.

• 点击保存保存设置(设置会保存在服务器上，刷新页面后不会改变). 点击取消或按F2返回标注.

2.1.13 - 标注形状的类型

有几种形状可以用来标注图像:

• 矩形 or 边界框
• 多边形
• 点
• 椭圆

这就是它们的样子:

2.1.14 - 形状模式 (基础)

用法示例:

• 为一组图像创建新的标注.
• 为已有的标注添加/修改/删除对象.

1. 你需要在控制侧边栏选择矩形:

   

   在您开始之前，选择正确的标签 (应该由您在创建任务时指定) 和 绘制方式 (通过2个点或4个点):

   

2. 在形状模式中创建一个新的标注:

   • 点击形状创建一个单独的矩形.

     

   • 选择相反的点。第一个矩形已经准备好了!

     

   • 想了解更多关于创建矩形的内容,点击这里.

   • 可以使用鼠标调整矩形的边界和位置. 矩形的大小显示在右上角，您可以通过单击形状的任何一点来检查它. 您也可以用Ctrl+Z来撤销你的操作，用Shift+Ctrl+Z或Ctrl+Y来重做它们.

3. 下图是具有独立形状的完整注释框架的示例.

   

   更多信息请参阅形状模式(高级).

2.1.15 - 术语

标签

标签是标注对象的一种类型 (例如 缺口,铜渣等)

标注

标注是一组形状和轨迹。标注有几种类型:

• Manual 手动创建的
• Semi-automatic 它主要是自动创建的，但用户提供一些数据(例如插值)
• Automatic 在循环中是自动创建的

近似值

近似可以减少多边形中的点的数量. 可以用来减少标注文件和方便多边形的编辑.

状态

作业的状态.状态可以由指定的用户在作业内菜单中更改. 有几种可能的状态: 未开始, 进行中, 拒收, 已完成.

阶段

工作的阶段.该阶段通过任务页面上的下拉列表指定. 有三个阶段: 标注, 质检 或者 验收. 这个值会影响任务进度条.

子集

一个项目可以有子集。子集(Subsets)是任务的分组，使数据集的处理更容易. 它可以是测试、训练、验证或自定义子集.

2.2 - 高级

2.2.1 - 项目页面

项目页面

在此页上，您可以创建新项目，从备份创建项目，还可以查看已创建的项目.

在左上角有一个搜索栏，使用该搜索栏可以通过项目名称、分配人等找到项目. 右上角有排序，快速筛选和筛选.

筛选

应用筛选需禁用快速筛选.

筛选的工作原理与标注筛选类似, 你可以从属性中创建筛选规则, 操作符 和值并将规则分组. 更多细节，请参阅筛选部分. 了解更多关于日期和时间选择.

要清除所有筛选，请按清除筛选.

项目列表支持的属性

创建项目

在自训练平台，您可以创建包含相同类型任务的项目. 所有与项目相关的任务都将继承一个标签列表.

要创建项目，请单击顶部菜单中的项目项，进入项目部分. 在“项目”页上，您可以看到项目列表，使用搜索, 或者通过点击+按钮并选择创建新项目来创建一个新项目.

注意，项目将在创建时选择的组织中创建. 阅读更多关于组织的信息.

你可以更改:项目名称, 检测设备(可选)标签列表(将用于作为项目的一部分创建的任务).

如果需要使用项目数据去训练,请设置相应检测设备和工序\表面

了解更多关于创建标签列表.

要保存和打开项目，请单击提交&打开按钮。你也 可以点击提交&继续按钮来依次创建多个项目

创建后，项目将出现在项目页面上。要打开一个项目，只需单击它.

在这里，您可以执行以下操作:

1. 更改项目的标题.

2. 打开动作菜单。每个按钮负责动作菜单中的特定功能:

   • 导出/导入数据集 - 下载/上传特定格式的标注或标注和图像. 更多信息请参阅导出/导入数据集 章节.
   • 备份项目 - 做一个项目备份 详情请参阅备份章节.
   • 删除 - 删除项目和所有相关任务.
   • 标注 - 跳转到该项目下的标注作业列表界面
   • 训练 - 跳转到训练界面
   • 快速创建任务 - 将检修导出的相应模型属性文件夹里的图片作为该项目的任务,
     任务名称默认为当前日期

3. 更改项目的设备和模型属性

4. 更改标签. 您可以在JSon源码模式或构造模式下为现有标签添加新标签或属性. 您还可以更改不同标签的颜色.

5. 分配给 — 用于将一个项目分配给一个人. 开始输入分配人的名字和/或从下拉列表中选择正确的人.

6. 任务 — 具有搜索功能的特定项目的所有任务列表, 对项目中的任务进行排序和筛选. 阅读更多关于搜索的内容. 阅读更多关于排序和筛选的内容 可以为项目中的任务选择一个子集. 你可以使用可用的选项(训练、测试、验证)或者设置你自己的选项.

2.2.2 - 搜索

• 搜索所有字段(所有者、分配人、任务名称、任务状态). 要执行，请在搜索字段中输入搜索文本.

2.2.3 - 组织

组织是指由多个用户组成的团队在项目中一起工作并共享任务的特性.

创建一个组织，邀请你的团队成员，并分配角色，以使团队更好地完成共享的任务.

参阅:

• 个人工作区
• 新建组织
  • 切换组织
• 组织页面
  • 邀请成员进入组织
  • 删除组织

个人工作区

当没有选择组织时，帐户的默认状态是激活的.

如果您没有选择一个组织，系统会将所有新资源直接链接到您的个人账户，从而阻止与他人共享资源.

当个人工作区被选中时，它将在菜单中被标记为一个标记.

新建组织

要创建一个组织，请执行以下操作:

1. 登陆自训练平台.

2. 在顶部菜单中，点击你的用户名 > 组织 > + 创建.

   

3. 填写以下字段并单击提交

   

创建后，组织页面将自动打开.

如果想要将来访问您的组织，请访问用户名 > 组织

备注, 如果你创建了超过10个组织, 下拉菜单中会出现一行切换组织.

切换组织

如果你有多个组织， 可以在任何给定的时间在这些组织之间切换.

按照这些步骤操作:

1. 在顶部菜单中，选择您的用户名 > 组织.
2. 在个人空间部分的下拉菜单中, 选择您想要的组织.

组织页面

组织页面是一个可以编辑组织信息和管理组织成员的地方.

备注 为了访问组织页面，你必须首先激活 该组织 (详情请参阅 切换组织). 如果没有激活，组织页面将保持不可访问.
当在下拉菜单中勾选一个组织，并且该组织的名称在右上角的用户名下可见时, 则认为该组织已激活.

要进入组织页面，请执行以下操作:

1. 在顶部菜单中，点击你的用户名 > 组织.
2. 在下拉菜单中选择组织.
3. 在下拉菜单中，单击设置.

邀请成员进入组织

要向组织添加成员，请执行以下操作:

1. 转到组织页面，然后点击邀请成员.

2. 填写表格(见下文).

   

3. 单击 Ok.

邀请成员表单包含以下字段:

组织的成员将显示在组织页面中。

组织成员可以离开组织

进入组织页面 > 离开组织.

组织所有者可以通过点击垃圾箱图标.

删除组织

您可以删除您创建的组织.

备注: 删除组织将删除所有相关资源 (标注, 作业, 任务, 项目等).

要移除一个组织，请执行以下操作:

1. 跳转到组织页面.
2. 在右上角单击动作 > 移除组织.
3. 在对话框字段中输入组织的短名称.
4. 单击 移除.

2.2.4 - 形状模式(高级)

该模式下的基础操作已在这一部分介绍: 形状模式(基础).

遮挡 遮挡是一个属性，当一个对象被另一个对象遮挡，或者在帧上不完全可见时使用. 使用快捷方式Q快速设置属性.

示例:下图中的三辆车应该标记为被遮挡.

如果一个框架包含太多的对象，并且由于许多形状大多放置在同一个位置， 所以很难对它们进行标注，那么将它们锁定是有意义的 锁定对象的形状是透明的，并且很容易标注新对象 此外，您不能意外地更改之前注释过的对象。快捷方式:L

2.2.5 - 用户角色

宜美智AI自训练系统提供两种不同类型的角色：

• 全局角色: 这些是适用于整个系统的通用角色。任何登录AI自训练系统的人都会自动被分配一个全局角色。它设置了每个注册用户在系统上的基本权限，无论他们的具体任务或职责如何.
• 组织角色: 这些角色决定用户在组织内可以做什么，从而允许根据用户的具体职责和责任进行更有针对性的访问.

组织角色通过确定不同资源（例如任务或工作）的可见性来补充全局角色.

详阅:

• 系统的全局角色
• 系统的组织角色
• 作业阶段

系统的全局角色

系统已实施三个全局角色，分类为用户组。这些角色是:

系统的组织角色

组织角色仅在 系统组织内可用.

当用户被邀请加入组织时，就会分配组织角色.

自训练系统中有以下角色:

作业阶段

作业 阶段 可以分配给任何团队成员.

阶段不是角色.

作业可以有一个指定的用户（具有任何角色），并且该受让人 将执行特定阶段的作业，即标注、质检或验收该作业.

工作阶段可以是:

任何受让人都可以通过注释界面工具栏修改其分配的阶段特定功能:

• 标注: 将界面切换到标注模式.
• 质检: 将界面切换到质检模式.

2.2.6 - 用矩形标注

要了解有关使用矩形进行标注的更多信息，请参阅各节:

• 形状模式 (基础)
• 形状模式 (高级)

矩形旋转

要旋转矩形，拉旋转点. 旋转是围绕矩形的中心进行的. 以固定的角度旋转(15度的倍数),按住shift键。 在旋转的过程中，可以看到旋转的角度.

用矩形标注4点

这里提出了一种有效的边界框标注方法. 在开始之前，您需要确保选择4点绘制方法.

按形状进入绘图模式。点击四个极值点: 物体上最上面、最下面、最左边和最右边的物理点. 点击第四个点后，绘图将自动完成. 按Esc取消编辑.

2.2.7 - 用多边形标注

2.2.7.1 - 手动绘制

它用于语义/实例分割.

在开始之前，您需要在控制栏上选择多边形并选择正确的标签.

• 点击“形状”进入绘图模式. 有两种绘制多边形的方法: 通过点击或在屏幕上拖动鼠标同时按住“Shift”创建点.

点击	按住Shift+拖拽

• 未按Shift键时，可以放大/缩小(滚动鼠标滚轮时) 和移动(点击鼠标滚轮并移动鼠标时), 也可以右键删除前一点.
• 你可以使用对象侧边栏中的选定不透明度滑块来改变多边形的不透明度. 您可以在对象侧边栏章节中阅读更多内容.
• 再次按N或点击顶部面板上的完成按钮来完成形状.
• 创建多边形后，您可以移动点或通过右键单击并选择删除点来删除它们 或在上下文菜单中按下Alt键单击.

2.2.7.2 - 使用自动边界绘图

绘制多边形时可以使用自动边框. 使用自动边框可以自动跟踪标注中现有多边形的轮廓.

• 要做到这一点，请进入设置->工作区选项卡并启用自动边界 或在绘制多边形时按Ctrl键.

  

• 开始绘制/编辑多边形.

• 其他形状的点将被突出显示，这意味着多边形可以附加到它们上.

• 定义要重复的多边形路径部分.

  

• 点击轮廓部分的第一个点.

  

• 然后单击位于路径部分的任何点。选中的点将以紫色高亮显示.

  

• 点击最后一个点，这个点的轮廓将自动生成.

  

此外，您可以在点数字段中设置固定的点数, 然后自动停止绘制. 要启用拖动，你应该在多边形内部右键单击并选择切换固定属性.

下面你可以看到不透明度和黑色描边的效果:

如果您需要标注小物体, 请将创建任务对话框中的图像质量增加到95，以便您方便.

2.2.7.3 - 编辑多边形

要编辑一个多边形，你必须在按住Shift的同时点击它，它将打开多边形编辑器.

• 在编辑器中，您可以创建新的点或通过关闭另一个点上的线来删除多边形的一部分.

• 当智能多边形裁剪选项在设置中激活时, 考虑两个标准来决定在自动编辑过程中应该切断多边形的哪一部分.

  • 第一个标准是切割点的数量.
  • 第二个标准是切割曲线的长度.

  如果两个标准都建议切割相同的部分，则算法自动工作，如果不是，则必须由用户做出决定. 如果你想手动选择一个多边形的哪一部分应该被切断, 在设置中禁用智能多边形裁剪。 在这种情况下，关闭多边形后，您可以选择要保留的多边形部分.

  

• 您可以按Esc取消编辑.

  

2.2.8 - 用椭圆标注

用于道路标志标注 工业中标隔离圈 通孔等用于分割.

先，你需要选择控制栏上的椭圆.

选择一个标签，然后点击形状开始绘制. 椭圆的创建方法与矩形相同, 你需要指定两个相对的点, 这个椭圆会被嵌在一个想象的矩形中. 按N或点击顶部面板上的完成按钮来完成形状.

你可以使用旋转点旋转椭圆，方法与矩形相同.

2.2.9 - OpenCV和AI工具

在AI和OpenCV工具的帮助下，以半自动和自动模式对数据进行标注.

参阅:

• 交互器
  • AI工具: 使用交互器标注
  • AI工具: 增加额外的点
  • AI工具: 删除点
  • OpenCV: 智能剪刀
  • 设置
  • 交互器模型
• 目标检测
  • 标签匹配
  • 使用目标检测标注
  • 目标检测模型

交互器

交互器是AI和OpenCV工具的一部分.

使用交互器标记图像中的对象 半自动创建多边形.

创建多边形时，可以使用正点 或者是负点(对于某些模型):

• 正点定义对象所在的区域。
• 负点定义对象不在的区域。

AI工具: 使用交互器标注

要使用交互器进行标注，请执行以下操作:

1. 点击魔术棒 , 然后转到交互器标签页.
2. 从标签下拉菜单中，选择多边形的标签.
3. 从交互器下拉菜单中，选择一个模型 (详阅 交互器模型).
   点击问号以查看每个模型的信息:
   
4. (可选)如果模型返回掩膜，你需要 转换掩膜到多边形，使用转换掩膜到多边形切换.
5. 点击 交互.
6. 左键点击可添加正点，右键点击可添加负点.
   可以添加的点数取决于模型.
7. 在顶部菜单, 点击 完成 (或者 Shift+N, N).

AI工具: 增加额外的点

**注意:**更多的点可以提高轮廓的准确性，但会使形状编辑更加困难. 较少的点使形状编辑更容易，但降低了轮廓精度.

每个模型都有一个用于注释的最小所需点数。 一旦达到了所需的点数，就开始请求自动发送到服务器。 服务器处理请求并向帧中添加一个多边形。

为了得到一个更准确的轮廓, 首先推迟服务器的请求来增加点数:

1. 按住Ctrl键.
   在顶部面板上，推迟按钮将变成蓝色.
2. 向图像中添加点.
3. 当准备好时，松开Ctrl键.

如果你在对象完成时使用了将掩膜转为多边形， 你可以像编辑多边形一样编辑它.

你可以用滑块改变多边形的点数:

AI工具: 删除点

要删除一个点，请执行以下操作:

1. 将光标悬停在要删除的点上.
2. 如果这个点可以被删除，它会放大，光标会变成一个十字.
3. 左键点击这个点.

OpenCV: 智能剪刀

要使用智能剪刀, 请执行以下操作:

1. 在菜单栏上，单击 OpenCV 然后等待库加载.

   
   

2. 转到Drawing选项卡，选择标签，并单击智能剪刀按钮.

   

3. 在已分配对象的边界上添加第一个点.
   你会看到一条线重复物体的轮廓.

4. 添加第二个点，使前一个点在限制阈值内.
   之后，在这些点之间会自动创建一条重复对象边界的线.

5. 要完成放置点，在顶部菜单上单击完成(或键盘上的N).

这样就创建了一个多边形.

你可以用滑块改变多边形的点数:

要增加或降低操作阈值，按住Ctrl并滚动鼠标滚轮.

在绘制过程中，可以用鼠标左键点击最后一个点来删除它.

设置

• 如何调整多边形, 详阅 对象栏.

• 有关多边形的更多信息，请参见 标注多边形.

交互器模型

模型	工具	描述	例子
Segment Anything Model (SAM)	AI工具	分割任意模型(SAM)产生高 质量的对象掩膜，它可用于生成图像中所有对象的 掩膜。它在包含1100万张图像的数据集 和 11亿个掩膜的数据集上进行了训练，并在各种分割任务上具有强大的零样本性能。 更多信息，请参见: GitHub: Segment Anything Site: Segment Anything Paper: Segment Anything
Deep extreme cut (DEXTR)	AI工具	这是原始模型的优化版本， ，于2017年底推出。它使用对象 的极值点的 信息来获得它的掩膜。然后掩膜 被转换为多边形。 目前这是CPU上最快的交互器。 更多信息，请参见: GitHub: DEXTR-PyTorch Site: DEXTR-PyTorch Paper: DEXTR-PyTorch
Feature backpropagating refinement scheme (f-BRS)	AI工具	该模型允许使用正点(应该在前景上左键点击) 和负点(如果需要，应该在背景上右键点击) 掩膜 。如果可能的话，建议在GPU上运行模型。 有关更多信息，请参见: GitHub: f-BRS Paper: f-BRS
High Resolution Net (HRNet)	AI工具	该模型允许使用正点(应该在前景上左键点击) 和负点(如果需要，应该在背景上右键点击) 掩膜 。如果可能的话，建议在GPU上运行模型。 有关更多信息，请参见: GitHub: HRNet Paper: HRNet
Inside-Outside-Guidance (IOG)	AI工具	T他的模型使用边界框和内部/外部点来创建一个掩膜。 首先，你需要创建一个边界框来包裹对象。 然后你需要使用正负点来 告诉模型哪里是前景，哪里是背景。 负点是可选的。 有关更多信息，请参阅:: GitHub: IOG Paper: IOG
智能剪刀	OpenCV	智能剪刀是一种CV方法， 通过放置点并在点与点之间 自动绘制直线来创建多边形。 相邻点之间的距离受到动作阈值的限制， 显示为与光标绑定的红色正方形。 有关更多信息，请参见: Site: Intelligent Scissors Specification

目标检测

目标检测是AI工具的一部分.

使用目标检测自动识别和定位图像中的物体.

标签匹配

每个模型都是在数据集上训练的，并且只支持数据集的标签.

例如:

• DL模型的标签为 缺口.
• 你的任务(或项目)的标签是针孔.

为了进行标注，您需要匹配这两个标签以给DL模型一个提示， 在本例中为缺口 = 针孔。

如果你有一个不在DL标签列表中的标签，你将无法匹配它们.

因此，支持的深度学习模型只适用于某些标签.
要查看每个型号的标签列表，请参见 目标检测模型.

使用目标检测标注

要使用目标检测进行标注，请执行以下操作:

1. 点击魔术棒 , 然后转到目标检测选项卡.

2. 从模型下拉菜单中选择模型 (参见 目标检测模型).

3. 从左下拉框中选择DL模型标签，从右下拉框中选择与您的任务匹配的标签.

   

4. (可选)如果您需要改变预标注的阈值，可填入阈值(区间为(0,1)) 默认0.5..

5. 点击 标注.

这个动作会自动标注一帧. 参见自动标注.

目标检测模型

2.2.10 - 自动标注

宜美智自训练中的自动标注是一种您可以使用预训练模型自动预标注数据的工具.

参见:

• 运行自动标注
• 标签匹配
• 模型

运行自动标注

要开始自动标注，请执行以下操作:

1. 在顶部菜单上，单击任务.

2. 找到你想标注的任务，点击动作 > 自动标注.

   

3. 在自动标注对话框中，从下拉列表中选择一个 模型.

4. 匹配 模型和任务的标签.

5. (可选)如果您需要改变预标注的阈值，可填入阈值(区间为(0,1)) 默认0.5.

6. (可选)如果你需要删除所有之前的标注，切换到清除旧标注。

   

1.点击标注.

后会在进度条上显示注释的进度.

单击“取消”可以随时停止自动标注.

标签匹配

每个模型都是在数据集上训练的，并且只支持数据集的标签.

例如:

• DL模型的标签为 缺口.
• 你的任务(或项目)的标签是针孔.

为了进行标注，您需要匹配这两个标签以给DL模型一个提示， 在本例中为缺口 = 针孔。

如果你有一个不在DL标签列表中的标签，你将无法匹配它们.

模型

2.2.11 - 备份任务和项目

概述

在标注平台上，您可以备份任务和项目。 这可以用于备份您PC上的任务或项目，或传输到另一台服务器.

创建备份

要备份任务或项目，请打开操作菜单并选择“备份任务”或“备份项目”。.

(可选) 在自定义文件名文本字段中指定备份文件名称, 否则备份项目的文件名称将由掩码 project_<项目名>_backup_<日期>_<时间>.zip给出 备份任务的文件名task_<任务名>_backup_<日期>_<时间>.zip.

从备份中创建

要从备份创建任务或项目，请转到任务或项目页面, 单击从备份创建按钮并选择所需的存档.

结果，您将得到一个任务，其中包含先前导出的任务的数据、参数和标注.

备份文件结构

结果，你会得到一个包含数据的zip存档, 任务或项目，任务规范和标注具有以下结构:

• 任务备份结构
• 项目备份结构

    .
    ├── data
    │   └── {用户上传的数据}
    ├── task.json
    └── annotations.json
  

    .
    ├── task_{id}
    │   ├── data
    │   │   └── {用户上传的数据}
    │   ├── task.json
    │   └── annotations.json
    └── project.json
  

2.2.12 - 删除帧

删除帧

您可以从任务中删除当前帧. 这一帧既不会出现在UI中，也不会出现在导出的标注中. 因此，可以标记不受标注约束的损坏帧.

1. 转到作业标注视图，点击删除图像按钮(Alt+Del).

   备注: 当您使用快捷方式删除时, 该帧将立即被删除，无需额外确认.

   

2. 之后，您将被要求确认帧删除.

   备注: 该帧中的所有标注将被删除，未保存的标注将被保存 并且该帧将在标注视图中不可见(直到您在设置中使其可见). 如果任务中有一些重叠，并且删除的帧落在这个间隔内, 那么这将导致该帧在另一个作业中也不可用.

设置已删除帧的可见性和导航

I如果您需要启用显示删除的帧，您可以在设置中这样做.

1. 进入设置，选择播放器设置.

   

2. 点击显示已删除的帧复选框。然后关闭设置对话框.

   

3. 然后，您将能够浏览已删除的帧. 但是标注工具将不可用。删除的帧在相应的叠加中不同.

4. 有几种视图方法可以在不启用此选项的情况下浏览已删除的帧:

   • 通过直接导航方法转到框架:导航滑块或框架输入字段,
   • 通过直接链接进入框架.

5. 带有步长的导航将不计算已删除的帧.

恢复删除的帧

您还可以在任务中恢复已删除的帧.

1. 如前面所述，打开已删除帧的可见性，然后转到要恢复的已删除帧.

   

2. 点击还原图标。框架将立即恢复.

2.2.13 - 导出/导入数据集并上传标注

导出数据集

可以将数据集导出到项目、任务或作业.

1. 要下载最新的标注，必须首先保存所有更改. 点击保存按钮。有一个快捷键Ctrl+S来快速保存标注.

   

2. 之后，点击菜单按钮. 任务和项目数据集的导出和导入通过动作菜单进行.

3. 按导出数据集按钮.

   

4. 选择导出数据集的格式.

   
   

5. 要使用数据集下载图像，请启用保存图像选项.

6. (可选)要给结果归档文件命名，请使用自定义文件名字段.

导入数据集

您只能将数据集导入项目。在这种情况下，数据将被划分为子集. 要导入数据集，请在项目页面上执行以下操作:

• 打开 动作 menu.
• 按导入数据集按钮.
• 选择数据集格式(如果在导出期间没有指定自定义名称，则格式将在存档名称中).
• 将文件拖动到文件上传区域或单击上传区域，通过资源管理器选择该文件.

在导入过程中，您将能够跟踪导入的进度。

上传标注

在任务或作业中，您可以上传标注。 为此，在任务的动作菜单中或在顶部面板的作业菜单中选择上传标注项， 选择您计划上传标注的格式，并通过资源管理器选择标注文件或存档.

2.2.14 - 快捷键

许多UI元素都有快捷提示。将你的指针指向一个必需的元素来查看它.

2.2.15 - 筛选

使用该功能有一些原因:

1. 使用筛选时，与过滤器不匹配的对象将被隐藏.
2. 快速导航到包含感兴趣对象的帧之间. 你可以使用键盘上的左箭头和右箭头键来实现这个目的， 或者通过右键单击并选择通过筛选切换来自定义用户界面按钮。 如果没有与筛选条件匹配的对象，你将前进到包含任何已注释对象的前一帧或下一帧.

要使用筛选，你需要点击顶部面板上的按钮.

新建筛选

它将打开一个窗口用于筛选输入。在这里你会发现两个按钮:Add rule和Add group.

规则

Add rule按钮为对象显示添加规则。规则可以使用以下属性:

支持的标注属性

• 项目列表的支持属性

• 任务列表的支持属性

• 作业列表的支持属性

支持的属性运算符

== - 等于; != - 不等于; > - 大于; >= - 大于等于; < - 小于; <= - 小于等于;

Any in; Not in - 这些操作符允许您在一条规则中设置多个值;

Is empty; is not empty – 这些操作符不需要输入值,意思是为空和非空.

Between; Not between – 这些操作符允许您在两个值之间选择一个范围.

Like - 此操作符指示属性必须包含一个值.

Starts with; Ends with - 按开头或结尾筛选.

有些属性支持您可以选择的两种类型的值:

您可以添加多个规则，为此单击add rule按钮并设置另一个规则. 一旦你设置了一个新规则，你就可以选择通过哪个操作符来连接它们: And 或者 Or.

所有后续规则将由所选的操作符连接. 单击提交来应用筛选，或者如果您希望通过不同的操作符连接多个规则，请使用group.

分组

要添加组，请单击Add group按钮。在组内，您可以创建规则或组.

如果组中有多个规则，它们可以用And或or操作符连接. 规则组将像组外的单独规则一样工作，并将由组外的操作员加入. 您可以在其他组中创建组，为此，您需要单击组内的add group按钮.

你可以改变规则和小组。要移动规则或组，请通过按钮拖动它. 要删除规则或组，请单击删除按钮.

如果你激活Not按钮，不匹配组的对象将被过滤掉. 点击提交来应用筛选. 取消 按钮取消筛选. 清除筛选按钮移除筛选.

一旦应用，筛选框自动出现在最近使用列表中。列表的最大长度是10.

排序和筛选列表

在项目, 项目页面上的任务列表, 任务, 作业,你可以使用排序和筛选.

应用的排序和筛选将显示在您的浏览器的URL, 因此，您可以通过应用排序和筛选来共享页面.

排序

您可以按以下参数进行排序:

• 作业列表: ID, 分配人, 上次更新, 阶段, 状态, 任务ID, p项目ID, 任务名称, 项目名称.
• 任务列表或项目页上的任务列表: ID, 所有者, 状态, 分配人, 上次更新, 子集, 模式, 维度, 项目ID, 名称, 项目名称.
• 项目列表: ID, 分配人, 所有者, 状态, 名称, 上次更新.

要应用排序，请将参数拖动到水平栏上方的顶部区域. 水平线以下的参数将不会被应用. 通过移动参数，你可以改变优先级, 首先，排序将根据上述参数进行.

按下排序按钮可切换升序排序/降序排序.

快速筛选

快速筛选包含几个常用的筛选:

• 分配给我 - 只显示分配给您的那些项目、任务或工作.
• 归我所有 - 只显示属于您的项目或任务.
• 未完成 - 只显示那些状态不是已完成的项目、任务或作业.

日期和时间的选择

当创建上次更新规则时，您可以使用选择窗口选择日期和时间.

您可以使用箭头或通过单击年份和月份来选择年份和月份。 要选择日期，在日历上点击它， 要选择时间，可以使用滚动列表选择小时和分钟。 或者你可以点击Now按钮来选择当前的日期和时间。 如需申请，请按Ok.

2.2.16 - 质检

2.2.16.1 - 自动QA, 质检 & Honeypot(蜜罐)

在 CVAT 中，可以通过创建一个Ground truth（基准）任务（Honeypot，称为蜜罐任务）来评估标注的质量。 为了估算任务的质量，CVAT 会将任务中的其他所有工作与已建立的Ground truth任务进行对比，并基于此对比计算标注质量.

注意 质量评估仅支持二维任务，支持除二维立方体以外的所有标注类型。

注意 轨迹被视为单独的形状，并在每一帧与其他轨迹和形状进行逐帧比较。

详情请参阅:

• Ground truth作业
• 管理Ground Truth 作业: 导出以及删除
  • 导出
  • 删除
• 使用Ground truth作业评估数据质量
  • 质量数据
  • 标注质量设置
  • 标注平台界面中的GT冲突

Ground truth作业

Ground truth（基准）作业是告诉标注平台在哪里存储和获取用于任务质量评估的“正确”标注的一种方式。

为了估算任务的质量，你需要在任务中创建一个Ground truth作业并进行标注。 你不需要对整个数据集进行两次标注，数据集中一小部分数据的标注质量能够反映整个数据集的标注质量。

为了确保质量保证功能正常运行，Ground truth作业必须包含任务中一小部分帧，这些帧需要随机选择。 根据数据集的大小和任务的复杂性，通常5-15% 的数据已经足够用于质量评估，同时还能保持额外标注工作量在可接受的范围内。

例如，对于一个包含2000帧的典型任务，选择5%即100帧进行额外标注，已经足够用于评估标注质量。如果任务只包含30帧，建议选择8-10 帧，约占30%。

尽管在较小数据集的情况下超过了 15%，但为了可靠地估算质量，我们需要更多样本

要创建一份Ground truth作业，请执行以下步骤:

1. 创建任务, 并打开任务页面.

2. 点击 +.

   

3. 在添加新作业 窗口中, 填写以下字段:

   

   • 作业类型: 使用默认参数Ground truth.
   • 图片选择方法: 使用默认参数 随机.
   • 百分比数量 %: 设置Ground truth作业所需的帧的百分比.
     注意 当使用百分比数量时，图像数量字段会自动填充.
   • 图像数量: 设置Ground truth作业所需的帧数.
     注意 当使用图像数量时，百分比数量字段会自动填充.
   • Seed: (可选) 如果需要使随机选择具有可重复性，指定一个数字。 它可以是任意整数，相同的值会生成相同的随机选择（前提是帧数未改变）

4. 点击 提交.

5. 标注图像，并保存工作.

6. 将作业状态更改为已完成.

7. 将阶段更改为验收.

该Ground truth作业出现在任务列表中.

管理Ground Truth 作业: 导出以及删除

（Ground truth）作业的标注不会包含在数据集导出中，也无法在任务标注导入或任务的自动标注中被导入

导出和删除选项可以从作业的菜单中访问。

导出

要从Ground truth作业中导出标注，请执行以下步骤.

1. 打开任务，并在任务列表中找到一份作业.
2. 点击三个点以打开菜单.
3. 从菜单中选择 导出作业.

删除

要删除Ground truth 作业，请执行以下步骤.

1. 打开任务，并在任务列表中找到该Ground truth 作业.
2. 点击三个点以打开菜单.
3. 从菜单中选择 删除.

使用Ground truth作业评估数据质量

一旦你建立了Ground truth作业，请继续对数据集进行标注.

标注平台将在任务标注完成后（处于验收阶段且状态为已完成）开始进行标注作业与Ground truth作业之间的质量比较.

注意 质量计算过程可能需要几个小时，这取决于数据量和标注对象 的数量，并且在任务更新后不会立即更新。

要查看结果，请转到任务 > 动作 > 质量控制> 质量选项卡.

质量数据

该分析页面具有以下这几个字段:

标注质量设置

如果你需要调整一些比较方面的内容, 你可以从标注质量设置菜单进行修改.

你可以配置应该将什么样的重叠视为低质量，或者如何进行标注的比较.

更新后的设置将在下次质量更新时生效.

要打开标注质量设置, 请找到 质量评估报告 ，然后在其右侧点击三个点.

将会弹出以下窗口. 将鼠标悬停在 ? 标记上，可以了解每个字段的含义.

标注质量设置含有以下几个参数:

标注平台界面中的GT冲突

要在标注平台界面中查看GT冲突，请转到 质检 > 问题 > 显示ground truth标注和冲突.

ground truth（GT）注释显示为带有相关标签的虚线框.

将鼠标悬停在右侧面板中的问题上时，相关的GT标注将会高亮显示.

使用问题工具栏中的箭头，可以在GT冲突之间移动.

要创建与冲突相关的问题，右键单击边界框，然后从菜单中选择要创建的问题类型.

2.2.16.2 - 手动质检

检查标注的特殊模式允许你指向帧中包含错误的对象或区域.

质检

要进行质检，您需要将任务页面上所需作业的阶段更改为验证,并分配一个用户来进行检查 现在工作会以不同的质检界面打开. 你也可以使用顶部面板的界面切换器切换到质检模式.

质检模式是一种UI模式，有一个特殊的问题工具，你可以使用它来识别对象 或框架中的区域，并描述问题.

• 要做到这一点，首先点击控制侧边栏上的打开一个问题图标:

  

• 然后单击框架中的一个位置以突出显示该位置或通过按住鼠标左键突出显示该区域并描述问题. 要选择一个对象，右键单击它并选择打开一个问题或选择几个快速问题之一 该对象或区域将以红色阴影显示.

  

• 创建的问题将出现在工作区和对象侧边栏的问题选项卡中.

• 标记所有问题后，保存注释，打开菜单并选择作业状态拒收或完成.

  

质检之后，其他用户将能够看到问题，对每个问题发表评论，并将问题的状态更改为`已解决``.

问题修复后，从菜单中选择完成作业来完成任务. 或者，您可以在任务页面中将阶段切换到验收.

解决问题

质检之后，你可以在对象侧栏的问题选项卡中看到这些问题.

• 你可以使用问题标签上的箭头来导航包含问题的帧.

  

• 在工作区中，您可以单击问题，您可以发送关于该问题的评论, 或者，如果问题已解决，则将状态更改为解决. 你可以通过点击删除来移除这个问题 (如果您的帐户有适当的权限).

• 如果在一个地方创建了几个问题，您可以通过将鼠标悬停在问题上并滚动鼠标滚轮来访问它们.

如果问题解决了，您可以通过单击重新打开按钮重新打开问题.

2.2.17 - 形状分组

这个特性允许我们对多个形状进行分组.

You may use the Group Shapes button or shortcuts:

• ctrl+G -在组模式下开始选择/结束选择

• Esc -关闭群组模式

• Shift+G -重置选中形状的分组

你可以选择形状，点击它们或者选择一个区域.

分组后的形状将在转储标注中包含group_id.

也可以将颜色分布从实例(默认)切换到组. 你必须切换通过组颜色分类复选框.

没有group_id的形状将以白色高亮显示.

3 - 训练教程

3.1 - 训练步骤

• 创建项目
• 快速创建任务
• 进行标注
• 开始训练

创建项目

创建项目.具体请参阅创建项目

备注:因为需要该项目的数据参与训练,故创建项目时最好填写检修保存路径以及用户名和密码(用于快速创建任务)，选择设备和工序/表面
各种工序所使用的标签的Json源码格式请现场AI实施人员给予 检修保存图片路径、主机用户名以及共享密码将被遗弃

快速创建任务

(将被移除，请使用手动创建任务, 一定要指定项目)

1. 设置检修软件AOI是AI工序选择 AVI是AI膜面选择,只有设置了才会导出图片
2. 检修软件导出所需图片,导出路径为参数设置->缺陷报告路径下的Dataset文件夹的以AI工序选择的名称命名的文件夹内
   • F7判定所选图片为漏失并导出到路径中的aoi_missing文件夹中
   • F8判定所选图片为误判并导出到路径中的aoi_wrong文件夹中
3. 在项目页面上动作菜单里点击快速创建任务按钮, 就会选择从检修导出的图片上传到服务器并创建任务,任务命名默认为当前日期

备注 从项目快速创建任务取决于项目的工序或膜面,比如,如果项目的工序是内层,则快速创建任务所选的图片是从{导出路径}/内层中读取所有图片,如果没有图片,则会提示错误

进行标注

标注请参考

• 使用矩形标注
• 使用多边形标注

标注完成之后在标注界面的菜单点击完成作业

创建训练任务

要创建新训练任务，请打开训练任务配置:

并指定以下参数:

1. 在名称字段, 输入新任务的名称.
2. 指定模型并选择任务
3. 选择主机以及相应的显卡（单机多卡训练）
4. 训练参数
   1. 训练批次： 分批读取数据集的批量大小
   2. 图像尺寸： 用于训练数据的图像尺寸
   3. 训练周期： 选择深度学习训练次数,训练轮数越多,通常学习越深,但到了一定轮数就会有极限，并且容易过拟合

进入训练任务详情进行训练

3.2 - 训练任务页面

任务页面包含元素，每个元素与一个单独的任务相关。它们按创建顺序排序. 每个元素包含:任务名称，进度条，按钮 打开, 菜单 动作. 每个按钮负责菜单中的动作特定功能:

• 导出模型 — 下载该训练训练出的特定格式的模型文件.
• 验证模型 - 使用该模型文件创建推理任务
• 删除 — 删除训练任务.

在左上角有一个搜索栏，使用它你可以找到任务的分配人员，任务名称等. 右上角有排序, 快速筛选和筛选.

筛选

应用筛选器禁用快速筛选器.

筛选器的工作原理与标注过滤器类似， 你可以从属性中创建规则 运算符 和值 并将规则 分组. 有关详细信息,请参阅 筛选部分. 了解更多关于日期和时间选择.

要清除所有筛选,请单击 清除筛选.

支持为任务列表的属性

按打开按钮进入任务详情.

3.3 - 训练任务详情界面

训练任务详情是一个训练页面，包含训练详情，训练状态，训练结果以及模型推理记录

1. 模型训练卡片

   1. 首先展示创建训练任务所填入的参数
   2. 底部三个按钮 创建训练集、开始训练、停止训练
   3. 训练步骤
      1. 首先点击创建训练集以匹配训练代码所需的数据集， 如果其中任务发生标注改变的时候，需重新创建训练集进行训练
      2. 点击开始训练直到训练结束
      3. 停止训练[可选] 如果中途训练已达到训练预期，即可停止训练保存训练结果

2. 训练状态卡片

   1. 训练状态
   2. 创建时间
   3. 创建数据集时间
   4. 开始时间
   5. 结束时间
   6. 训练用时

3. 近500条推理记录 使用该训练任务训练出来的模型进行推理的任务

4. 训练进度卡片 包含训练代码每个周期训练出来的指标趋势图

3.4 - 各类模型标签Json源码

见

• AOI
  • 内层
  • 外层
  • 树脂塞孔
• AVI

AOI

内层

[
  {
    "name": "板损",
    "color": "#33ddff",
    "type": "any",
    "attributes": []
  },
  {
    "name": "刮花",
    "color": "#fa3253",
    "type": "any",
    "attributes": []
  },
  {
    "name": "铜渣",
    "color": "#34d1b7",
    "type": "any",
    "attributes": []
  },
  {
    "name": "微短",
    "color": "#ff007c",
    "type": "any",
    "attributes": []
  },
  {
    "name": "杂物_重",
    "color": "#ff6037",
    "type": "any",
    "attributes": []
  },
  {
    "name": "杂物_轻",
    "color": "#ddff33",
    "type": "any",
    "attributes": []
  },
  {
    "name": "缺口",
    "color": "#24b353",
    "type": "any",
    "attributes": []
  },
  {
    "name": "针孔",
    "color": "#b83df5",
    "type": "any",
    "attributes": []
  },
  {
    "name": "缺铜",
    "color": "#00a9ff",
    "type": "any",
    "attributes": []
  },
  {
    "name": "油墨_蓝",
    "color": "#ffff00",
    "type": "any",
    "attributes": []
  },
  {
    "name": "油墨_绿",
    "color": "#007fff",
    "type": "any",
    "attributes": []
  },
  {
    "name": "异色",
    "color": "#2b00ff",
    "type": "any",
    "attributes": []
  },
  {
    "name": "胶膜",
    "color": "#fd2b00",
    "type": "any",
    "attributes": []
  },
  {
    "name": "气泡",
    "color": "#fc00fc",
    "type": "any",
    "attributes": []
  },
  {
    "name": "板边",
    "color": "#007eff",
    "type": "any",
    "attributes": []
  },
  {
    "name": "氧化_轻",
    "color": "#a40287",
    "type": "any",
    "attributes": []
  },
  {
    "name": "氧化_重",
    "color": "#a61d02",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短_重",
    "color": "#33ddff",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短1",
    "color": "#33ddff",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短2",
    "color": "#fa3253",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短3",
    "color": "#34d1b7",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短4",
    "color": "#ff007c",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短5",
    "color": "#ff6037",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短6",
    "color": "#ddff33",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短7",
    "color": "#24b353",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短8",
    "color": "#b83df5",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短9",
    "color": "#00a9ff",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短10",
    "color": "#fcbf03",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短11",
    "color": "#b91787",
    "type": "any",
    "attributes": []
  },
  {
    "name": "氧化",
    "color": "#220a9c",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边单",
    "color": "#0fcd0f",
    "type": "any",
    "attributes": []
  },
  {
    "name": "毛边微短12",
    "color": "#a797fb",
    "type": "any",
    "attributes": []
  },
  {
    "name": "夹角铜渣",
    "color": "#aaf0d1",
    "type": "any",
    "attributes": []
  }
]

外层

[
  {
    "name": "铜渣",
    "color": "#e2b11a",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "胶膜",
    "color": "#a67616",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "杂物轻",
    "color": "#1eccae",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "杂物重",
    "color": "#3218c3",
    "type": "any",
    "attributes": []
  },
  {
    "name": "缺口",
    "color": "#b71280",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "毛边微短",
    "color": "#ff6037",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "刮花",
    "color": "#86d7b3",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "板损",
    "color": "#d12044",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "缺铜",
    "color": "#5b95d1",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "异色",
    "color": "#957724",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "氧化",
    "color": "#a48836",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "油墨绿",
    "color": "#5c4ac8",
    "type": "any",
    "attributes": []
  },
  {
    "name": "油墨蓝",
    "color": "#ab9fde",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "气泡",
    "color": "#71689f",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "通孔",
    "color": "#fa7dbb",
    "type": "any",
    "attributes": []
  },
  {
    "name": "孔破",
    "color": "#ff6037",
    "type": "any",
    "attributes": []
  },
  {
    "name": "孔内铜渣",
    "color": "#0d7a4a",
    "type": "polygon",
    "attributes": []
  },
  {
    "name": "盲孔",
    "color": "#ddff33",
    "type": "any",
    "attributes": []
  },
  {
    "name": "夹角铜渣",
    "color": "#fafa37",
    "type": "any",
    "attributes": []
  },
  {
    "name": "孔边披风",
    "color": "#5544ab",
    "type": "any",
    "attributes": []
  },
  {
    "name": "荚膜",
    "color": "#25ca5b",
    "type": "any",
    "attributes": []
  },
  {
    "name": "板边",
    "color": "#ab2669",
    "type": "any",
    "attributes": []
  }
]

树脂塞孔

[
  {
    "name": "漏塞",
    "color": "#ff007c",
    "type": "rectangle",
    "attributes": []
  },
  {
    "name": "塞孔凹陷",
    "color": "#422bc1",
    "type": "rectangle",
    "attributes": []
  },
  {
    "name": "正常塞孔",
    "color": "#f59331",
    "type": "rectangle",
    "attributes": []
  },
  {
    "name": "堵孔",
    "color": "#32b7fa",
    "type": "rectangle",
    "attributes": []
  },
  {
    "name": "电镀",
    "color": "#34d1b7",
    "type": "rectangle",
    "attributes": []
  },
  {
    "name": "塞孔白边",
    "color": "#aaf0d1",
    "type": "rectangle",
    "attributes": []
  },
  {
    "name": "塞孔气泡",
    "color": "#fafa37",
    "type": "rectangle",
    "attributes": []
  },
  {
    "name": "塞孔残渣",
    "color": "#ffcc33",
    "type": "rectangle",
    "attributes": []
  },
  {
    "name": "塞孔异色",
    "color": "#1b8238",
    "type": "rectangle",
    "attributes": []
  },
  {
    "name": "板面树脂",
    "color": "#d3e5ea",
    "type": "rectangle",
    "attributes": []
  },
  {
    "name": "板面刮伤",
    "color": "#7a920e",
    "type": "rectangle",
    "attributes": []
  },
  {
    "name": "树脂进孔",
    "color": "#3a77b5",
    "type": "rectangle",
    "attributes": []
  },
  {
    "name": "铜渣",
    "color": "#a3bea1",
    "type": "rectangle",
    "attributes": []
  }
]

AVI

3.5 - 模型验证

要在自训练平台上进行模型验证，您需要先训练模型或者导入模型， 然后创建一个验证任务并指定其参数。

要创建验证任务, 请在 验证 页面上单击 + 并 选择 开始新推理.

• 选择数据集与模型
• 输入置信度
• 输入推理参数
• 验证详情
  • 设置
  • 评测指标
  • 推理详情

选择数据集与模型

1. 选择工序(模型工序)
2. 选择模型(训练模型)
3. 选择项目(将项目中为验证集的任务作为验证数据集，具体在任务详情设置) 然后点击 下一步

输入置信度

1. 输入基础置信度(每个标签应用到的置信度)
2. 多选标签输入标签置信度(选择特定标签的置信度，必须大于等于基础置信度)
   • 在构造格式标签页上，单击增加标签置信度
     1. 
        标签构造器菜单将会打开:
     2. 
   • 源码格式编辑标签置信度
3. 点击下一步

输入推理参数

验证详情

验证详情包括三部分，默认展开推理详情

1. 设置
2. 评测指标
3. 推理详情

设置

设置包括新建验证时的各项参数

评测指标

评测指标包括验证时的各项指标

1. F1分数
2. 精确率
3. 召回率
4. 验证用时 点击类别概览按钮，可以查看各项类别的指标

推理详情

包括混淆矩阵和实例详情两部分

1. 混淆矩阵
   1. 横轴代表实际标签
   2. 纵轴代表预测标签
   3. 纵轴中的{}代表遗漏，在实际标签里没有预测标签与之对应
   4. 横轴上的BG代表多报，在预测标签里没有实际标签与之对应
   5. 横轴上的LOC代表实际标签与预测标签匹配但是低于低重叠阈值，即重叠度较低
2. 实例详情
   1. 点击混淆矩阵上的坐标，即可在实例详情中显示实例和标注信息
   2. 选择实例点击全屏可以放大最后一个选择实例图像
   3. 多选实例，点击修改， 点击标题可以进入标注界面进行修改标注

3.6 - 导入模型

要在自训练平台上进行模型验证，您可能需要先导入训练模型并指定其参数。

要导入训练模型, 请在 训练 页面上单击 + 并 选择 导入训练模型.

导入训练模型

1. 填入一下参数

   参数	详述
   名称	提供模型名称
   模型	选择训练模型工序
   批量大小	训练时的批量大小(batch_size)
   图像尺寸	数据集的图像尺寸.
   训练轮数	模型所在的epoch.

2. 上传模型文件

3. 点击确定