数据集管理 #

本模块分别从数据集算法开发者、数据集算法管理员两个角色的使用方法展开说明

9.1 数据集算法开发者 #

涵盖功能如下：

1. 私有数据集新增
2. 私有数据集修改
3. 私有数据集删除
4. 私有数据集预览
5. 私有数据集共享
6. 私有数据集共享记录
7. 私有数据集提交
8. 数据集查询
9. 共享数据集评价
10. 共享数据集拷贝

9.1.1 私有数据集新增 #

功能模块说明 #

该模块创建得数据集为私有数据集，仅项目下成员可查询，其他开发者无查询权限。
对于数据集文件得上传方式平台提供本地上传方式（限制大小不多于 200M）、mysql 方式、hive 方式、hdfs 方式、sftp 方式

1. 本地上传方式：直接可将本地相应数据集文件上传保存
2. mysql方式：通过mysql数据库信息以及对应得采集sql脚本实现数据文件的上传
3. hive方式：通过hive数据库信息以及对应得采集sql脚本实现数据文件的上传
4. hdfs方式：通过用户名、namenode查询hdfs文件，并通过选择对应文件进行保存,输入hdfs信息hdfs目录下会显示对应目录下的文件信息。
5. sftp方式：通过点击生成临时用户生成临时sftp用户信息，开发者通过本地工具连接上传

对于进行数据标注的数据集，若数据集文件中存在标注文件则需在新增时选择其标注格式类型（labelme、labelimg、等）、标注内容示例（可选），选择后平台会根据选择的标注格式转换为标注平台可识别的标注文件，在标注平台标注此数据集时可显示其原有的标注信息。

菜单使用说明 #

1. 打开数据集管理页面
2. 点击新增按钮
3. 填写数据集信息、选择上传方式、选择标注文件信息（可选）
4. 保存数据集

9.1.2 私有数据集修改 #

功能模块说明 #

对私有数据集的数据集描述、数据集类型等进行修改

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面查询对应私有数据集数据
3. 点击对应数据的编辑按钮，会弹出数据集编辑弹框
4. 弹框中可以修改数据集描述、数据集类型，如果选中的数据集是本地文件上传类型的，则可以点击文件上传的输入框，会弹出文件展示弹框，弹框中右侧是已上传的文件，可进行删除操作，如需上传新的文件，可点击左侧的上传按钮，选择想要的文件后，点击确定，此时选中的文件会出现在左侧的选框中，勾选指定文件，点击中间的穿梭按钮后，即可进行文件的真实上传，最

5. 最后点击确定即可

9.1.3 私有数据集删除 #

功能模块说明 #

删除私有数据集

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面查询对应私有数据集数据
3. 点击对应数据的删除按钮删除数据，此处需要注意：只有是下线的的数据，才可以被删除

9.1.4 私有数据集预览 #

功能模块说明 #

对于创建完成的数据集，通过点击列表的数据集名称后点击文件信息按钮查询数据集文件信息，通过点击对应文件名称可预览其文件内容

菜单使用说明 #

1. 打开数据集管理页面
2. 点击列表数据集名称
3. 点击文件信息按钮
4. 点击对应文件名称预览文件内容

9.1.5 私有数据集共享 #

功能模块说明 #

通过共享可将私有的个人数据集共享给其他项目开发这使用，共享操作后被共享人可在共享数据集中查询到共享的数据集，通过共享记录可查询此数据集对应的共享信息。

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面查询对应私有数据集数据
3. 点击对应数据的共享按钮，弹出共享信息弹框；
4. 选择可见日期、可见项目(该数据集数据仅在所选项目下共享)
5. 点击确定提交共享信息

9.1.6 私有数据集共享记录查看 #

功能模块说明 #

查看私有数据集共享记录

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面查询对应私有数据集数据
3. 点击对应数据的共享记录按钮，弹出共享记录弹框

9.1.7 私有数据集提交 #

功能模块说明 #

提交操作为将私有数据集提交为公有数据集，提交后的数据集经过管理员审核后可供其他开发者查询使用。

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面查询对应私有数据集数据
3. 点击对应数据的提交按钮，弹出提交弹框
4. 填写提交名称、提交备注，点击 提交历史 tab标签可查看提交历史记录
5. 点击确定提交信息

9.1.8 数据集查询 #

功能模块说明 #

私有数据集、共享数据集查询

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面查询对应数据集数据
3. 鼠标置于表格右上角搜索按钮，出现数据集名称输入框，支持数据集名称模糊查询
4. 点击输入框右侧 高级 按钮，出现查询条件，输入对应条件信息
5. 点击搜索，查询数据

9.1.9 共享数据集评价 #

功能模块说明 #

对共享数据集进行评价

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面点击共享共享数据集tab标签，查询对应数据
3. 点击对应数据的评价按钮，弹出评价弹框
4. 选择评价，输入使用心得，点击匿名评价前的选择框可实现匿名评价
5. 点击确定提交信息

9.1.10 共享数据集拷贝 #

功能模块说明 #

对共享数据集进行拷贝，用户不能直接对共享数据集进行操作，需要先将选中的数据集拷贝到自己的工作空间，成为自己的数据集后再进行操作。

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面点击共享共享数据集tab标签，查询对应数据
3. 点击对应数据的拷贝按钮，弹出拷贝弹框
4. 输入拷贝后的数据集名称
5. 点击确定提交信息

9.1.11 数据集上传完成操作 #

功能模块说明 #

上传完成按钮为在创建数据集时选择sftp方式上传，通过本地工具将数据集文件上传完成后需手动通过点击上传完成按钮来更新数据集状态。

9.2 数据集算法管理员 #

涵盖功能如下：

1. 公有数据集新增
2. 公有数据集修改
3. 公有数据集删除
4. 公有数据集有效性设置
5. 公有数据集查询
6. 审核任务查询
7. 审核任务批量审核
8. 审核任务审核

9.2.1 公有数据集新增 #

功能模块说明 #

该模块创建的数据集为公有数据集，公有数据集可全部开发者查询。

菜单使用说明 #

公有数据集新增和私有数据集新增操作方式相同，可查看私有数据集新增

9.2.2 公有数据集修改 #

功能模块说明 #

对公有数据集的数据集描述、数据集类型等进行修改

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面查询对应公有数据集数据
3. 点击对应数据的编辑按钮，会弹出数据集编辑弹框
4. 弹框中可以修改数据集描述、数据集类型，如果选中的数据集是本地文件上传类型的，则可以点击文件上传的输入框，会弹出文件展示弹框，弹框中右侧是已上传的文件，可进行删除操作，如需上传新的文件，可点击左侧的上传按钮，选择想要的文件后，点击确定，此时选中的文件会出现在左侧的选框中，勾选指定文件，点击中间的穿梭按钮后，即可进行文件的真实上传，最
5. 选择权限设置
6. 最后点击确定即可

9.2.3 公有数据集删除 #

功能模块说明 #

删除公有数据集

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面查询对应公有数据集数据
3. 点击对应数据的删除按钮删除数据，此处需要注意：只有是下线的的数据，才可以被删除

9.2.4 公有数据集有效性设置 #

功能模块说明 #

可对公有数据集进行上线、下线状态的设置

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面查询对应公有数据集数据
3. 点击对应数据的下线按钮将数据置为失效状态，此时，之前可见该数据集的项目将不会再看到该数据集
4. 若选中的数据集是下线的状态，则可以点击上线按钮，将数据置为生效的状态，此时设置过对其可见的项目将会恢复可见的权限

9.2.5 公有数据集查询 #

功能模块说明 #

数据集查询

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面查询对应数据集数据
3. 鼠标置与表格右上角搜索框，出现数据集名称输入框，支持数据集名称模糊查询
4. 点击输入框右侧 高级 按钮，出现查询条件，输入对应条件信息
5. 点击搜索，查询数据

9.2.6 审核任务查询 #

功能模块说明 #

查询审核任务

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面点击 审核任务 tab标签，查询对应任务数据
3. 点击标签页左上角单选按钮，根据所选状态展示对应的审核任务数据
4. 鼠标置与表格右上角搜索框，出现数据集名称输入框，支持数据集名称模糊查询
5. 点击输入框右侧 高级 按钮，出现查询条件，输入对应条件信息
6. 点击搜索，查询数据

9.2.7 审核任务批量审核 #

功能模块说明 #

对待审核的多条数据集数据进行批量审核

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面点击 审核任务 tab标签，查询对应数据集数据
3. 选择标签页左上角 待审核 单选按钮，展示所有待审核数据集数据
4. 点击对应数据集数据的审核按钮，进入审核页面
5. 选择审核结果、权限设置(选择自定义，选择可见项目及时间)
6. 点击确定提交审核结果

9.2.8 审核任务审核 #

功能模块说明 #

对待审核的数据集数据进行审核

菜单使用说明 #

1. 打开数据集管理页面
2. 进入页面点击 审核任务 tab标签，查询对应数据集数据
3. 选择标签页左上角 待审核 单选按钮，展示所有待审核数据集数据
4. 选择需要审核的数据集数据，点击批量审核，弹出审核弹框
5. 选择审核范围确定需要批量审核的数据
6. 选择审核结果、权限设置(选择自定义，选择可见项目及时间)
7. 点击确定提交审核结果