CVAT 使用(4) 安装采坑

最新推荐文章于 2024-07-21 20:16:07 发布
最新推荐文章于 2024-07-21 20:16:07 发布
阅读量3.1k 收藏 9
点赞数 2
分类专栏： 工具 CVAT 文章标签： CVAT 数据标注 视频标注 图像标注 标注工具
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/irving512/article/details/110730465
版权
工具 同时被 2 个专栏收录
19 篇文章 3 订阅
订阅专栏
CVAT
5 篇文章 3 订阅
订阅专栏

文章目录

0. 前言

  • 安装过程比较痛苦。之前是一个同事安装的，装了一周都还有各种各样的问题……
  • 安装失败的主要原因有：
    • 最主要的原因——网速不行
    • 出现问题进行定位的时候，由于对Docker和Nodejs不了解，所以走了不少弯路。
  • 自己的安装历程
    • 在公司服务器 Ubuntu 16.04 Server 上通过VPN代理下载各种包，成功搞定v1.1.0。
    • 在家中电脑 Ubuntu 16.04 Desktop 上尝试安装失败（现在安装v1.2.0-alpha应该没问题了，安装v1.1.0估计还有问题，原因后面再说）。
    • 在阿里云上租用服务器 Ubuntu 18.04 Server 成功安装v1.1.0/v1.2.0-alpha/develop。
  • 为了方便自己和他人，我把修改后的cvat源码传到了gitee上

1. 采坑记录

  • 先说下猜到的坑，给各位后来这一些意见。

1.1. 网速相关

  • 建议在正式安装前先进行这些步骤。
  • git clone cvat 的速度非常慢
    • 使用gitee复制cvat源码，直接从gitee上拉。
    • 我复制了一份自己的 git clone https://gitee.com/irving512/cvat.git
  • 安装docker速度非常慢
    • 这部分内容其实是安装文档里有的，只是修改了一下获取数据的源。
    • 全部使用阿里源
sudo apt-get update
sudo apt-get --no-install-recommends install -y \
  apt-transport-https \
  ca-certificates \
  curl \
  gnupg-agent \
  software-properties-common
curl -fsSL https://mirrors.aliyun.com/docker-ce/linux/ubuntu/gpg | apt-key add -
sudo add-apt-repository \
  "deb [arch=amd64] https://mirrors.aliyun.com/docker-ce/linux/ubuntu \
  $(lsb_release -cs) \\
  stable"
sudo apt-get update
sudo apt-get --no-install-recommends install -y docker-ce docker-ce-cli containerd.io
  • docker pull 速度非常慢。
    • 解决方案：添加 docker 镜像。
    • 具体方式就是：修改/添加 /etc/docker/daemon.json，添加以下内容
{
    "registry-mirrors": ["https://registry.docker-cn.com"]
}

  • apt install 速度非常慢

    • 在Dockerfile中添加阿里源。

    • 根据Ubuntu版本不同，要添加的源也不同。

# v1.1.0 使用的Ubuntu 16.04，要添加的内容是
RUN echo deb http://mirrors.aliyun.com/ubuntu/ xenial main          > /etc/apt/sources.list
RUN echo deb-src http://mirrors.aliyun.com/ubuntu/ xenial main        >> /etc/apt/sources.list
RUN echo                                   >> /etc/apt/sources.list
RUN echo deb http://mirrors.aliyun.com/ubuntu/ xenial-updates main      >> /etc/apt/sources.list
RUN echo deb-src http://mirrors.aliyun.com/ubuntu/ xenial-updates main    >> /etc/apt/sources.list
RUN echo                                   >> /etc/apt/sources.list
RUN echo deb http://mirrors.aliyun.com/ubuntu/ xenial universe        >> /etc/apt/sources.list
RUN echo deb-src http://mirrors.aliyun.com/ubuntu/ xenial universe      >> /etc/apt/sources.list
RUN echo deb http://mirrors.aliyun.com/ubuntu/ xenial-updates universe    >> /etc/apt/sources.list
RUN echo deb-src http://mirrors.aliyun.com/ubuntu/ xenial-updates universe  >> /etc/apt/sources.list
RUN echo                                   >> /etc/apt/sources.list
RUN echo deb http://mirrors.aliyun.com/ubuntu/ xenial-security main      >> /etc/apt/sources.list
RUN echo deb-src http://mirrors.aliyun.com/ubuntu/ xenial-security main    >> /etc/apt/sources.list
RUN echo deb http://mirrors.aliyun.com/ubuntu/ xenial-security universe    >> /etc/apt/sources.list
RUN echo deb-src http://mirrors.aliyun.com/ubuntu/ xenial-security universe  >> /etc/apt/sources.list

# v1.2.0/develop 使用的Ubuntu是 20.04，要添加的内容是
RUN echo deb http://mirrors.aliyun.com/ubuntu/ focal main restricted universe multiverse > /etc/apt/sources.list
RUN echo deb-src http://mirrors.aliyun.com/ubuntu/ focal main restricted universe multiverse >> /etc/apt/sources.list
RUN echo  >> /etc/apt/sources.list
RUN echo deb http://mirrors.aliyun.com/ubuntu/ focal-security main restricted universe multiverse >> /etc/apt/sources.list
RUN echo deb-src http://mirrors.aliyun.com/ubuntu/ focal-security main restricted universe multiverse >> /etc/apt/sources.list
RUN echo  >> /etc/apt/sources.list
RUN echo deb http://mirrors.aliyun.com/ubuntu/ focal-updates main restricted universe multiverse >> /etc/apt/sources.list
RUN echo deb-src http://mirrors.aliyun.com/ubuntu/ focal-updates main restricted universe multiverse >> /etc/apt/sources.list
RUN echo  >> /etc/apt/sources.list
RUN echo deb http://mirrors.aliyun.com/ubuntu/ focal-proposed main restricted universe multiverse >> /etc/apt/sources.list
RUN echo deb-src http://mirrors.aliyun.com/ubuntu/ focal-proposed main restricted universe multiverse >> /etc/apt/sources.list
RUN echo  >> /etc/apt/sources.list
RUN echo deb http://mirrors.aliyun.com/ubuntu/ focal-backports main restricted universe multiverse >> /etc/apt/sources.list
RUN echo deb-src http://mirrors.aliyun.com/ubuntu/ focal-backports main restricted universe multiverse >> /etc/apt/sources.list

  • pip install 速度非常慢

    • 这个很好处理，就是在所有 pip install 后面临时添加国内源。
    • 要添加的内容是 -i https://mirrors.aliyun.com/pypi/simple/
    • 需要修改的文件有 Dockerfile/Dockerfile.ci 两个文件。

  • npm install 速度非常慢

    • 添加 npm 的国内源即可。
    • 在Dockerfile.ui中添加一句RUN npm config set registry https://registry.npm.taobao.org
    • 添加在第二行。

  • git clone 速度非常慢

    • pip源有一个是要从github上下载，所以需要修改。
    • 需要修改的内容是在 cvat/requirements/base.txt
    • 将git+https://github.com/openvinotoolkit/datumaro@v0.1.3 修改为 git+https://gitee.com/openvinotoolkit-prc/datumaro.git@v0.1.3

  • 从github下载速度非常慢

    • 这个指的是 node-sass 在安装时候需要从github中下载数据。
    • 解决方案：该问题本质是安装 node-sass 的问题，所以先手动安装 node-sass 并制定国内源即可。
    • 就是在Docerfile.ui添加 RUN npm config set sass_binary_site http://cdn.npm.taobao.org/dist/node-sass -g npm install --no-optional npm i node-sass --save
    • 添加的位置是在 cvat-canvas 安装之前，即在 WORKDIR /tmp/cvat-canvas/ 之后。

  • 有一个现在我解决不了的网速相关问题

    • 在v1.1.0中，会添加别的apt源，即add-apt-repository ppa:mc3man/xerus-media -y
    • 我在自己家电脑上从这个源安装时，无法从mc3man中获取数据，所以这一步就卡住没办法了……
    • 解决方案：
      • 无
      • 换成v1.2.0-alpha就不用这个仓库了，这是我的最终方案……

1.2. 其他问题

  • pycocotools 安装失败
    • 这个问题在v1.1.0中没有，在v1.2.0-alpha和develop上都有。
    • 本质就是
      • 通过 pip install pycocotools不会自动安装其依赖
      • 在依赖同时 pip install 时安装不成功
    • 解决方案：先pip install cython numpy，再pip install pycocotools
  • 内存过小会导致安装失败
    • 阿里云最开始租用了一台最差的服务器，即只有1G的内存，结果在安装pyhash的时候提示内存不够了……
    • 失败了之后我就升级了服务器配置，使用了2G内存，就没问题了。
    • 好像是安装 v1.1.0 时候的问题，不知道v1.2.0-alpha是否存在这个问题。
  • node-sass 版本导致的问题
    • 表现形式：具体错误忘了，大概意思就是 sass x64-83_binding 这个文件不存在，404了。
    • 这个错误只有在v1.1.0存在，导致问题的原因是 node-sass的版本太低。
    • 换句话说，如果使用 v1.1.0版本，必须升级 node-sass 的版本，从v4.13.1升到v4.14.1。
    • 具体怎么升级呢
      • 修改 cvat-canvas和cvat-ui中的package.json文件，升级版本为v4.14.1
      • 修改 cvat-canvas和cvat-ui中的package-lock.json文件，删除node-sass相关内容即可。

2. 安装基本流程

2.1. 准备工作

  • 下载cvat源码

    • 如果cvat下载速度慢，可以去gitee上下载。

  • 设置之前提到的各种源

    • 包括 docker/docker pull/apt/pip/npm 等问题

  • 设置一切其他cvat选项

    • 主要包括设置服务器ip（为了让其他终端连接到安装的cvat，必须开放对应的端口）
    • 默认端口使用的是8080，需要将服务器的8080端口开放
    • 设置shared path，即在新建task的时候指定share path中的数据作为数据源。
    • 即新建 docker-compose.override.yml，内容如下
version: '3.3'

services:
  cvat_proxy:
    environment:
      CVAT_HOST: my_ip or_my_url

  cvat:
    environment:
      CVAT_SHARE_URL: 'Mounted from /mnt/share host directory'
    volumes:
      - cvat_share:/home/django/share:ro

volumes:
  cvat_share:
    driver_opts:
      type: none
      device: /root/data  # 需要修改的就是这个元素
      o: bind

2.2. 基本安装流程

  • 安装docker，在上面提到过了，需要修改源
  • 其他相关操作
sudo groupadd docker
sudo usermod -aG docker $USER

sudo apt-get --no-install-recommends install -y python3-pip
sudo python3 -m pip install setuptools docker-compose

sudo apt-get --no-install-recommends install -y git
git clone https://gitee.com/irving512/cvat.git
cd cvat
# 可能还需要切换分支，比如使用我自己的 develop-20201204-aliyun

# 在执行这一步前需要配置好所有源
# 安装容器
docker-compose build

# 启动容器
docker-compose up -d

# 创建超级用户
docker exec -it cvat bash -ic 'python3 ~/manage.py createsuperuser'

# 之后的使用就不属于安装范围了
清欢守护者
关注
  • 2
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
windows10下部署安装cvat开源标注系统
qq2210512025的博客
08-31 2289
最近需要安装cvat这个开源标注平台，网上的文档找了两三天，发现大多事故linux系统的教程，Windows方面的或多或少有问题，磕磕碰碰的，总算还是安装成功了，总结亿下！希望本篇文章能对有需要的人有好的参考，如有错漏，还望指正！.........
Computer Vision Annotation Tool (CVAT)一个基于Web的视频和图像标注工具-python
06-18
Computer Vision Annotation Tool (CVAT)一个基于Web的工具，用于为计算机视觉算法标注视频和图像 计算机视觉注释工具 (CVAT) CVAT 是用于计算机视觉的免费在线交互式视频和图像注释工具。 我们的团队正在使用它来注释具有不同属性的数百万个对象。 许多 UI 和 UX 决策都是基于专业数据注释团队的反馈。 在 cvat.org 在线试用。 文档 安装指南 用户指南 Django REST API 文档 Datumaro 数据集框架 命令行界面 XML 注释格式 AWS 部署指南 常见问题 问题 截屏 介绍 注释模式 插值模式 属性模式 分割模式 多边形教程 半自动分割 支持的注释格式 格式选择单击上传注释和转储注释按钮。 Datumaro 数据集框架允许通过其命令行工具和 Python 库进行额外的数据集转换。 注释格式导入导出图像的 CVAT XX 视频的 CVAT XX Datumaro X PASCAL VOC XX PASCAL VOC 的分割掩码 XX YOLO XX MS COCO 对象检测 XX TFrecord XX
React源码调试环境
Felier's Blog
07-22 701
React源码调试环境
在 Ubuntu 22.04/20.04 安装 CVAT 和 SAM 指南
最新发布
calvinpaean的博客
07-21 1336
(-cs。
cvat：功能强大且高效的计算机视觉注释工具（CVAT）
02-05
计算机视觉注释工具（CVAT） CVAT是用于计算机视觉的免费，在线，交互式视频和图像注释工具。 我们的团队正在使用它来注释数百万个具有不同属性的对象。 许多UI和UX决策都是基于专业数据注释团队的反馈。 在线尝试 。 文献资料 截屏 支持的注释格式 单击“上传注释”和“转储注释”按钮后，可以选择格式。 数据集框架允许通过其命令行工具和Python库进行其他数据集转换。 有关支持的格式的更多信息，请参阅。 注释格式 进口 出口 X X X X X X X 分割蒙版 X X X X X X X X X X X X X X X X 用于自动标记的深度学习模型
Python-ComputerVisionAnnotationToolCVAT一个基于Web的视频和图像标注工具
08-11
Computer Vision Annotation Tool (CVAT)一个基于Web的工具，用于为计算机视觉算法标注视频和图像
1.自动标注工具：CVAT---介绍
huasa2239635117的博客
08-24 2万+
1.自动标注工具：CVAT—介绍 简介：CVAT是用于计算机视觉的免费，在线，交互式视频和图像注释工具。可以用于模型训练数据的标注。在线测试网站 这里是在线测试网站 文章目录1.自动标注工具：CVAT---介绍前言一、效果二、环境准备1.Azure-创建资源组2.Azure-创建Linux虚拟机总结 前言 随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，大家都知道，机器学习中有个分类叫监督学习，监督学习中需要标注数据，而标注数据的质量对模型训练的是非常重要的，但是
cvat windows11安装
06-01
CVAT是一款开源的计算机视觉标注工具，可以在Windows、Linux和MacOS等操作系统上运行。以下是在Windows 11上安装CVAT的步骤： ...如果您在安装和使用过程中遇到任何问题，建议查阅CVAT官方文档或者在社区中寻求帮助。
cvat线上标注平台文件
02-03
9. **技术栈**：CVAT基于Django框架构建，后端使用Python编写，前端使用React.js，数据库使用MySQL或PostgreSQL，存储则可以是本地文件系统或云存储。 10. **社区支持**：由于是开源项目，CVAT有一个活跃的社区，...
CVAT从git使用pip安装
07-20
4. 执行以下命令来安装CVAT依赖： ``` pip install -r requirements/requirements.txt ``` 5. 安装CVAT的Python包： ``` pip install -e . ``` 现在，您已经成功地通过pip从git安装了CVAT。您可以根据需要...
cvat Mac安装
08-24
4. 现在，您需要使用Docker Compose来构建和运行CVAT容器。运行以下命令以生成Docker Compose文件： ``` docker-compose -f docker-compose.yml -f docker-compose.dev.yml up -d ``` 5. 等待一段时间，直到所有的...
tomcat中部署项目后，访问失败，报错404的原因以及解决方案
热门推荐
拥有必珍惜
08-20 2万+
MyEclipse中报的错误：
CVAT 系列开篇
清欢
11-28 3078
文章目录0. 前言0.1. 之前用过标注工具存在的问题0.2. 为什么使用CVAT？0.3. 感想0.4. 相关资料1. 后续学习计划2. 官方文档整理与阅读3. 安装 0. 前言 好像网上没有什么CVAT的资料，都是需要仔细地看官方手册。 现在要使用了，希望写个系列，作为公司内部交流文档，也分享给像我一样没钱找人标注、不得不自己动手的标注工程师们。 0.1. 之前用过标注工具存在的问题 之前使用的标注工具是VoTT 这里不提一些标注细节，毕竟标注是体力活，工具用习惯了其实都差不多。 存在的主要问题是
docker-compose.yml 转义$ ERROR: Invalid interpolation format for “environment“ option in service
OceanWaves1993的博客
01-25 1803
如果想要在docker-compose.yml 配置文件中表示单个$，需要在$前面添加一个$，表示转义$。如果想要在docker-compose.yml 配置文件中表示单个$，需要在$前面添加一个$，表示转义$。docker-compose.yml 配置文件中，单个$报错。docker-compose.yml中单个$会报错。
cvat启动成功之后无法访问
修炼之路
06-21 3993
$ docker-compose up -d /root/anaconda3/lib/python3.5/site-packages/paramiko/transport.py:33: CryptographyDeprecationWarning: Python 3.5 support will be dropped in the next release of cryptography. Please upgrade your Python. from cryptography.hazmat.back
cvat标注工具docker容器启动
join_null的博客
01-14 1219
1.安装postgresql，Windows 上安装 PostgreSQL | 菜鸟教程 用上面安装好的pdadmin，创建一个mypgsql用户，授予所有权限 然后创建一个cvat数据库，并将owner指定为mypgsql用户 2.安装redis 3.拉取镜像，并启动容器 拉取镜像 docker pull openvino/cvat_server:latest 启动容器（注意挂载到主机上的目录/data/cvat_data_dir，要给予777权限，否则容器内应...
cvat一步到位的安装
2302_76475309的博客
10-20 842
放在Docker Desktop的Docker Engine下的Docker daemon里即可。在下载Docker Desktop时可能会遇到 下载失败的情况 ，可以试一下将DNS服务器的地址修改成如图即可。在阿里云创建一个账号 然后选择镜像加速器 将其加速器的url复制。在"experimental": false,后面添加"registry-mirrors": ["打开Docker Desktop，选择settings。镜像加速器的URL 添加方法如图。复制镜像加速器的URL。容器镜像服务 ACR。
proxy代理 显示404 但请求方式、服务器地址都对
weixin_50946965的博客
04-20 2046
后端使用postman测试过，接口没有问题。 反复检查后，确定是代理配置的问题 但配置格式也没错，由报错看，就是代理配置没起作用。 解决方法： 项目是vue-cli2 创建的 ，所以要在config文件夹里面的index.js配置才能生效 vue3项目里面才使用vue.config.js ...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值