【软件】Ubuntu16.04安装repo全纪录，构建自己的repo仓库，最详细的步骤大全，以及踩坑大全

已于 2022-08-14 08:05:35 修改
阅读量7.8k 收藏 39
点赞数 13
分类专栏： 软件 LINUX 文章标签： git repo python
于 2022-08-14 07:53:52 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/tao475824827/article/details/126326366
版权

1. 前言

周六计划：花2小时写一个小项目
实际情况：花了9个小时配置repo开发环境，程序完全没写。
爬了太多坑，回头看一下，其实有几个关键步骤，配置就行，于是记录一下一天的收获，也希望对其他人有所帮助。

2. 背景

2.1 起因

GIt可以用来做一个版本管理的，但是，当仓库很大的时候，git索引会变的很慢。这样问题怎么解决？
之前写过一篇博客，解决GIT单个仓库过大的问题，几个主要方法：

  1. repo
  2. git submodule
  3. git lfs
  4. git 删除大节点

其实最好用的就是repo。
但是之前一直以为repo是需要服务器端提供repo服务的，所以一直没有尝试。
最近在新公司搭建开发环境，和GIT仓库管理员聊了一下repo，确认云端是不需要搭配 repo 服务的，做本地配置就行了。于是信心满满地开始了配置工作。

最终目标：
把现有很多独立的git仓库，统一用repo来管理。
一个项目的结构就可能是这样：

root
  | ---- buildroot
  | ---- boot
  | ---- kernel
  | ---- package
  | ---- doc
  ....
  每个文件夹都是一个独立的git或者多个git

2.2 repo介绍，有用的参考链接

3. Linux 下安装repo步骤

3.1 环境介绍

我的服务器环境是 Ubuntu16.04 LTS。
预装的python 是 Python 2.7.12 和Python3.5.2。
预装的git 是 git 2.7.4
今天是2022年8月13日，拉取的repo 是v2.28。

3.2 关键步骤

Ubuntu16.04 直接去拉repo遇到了N多问题，爬了各式各样很久的坑。
最后总结一下，我直接把我认为最关键的点先列一下：
1. python升级到3.7（我用的3.7.7），并在安装前要先装依赖库。
2. git 升级到2.37.2

3.3 所有步骤

  1. 拉取repo引导环境
  2. repo init 拉取manifest（拉一个谷歌默认的manifest自己改，或者直接拉自己改好的manifest的git库的文件），生成.repo文件夹
  3. 基于拉取的manifest 做repo sync，拉取真正的git仓库

3.3.1 拉取repo引导文件

3.3.1.1 新建一个空白文件夹保存repo引导文件
  mkdir ~/.bin
3.3.1.2 拉取引导文件，命名为repo
cd ~/.bin
curl https://mirrors.tuna.tsinghua.edu.cn/git/git-repo -o repo
chmod a+x ~/.bin/repo

这里我自己拉的就是清华的镜像库，其实官方地址是谷歌的，但是国内拉不动。
其他链接或者教程里有让去git clone来拉的，拉官方库，拉清华镜像库，拉中科大镜像库，等等，类似这些，可以不用，直接去curl就行。

git clone https://gerrit-googlesource.lug.ustc.edu.cn/git-repo
git clone https://mirrors.tuna.tsinghua.edu.cn/git/git-repo
git clone https://mirrors.ustc.edu.cn/aosp/git-repo

我推荐直接curl去拉国内镜像库。
至于直接curl拉一个repo的python脚本，和git clone一整个git-repo仓库的区别，主要就是整个仓库里会存在这个启动器脚本文件，还有一些别的文件，而我们init的时候只用这个启动器脚本就行。

3.3.1.3 添加临时环境变量或者添加到全局变量

把放了repo的路径添加到环境变量
把国内镜像源地址替换掉谷歌地址，不然拉不动。
可以放到临时环境变量（直接运行）或者永久的环境变量 /etc/profile, ~/bashrc

#1 添加环境变量
export PATH=$PATH:~/.bin
#2 替换国内源
export REPO_URL='https://mirrors.tuna.tsinghua.edu.cn/git/git-repo'
3.3.1.4 验证repo
 repo --version

在这里插入图片描述
如果看不到，不一定是repo没配好，有可能是python的支持有问题，先把python升级3.7了先。

3.3.2 repo init 拉取manifest文件

3.3.2.1 repo init 拉取现有的manifest

repo 可以用了之后，我们要去拉取manifest文件，这个文件存在一个git库中，主要记录着repo管理的所有git库的地址，分支，信息等等。
repo启动器只有很少的功能，大部分功能它要在线去拉真正的repo库，然后再实现。
repo init命令是这样的：

repo init -u git://xxx/xxx/manifest.git -b <BRANCH> -m <MANIFEST>

比如：

repo init -u https://android.googlesource.com/platform/manifest
repo init -u https://mirrors.tuna.tsinghua.edu.cn/git/AOSP/platform/manifest

拉取完成后，在文件夹下会生成一个.repo隐藏文件夹，里面包含4个部分：
在这里插入图片描述

  • manifests ：repo init -u 所指的manifest的库，拉取一些manifest 配置文件
  • manifest.xml：可以本地项目再加一些仓库进去
  • repo ： 就是第一步的时候 git clone https://mirrors.tuna.tsinghua.edu.cn/git/git-repo拉下来的文件夹，包含了一些repo的工具。
  • manifest.git:管理 repo库中所有的git仓库的信息。

注意:
这个repo init步骤如果环境不对，会出很多问题。
针对Ubuntu16.04，建议Python升级到3.7。
git升级到最新（我是2.37.2）。
不然你会遇到N多问题，解决A的时候会新出现问题B，解决B的时候会出现C，套娃一样的解决无尽的问题。
我在第4部分会记录升级这两个软件的步骤。

3.3.2.2 repo init 拉取自己的manifest，如何写自己的manifest库

有些时候，我们有一些现有的git仓库，想用自己的manifest库管理起来，就要repo init自己的manifest库。
类似这样：

export REPO_URL='https://mirrors.tuna.tsinghua.edu.cn/git/git-repo'
repo init -u https://codeup.aliyun.com/XXX/repo/manifest.git

这个manifest的repo库要做什么样子呢？
其实非常简单，在里面写一个default.xml即可。
在这里插入图片描述
让我们来做一个小实验。
比如我有三个git仓库，他们的git地址和本地我希望的路径结构如下：

.repo  manifest : https://codeup.aliyun.com/XXXX/repo/manifest.git
Doc : https://codeup.aliyun.com/XXXX/repo/Doc.git
Test
    | - SimpleTest : https://codeup.aliyun.com/XXXX/repo/SimpleTest.git
    | - SimpleTest2: https://codeup.aliyun.com/XXXX/repo/SimpleTest2.git

那我建立一个这样的manifest就行了

<?xml version="1.0" encoding="UTF-8"?>
<manifest>
  <!-- remote: name 名称，fetch 远程地址。可以有多个remote，通过project.remote可指定不同的remote -->
  <remote name="origin"
          fetch="https://codeup.aliyun.com/XXXX/repo/"
          review="https://codeup.aliyun.com/XXXX/repo/" />
  <!-- default: revision 指定分支，remote 指定remote name，sync-j 同步线程数 -->
  <default revision="master"
           remote="origin"
           sync-j="4" />
  <!-- project：path 本地相对路径，name 远程相对路径，完整路径为 remote.fetch + project.name -->
  <project path="Doc" name="Doc.git" />
  <project path="Test/SimpleTest" name="SimpleTest.git" />
  <project path="Test/SimpleTest2" name="SimpleTest2.git" />  
</manifest>

先把这个defualt.xml push上去，再用repo init 去拉取即可

3.3.3 repo sync

这个阶段就是repo 根据我们设置的manifest去拉取真正的git仓库。
按理说只要repo init时的.repo文件夹生成，里面的文件都有，你的manifest没写错，就没什么问题。

repo sync -j4

一个点是，如果你拉取的是ssh的库，记得提前传公钥

ssh-keygen -t rsa   把生成的rsa.pub里的东西全部贴上去
git config  --global user.name ‘AAAA’
git config  --global user.email ‘AAA@CCC.com’

如果你拉取的是https的库，需要解决每个仓库都让你输一遍用户名和密码。
解决方案

git config --global credential.helper store
#最后会在这个路径下生成你git相关信息
cat ~/.git-credentials
https://user:password@github.com

3.3.4 正常享用repo

下一步就是正常使用repo了，repo start，repo upload 这些
我就不赘述了，改天再加一章专门写repo的命令。

4. 依赖环境 - python - git

这个单独写了一篇 Ubuntu16.04升级git最新版，升级python到3.7
跳转这里食用吧，不然这一篇太长了。

5. 遇到的各种问题

这一节是我们8个小时的血汗凝结成的。
刚开始的时候，没有意识到repo对git和python版本的需求。
因为我之前用python2也能用的，所以没有做升级。
遇到各种各样的诡异的问题，解都解不完。
用Ubuntu做主力机的时候真的需要一点点耐心。

5.1 在2.3.2.1步骤里，curl拉取repo拉不动

curl https://mirrors.tuna.tsinghua.edu.cn/git/git-repo -o repo

错误关键字
curl performs SSL certificate verification by default, using a “bundle”
of Certificate Authority (CA) public keys (CA certs). If the default
bundle file isn’t adequate, you can specify an alternate file
using the --cacert option.
在这里插入图片描述

解决方法：加入-k跳过检查
curl https://mirrors.tuna.tsinghua.edu.cn/git/git-repo -o repo -k

5.2 使用清华源之后，鉴权不通过：server certificate verification failed

错误关键字

fatal: unable to access ‘https://mirrors.tuna.tsinghua.edu.cn/git/git-repo/’: server certificate verification failed. CAfile: /etc/ssl/certs/ca-certificates.crt CRLfile: none
在这里插入图片描述

解决方法：
关闭验证

git config --global http.sslverify false

5.3 在2.3.2.2步骤 repo init 超时

在这里插入图片描述
解决：被墙，更换国内源。

export REPO_URL='https://mirrors.tuna.tsinghua.edu.cn/git/git-repo'

5.4 在2.3.2.2 步骤 repo init 拉取谷歌 manifest的时候报错

关键字：

fatal: Cannot get https://gerrit.googlesource.com/git-repo/clone.bundle
在这里插入图片描述
解决：被墙，更换国内源。

export REPO_URL='https://mirrors.tuna.tsinghua.edu.cn/git/git-repo'

5.5 更换国内源后依然无法repo init: fatal: error unknown url type : https

错误关键字

fatal: error unknown url type : https
在这里插入图片描述

这个问题就麻烦了。
搜到repo init失败的问题99%都是让你换清华源
根据报错的提示，是识别不了https，最后搜到是因为没有安装ssl。

这个依赖库还需要在build python之前装。。于是只能重来一遍，这也是为什么我在安装python的时候强调，要先装依赖库。

5.6 重装3.7.7 的python 和 依赖之后， 依然repo init失败，报错error.GitError

错误关键字

error.GitError: manifests ls-remote: usage: git ls-remote [--heads] [--tags]  [--upload-pack=<exec>]
                     [-q | --quiet] [--exit-code] [--get-url] [<repository> [<refs>...]]

在这里插入图片描述
解释在这里。
去升级git才行，不然不支持 --symref。

5.7 使用python3.7 和 git 2.37 ，再次repo init，还是拉不动：port 443: 连接超时

错误关键字

error.GitError: manifests ls-remote: fatal: 无法访问 ‘https://android.googlesource.com/platform/manifest/’：Failed to connect to android.googlesource.com port 443: 连接超时

在这里插入图片描述
谷歌还是拉不动，换一个url拉

repo init -u https://mirrors.tuna.tsinghua.edu.cn/git/AOSP/platform/manifest

5.8 from git_config import RepoConfig

在这里插入图片描述

5.9 ModuleNotFoundError: No module named ‘_ctypes’

关键字：

3.9 ModuleNotFoundError: No module named ‘_ctypes’在这里插入图片描述

解决方案：

sudo apt-get install libffi-dev
sudo apt install python3-pip
pip3 install sklearn
taotao830
关注
  • 13
    点赞
  • 踩
  • 39
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
ubuntu16.04安装mysql5.7脚本
05-14
以下是关于使用脚本在Ubuntu 16.04上自动安装MySQL 5.7的详细步骤和相关知识点。 首先，你需要确保你的系统是最新的。运行以下命令更新系统包列表和安装任何可用的更新： ```bash sudo apt-get update sudo apt-...
ubuntu下安装python3.9的步骤以及安装包.rar
07-31
在Ubuntu 16.04上安装Python 3.9是一项必要的任务，因为这个版本的Python引入了许多新特性，比如改进的类型注解、优化的性能以及更好的错误处理。以下是一份详细的步骤指南，帮助您在Ubuntu系统上顺利完成Python 3.9...
Ubuntu 配置repo环境
u012514113的专栏
10-05 4854
下载Android源码的时候，自己的Ubuntu电脑需要初始化repo环境，这样子你就可以使用 repo init -u ssh: repo sync 等命令下载代码， 在工作中，一般公司的代码仓 git-repo 是固定的，首次就需要把repo的初始化环境配置好，比较简单，随笔记录一下。
ubuntu 20.04 安装 repo
01-03 1167
ubuntu20.04版本不能使用 apt-get 去安装repo。创建repo的bin文件，设置环境变量。这样就有可以使用repo 了。
ubuntu 20.4 repo安装及GIT服务器添加SSH公钥
最新发布
m0_53453680的博客
05-07 324
curl https://storage.googleapis.com/git-repo-downloads/repo > ~/bin/repo #两网站都不可用，先不管。export REPO_URL=https://mirrors.tuna.tsinghua.edu.cn/git/git-repo/ #改变REPO_URL的下载地址。生成的公钥在~/.ssh/id_rsa.pub 中将其添加到Settings----->SSH。ssh-keygen -t rsa -b 4096 -C "邮箱"
ubuntu 20.04 install repo
w1653774595的专栏
02-05 859
/.profile配置环境变量。2，下载repo启动程序。
Ubuntu开发环境搭建（4）【安装repo】
u011811113的专栏
04-30 361
1.mkdir ~/bin 2.curl https://storage.googleapis.com/git-repo-downloads/repo > ~/bin/repo 3.chmod a+x ~/bin/repo 4.vim ~/.profile 最后一行添加：export PATH=$PATH:~/bin 5.source ~/.profile 6.rep
android ubuntu18.04.6 编译环境repo环境
Zero_plucky的博客
09-16 330
android 编译环境
ubuntu系统github源码同步以及repo安装教程
wangchangxi151的专栏
05-07 1382
本人自认也算老手了吧，给自己的机子适配过多个版本的源码，源码编译、patchrom适配都弄过。看到很多人都不会同步源码，特写一下同步源码的简单步骤，其它方面的自己看移植教程，移植教程在ColorOS源码的manifest文件夹里面，当你同步源码完成后就可以看到了。解决下载出错PS：为***决下载出错等网络问题，请做下面的几步sudo gedit /etc/hosts复制代码添加192.30.252...
用于ubuntu16.04下安装mongodb时缺少的库文件
08-08
标题提到的"用于ubuntu16.04下安装mongodb时缺少的库文件"通常指的是MongoDB运行所必需的一些库文件，这些文件可能没有被系统默认安装。在描述中提到了`/usr/lib64`目录，这是64位系统存放动态链接库（.so文件）的...
zabbix.repo
03-01
Zabbix 官网提供了通过 yum 或 apt 方式安装 zabbix，由于国内网路原因，导致失败。其实在国内已经有很多 zabbix 的 repo 镜像站点，添加之后即可顺畅 yum 或 apt。1.阿里巴巴开源镜像站(推荐使用) 地址：https://mirrors.aliyun.com/zabbix/ 2.华为开源镜像站(推荐使用) 地址：https://mirrors.huaweicloud.com/zabbix/ 3.清华大学开源软件镜像站 地址：https://mirror.tuna.tsinghua.edu.cn/zabbix/ 4.上海大学开源镜像站 地址：https://mirrors.shu.edu.cn/zabbix/
如何在Ubuntu 16.04下使用MySql的GR
09-09
以下是如何在Ubuntu 16.04上安装MySQL 5.7.17并启用GR的详细步骤： 一、安装MySQL 1. 首先，由于Ubuntu的默认软件源可能不是最新版本的MySQL，因此需要手动下载并安装更新的apt仓库。运行以下命令： ``` sudo wget ...
Ubuntu下安装mongodb 3.4的详细过程
09-09
在这个教程中，我们将详细讲解如何在Ubuntu 12.04, 14.04以及16.04 LTS版本上安装MongoDB 3.4。 首先，我们需要了解MongoDB的官方仓库只提供对64位长期支持版Ubuntu的支持，如12.04 LTS (precise), 14.04 LTS ...
2024年Inxi：获取Linux系统和硬件信息的神器_netcore 获取显卡信息(1)，Linux运维开发基础课程
2401_83946826的博客
05-03 25
最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！
Windows下成功安装Repo和下载Android源码方法总结
独行猫a 的沉淀、积累、总结。天天学习，好好向上...c/c++,嵌入式 linux,Android,HarmonyOS)
10-08 6016
repo是什么？ 官方的定义：Repo是谷歌用python脚本写的调用git的一个脚本，可以实现管理多个git库。 Android的源代码使用Repo 命令行工具来管理多个git仓库，大概有百多个。要想克隆和管理百多个 Git 仓库，不是一件简单的事情。Repo 命令行工具对 Git 部分命令封装，将百多个 Git 库有效的进行组织。 Windows下Repo安装 repo原本是谷歌搞的一个方便下载AOSP的工具基于git，但由于种种原因不能直接在Windows上使用。但好在有wi...
ubuntu 安装repo
热门推荐
chenpeng30的专栏
11-14 1万+
最近公司换电脑， 要装ubuntu， 之前装的repo不知道放哪了， 于是又开始度娘， 很痛苦， google大爷被挡在门外， 很难下到repo， 终于度娘一翘屁股，就找到下面内容了， 实测有效，贡献出来，有需要的可以看看！ 安装git和curl 在终端窗口敲下面的命令： sudo apt-get install git-core curl  安装repo脚本 sud
Repo 仓库搭建
yager0203的专栏
05-25 570
现在服务器上初始化好repo manifests对应的仓库。 增加新的repo manifests, 来描述在本地服务器对repo 仓库的管理。 revision可以是某个commit id （配合upstream 来保证拉下的代码在分支的某个commit上）； 也可以是分支（upstream 可以省略）。 <?xml version="1.0" encoding="UTF-8" ?> <manifest> <remote fetch="ssh://git@git_so
Ubuntu 16.04下添加阿里云源(repository)
In the Cloud
02-17 4453
~$ sudo su -- ~$ cd /etc/apt/ /etc/apt$ cp sources.list sources.list.bck /etc/apt/$ vim sources.list 将sources.list中全部含有http://archive.ubuntu.com/ubuntu的链接替换为http://mirrors.aliyun.com/ubuntu，保存后运行sudo...
ubuntu16.04安装zabbix
08-19
要在Ubuntu 16.04上安装Zabbix，您可以按照以下步骤进行操作： 1. 更新系统软件包： ``` sudo apt update sudo apt upgrade ``` 2. 安装Apache、MySQL和PHP以支持Zabbix： ``` sudo apt install apache2 mysql-server mysql-client php php-mysql php-gd php-xml php-bcmath ``` 3. 启动并设置MySQL服务器： ``` sudo systemctl start mysql sudo mysql_secure_installation ``` 4. 创建一个新的数据库和用户用于Zabbix： ``` sudo mysql -u root -p CREATE DATABASE zabbix CHARACTER SET utf8 COLLATE utf8_bin; GRANT ALL PRIVILEGES ON zabbix.* TO 'zabbix'@'localhost' IDENTIFIED BY 'your_password'; FLUSH PRIVILEGES; exit; ``` 5. 下载和安装Zabbix服务器及前端： ``` wget https://repo.zabbix.com/zabbix/5.0/ubuntu/pool/main/z/zabbix-release/zabbix-release_5.0-1+ubuntu16.04_all.deb sudo dpkg -i zabbix-release_5.0-1+ubuntu16.04_all.deb sudo apt update sudo apt install zabbix-server-mysql zabbix-frontend-php zabbix-agent ``` 6. 导入Zabbix数据库模式： ``` sudo zcat /usr/share/doc/zabbix-server-mysql*/create.sql.gz | sudo mysql -u zabbix -p zabbix ``` 7. 配置Zabbix服务器： 编辑`/etc/zabbix/zabbix_server.conf`文件，将以下行的注释符号(#)删除，并将数据库信息替换为之前创建的数据库和用户信息： ``` DBHost=localhost DBName=zabbix DBUser=zabbix DBPassword=your_password ``` 8. 配置Zabbix前端： 编辑`/etc/zabbix/apache.conf`文件，找到以下行： ``` php_value date.timezone Europe/Riga ``` 将其替换为您所在时区的值（例如，Asia/Shanghai）。 9. 重启Apache和Zabbix服务： ``` sudo systemctl restart apache2 sudo systemctl enable zabbix-server sudo systemctl start zabbix-server sudo systemctl enable zabbix-agent sudo systemctl start zabbix-agent ``` 10. 访问Zabbix前端： 在Web浏览器中输入`http://your_server_ip/zabbix`，然后按照安装向导进行配置。 希望这可以帮助您在Ubuntu 16.04上安装Zabbix！如有其他问题，请随时提问。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值