社区代码同步

同步开源社区代码到私有代码平台：

一、背景

随着开源技术的不断发展，越来越多的企业和组织开始使用开源代码来构建自己的软件产品。然而，在使用开源代码的过程中，我们也面临着一些挑战，例如如何保证代码的质量、如何管理代码的版本、如何确保代码的安全性以及下载代码的稳定性等。为了解决这些问题，我们需要将开源社区的代码同步到私有代码平台上，以便更好地管理和维护代码。

二、代码同步基本方法

2.1 准备工作：

确定需要同步的开源社区代码和私有代码平台；

确保进行代码同步的开发人员具有足够的权限来访问开源社区代码和私有代码平台代码推送权限；

安装必要的工具和依赖，例如 Git 等。

2.2 同步代码

以：GitHub - llvm/llvm-project: The LLVM Project is a collection of modular and reusable compiler and toolchain technologies. 为例：

a)将开源社区代码克隆到本地；

git clone https://github.com/llvm/llvm-project.git

b) 在私有代码平台创建相应的仓库及分支用于存储同步的社区代码。

如建好的仓库地址为：ssh://gerrit.company.com:29418/llvm/llvm-project

主分支：master

c)将本地的社区代码推送到私有代码平台

git remote set-url --add --push origin "ssh://gerrit.company.com:29418/llvm/llvm-project"
git push origin HEAD:master -f # 首次推送需要有强推权限
git push origin tagname  # 同步社区中的相关tag

也可以同步到非master分支，这个可以灵活处理。

三、社区代码同步时遇到的问题

 ! [remote rejected]       HEAD -> master (more than 10000 commits, and skip-validation not set)
error: failed to push some refs to '`ssh://gerrit.company.com:29418/llvm/llvm-project`'

解决方法如下，分断推送，使用如下脚本：

$ cat git-push.sh
set -x
# Adjust the following variables as necessary
REMOTE=origin
BRANCH=master
BATCH_SIZE=1000
​
range=HEAD
​
# count the number of commits to push
n=$(git log --first-parent --format=format:x $range | wc -l)
​
# push each batch
for i in $(seq $n -$BATCH_SIZE 1); do
   # get the hash of the commit to push
   h=$(git log --first-parent --reverse --format=format:%H --skip $i -n1)
   echo "Pushing $h..."
   git push $REMOTE ${h}:refs/heads/$BRANCH --force
done
# push the final partial batch
git push $REMOTE HEAD:refs/heads/$BRANCH --force

​

BRANCH为要推送的私有仓库的对应分支，BATCH_SIZE可以先使用1000，如果继续报这样的识别，可以继续调小。

在仓库根目录运行这个脚本：./git-push.sh