[linux的RNA-seq公司数据上游处理]——搭建生信环境;熟悉linux系统操作;conda安装、配置及下载软件 /1

本文讲述了作者在处理学生信数据上游问题时,从配置共享服务器、使用Xshell远程控制,到安装和管理Miniconda环境,包括Linux系统基础操作和conda环境的安装、添加频道、软件包管理等内容,分享了避免常见坑的方法。
摘要由CSDN通过智能技术生成

本侠女在此记录自学生信上下游分析,记录踩过的各种坑和解决办法。网上的资料所用代码,要么是独享服务器(有sudo等权限和批量设置)要么是数据库的原始文件(不需要上传数据等),就是一开始没有完全适合公司数据上游处理的,直到我看帖子看到吐,也逐渐摸索出最快捷的流程和省时省力的路。希望对大家有用。

Step0:配置服务器

我用的是共享服务器,不同于买的独享服务器,有很多不方便,也是后面运行代码时候踩坑的源头,既然,咱就这条件,也只能克服当下的困难。

Xshell是一款强大的安全终端模拟软件,可以用在Windows界面下访问远端不同系统下的服务器,从而比较好的达到远程控制终端的目的

FinalShell Linux版安装及教程 - FinalShell官网   #Linux版下载以及安装教程

拿到共享服务器的账号(由域名、用户名、端口组成)和密码之后,登录成功;

Step1:安装linux系统以及常规操作

linux常规操作如下:

df -h  #看服务器以及内存大小; quota -uvs  ${user #查看硬盘容量;du -sh ~  #查看已使用的内存;ls 文件夹路径 #看文件夹里的内容;Su user #切换用户名;PWD #查看当前路径;Free of-g #查看服务器访问量;cat /proc/cpuinfo lgrep pro   #查看服务器配置 "|"符号,不要看成L;

后面再做补充...

Step2:安装conda环境以及conda环境的常规操作

(引用Miniconda软件安装教程(Linux)_miniconda安装-CSDN博客

1、linux端安装conda

(1)conda官网安装:1)  

(2)镜像安装:Wget -c 网址 ( -c的作用网速稳定 #下载conda(conda的作用就像是电脑端的“软件商店”,之后可以在这里相对快速的完成各种软件的下载,需要一次性配置相关的“搜索频道”,这里的网址就是国外的镜像,因为conda官方的很慢)

选择以下网址之一就可以

conda config --add channels https://mirrors.bfsu.edu.cn/anaconda/pkgs/main/ 

conda config --add channels https://mirrors.bfsu.edu.cn/anaconda/cloud/conda-forge/ 

conda config --add channels https://mirrors.bfsu.edu.cn/anaconda/cloud/bioconda/ 

path选yes

enter

(3) 代码安装

bash Miniconda3-latest-Linux-x86_64.sh   #代码安装


conda --version  #重启终端窗口,验证安装成功

#“出现(base)表示在conda环境中了

2、添加频道

#清华镜像(有时候用不了)

conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/conda-forge/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/bioconda/ 

#阿里云镜像

  https://mirrors.aliyun.com/anaconda/pkgs/msys2                                                                     
  https://mirrors.aliyun.com/anaconda/pkgs/r                                                                         
  https://mirrors.aliyun.com/anaconda/pkgs/main                                                                      
  

#中科大镜像

conda config --add channels https://mirrors.ustc.edu.cn/anaconda/pkgs/main/
conda config --add channels https://mirrors.ustc.edu.cn/anaconda/pkgs/free/
conda config --add channels https://mirrors.ustc.edu.cn/anaconda/cloud/conda-forge/
conda config --add channels https://mirrors.ustc.edu.cn/anaconda/cloud/msys2/
conda config --add channels https://mirrors.ustc.edu.cn/anaconda/cloud/bioconda/
conda config --add channels https://mirrors.ustc.edu.cn/anaconda/cloud/menpo/
conda config --add channels https://mirrors.ustc.edu.cn/anaconda/cloud/ 

3、常规操作

#移除镜像:conda config --remove channels+ https://mirrors.aliyun.com/aconda/cloud

conda config --remove https://mirrors.aliyun.com/aconda/cloud

#检查镜像

cat .condarc 

#显示当前镜像

conda config --show channels  

#查看当前conda使用环境/当前软件包list

conda env list 
conda info
conda info -e

#激活conda指定环境

conda activate name

#切换conda环境,/home/data/t210451/enter是conda list中查看到的base位于/home/data/t210451/enter下

source ~/home/data/t210451/enter

#退出conda环境

conda deactivate

#卸载conda

conda install anaconda-clean anaconda-clean

4、用conda下载软件

(1)先创建一个单独的软件环境

#conda create -n +name myenv#创建环境,最好指定环境指定特定的Python版本和软件包(去官网,确保包名称正确(包需要先在bioconda里面搜索一下名称是否正确),版本匹配且省时)  #myenv是环境名称

conda create --name myenv

(2)conda activate name激活此环境后,安装软件

#依次安装以下软件:Conda install +bioconda里面搜集到的安装包的网址GitHub - ncbi/sra-tools: SRA Tools

!!!需要注意:anaconda与python软件的版本应该一致。如果不一致,需要更新:

  conda update conda

  conda update anaconda

  conda update python

#卸载软件包

conda remove  package

# 更新指定软件

Conda update  name

#卸载指定软件

Conda remove name
配置生信环境需要安装一些生信软件和依赖库,以下是在双系统Ubuntu22.04中配置生信环境的具体步骤: 1. 安装基本的软件和依赖库 在终端中输入以下命令安装基本软件和依赖库: ``` sudo apt-get update sudo apt-get install build-essential gcc-multilib aptitude cmake git wget curl unzip zlib1g-dev libncurses5-dev libbz2-dev liblzma-dev libcurl4-openssl-dev libssl-dev libxml2-dev libpng-dev libjpeg-dev libtiff-dev libcairo2-dev libxt-dev libx11-dev libgtk-3-dev libpq-dev libmysqlclient-dev libsqlite3-dev libhdf5-dev libbz2-1.0 liblzma5 libcurl4 libssl1.1 libxml2 libpng16-16 libjpeg-turbo8 libtiff5 libcairo2 libxt6 libx11-6 libgtk-3-0 libpq5 libmysqlclient21 libsqlite3-0 libhdf5-103 ``` 2. 安装生信软件 在终端中输入以下命令安装生信软件: - 安装Samtools ``` sudo apt-get install samtools ``` - 安装Bedtools ``` sudo apt-get install bedtools ``` - 安装BWA ``` sudo apt-get install bwa ``` - 安装HISAT2 ``` sudo apt-get install hisat2 ``` - 安装STAR ``` sudo apt-get install star ``` - 安装StringTie ``` sudo apt-get install stringtie ``` - 安装RSEM ``` sudo apt-get install rsem ``` - 安装FeatureCounts ``` sudo apt-get install subread ``` 3. 安装conda 在终端中输入以下命令安装conda: ``` wget https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh bash Miniconda3-latest-Linux-x86_64.sh ``` 安装过程中需要按照提示进行设置。 4. 创建conda环境 在终端中输入以下命令创建conda环境: ``` conda create -n myenv ``` 5. 启动conda环境 在终端中输入以下命令启动conda环境: ``` conda activate myenv ``` 6. 安装Python和Python库 在conda环境中输入以下命令安装Python和Python库: ``` conda install python=3.8 conda install pandas numpy matplotlib seaborn scipy scikit-learn jupyterlab ``` 7. 安装其他生信软件conda环境中输入以下命令安装其他生信软件: - 安装GATK ``` conda install gatk4 ``` - 安装Picard ``` conda install picard ``` - 安装Trimmomatic ``` conda install trimmomatic ``` 配置生信环境的具体步骤因人而异,以上仅供参考。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值