IQtree:使用 SNP 数据(vcf file)构建玉米群体的 无根 系统发育树


IQtree 是一款用于构建系统发育树的软件,支持 Phylip、Fasta、Nexus、Clustalw 等多序列比对后的数据格式。但随着 SNP 数据费用的大幅下降,研究人员利用 SNP 数据构建系统发育树的情况越大越多。本文为用 vcf 格式的 SNP 数据构建系统发育树的教程,主要包括:Vcf 文件转 Phylip 文件、Phylip 文件输入 IQtree 建树 两部分。



数据集

本教程使用的数据集矩阵大小为 577 × 10000。样本取自 577 个玉米品系,包含 70 个大刍草(par)、208 个热带品系(tst)、172 个温带品系(temp)、127 个混合品系(mixed)。SNP 取自 3 号染色体上 743w SNP,经过过滤(maf > 0,miss = 0)与随机抽样后,最终得到 1w SNP。数据已上传(链接如下),免费下载(0 积分)。


IQtree:使用SNP数据(vcffile)构建系统发育树(数据)



1. Vcf 文件转 Phylip 文件

python vcf2phylip.py --input SNP.vcf

	--input FILENAME    Name of the input VCF file, 
						can be gzipped (but the extension must be .vcf.gz)

输出文件:SNP.min4.phy


使用 vcf2phylip.py 脚本将 vcf 文件转化为 phylip 格式。vcf2phylip.py 脚本格式转换速度较快,例如,处理 20GB VCF(约 300w SNP x 650 个体)约 27 分钟。除了默认的输出格式 PHYLIP 外,还支持将 VCF 转换为 FASTA、NEXUS 或二进制 NEXUS 格式。

vcf2phylip.py 脚本的下载、详细介绍参见:https://github.com/edgardomortiz/vcf2phylip



2. Phylip 文件输入 IQtree 建树

iqtree -s SNP.min4.phy -keep-ident -st DNA -m GTR+F+R6+ASC -fast -nt 50
	
	-s					输入文件
	-keep-ident			保留序列相同的样本
	-st					指定输入序列的类别(当 iqtree 识别错误时使用)
	-m					选择替换模型(substitution model)
	-fast				加速建树
	-nt					最大线程数

程序大概率会报错(Error)并输出文件:SNP.varsites.phy


  • ASC(ascertainment bias correction)是 IQtree 处理 SNP 数据时需要添加的参数,可以矫正因 SNP 数据所导致的系统发育树分枝长度过长与结构错误等问题(参见附录 ASC)。
  • ASC 模式要求输入的 SNP 必须是 variable sites ,但 IQtree 对 constant、singleton、variable 概念定义较为特殊(参见附录 Ambiguous site),可能 phy 文件中有大量的位点被识别为 constant sites。如本教程数据集 1w SNP 中有 6466 SNP 被识别为 constant sites。若 phy 文件中包含 constant sites,IQtree 会报错并输出 varsites.phy 文件,包含输入数据中的 singleton 与 variable sites。
  • IQtree 默认在建树过程中会删除相同序列的样本,待建树完成后再添加,以节省分析时间。但这也会使 varsites.phy 输出文件中的样本数不足 577。虽然本数据集中不存在样本序列相同,但如果 SNP 较少且样本间亲缘关系较近,则群体中可能包含相同序列。-keep-ident 参数可以保留序列相同的样本,使输出样本数与输入样本数保持一致。
  • -fast 参数通过仅使用 最大简约(maximum parsimony)和 BIONJ 2 种方法构建系统发育树,仅进行 2 轮树的优化(-nstop=2),且无 OPTIMIZING CANDIDATE TREE SET 步骤。否则(不使用 -fast 参数)使用 100 种构建方法(default -ninit=100),并至多迭代 100 次(default -nstop=100)进行树的优化。
  • 经过 ModelFinder 检索(-m MF),本数据集的最佳替换模型为 GTR+F+R6+ASC,所以这里直接指定 -m GTR+F+R6+ASC 模型。
iqtree -s SNP.varsites.phy -m GTR+F+G4+ASC -fast -nt 50

将输出文件 SNP.varsites.phy.treefile 放入 iTOL 中即可观察所构建出的系统发育树结构。



附录

Ambiguous site

  • IQtree 将位点(site)分为 3 类:constant(invariant)、singleton、informative(variable)。constant site 指位点在所有样本中只包含 1 种碱基;singleton site 指位点包含 2 种类型碱基,但突变仅出现 1 次;informative site 指位点包含 2 种类型碱基,且每种碱基出现至少 2 次。从算法角度来说,IQtree 无法利用 singleton 对样本分群,即无法提供分群信息,所以 constant 与 singleton 位点属于 uninformative site 。

  • IQtree 对歧义位点(Ambiguous site)位点采用交集(intersection)形式分析:如果交集非空则忽略歧义碱基,若为空则视为 variant,同列中歧义碱基不堆叠。

      site        1234567
      species_1   CCCCCCC
      species_2   RTCYRCC
      species_3   CYTYYRT
      species_4   CCCYCRT
    
      site1 is singleton, because R={A or G}, which exclude C, uninformative.
      site2 is singleton, because Y={C or T}, which include C, ignore Y, uninformative.
      site3 is singleton, uninformative.
      site4 is constant, because Y={C or T}, which include C, ignore Y, uninformative.
      site5 is singleton, because R={A or G}, which exclude C, Y={C or T}, which include C, ignore Y, uninformative.
      site6 is singleton, because R={A or G}, which exclude C, uninformative.
      site7 is informative.
    
  • 由于歧义位点的交集策略,当同列中仅包含非空歧义碱基时,位点会被判定为 constant site(如上例中 site 4)。因此 SNP 数据从 vcf 转 phylip 后存在部分 site 被判定为 constant 的情况。如本教程 1w SNP 中包括 1807 parsimony-informative sites,1867 singleton sites,6466 constant sites。


ASC

IQtree 构建系统发育树时,informative sites 用于推断树的拓扑结构与分枝长度,uninformative site 则用于矫正。由于个体间固定长度区间内 SNP 越多,说明个体间积累的突变越多,分离的时间越长。所以 SNP 构成的 Fasta 数据大幅增加了突变的密度,使个体间分离时间大幅提前,导致 分枝过长

同时,分枝过长 会压缩祖先之间的分枝长度,降低 祖先之间拓扑结构推断的 准确性。因为祖先与个体之间时间跨度越长,祖先的可能性就越多,如果祖先对应一个概率分布,则祖先与祖先之间的分布交集就越大。

例如 A / B 的祖先是 D,C 的祖先是 E,D / E 的祖先是 F,如果 A / B / C 与 D / E 的距离越远,D / E 的可能序列就越多,D / E 分布重合的区间就越大;因为 D / E 间相似度高,所以 D / E 与 F 的距离会缩短,即压缩 D / E 与祖先 F 之间的分枝长度,降低树结构预测的准确性。

为了矫正输入 SNP 数据导致发育树分枝过长的情况,IQtree 提供 +ASC 参数(ascertainment bias correction)。使用本教程数据,分别评测了 GTR+F+G4 和 GTR+F+G4+ASC 两种替换模型下的树结构,结果参见下节(Test 2&3)。+ASC 虽然对 Log-likelihood 影响较小(1.2%=1-79848/80786),但对树结构影响较大(23.3%=1-5.536/7.216),且能够大幅提高稳定性(148%->0%)。


不同参数的性能测试

TestinputmodeloptimizeLog-likelihoodTotal tree lengthSum of internal branch lengths (ratio)near-zero internal branchesLmap not informative ratio
1min4.phyGTR+F+G4fast-956363.7510.799 (21%)938.48%
2varsites.phyGTR+F+G4fast-807867.2161.549 (21%)9714.82%
3varsites.phyGTR+F+G4+ASCfast-798485.5361.185 (21%)1010%
4varsites.phyGTR+F+R6+ASCfast-774261.3270.269 (20%)2630%
5varsites.phyGTR+F+R6+ASCcomplete-772391.0790.210 (19%)3160%

  • Test 1&2:使用 IQtree 过滤 SNP 数据集中的 constant site 后再输入 IQtree,不仅可以使用 +ASC 提高模型 精度,还能减少建树 时间(min4 299s,varsites 50s)。
  • Test 2&3:ASC 使树的 分枝长度 大幅降低(23.3%=1-5.536/7.216),且能够大幅提高 稳定性(148%->0%),但对 似然值 改变较小(1.2%=1-79848/80786)。
  • Test 3&4:更换模型 使树的 分枝长度 大幅降低(75%=1-1.328/5.536),但 似然值 改变较小(3%=1-77426/79848)。
  • Test 4&5:多轮迭代 使树的 分枝长度 大幅降低(20%=1-1.079/1.328),但 似然值 改变微小(3‰=1-77239/77426)。
  • Test all:所有模型中中间分枝(internal branch)长度占总枝长比例基本固定(约 20%),near-zero 与 tree length 相关性较高,当发育树整体分枝长度增加时,内部分枝长度也相应增加,其中近 0 分枝数量减少。中间分枝长度占比 20 % 说明 80% 的枝长分布在 末端分枝,个体间距离较大,分离时间较早。部分祖先间的进化关系太紧密(near-zero),用多叉树描述可能更符合这些节点。



重复

iqtree -s SNP.varsites.phy -m GTR+F+R6+ASC -p SNP.varsites.nex -fast -nt 50
RepeatLog-likelihoodTotal tree lengthSum of internal branch lengths (ratio)near-zero internal branches
1-724351.3830.281 (20%)287
2-720461.8920.385 (20%)217
3-724161.7240.345 (20%)234
4-725311.6070.332 (20%)220
  • Log-likelihood 变化较小,但 tree length 浮动较大。near-zero 与 Sum of internal 与 tree length 相关性较高。
  • 树的拓扑结构存在差异



参考

http://www.iqtree.org/doc/Substitution-Models

  1. Binary and morphological models
  2. Ascertainment bias correction

http://www.iqtree.org/doc/Command-Reference

http://www.iqtree.org/doc/Frequently-Asked-Questions

  1. Why does IQ-TREE complain about the use of +ASC model?
  2. What are the differences between alignment columns/sites and patterns?
  • 12
    点赞
  • 12
    收藏
    觉得还不错? 一键收藏
  • 7
    评论
### 回答1: bcftools是一个广泛使用的命令行工具,用于处理VCF格式的变异调用数据。它支持检查,过滤,转换和合并VCF文件。利用bcftools可以生成高保真度和高质量的系统发育构建系统发育必须先生成一个vcf文件。在vcf文件中,包含了每个样品在每个位置上的碱基。然后,可以使用bcftools进行变异的过滤和筛选,以过滤掉低质量的碱基以及不太可靠的变异。 在变异筛选之后,可以使用bcftools将过滤后的vcf文件转换为phylip格式。phylip是一种用于构建系统发育的标准格式。然后,利用phylip格式的文件和其他的支持文件,可以使用常规的系统发育软件,如RAxML和PhyML,构建系统发育。 总之,bcftools是一个非常有用的工具,能够对VCF格式的变异调用数据进行全面处理,并可以生成高质量的系统发育。它对于分子生物学和生物信息学研究都是非常重要的工具。 ### 回答2: BCFTools是一个非常流行的工具,可以用于处理VCF文件并构建系统发育使用BCFTools处理VCF文件有很多好处,例如可以过滤VCF文件中无用的信息,筛选出感兴趣的位点等。 要使用BCFTools构建系统发育,我们需要先将VCF文件中的数据转换成BCF文件。这可以通过使用bcftools view命令将VCF文件转换成BCF文件来完成。然后,我们需要使用bcftools query命令从BCF文件中提取需要的信息,例如基因型、SNP位点等。可以使用bcftools filter命令在提取信息的同时进行一些筛选操作,例如过滤掉低质量的位点、过滤掉缺失值等。 最后,在得到所需的信息后,我们可以使用构建系统发育所需的软件,例如PHYLIP等,将提取的信息输入到软件中进行分析和构建系统发育。 总之,使用BCFTools处理VCF文件可以大大简化系统发育构建过程,提高分析效率和准确性。但是,需要注意保证数据质量和正确性,以避免结果出错。 ### 回答3: BCFtools是一种用于处理VCF和BCF文件的工具集,可以用于构建系统发育。通过将多个样品的VCF文件合并以构建总体样本的VCF文件,可以使用BCFtools执行操作,例如基因型过滤、缺失数据的填充以及变异注释。 构建系统发育需要将样品的遗传差异映射到形结构中,以显示它们的亲缘关系。一种构建方法是使用多序列比对将DNA序列对齐,然后执行基于序列比较的形建构分析。另一种方法是使用变异的相对频率或一些组合遗传标志,例如单倍体基因型的分布来建构系统发育。这种数据分析方法称为分子系统学。 使用BCFtools进行VCF文件处理时,可以考虑以下步骤: 1)使用bcftools merge命令将多个样本的VCF文件合并成一个总体VCF文件。 2)使用bcftools view命令执行过滤,例如基因型和质量过滤,以减少噪音和杂质信号。 3)使用bcftools stats命令生成统计信息,例如变异密度、每个样本的基因型频率和分布的质量值等。 4)使用vcftools或其他变异注释工具添加有关变异和功能信息,例如GenBank注释、GO注释、KEGG通路注释等。 5)使用获得的信息对变异进行系统发育推断,以判断样本之间的亲缘关系、进化史和分化历史。常见的分化历史分析方法包括最大简约、相似度矩阵分析、邻接成对绘制等分子系统学方法。 综上所述,BCFtools是一种有用的工具集,可以处理VCF文件和构建系统发育,并帮助科学家了解样本之间的遗传相似性和进化历史。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 7
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值