转载:http://www.cnblogs.com/jinhh/p/8328818.html
三代测序的下机数据都有哪些,以及他们具体的格式是怎么样的(以sequel 平台为主)。
测序过程
SMRTbell
A adapter通用接头,两端的接头可以一样也可以不一样 B barcode(客户自己设计) I insert 插入片段,即我们测序的目的片段 由于SMRTbell是环状的,测序过程是边合成边测序,因此可以沿着新链合成的方向不停地读取序列,读取一圈又一圈,直到聚合酶累趴下了…测序结果
根据SMRTbell的形状以及测序的过程,我们容易知道,测序出来的reads如上图所示,由接头序列, 条码序列, 插入序列间隔线性分布,即ABIB-ABIB—ABIB-ABIB—…(A: adapter, B: barcode, I: insert)
ZMW read 是测序出来的完整结果,也即是polymerase read,聚合酶合成过的所有的序列。 PostPrimary 分析后输出HQ region,由ZMW read 去除两端低质量区域得到。收到的测序文件
RS II
Sequel
在下机文件中,主要有三类文件,bam 文件,bam.pbi 文件,以及xml文件。
当我们习惯性的去寻找熟悉的fastq格式文件做分析时,忽然发现找不到了,因为在sequel平台中bam 文件成为了它的替代者,因为其更节约储存空间。这是文件格式的一个重大更新。 用于后续分析的文件一般是.subreads.bam,这等同于RS II 中的.subreads.fastq 下面仔细聊聊三类主要文件的具体格式,以及他们分别干什么活的。Pacbio 的BAM 文件格式
我们平常见到的bam文件大多是比对结果文件,例如用重测序分析中BWA生成的bam文件就是reads与基因组的比对文件。但pacbio的下机文件是没有与基因组进行过比对过的,其主要作用就是储存序列。
Bam文件主要分为两个部分,头一部分是Header,储存测序的相关信息,另一部分也即是文件的主要部分是records,这里头保存了我们的序列信息。我们这里就以subreads.bam文件为例,分析下bam文件的具体格式。 可以用samtools view 命令查看bam文件第一列:reads信息
{movieName}/{holeNumber}/{qStart}_{qEnd}[对于CCS:{movieName}/{holeNumber}/ccs]MovieName 是cell的名字,holeNumer是ZMW孔的编号,qStart和qEnd是subreads相对于ZMW reads的位置。 第二列 (sum of flags):比对信息 均为4 代表没有比对上,也表明了bam文件只储存了序列信息,而没有比对信息。 第三列 (RNAM):参考序列 值为 ,代表无参考序列 第四列 (position) : 比对上的第一个碱基位置 0 第五列 (Mapping quality) : 比对质量分数 255 第六列 (CIGAR值) : 比对的具体情况 第七列 (MRNM, ) : mate 对应的染色体 第八列 (mate position) : mate对应的位置 0 第九列 (ISIZE, Inferred fragment size) : 推断的插入片段大小 0 第十列 (Sequence) : 序列信息 具体的ATCG 第十一列 (ASCII码) : 碱基质量分数 ASCII+33 第十二列 : 可选区域 记录Reads 的总体属性包括信号长度,信号强度等信息。BAM 文件分别都是些什么?
-
zmws.bam 以及ccs.bam似乎公司并不一定会提供
-
经过检查,一条zmw reads 可以产生多条 subreads,也就是说subreads.bam 中,序列只是被剪下来了。
-
scraps.bam 格式保存的是获取subreads时废弃的序列,包括adapter,以及一些低质量的序列
-
CCS.bam保存的是矫正后的一致性序列。
BAM.pbi 文件
是bam文件的索引文件(PacBio BAM index),与上一个版本(RS II)的*cmp.h5文件兼容,其格式类似于HDF5, 通过BGZF格式压缩。
其存在主要有两个作用随机访问
通过参考序列,基因组区域
通过read 组别 通过qurey name 通过ZMW 通过barcode 其他在无需完全访问BAM文件的情况下,获取信息
获取统计信息
通过提供index访问记录信息
XML 文件
MetaData, 储存数据描述。可用于filter 或者subset等功能。
sts.xml 储存数据的统计信息。
SMRT Link CL tools in 5.0.0 dataset命令可以进行方便的操作。
参考资料
http://pacbiofileformats.readthedocs.io/en/5.0/