前言

在各个行业都是有行业标准的，这样才能统一规范而方便后面的分析，在生物信息学领域中主要是各种大量序列数据、注释数据等，这些都是有特定的格式去表示，下面列举几种常见的格式。了解这些是进行后续生物信息学分析的必备知识，有些人虽说是在做生物信息学分析，但是到现在可能还不知道什么是GFF3格式等。

fasta

fasta格式是最基本的表示序列信息（核苷酸或者蛋白质）的格式。 http://genetics.bwh.harvard.edu/pph/FASTA.html ，https://en.wikipedia.org/wiki/FASTA_format 。这里简单介绍下，fasta格式的文件通常后缀名为.fasta 或者.fa， 其实这都无所谓，因为都是文本文件。fasta格式文件（可以包含多条序列）中的一条序列的通常表示方法如下：

其中主要分为两个部分

多行序列举例如下：

fastq

fastq（ https://en.wikipedia.org/wiki/FASTQ_format ）同样是以文本形式来存储序列信息的格式，后缀名通常为.fastq 或者.fq，但是与fasta不相同的是，它除了存储序列本身外还存储了序列中每个单元所对应的质量分数，所以fastq格式通常用于高通量测试数据的存储。早期是有Sanger机构开发的，但是现在已经演变成一个高通量测序的标准了。

fastq格式文件中一个完整的单元分为四行，每行的含义如下：

第一行： 以@开头，内容同fasta的描述行类似

第二行：具体的碱基序列

第三行：以+开头，后面的内容可以和第一行类似，也什么都没有只留+

第四行：以ASCII字符集（分数）编码来表示对应碱基的测序质量

比如下面的这个例子：

下面以Illumina和NCBI SRA两个测序数据来源来讲讲它们之间的区别：

通常我们获取测序数据有两种途径，一种是自己通过仪器测定，一种是在公共数据库中(比如之前说到的NCBI中的SRA数据库)获取，这两种方式主要是在序列名称的命名上和测序质量表示方式上有所不同。

Illumina 序列名称：

上述以：隔开的每个字段的含义如下：

| HWUSI-EAS100R | the unique instrument name | | 6 | flowcell lane | | 73 | tile number within the flowcell lane | | 941 | ‘x’-coordinate of the cluster within the tile | | 1973 | ‘y’-coordinate of the cluster within the tile | | #0 | index number for a multiplexed sample (0 for no indexing) | | /1 | the member of a pair, /1 or /2 (paired-end or mate-pair reads only) |

NCBI SRA数据库：

将测序数据提交到NCBI的SRA数据库时，SRA数据库会为每一个样本提供一个编号，一般是SRRxxxxx，所以从SRA数据库上下载公共的测试数据（原始格式为

.sra， 需特定工具转换为fastq），其fastq格式文件中每个单元的名称是以SRA编号接数字加以区分的。比如下面的这个示例：

质量分数表示法：

由于测序仪器的不同等因素所以对碱基测序质量的表示方式也不相同，在Fastq格式文件中，用ASCII码表来表示每个碱基的测序质量，下面介绍几种不同的方案：

其中有五种表示方法，Sanger的码表范围为!至I，其对应的数值为33-73，如果减去33（即Phred+33表示法）这个基数则范围转换为0-40，即如果某一个碱基的测序质量为!则对应的测序质量分数为0，表示测序质量低。其它几种表示法类似（X,I,J,L）。这里介绍测序质量的表示方法是因为后面有的软件是要指定测序数据的质量表示方法。

gff2

http://gmod.org/wiki/GFF2 

GFF(General Feature Format)是一种用于描述基因或者其它序列元素的文件格式，GFF有几个版本，早期的第Version 2和现在的Version 3. Version 2 是由Sanger机构所制定的，而Version 3是由Sequence Ontology Project制定。正是由于有统一的格式来表示基因等元素，使得GFF格式的文件被广泛的使用与mapping与基因组数据可视化方面。

GFF2文件格式是由tab隔开的九列值，每一行的九个字段的含义如下：

第一列： reference sequence， 该列表示的是特征元素所在的染色体（或者scaffold，或者contig），也就是在基因组中的坐标系统，后续一切的注释信息都是基于此列。

第二列：source，该列表示改行注释信息的来源，比如上述的一行表示该行的CDS注释信息来自名为“curated”的注释。

第三列：feature，或者说是method，type， 表示的是该注释的类型，比如上述表示改行注释为CDS信息，可以将source和feature结合起来描述的更加详细。

第四列：start position，在reference sequence上的开始位置（坐标），通常是从1为起点而不是0。

第五列：end position， 在reference sequence上的结束位置（坐标），一般是大于start position的。

第六列：score， 表示该行feature的分数，比如序列相似性等，如果没有对应的分数可以用.代替。

第七列：strand，feature所在链，+表示正链，-表示负链，.表示不确定或者与链无关。

第八列：phase，与蛋白质编码相关，一般是用于CDS，值的范围为0-2，表示编码时阅读框的移动相位。

下面这段描述很详细:

‘0’ indicates that the specified region is in frame, i.e. that its first base corresponds to the first base of a codon. ‘1’ indicates that there is one extra base, i.e. that the second base of the region corresponds to the first base of a codon, and ‘2’ means that the third base of the region is the first base of a codon. If the strand is ‘-‘, then the first base of the region is value of , because the corresponding coding region will run from to on the reverse strand.

第九列：group，或者称为attributes，是用于对改行注释更多的描述，以键值对的形式，比如上面的例子表示该CDS是属于名为R119.7的transcript。该列中可以存在多个属性，属性之间是用;隔开的。

对于GFF格式的理解主要是集中在最后一列，有以下集中情况：

1. 对于单个feature

2. 对于属于同一集合的多个feature

比如上面这个例子就表示这四个exon都是属于同一个名为B0273.1的transcript，这是表示一个完整transcript结构的最基本要求。

GFF2还可用于序列比对结果表示等其它方面，这里不做介绍了。

gtf(gff2.5)

http://mblab.wustl.edu/GTF2.html 

GTF（Gene Transfer Format）格式是借鉴于GFF2格式，也被称为GFF2.5，大部分字段的定义是和GFF2相同的，只是每行的第九列必须带有如下四个域，具体为gene_id value; transcript_id value; 这样的设计是为了适应一个基因的多个转录本这种情况。比如下面的这个例子：

gff3

http://gmod.org/wiki/GFF3 http://www.sequenceontology.org/gff3.shtml 

GFF2格式早期用的比较多，但是现在用的多的是GFF3格式，这也是好多软件所支持的，比如Gbrowse， Jbrowse等基因组数据可视化工具。

先看下面这个简单的例子：

第一行的##gff-version 3通常是需要的，而且必须是在文件的第一行。

前八列和GFF2、GFF2.5类似，但是有几点是要特别注意的，主要是将GFF3注释数据用于基因组浏览器时，字段中的一些特殊字符比如空格，> %等都需要使用URL编码进行转换才能准确的在web中进行展示。

第九列同样是表示attributes，采用的同样是键值对的形式（tag=value），只是这里有几个特定的键，具体如下：

ID，feature在整个GFF3文件中唯一的标识符；

Name，feature的名字，不同于ID，Name不要求唯一，只是方便用户浏览；

Alias， 相当于feature的别名；

Parent，表明该feature所属的上一级feature 的ID，这种关系可用于exons-transcripts，transcripts-genes，可以看出一个feature可以拥有多个子feature；

Target， 主要是用于序列比对结果的展示，value的格式为target_id start end [strand], 其中如果target_id中含有空格则需转换为%20；

后面还有些其它属性比如Note等，这里不再做详细描述。

下面再来看下典型的例子：

一个名为EDEN的基因拥有三个转录本，分别名为EDEN.1 EDEN.2 EDEN.3， 每个转录本又有UTR和CDS等信息。

该GFF3文件中含有对应的序列，以##FASTA作为标示。

bed

http://www.genome.ucsc.edu/FAQ/FAQformat.html#format1 ，http://bedtools.readthedocs.org/en/latest/content/general-usage.html ，http://asia.ensembl.org/info/website/upload/bed.html?redirect=no

bed格式同样是用于展示序列注释信息，有相应的软件来处理这类格式的文件，如bedtools。可以用在类似GBrowse这样的基因组数据可视化工具中。 以tab隔开，它必须的三个字段为 chrom、chromStart、chromEnd，还有9个可选字段。

注意：用于在GBrowse上展示相关注释的bed格式通常第一行有一个关于track的描述信息。

比如下面的例子：

sam/bam

http://blog.sina.com.cn/s/blog_670445240101l30k.html ， http://genome.sph.umich.edu/wiki/SAM ，https://samtools.github.io/hts-specs/SAMv1.pdf 。 在生物信息学中尤其是高通量测序数据分析中，大部分的操作都是在实现短片段序列与参考序列的比对（mapping），比如bowtie等，这就涉及到如何使用一个统一的格式来表示这种mapping结果呢，sam（Sequence Alignment/Map）格式就是来解决这个问题的。sam文件拥有头部描述和详细比对两部分，其中头部描述是以@开头，后面紧跟两个缩写字母表示相应的含义，SAM分为两部分，注释信息（header section）和比对结果部分（alignment section），注释信息可有可无，都是以@开头，用不同的tag表示不同的信息，主要有： @HD，说明符合标准的版本、对比序列的排列顺序； @SQ，参考序列说明； @RG，比对上的序列（read）说明； @PG，使用的程序说明； @CO，任意的说明信息。 而详细比对部分是通过11个tab隔开的字段来表示。

下面主要讲解下详细比对部分字段的具体含义：

6bb1fa1c-ec5c-4950-81c1-833f78d845b2

其中：

1. QNAME 表示的是查询序列的名称即短片段（reads）的名称；

2. FLAG 以整数来表示比对的结果，不同数值有不同的意义，数值也可以是下列数的组合；

d7ba3e7b-45f2-4ec3-ac60-dab59c9678fc

比如如果FLAG是4的话则表示该reads没有比对到参考序列上，flag为16表示single-end reads比对到参考序列的反链上，

flag为83（64+16+2+1）表示paired-end reads中的第一个reads比对到参考序列上了。

3. RNAME 表示参考序列的名称，比如基因组的染色体编号等，如果没有比对上则显示为*；

4. POS 表示比对的起始位置，以1开始计数，如果没有比对上则显示为0；

5. MAPQ 比对质量；

6. CIGAR CIGAR 字符串，即比对的详细情况，简要比对信息表达式（Compact Idiosyncratic Gapped Alignment Report），其以参考序列为基础，使用数字加字母表示比对结果，比如3S6M1P1I4M，前三个碱基被剪切去除了，然后6个比对上了，然后打开了一 个缺口，有一个碱基插入，最后是4个比对上了，是按照顺序的；

7. RNEXT 双末端测序中下一个reads比对的参考系列的名称，如果没有则用*表示，如果和前一个reads比对到同一个参考序列则用=表示；

8. PNEXT 下一个reads比对到参考序列上的位置，如果没有则用0表示；

9. ISIZE/TLEN query序列的模板长度或者插入长度，Template的长度，最左边得为正，最右边的为负，中间的不用定义正负，不分区段（single-segment)的比对上，或者不可用时，此处为0；

10. reads的序列信息；

11. reads的序列质量信息，同FASTQ。

后面还有些可选字段，比如：

可选字段（optional fields)，格式如：TAG:TYPE:VALUE，其中TAG有两个大写字母组成，每个TAG代表一类信息，每一行一个TAG只能出现一次，TYPE表示TAG对应值的类型，可以是字符串、整数、字节、数组等。

示例：