前情提要

  • NBT:QIIME 2可重复、交互和扩展的微生物组数据分析平台

  • 1简介和安装Introduction&Install

  • 2插件工作流程概述Workflow

  • 3老司机上路指南Experienced

  • 4人体各部位微生物组分析Moving Pictures

  • Genome Biology:人体各部位微生物组时间序列分析

  • 5粪菌移植分析练习FMT

  • Microbiome:粪菌移植改善自闭症

  • 6沙漠土壤分析Atacama soil

  • mSystems:干旱对土壤微生物组的影响

  • 7帕金森小鼠教程Parkinson’s Mouse

  • Cell:肠道菌群促进帕金森发生ParkinsonDisease

  • 8差异丰度分析gneiss

  • 9数据导入Importing data

QIIME 2用户文档. 9数据导出

https://docs.qiime2.org/2019.7/tutorials/exporting/

Exporting data

注:最好按本教程顺序学习,想直接学习本章,至少完成本系列1简介和安装。

为了使用QIIME 2,输入数据必须存储在QIIME 2对象(即qza文件)中。这是支持分布式、自动来源跟踪、语义类型验证和数据格式之间的转换的基础(有关QIIME 2对象的更多详细信息,请参阅核心概念页)。

有时,您需要从QIIME 2对象中导出数据,例如使用不同的微生物组分析程序分析数据,或在R中进行统计分析。这可以通过使用qiime tools export命令来实现,该命令以QIIME 2对象(.qza)文件和输出目录作为输入。对象中的数据将根据特定对象导出一个或多个文件。

注意: 当从QIIME 2对象导出数据时,将不再有与数据相关的来源。如果随后重新导入数据,则与新对象关联的源将从导入步骤开始,并且所有现有的来源信息都将丢失。因此,最好只在使用QIIME 2完成所有可以实现的处理步骤后,再从对象中导出数据,以最大化每个对象的来源追溯。

以下部分提供了从QIIME 2对象导出数据的示例。可以从任何QIIME 2对象或可视化中导出数据;该过程与下面描述的过程相同。

详者注:为什么要导出文件?
QIIME2采用统一qza文件格式,是为了保证文件格式统一和分析流程可追溯。但不可能要求每个人都用此需系统,而且此系统的功能也不是万能的,需要导出其它软件兼容的格式,方便交流和其它用户开展个性化的分析。

启动工作环境并创建工作目录

# 定义工作目录变量,方便以后多次使用
wd=~/github/QIIME2ChineseManual/2019.7
mkdir -p $wd
# 进入工作目录,是不是很简介,这样无论你在什么位置就可以快速回到项目文件夹
cd $wd# 方法1. 进入QIIME 2 conda工作环境
conda activate qiime2-2019.7
# 这时我们的命令行前面出现 (qiime2-2019.7) 表示成功进入工作环境# 方法2. conda版本较老用户,使用source进入QIIME 2
source activate qiime2-2019.7# 方法3. 如果是docker安装的请运行如下命令,默认加载当前目录至/data目录
docker run --rm -v $(pwd):/data --name=qiime -it  qiime2/core:2019.7# 建立工作目录
mkdir -p qiime2-exporting-tutorial
cd qiime2-exporting-tutorial

导出特征表

Exporting a feature table

导出FeatureTable[Frequency]对象为BIOM v2.1格式

wget \-O "feature-table.qza" \"https://data.qiime2.org/2019.7/tutorials/exporting/feature-table.qza"qiime tools export \--input-path feature-table.qza \--output-path exported-feature-table
  • feature-table.qza:QIIME 2特征表文件。查看 | 下载

详者注

导出的biom文件位于exported-feature-table文件夹中,名为feature-table.biom,可用biom程序对文件进行格式转换和分析,可参阅以下教程:

  • BIOM:生物观测矩阵——微生物组数据通用数据格式

BIOM 2.1格式也是HDF5格式,为二进制,无法直接查看,必须转换为文本阅读。

biom转换biom为tsv格式

biom convert -i exported-feature-table/feature-table.biom -o exported-feature-table/feature-table.txt --to-tsv

查看文件less -S exported-feature-table/feature-table.txt

# Constructed from biom file
#OTU ID K3.H    K3.Z    M2.Middle.L     K3.A    K3.R    K3.V
New.CleanUp.ReferenceOTU0       2.0     0.0     0.0     0.0
New.CleanUp.ReferenceOTU1       0.0     1.0     6.0     1.0
New.CleanUp.ReferenceOTU3       0.0     0.0     0.0     0.0

同理tsv转换为biom的代码如下:

biom convert -i exported-feature-table/feature-table.txt -o table.from_txt_hdf5.biom --table-type="OTU table" --to-hdf5

导出进化树

Exporting a phylogenetic tree

导出Phylogeny[Unrooted]对象为newick格式

wget \-O "unrooted-tree.qza" \"https://data.qiime2.org/2019.7/tutorials/exporting/unrooted-tree.qza"qiime tools export \--input-path unrooted-tree.qza \--output-path exported-tree
  • unrooted-tree.qza:无根树文件。查看 | 下载

导文件为exported-tree/tree.nwk,是标准树nwk文件

(((New.CleanUp.ReferenceOTU1480:0.11995,(New.CleanUp.ReferenceOTU202:0.04479,
New.CleanUp.ReferenceOTU432:0.0049)0.769:0.04661)1:0.26705,
((New.CleanUp.ReferenceOTU1150:0.00016,(New.CleanUp.ReferenceOTU782:0.04264,(New.CleanUp.ReferenceOTU643:0.10438,
(((New.CleanUp.ReferenceOTU1014:0.01521,New.CleanUp.ReferenceOTU270:0.02738)0.879:0.02315,(((New.CleanUp.ReferenceOTU1008:0.0378

导出与提取

Exporting versus extracting

提取包括所有的信息文件,如下例中的特征表文件,结果即包括特征表,又包括生成此文件的相关软件版本信息,还有生成此文件所有步骤的文件说明。

mkdir -p extracted-feature-table
qiime tools extract \--input-path feature-table.qza \--output-path extracted-feature-table

解压/提取目录包括一个对象编号UUID的目录,里面有所有文件。

推荐使用 https://view.qiime2.org 在线查看结果,可以图形化展示分析流程的追溯。

Reference

https://docs.qiime2.org/2019.7

Evan Bolyen, Jai Ram Rideout, Matthew R. Dillon, Nicholas A. Bokulich, Christian C. Abnet, Gabriel A. Al-Ghalith, Harriet Alexander, Eric J. Alm, Manimozhiyan Arumugam, Francesco Asnicar, Yang Bai, Jordan E. Bisanz, Kyle Bittinger, Asker Brejnrod, Colin J. Brislawn, C. Titus Brown, Benjamin J. Callahan, Andrés Mauricio Caraballo-Rodríguez, John Chase, Emily K. Cope, Ricardo Da Silva, Christian Diener, Pieter C. Dorrestein, Gavin M. Douglas, Daniel M. Durall, Claire Duvallet, Christian F. Edwardson, Madeleine Ernst, Mehrbod Estaki, Jennifer Fouquier, Julia M. Gauglitz, Sean M. Gibbons, Deanna L. Gibson, Antonio Gonzalez, Kestrel Gorlick, Jiarong Guo, Benjamin Hillmann, Susan Holmes, Hannes Holste, Curtis Huttenhower, Gavin A. Huttley, Stefan Janssen, Alan K. Jarmusch, Lingjing Jiang, Benjamin D. Kaehler, Kyo Bin Kang, Christopher R. Keefe, Paul Keim, Scott T. Kelley, Dan Knights, Irina Koester, Tomasz Kosciolek, Jorden Kreps, Morgan G. I. Langille, Joslynn Lee, Ruth Ley, Yong-Xin Liu, Erikka Loftfield, Catherine Lozupone, Massoud Maher, Clarisse Marotz, Bryan D. Martin, Daniel McDonald, Lauren J. McIver, Alexey V. Melnik, Jessica L. Metcalf, Sydney C. Morgan, Jamie T. Morton, Ahmad Turan Naimey, Jose A. Navas-Molina, Louis Felix Nothias, Stephanie B. Orchanian, Talima Pearson, Samuel L. Peoples, Daniel Petras, Mary Lai Preuss, Elmar Pruesse, Lasse Buur Rasmussen, Adam Rivers, Michael S. Robeson, Patrick Rosenthal, Nicola Segata, Michael Shaffer, Arron Shiffer, Rashmi Sinha, Se Jin Song, John R. Spear, Austin D. Swafford, Luke R. Thompson, Pedro J. Torres, Pauline Trinh, Anupriya Tripathi, Peter J. Turnbaugh, Sabah Ul-Hasan, Justin J. J. van der Hooft, Fernando Vargas, Yoshiki Vázquez-Baeza, Emily Vogtmann, Max von Hippel, William Walters, Yunhu Wan, Mingxun Wang, Jonathan Warren, Kyle C. Weber, Charles H. D. Williamson, Amy D. Willis, Zhenjiang Zech Xu, Jesse R. Zaneveld, Yilong Zhang, Qiyun Zhu, Rob Knight & J. Gregory Caporaso#. Reproducible, interactive, scalable and extensible microbiome data science using QIIME 2. Nature Biotechnology. 2019, 37: 852-857. doi:10.1038/s41587-019-0209-9

译者简介

刘永鑫,博士。2008年毕业于东北农大微生物学,2014年于中科院遗传发育所获生物信息学博士,2016年博士后出站留所工作,任宏基因组学实验室工程师。目前主要研究方向为宏基因组数据分析和植物微生物组,QIIME 2项目参与人。目前在Science、Nature Biotechnology等杂志发表论文十余篇。2017年7月创办“宏基因组”公众号,目前分享宏基因组、扩增子原创文章400余篇,代表博文有《扩增子图表解读、分析流程和统计绘图三部曲(21篇)》、《Nature综述:手把手教你分析菌群数据(1.8万字)》、《QIIME2中文教程(18篇)》等,关注人数6.5万+,累计阅读1000万+。

猜你喜欢

10000+:菌群分析 宝宝与猫狗 梅毒狂想曲 提DNA发Nature Cell专刊 肠道指挥大脑

系列教程:微生物组入门 Biostar 微生物组  宏基因组

专业技能:学术图表 高分文章 生信宝典 不可或缺的人

一文读懂:宏基因组 寄生虫益处 进化树

必备技能:提问 搜索  Endnote

文献阅读 热心肠 SemanticScholar Geenmedical

扩增子分析:图表解读 分析流程 统计绘图

16S功能预测   PICRUSt  FAPROTAX  Bugbase Tax4Fun

在线工具:16S预测培养基 生信绘图

科研经验:云笔记  云协作 公众号

编程模板: Shell  R Perl

生物科普:  肠道细菌 人体上的生命 生命大跃进  细胞暗战 人体奥秘

写在后面

为鼓励读者交流、快速解决科研困难,我们建立了“宏基因组”专业讨论群,目前己有国内外5000+ 一线科研人员加入。参与讨论,获得专业解答,欢迎分享此文至朋友圈,并扫码加主编好友带你入群,务必备注“姓名-单位-研究方向-职称/年级”。PI请明示身份,另有海内外微生物相关PI群供大佬合作交流。技术问题寻求帮助,首先阅读《如何优雅的提问》学习解决问题思路,仍未解决群内讨论,问题不私聊,帮助同行。

学习16S扩增子、宏基因组科研思路和分析实战,关注“宏基因组”

点击阅读原文,跳转最新文章目录阅读

QIIME 2用户文档. 10数据导出Exporting data(2019.7)相关推荐

  1. QIIME 2教程. 10数据导出Exporting data(2020.11)

    文章目录 QIIME 2用户文档. 10数据导出 导出特征表 导出进化树 导出与提取 译者简介 Reference 猜你喜欢 写在后面 QIIME 2用户文档. 10数据导出 https://docs ...

  2. QIIME 2用户文档. 9数据导出Exporting data(2018.11)

    文章目录 前情提要 QIIME 2用户文档. 9数据导出 导出特征表 导出进化树 导出与提取 Reference 译者简介 猜你喜欢 写在后面 前情提要 文章导读:QIIME 2可重复.交互和扩展的微 ...

  3. QIIME 2用户文档. 12数据筛选Filtering data(2019.7)

    前情提要 NBT:QIIME 2可重复.交互和扩展的微生物组数据分析平台 1简介和安装Introduction&Install 2插件工作流程概述Workflow 3老司机上路指南Experi ...

  4. QIIME 2用户文档. 9数据导入Importing data(2019.7)

    前情提要 NBT:QIIME 2可重复.交互和扩展的微生物组数据分析平台 1简介和安装Introduction&Install 2插件工作流程概述Workflow 3老司机上路指南Experi ...

  5. QIIME 2教程. 10数据导出ExportingData(2021.2)

    QIIME 2用户文档. 10数据导出 https://docs.qiime2.org/2021.2/tutorials/exporting/ Exporting data 注:最好按本教程顺序学习, ...

  6. QIIME 2用户文档. 11数据筛选Filtering data(2018.11)

    文章目录 前情提要 QIIME 2用户文档. 11数据筛选 下载实验相关数据 过滤特征表 按数据量过滤 偶然因素的过滤 基于索引的过滤 基于元数据的筛选 基于物种过滤表和序列 过滤序列 过滤距离矩阵 ...

  7. QIIME 2用户文档. 8数据导入Importing data(2018.11)

    文章目录 前情提要 QIIME 2用户文档. 8数据导入 导入带质量值的FASTQ测序数据 EMP标准混样单端数据 EMP混样双端数据 Casava1.8单端混样数据 Casava 1.8双端拆分后数 ...

  8. QIIME 2用户文档. 14数据评估和质控Evaluating and controlling(2019.7)

    前情提要 NBT:QIIME 2可重复.交互和扩展的微生物组数据分析平台 1简介和安装Introduction&Install 2插件工作流程概述Workflow 3老司机上路指南Experi ...

  9. QIIME 2用户文档. 19使用q2-vsearch聚类OTUs(2019.7)

    前情提要 NBT:QIIME 2可重复.交互和扩展的微生物组数据分析平台 1简介和安装Introduction&Install 2插件工作流程概述Workflow 3老司机上路指南Experi ...

最新文章

  1. 传感器追踪身体健康数据 可穿戴式将帮助人体实时监测外界伤害
  2. python3 循环写入一对多键值对_为什么Python 3.6以后字典有序并且效率更高?
  3. 添加MSDN搜索的正确方法
  4. 计算机网络应用是学什么类型的,计算机网路中服务类型及应用
  5. 搭建本地Ubuntu14.04源
  6. 机器学习实战(九)K-means(K-均值)
  7. Mobx入门之四:自定义reactions,when, autorun
  8. 8086可以用c语言编程吗,[求助]如何将C程序反汇编成8086汇编程序
  9. 经典查找算法 --- R树
  10. js、Java的url参数转码(url里中文、特殊符号参数转码)
  11. 如何使用KALI攻击“恶意网站“实验
  12. 跨平台,跨浏览器兼容性问题_跨浏览器兼容性检查的完整指南
  13. C/C++程序固定单核CPU运行(几个示例)
  14. 长安居大不易--用大数据分析西安租房现状
  15. slite 存储图片
  16. 在ubantu下安装搜狗
  17. MySQL使用空间索引问题
  18. Java内部锁(synchronized)中类锁和对象锁
  19. 用户标签体系的应用——精准营销
  20. Jmeter(三) - 从入门到上天 - 常用原件 (详解教程)

热门文章

  1. Redis系列8-cluster(2)
  2. feof函数,fscanf函数,strtok函数等遇到的小疑惑解决办法
  3. 3D点云系列———pcl:点云融合
  4. esp32+lvgl--桌面多功能天气时钟
  5. 学插画要基础吗?插画基础入门教程
  6. RHCSA知识点汇总
  7. SuperMap GIS 三维性能优化
  8. java程序出现乱码的原因
  9. 90后电商创业失败样本:垂直B2C不好做
  10. 信号完整性-7介电常数