用Modules优雅地管理你的环境变量
我管理的基因组学群里,今天有人提出了这样一个问题,如果有多个版本的BLAST,并且都是用conda安装,应该如何调用不同版本的BLAST
对于这个问题,其实存在多种解决方案:
- 用绝对路径进行调用
- 使用conda创建多个环节,用
source activate xxx
启动该环境 - 使用
export /path/to/ncbi-blast-x.x:PATH
, 将对应版本的BLAST提前
在我还是一个普通用户的时候,我用的就是上面的方法进行解决,直到有一天我成为服务器管理员,我决定用过一个更加装13点工具对环境变量进行管理,这个工具你也能在一些脚本看到,类似于module load gcc/6.3.1.
这种。
何为Environment Modules
大部分Linux用户管理环境变量的方式都是,export PATH=/path/to/some/bin:/$PATH >> ~/.bashrc
,长期以往,当你echo $PATH
时就会发现出现了大量的软件路径,在我眼里,降低系统对工具的搜索速度是其次的,主要是不太好看。而Module则是由管理员将不同软件的环境配置写好,然后用户在登陆之后,只需要用module load xxx
在环境增加自己所需的工具即可。
工具安装和配置
由于Modules本来就是给管理员用于配置服务器环境,因此下面的安装操作都是以Root权限进行。
在安装Modules之前,先确保自己的系统上安装tcl-devel >= 8.4
。随后是编译的常规步骤,
git clone https://github.com/cea-hpc/modules.git
cd modules
./configure && make && make install
相对于安装,配置则是比较麻烦一些,为了保证用户在登录服务器的时候,能够调用module,你得现将module的初始化脚本复制到/etc/profiled.d
目录下
ln -s /usr/local/Modules/init/profile.sh /etc/profile.d/modules.sh
# ln -s /usr/local/Modules/init/profile.csh /etc/profile.d/modules.csh
这样子每个用户在登录服务器的时候,shell会先执行/etc/profile
,而/etc/profile
的任务之一就是执行/etc/profile.d/
下的所有shell脚本,也就将module的运行环境加入了用户登录的shell环境中。
之后是配置用户能够调用的模块。你需要先在/usr/local/Modules/modulefiles
增加不同软件的配置信息,才能用module load
进行加载。例如我希望用多个版本的blast,我的BLAST的软件分别安装在/opt/biosoft/ncbi-blast-2.2.31+
,/opt/biosoft/ncbi-blast-2.7.1+/bin
。,我的操作如下。
先创建存放不同blast配置文件的文件夹
mkdir -p blast
然后在该目录下,我编辑了两个modulefile文件
"blast/2.2.31"为
#%Module1.0#####################################################################
## modules modulefile
module-whatis "NCBI BLAST 2.2.31"
prepend-path PATH /opt/biosoft/ncbi-blast-2.2.31+/bin
"blast/2.7.1"为
#%Module1.0#####################################################################
## modules modulefile
module-whatis "NCBI BLAST 2.7.1"
prepend-path PATH /opt/biosoft/ncbi-blast-2.7.1+/bin
当一个普通用户登录到服务器之后,他直接用module list
是没有加载任何模块的,也不能用blast
module load blast/2.2.31
加载环境后,用户就能在环境中找到blast
如果想要换个环境,就可以用switch
进行切换。module switch blast blast/2.7.1
如果你不需要BLAST了,那么就用module unload blast/2.7.1
就能在环境变量中删除这个工具。
小技巧: 对于一些依赖工具比较多的生信工具而言,用conda安装会更加方便,那么如何将module
和conda
进行整合呢?分为两步,
第一步,每一个分析流程都要新建一个环境,安装到指定的目录,以pb-assembly为例
conda create -p /opt/biosoft/pb-assembly pb-assembly
第二步,为将conda安装的软件新建一个modulefile,命名为"pb-assembly"
#%Module1.0#####################################################################
## modules modulefile
module-whatis "FALCON"
prepend-path PATH /opt/biosoft/pb-assembly/bin
那么就能用module load pb-assembly
进行环境加载了。
推荐阅读
上面仅仅是module的简单用法,你还需要阅读https://modules.readthedocs.io/en/latest/modulefile.html`了解更多和"modulefile"有关的知识。
以及阅读https://modules.readthedocs.io/en/latest/INSTALL.html#configuration 定义一些默认加载的模块。
用Modules优雅地管理你的环境变量相关推荐
- mysql 管理instance_对于多instance安装的MYSQL来说,起停的过程相对复杂,可以定义一些简单的脚本来简化日常的管理。1# 环境变量脚本[mysql@mysql01 scri...
对于多instance安装的MYSQL来说,起停的过程相对复杂,可以定义一些简单的脚本来简化日常的管理. 1# 环境变量脚本 [mysql@mysql01 scripts]$ cat mysql_en ...
- win10 环境变量及其作用大全
------------------------------------------------------系统变量------------------------------------------ ...
- win10系统环境变量怎么设置_mysql环境变量配置win10
win10配置环境变量正确了吗?如果确实正确了,打开命令行,输入java或者javac等都有使用提示的,如图如果没有正确,本人综合网上的解答,给出一种配置方法,这里. . 什么是环境变量?环境变量一般 ...
- Linux环境变量:不可或缺的系统组成部分
目录标题 引言(Introduction) Linux环境变量的概念(Concept of Linux Environment Variables) 环境变量的作用与重要性(Roles and Imp ...
- java redis管理_优雅时间管理Java轻松做到,想学么?
原标题:优雅时间管理Java轻松做到,想学么? 来源 |http://rrd.me/gCQHp 前言:需求是这样的,在与第三方对接过程中,对方提供了token进行时效性验证,过一段时间token就会失 ...
- 在Asp.NET Core中如何优雅的管理用户机密数据
在Asp.NET Core中如何优雅的管理用户机密数据 背景 回顾 在软件开发过程中,使用配置文件来管理某些对应用程序运行中需要使用的参数是常见的作法. 在早期VB/VB.NET时代,经常使用.ini ...
- Go Modules依赖包管理与Go Modules实战
目录 Go Modules依赖包管理 Go Modules 简介 Go 包管理的历史 Go1.5 版本前:GOPATH Go1.5 版本:Vendoring "百花齐放":多种 G ...
- phpEnv-专业优雅强大的php集成环境
phpEnv软件界面颜值超高,简洁优雅,完全绿色化,不需要安装vc环境,在同等软件中清新脱俗. 突破端口限制,更有管理员模式解除Windows Service服务端口占用. 运行服务错误提示,快速定位 ...
- 如何优雅的管理游戏资源
在游戏的开发过程中,前期的规划 往往比 后期的"优化"更为重要!比如多分辨率适配,如果前期没有规划好,可能导致的情况是,画面只在当前测试开发机或者一部分机型正常显示.做了多套资源适 ...
最新文章
- keepalive学习之软件设计
- EOJ_1024_表达式
- JDK12的五大重要新特性
- 重定向与跳转的区别 .
- 工业交换机的日常维护保养该怎么做?
- textCNN和lightGBM模型对景区口碑评价进行情感分析
- python 概率分布函数_逆累积分布函数,累积分布函数及python实现
- GW INSTEK GPD 3303系列稳压源控制软件(自行使用c#编写)更新
- 从内容打到社交,头腾大战矛头又指向了游戏
- IDEA中项目编码格式设置
- hydd的Linux笔记Day47
- 一、fMRI介绍及实验设计
- 二叉树的四种遍历方式(前序遍历、中序遍历、后序遍历、测层序遍历)
- ~4.1 剑指 Offer 05. 替换空格
- Unity Manual阅读记录——Animation(version 2019.4)
- DRUID 连接池的使用、配置详解
- 串口开发 打印机 读卡器 遇到的问题
- 批量下载modis数据(下)
- 模拟CMOS集成电路设计入门学习(4)
- STM32F103C8T6蜂鸣器的使用