一键掌控:Shell脚本自动化安装与管理Conda环境的艺术

2024-03-24 12:28

本文主要是介绍一键掌控:Shell脚本自动化安装与管理Conda环境的艺术,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

前面写了个博客《conda:解决多项目开发环境配置的神器!》简单介绍了 Conda 的安装和基本命令,在做开发时经常会使用 Conda 建立多个应用环境,Conda 的命令虽不复杂,但还是有时会弄混,所以就考虑写个脚本,一条指令创建环境。没啥难度,仅仅是方便自己使用而已。该脚本是在 macOS 里写的,没有在 Windows 下测试。

1 创建 Conda 应用环境的主要流程

1.1 检查系统是否安装了 Conda 这个虚拟环境工具

  • 如果安装了,则继续往下面的 1.2
  • 如果没安装,则提醒用户先去安装,具体怎么安装,请参考《conda:解决多项目开发环境配置的神器!》

1.2 检查要建立的环境名称是否存在

  • 如果环境存在,则判断命令行参数里是否指定覆盖环境,如果指定覆盖则去执行覆盖(进入下面的 1.3),否则就提示用户“改名或在命令行参数里设置覆盖选项(override)”
  • 如果环境不存在,直接去创建并激活环境

1.3 以覆盖的方式安装

  • 先检查系统现有的环境是否处于激活(activate)状态,如果是激活状态,则先取消激活(deactivate),再在删除该环境(remove)后,创建 (create)和激活(activate)指定环境
  • 如果指定的环境在系统里没有处于激活状态,则直接删除该环境(remove)后,创建 (create)和激活(activate)指定环境

2 脚本包含的几个功能点(函数)

脚本的功能点,基本都由对应的函数来实现。
注意:函数的返回值,可以在主函数调用此函数后,用$?获得(参考后面完整代码)

2.1 检查是否安装了 Conda

  • 函数名:check_conda_installed
  • 返回值:0表示conda已安装,否则为1(可以根据需要设定,只要非零就可以,下同)
check_conda_installed(){# 尝试执行conda命令conda --version > /dev/null 2>&1
}

2.2 检查环境是否存在

  • 函数名:check_env_exists
  • 返回值:0 存在,1 不存在
check_env_exists(){conda env list | grep -q "^$env_name\s"
}

2.3 当环境存在时,判断 override 参数

    if [ "$override" = "override" ]; then # 是否覆盖override_envelseecho "环境 $env_name 已存在!解决方法:"echo " 1. 请改名后再安装;"echo " 2. 或者使用下面的命令覆盖安装:"echo "    source installenv.sh $env_name override"fi

2.4 当环境存在时,检查环境是否在激活状态

  • 函数名:check_env_activated
  • 返回值:0 表示激活,1 表示未激活
  • 代码简要说明:
    $CONDA_DEFAULT_ENV 为 Conda 变量,值为当前激活的环境的名称;当 $CONDA_DEFAULT_ENV 和 $env_name 的值相同时,表示指定的环境在激活状态。
check_env_activated(){if [[ -n "$CONDA_DEFAULT_ENV" ]]; thenif [[ "$CONDA_DEFAULT_ENV" = "$env_name" ]]; thenreturn 0 # 环境已激活elsereturn 1 # 环境未激活fielsereturn 1 # 环境未激活fi
}

2.5 此脚本用到的 Conda 命令参考:

conda --version # 获取 Conda 版本,可以根据此命令的返回值判断 Conda 是否安装
conda env list # 列举 Conda 安装了哪些环境
conda create -n $env_name [python=$python_version] -y # 创建环境,此例指定要安装python及版本,可选
conda activate $env_name # 激活环境
conda deactivate # 将当前环境设置为非激活状态
conda remove --name $env_name --all -y # 删除环境

3 脚本内容

此脚是为了在开发时减少配置 Conda 开发环境的时间,并不是作为通用工具来开发的,所以脚本并没有考虑健壮性,最好只用来做测试,避免造成不可预见的损失。您可以根据需要在此脚本基础上进行完善。

下面是完整代码

#!/bin/bash
# 此脚本使用 Conda 安装环境#用法:
# ./installenv.sh [env_name] [override]
# 上面的两个参数:
#     env_name 为环境名,必须要有,且必须是第一个参数
#     override 为是否覆盖,可选,默认为 "no",需要覆盖必须为 "override"字符串env_name=$1 # 环境名
override=$2 # 是否覆盖# 入口函数,用来安装环境
main() {if [ -z "$env_name" ]; thenecho ""echo "!!! 请输入变量名"echo "用法: "echo "source installenv.sh [env_name] [override]"echo "#     env_name 为环境名,必须要有,且必须是第一个参数"echo "#     override 为是否覆盖,可选,默认为 \"no\",需要覆盖必须为 \"override\"字符串"echo ""return 1fiif [ -z "$override" ]; thenoverride="no"ficheck_conda_installed # 检查 Conda 是否安装if [ $? -ne 0 ]; then # Conda  未安装echo "没有安装 Conda,请安装!"return 1ficheck_env_exists # 检查环境是否存在if [ $? -ne 0 ]; then # 指定的环境不存在conda create -n $env_name python=3.9.12 -y # 创建环境conda activate $env_name # 激活环境return 0fiif [ "$override" = "override" ]; then # 是否覆盖override_envelseecho "环境 $env_name 已存在!解决方法:"echo " 1. 请改名后再安装;"echo " 2. 或者使用下面的命令覆盖安装:"echo "    source installenv.sh $env_name override"fi
}# 检查conda是否安装
# 返回值为0表示conda已安装,否则为1
check_conda_installed(){# 尝试执行conda命令conda --version > /dev/null 2>&1
}# 检查环境是否存在
# 返回值:0 存在,1 不存在
check_env_exists(){conda env list | grep -q "^$env_name\s"
}# 覆盖环境
override_env(){check_env_activatedif [ $? -eq 0 ]; then # 环境已激活conda deactivateficonda remove --name $env_name --all -y # 删除环境conda create -n $env_name python=3.9.12 -y # 创建环境conda activate $env_name # 激活环境
}# 检查环境是否激活
# 返回值为0表示激活,为1表示未激活
check_env_activated(){if [[ -n "$CONDA_DEFAULT_ENV" ]]; thenif [[ "$CONDA_DEFAULT_ENV" = "$env_name" ]]; thenreturn 0 # 环境已激活elsereturn 1 # 环境未激活fielsereturn 1 # 环境未激活fi
}# 安装指定环境
main # 安装指定环境

4 使用方法

在执行此脚本时,需要在Shell(终端)里以source(或者 .)的方式来运行,否则会出错,具体原因看下面“通义灵码”的解释

在 Shell 脚本中直接使用 conda 命令有时可能无法访问到 Conda 的环境变量和命令,这是因为 Conda 通过修改shell的环境变量(特别是 PATH 变量)来切换不同的环境。当你在一个新的 Shell 会话中直接运行 conda 命令时,如果该 Shell 会话没有经过 Conda 的初始化,就可能找不到 Conda 命令。

看得有点晕吧?没关系,说人话:当你需要在脚本中执行 conda 命令以管理环境或安装软件包时,一种常见的做法是通过 source 命令(在Bash中也可以写作.)来执行 conda 的初始化脚本,确保conda的环境变量设置正确。再直观一点,只要按下面的写法执行就没问题了:

source ./installenv.sh [env_name] [override]

5 题外话

最近编码一直使用“通义灵码”,那个代码联想功能简直就是逆天了,基本上你想到的没想到的代码他都给你联想了,这样写代码效率简直爆棚,语法错误和 bug,也非常少了。
我让她简单给我分析一下代码,她说了下面的话,由于太佩服了,所以就作为题外话,截个图分享出来:
在这里插入图片描述
看了上面通义灵码的代码分析,你能忍住不安装一个 AI编码助手 插件吗?这种插件很多,可以根据需要选择,建议还是试试吧!😃

这篇关于一键掌控:Shell脚本自动化安装与管理Conda环境的艺术的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/841598

相关文章

通过Docker容器部署Python环境的全流程

《通过Docker容器部署Python环境的全流程》在现代化开发流程中,Docker因其轻量化、环境隔离和跨平台一致性的特性,已成为部署Python应用的标准工具,本文将详细演示如何通过Docker容... 目录引言一、docker与python的协同优势二、核心步骤详解三、进阶配置技巧四、生产环境最佳实践

Linux下MySQL数据库定时备份脚本与Crontab配置教学

《Linux下MySQL数据库定时备份脚本与Crontab配置教学》在生产环境中,数据库是核心资产之一,定期备份数据库可以有效防止意外数据丢失,本文将分享一份MySQL定时备份脚本,并讲解如何通过cr... 目录备份脚本详解脚本功能说明授权与可执行权限使用 Crontab 定时执行编辑 Crontab添加定

C#实现一键批量合并PDF文档

《C#实现一键批量合并PDF文档》这篇文章主要为大家详细介绍了如何使用C#实现一键批量合并PDF文档功能,文中的示例代码简洁易懂,感兴趣的小伙伴可以跟随小编一起学习一下... 目录前言效果展示功能实现1、添加文件2、文件分组(书签)3、定义页码范围4、自定义显示5、定义页面尺寸6、PDF批量合并7、其他方法

SpringBoot 多环境开发实战(从配置、管理与控制)

《SpringBoot多环境开发实战(从配置、管理与控制)》本文详解SpringBoot多环境配置,涵盖单文件YAML、多文件模式、MavenProfile分组及激活策略,通过优先级控制灵活切换环境... 目录一、多环境开发基础(单文件 YAML 版)(一)配置原理与优势(二)实操示例二、多环境开发多文件版

使用docker搭建嵌入式Linux开发环境

《使用docker搭建嵌入式Linux开发环境》本文主要介绍了使用docker搭建嵌入式Linux开发环境,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面... 目录1、前言2、安装docker3、编写容器管理脚本4、创建容器1、前言在日常开发全志、rk等不同

Java实现远程执行Shell指令

《Java实现远程执行Shell指令》文章介绍使用JSch在SpringBoot项目中实现远程Shell操作,涵盖环境配置、依赖引入及工具类编写,详解分号和双与号执行多指令的区别... 目录软硬件环境说明编写执行Shell指令的工具类总结jsch(Java Secure Channel)是SSH2的一个纯J

使用Python实现Word文档的自动化对比方案

《使用Python实现Word文档的自动化对比方案》我们经常需要比较两个Word文档的版本差异,无论是合同修订、论文修改还是代码文档更新,人工比对不仅效率低下,还容易遗漏关键改动,下面通过一个实际案例... 目录引言一、使用python-docx库解析文档结构二、使用difflib进行差异比对三、高级对比方

RabbitMQ 延时队列插件安装与使用示例详解(基于 Delayed Message Plugin)

《RabbitMQ延时队列插件安装与使用示例详解(基于DelayedMessagePlugin)》本文详解RabbitMQ通过安装rabbitmq_delayed_message_exchan... 目录 一、什么是 RabbitMQ 延时队列? 二、安装前准备✅ RabbitMQ 环境要求 三、安装延时队

Redis实现高效内存管理的示例代码

《Redis实现高效内存管理的示例代码》Redis内存管理是其核心功能之一,为了高效地利用内存,Redis采用了多种技术和策略,如优化的数据结构、内存分配策略、内存回收、数据压缩等,下面就来详细的介绍... 目录1. 内存分配策略jemalloc 的使用2. 数据压缩和编码ziplist示例代码3. 优化的

Python自动化处理PDF文档的操作完整指南

《Python自动化处理PDF文档的操作完整指南》在办公自动化中,PDF文档处理是一项常见需求,本文将介绍如何使用Python实现PDF文档的自动化处理,感兴趣的小伙伴可以跟随小编一起学习一下... 目录使用pymupdf读写PDF文件基本概念安装pymupdf提取文本内容提取图像添加水印使用pdfplum