virtualenv的介绍及基本使用(所有命令解释)

目录

1.virtualenv介绍

2.安装virtualenv

3.virtualenv运行使用

3.2 启用

3.3安装依赖

3.4 退出当前系统环境

4.virtualenv其他命令

5.综上

6.示例安装卸载脚本

安装

卸载


1.virtualenv介绍

在python开发中,我们可能会遇到一种情况,就是当前的项目依赖的是某一个版本,但是另一个项目依赖的是另一个版本,这样就会造成依赖冲突,而virtualenv就是解决这种情况的,virtualenv通过创建一个虚拟化的python运行环境,将我们所需的依赖安装进去的,不同项目之间相互不干扰,如下所示。 

2.安装virtualenv

安装virtualenv比较简单,无论是在linux系统上还是windows上都可以通过pip来进行安装,如下:

pip install virtualenv

或者

apt-get install virtualenv

如果安装不成功也可以下载virtualenv源码package,通过执行setup.py来安装virtualenv。同时因为python2和python3的不同,因此也有了两种pip和pip3两种python包安装工具,而两种工具安装的virtualenv也是不相同的,py2安装的virtualenv虚拟化出来的python运行环境是python2的,py3安装的virtualenv默认虚拟化环境则是python3的。

3.virtualenv运行使用

使用pycharm来作为本示例的编辑器,选择python2.7工作环境,新建工程virtualenvDemo,在控制台中输入命令:

virtualenv venv

这时候便会在当前的项目中创建venv文件夹,为当前项目的虚拟python运行环境,如下:

我本机此时默认的python环境为python2.7,那么此时创建的虚拟环境就是以python2.7创建的虚拟化环境,如果需要选择一个python解释器来创建虚拟化环境,命令则为:

virtualenv -p /usr/bin/python2.7 venv

此时还需将当前工程的interpreter改为当前的虚拟环境,要不然会不起作用,这个不再详述。

或直接

语法:python11 -m venv myenv

/usr/bin/python3 -m venv venv 

3.2 启用

激活虚拟化环境的命令为:

source venv/bin/activate

激活后,在控制台会有一个带有(venv)的标志,如下:

3.3安装依赖

在以上完成之后就可以通过命令pip install 来安装python包了,这里安装python包就不需要root权限了,直接就可以安装十分方便。在venv的环境中,使用pip安装的包都不会再是全局性的包,只会在当前的虚拟环境中起作用,避免了污染系统环境。

3.4 退出当前系统环境

在控制台中输入命令deactivate后,就会推出当前的venv虚拟化环境。

deactivate

3.5 删除虚拟环境

进入到创建环境的目录,rm -rf 删除venv即可。 

4.virtualenv其他命令

virtualenv各种其他命令如下:

用法:

$ virtualenv [OPTIONS] DEST_DIR 
选项: 
–version 
显示当前版本号。 
-h, –help 
显示帮助信息。 
-v, –verbose 
显示详细信息。 
-q, –quiet 
不显示详细信息。 
-p PYTHON_EXE, –python=PYTHON_EXE 
指定所用的python解析器的版本,比如 –python=python2.5 就使用2.5版本的解析器创建新的隔离环境。 默认使用的是当前系统安装(/usr/bin/python)的python解析器 
–clear 
清空非root用户的安装,并重头开始创建隔离环境。 
–no-site-packages 
令隔离环境不能访问系统全局的site-packages目录。 
–system-site-packages 
令隔离环境可以访问系统全局的site-packages目录。 
–unzip-setuptools 
安装时解压Setuptools或Distribute 
–relocatable 
重定位某个已存在的隔离环境。使用该选项将修正脚本并令所有.pth文件使用相当路径。 
–distribute 
使用Distribute代替Setuptools,也可设置环境变量VIRTUALENV_DISTRIBUTE达到同样效要。 
–extra-search-dir=SEARCH_DIRS 
用于查找setuptools/distribute/pip发布包的目录。可以添加任意数量的–extra-search-dir路径。 
–never-download 
禁止从网上下载任何数据。此时,如果在本地搜索发布包失败,virtualenv就会报错。 
–prompt==PROMPT 
定义隔离环境的命令行前缀。 
“`

5.综上

  • virtualenv就是一个搭建虚拟化的python环境,便于不同的项目在同一台机器上开发运行。

  • virtualenv更多的还是适用于本地开发不同的项目,但是在生产环境中还是使用docker给不同的项目创建不同的容器,各自分开运行为好,不宜放在一个单独的物理机中运行。

6.示例安装卸载脚本

安装

# 安装
echo "[+] Create virtualenv sensengine start"
cd $base_path
#/usr/local/bin/virtualenv sensengine
#/usr/local/bin/virtualenv -p /usr/bin/python3.6 sensengine
/usr/bin/python3.6 -m venv sensengine
source sensengine/bin/activate

$base_path/sensengine/bin/python3.6 -m pip install --no-deps $python_pip3_packages

deactivate
echo "[+] Create virtualenv sensengine end"

卸载

cd $base_path
source sensengine/bin/activate
deactivate
rm -rf sensengine
<think>嗯,用户在使用Docker启动Superset并开启缩略图功能时,遇到了控制台报错,提示无法获取Chrome的驱动,错误信息指向了Selenium Manager的问题。我需要先理解这个错误的原因。 首先,错误信息里提到`Unable to obtain driver for chrome`,这说明Superset在尝试使用Chrome浏览器生成缩略图时,无法找到对应的WebDriver。用户可能按照之前的指导修改了配置,启用了THUMBNAILS相关功能,并配置了WEBDRIVER_TYPE为Chrome,但在Docker环境中可能缺少必要的依赖。 接下来,用户使用的是Docker环境,所以需要检查Docker镜像中是否安装了Chrome浏览器和对应的ChromeDriver。常见的Docker镜像可能默认不包含这些组件,特别是如果用户是基于官方Superset镜像的话,可能需要自己安装。 另外,错误日志显示Selenium Manager尝试下载驱动但失败了,可能是因为网络问题,或者Selenium的版本与ChromeDriver不兼容。用户可能没有正确配置WebDriver的路径,或者Docker容器内无法访问外部网络来下载驱动。 然后,我需要考虑解决方案。首先,确保Dockerfile中安装了Chromium和ChromiumDriver,例如在基于Debian的镜像中使用apt-get安装。然后,确认环境变量WEBDRIVER_TYPE设置为chrome,并且正确指向浏览器和驱动的路径。此外,可能需要更新Selenium到兼容的版本,或者手动下载ChromeDriver并指定路径,避免依赖Selenium Manager自动下载,特别是在受限的网络环境中。 还需要检查Docker容器的权限问题,比如是否以root用户运行,或者是否有访问/dev/shm等目录的权限,这可能导致Chrome无法启动。此外,用户可能需要调整Selenium的配置,比如设置无头模式,禁用沙箱等参数,以适应容器环境。 最后,建议用户验证安装是否正确,通过在容器内执行命令检查Chrome和驱动的版本是否匹配,并运行测试脚本来确认WebDriver能否正常工作。如果问题依旧,可能需要查看日志中的详细错误,或者考虑使用其他浏览器驱动如Firefox作为替代方案。</think>以下是针对Docker环境下Superset缩略图生成失败的完整解决方案: --- ### 一、问题根源分析 错误`Unable to obtain driver for chrome`表明: 1. 容器内缺少Chrome浏览器本体 2. 未正确安装ChromeDriver驱动 3. Selenium无法自动下载所需组件(通常因容器网络限制) --- ### 二、完整修复步骤 #### 1. 修改Dockerfile ```dockerfile # 基于官方镜像扩展 FROM apache/superset:latest # 安装浏览器本体和驱动 USER root RUN apt-get update && \ apt-get install -y \ chromium \ chromium-driver \ fonts-ipafont \ fonts-ipaexfont \ # 解决中文字体缺失问题 fonts-wqy-zenhei \ fonts-wqy-microhei # 设置浏览器环境变量 ENV WEBDRIVER_TYPE=chrome ENV CHROME_BIN=/usr/bin/chromium ENV CHROME_DRIVER=/usr/bin/chromedriver # 切换回原用户 USER superset ``` #### 2. 调整docker-compose.yml ```yaml services: superset: environment: - WEBDRIVER_BASEURL=http://superset:8088/ # 必须与内部访问地址一致 - WEBDRIVER_OPTION_ARGS=--headless,--no-sandbox,--disable-dev-shm-usage - WEBDRIVER_TYPE=chrome devices: # 解决/dev/shm权限问题 - "/dev/shm:/dev/shm" ``` #### 3. 安装Python依赖 ```dockerfile # 在Dockerfile中追加 RUN pip install --no-cache-dir \ selenium==4.15.2 \ webdriver-manager==4.0.1 \ Pillow==10.0.0 ``` --- ### 三、关键配置验证 进入容器执行: ```bash # 检查浏览器是否可执行 chromium --version # 应输出:Chromium 114.0.5735.133 # 验证驱动路径 ls -l /usr/bin/chromedriver # 应显示有效驱动文件 # 测试Python环境 superset shell >>> from selenium import webdriver >>> options = webdriver.ChromeOptions() >>> for arg in os.environ['WEBDRIVER_OPTION_ARGS'].split(','): ... options.add_argument(arg) >>> driver = webdriver.Chrome(options=options) >>> driver.get('https://www.baidu.com') >>> driver.quit() # 无报错即成功 ``` --- ### 四、高级调试技巧 #### 1. 强制指定驱动版本 ```python # superset_config.py WEBDRIVER_OPTION_ARGS = [ "--headless", "--no-sandbox", "--disable-dev-shm-usage", "--remote-debugging-port=9222" # 启用调试端口 ] ``` #### 2. 查看实时截图日志 ```bash docker exec -it superset-worker bash superset celery worker --pool=prefork -l INFO ``` #### 3. 手动触发缩略图生成 ```python import requests from requests.auth import HTTPBasicAuth resp = requests.post( "http://localhost:8088/api/v1/chart/1/thumbnail", auth=HTTPBasicAuth('admin', 'admin') ) print(resp.json()) ``` --- ### 五、常见问题补充 1. **字体显示异常**: ```dockerfile # 在Dockerfile中追加中文字体 RUN apt-get install -y fonts-noto-cjk ``` 2. **内存不足错误**: ```yaml # docker-compose.yml services: superset-worker: deploy: resources: limits: memory: 2G ``` 3. **驱动版本冲突**: ```bash # 进入容器执行 chromedriver --version chromium --version # 需保证大版本号一致(例如都使用Chromium 114.x) ``` --- 通过上述配置,可确保在Docker环境下稳定生成缩略图。建议优先使用`chromium`替代Google Chrome,因其更适合容器化部署。若仍需使用官方Chrome,需额外配置Google的APT源。
评论 7
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

墨痕诉清风

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值