【技术随记03】_python

在ubantu20.04下安装anocoda 1.下载anconda

首先在以下镜像网站上下载，你想要的anconda安装包。
https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/
我这次选择的版本是Anaconda3-5.2.0-Linux-x86_64.sh

2.安装anconda

在下载的地方打开终端,然后运行.sh文件

bash Anaconda3-5.2.0-Linux-x86_64.sh

接下来就一路yes或者enter傻瓜式安装。
询问Do you wish the installer to initialize Anaconda3 by running conda init? [yes|no]，这里是把conda添加到PATH中，让你能使用conda命令，所以这个直接yes。所以这里选择了yes后续就不需要手动修改.bashrc 文件配置环境变量了。

3.conda添加清华镜像源

添加以下镜像源

conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/conda-forge/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/msys2/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/pytorch/
conda config --set show_channel_urls yes

或者在根目录下ls -a显示所有文件，sudo gedit ./.condarc，编辑添加清华镜像源，删除.condarc文件中的defaults

在ubantu20.04下创建虚拟环境[理想情况]

1.创建虚拟环境

conda create -n pyspark_env python=3.8

2.查看虚拟环境

conda env list

3.激活虚拟环境

conda activate pyspark_env

4.安装pyspark

pip install -i https://pypi.tuna.tsinghua.edu.cn/simple pyspark

5.测试

cd /export/server/spark/bin
./pyspark --master local[*]

出现的问题

问题1：用sudo gedit ~/.bashrc,打开文件修改镜像源。但是终端会出现关于gedit的警告。
我看到有博客说：改完东西后，最后还要执行

source ~/.bashrc

问题2：就是在配置镜像源，打算使用conda create -n pyspark_env python=3.8创建虚拟环境的第一步就会出现这个问题，后期再解决吧！

Solving environment: failed

CondaHTTPError: HTTP 000 CONNECTION FAILED for url //repo.anaconda.com/pkgs/main/linux-64/repodata.json.bz2>
Elapsed: -

An HTTP error occurred when trying to retrieve this URL.
HTTP errors are often intermittent, and a simple retry will get you on your way.

If your current network has https://www.anaconda.com blocked, please file
a support request with your network engineering team.

ConnectionError(ReadTimeoutError("HTTPSConnectionPool(host='repo.anaconda.com', port=443): Read timed out."))