Python 3.9.9 (miniforge3, 2022/1/17)
利用方法
/local/apl/lx/rccs-forge3-20220117 という場所にインストールされています。
標準的なパッケージを導入した base 環境と、GPU を利用する tensorflow/pytorch 向けの gpuenv 環境を用意しています。
設定読み込み
以下のように設定ファイルを読み込むことで conda が有効になります。
bash, zsh の場合
% . /local/apl/lx/rccs-forge3-20220117/conda_init.sh
csh (tcsh) の場合
% source /local/apl/lx/rccs-forge3-20220117/conda_init.csh
読み込んだ時点では "base" と呼ばれる「環境(environment)」になっています。環境名は以下のようにプロンプトの左側に表示されます。
(base) %
conda 設定を読み込んだ後、conda activate コマンドで環境を切り替えることができます。
(base) % conda activate gpuenv
(gpuenv) %
conda deactivate コマンドで環境から抜けることができます。
(gpuenv) % conda deactivate
(base) %
(base) % conda deactivate
%
注意点
大量のファイルにアクセスする初期化の操作(conda_init.*sh の読み込み)は時間を要することがあります。
これはセンターで利用している分散ファイルシステムの性質が原因で、どうしても避けられません。
そのため、conda 環境の読み込みはジョブや解析の実行時等の必要時にのみ行うようにした方が無難だと思われます。
ただし、一度読めばキャッシュされるため、しばらくの間は高速に読めるようにはなります。
インストール概略
ウェブページ
https://github.com/conda-forge/miniforge (Miniforge)https://conda-forge.org/ (conda-forge)
引用情報(bibtexのものも含む)については conda-forge のトップページに情報があります。
環境構築日
2022/1/17-18使用ファイル
- Miniforge3-Linux-x86_64.sh
導入手順概要
(出力部分は基本的に省略しています)base 環境
# sh Miniforge3-Linux-x86_64.sh
...
[/root/miniforge3] >>> /local/apl/lx/rccs-forge3-20220117
...
# /local/apl/lx/rccs-forge3-20220117/bin/conda shell.bash hook > /local/apl/lx/rccs-forge3-20220117/conda_init.sh
# /local/apl/lx/rccs-forge3-20220117/bin/conda shell.csh hook > /local/apl/lx/rccs-forge3-20220117/conda_init.csh
# . /local/apl/lx/rccs-forge3-20220117/conda_init.sh
(base) # conda update conda
(base) # conda update --all
(base) # conda install pandas numpy scipy six pip matplotlib notebook jupyter
(base) # conda install sphinx
(base) # conda install opencv tensorflow keras
(base) # conda install pytorch=1.9.1=py3.9_cpu_0 torchvision cpuonly -c pytorch
(base) # conda install curl cython fribidi glib glob2
(base) # conda install isort keyring pango path pathlib2 pathtools
(base) # conda install future
(base) # conda install pep8 pkginfo pytest scikit-image scikit-learn
(base) # conda install sip watchdog fftw
(base) # conda list
...
conda 4.11.0 py39hf3d152e_0 conda-forge
...
python 3.9.9 h62f1059_0_cpython conda-forge
...
pytorch 1.9.1 py3.9_cpu_0 [cpuonly] pytorch
...
tensorflow 2.4.1 py39hf3d152e_0 conda-forge
...
gpuenv 環境
(base) # conda create -n gpuenv python=3.9.9
(base) # conda activate gpuenv
(gpuenv) # conda install cudatoolkit=11.1.1 cudnn opencv
(gpuenv) # conda install tensorflow-gpu keras
(gpuenv) # conda install pytorch torchvision -c pytorch
(gpuenv) # conda install pandas numpy scipy six pip matplotlib jupyter
(gpuenv) # conda install sphinx future
(gpuenv) # conda install curl cython fribidi glib glob2
(gpuenv) # conda install isort keyring pango path pathlib2 pathtools
(gpuenv) # conda install pep8 pkginfo pytest scikit-image scikit-learn
(gpuenv) # conda install sip watchdog fftw pdbfixer
(gpuenv) # conda list
...
python 3.9.9 h62f1059_0_cpython conda-forge
...
pytorch 1.10.1 py3.9_cuda11.1_cudnn8.0.5_0 pytorch
...
tensorflow 2.6.0 cuda111py39h383fce0_2 conda-forge
...