Skip to content

Computing › 容器與環境

容器與環境 (Containers and Environments) ​

讓分析在別台電腦、半年後、交給別人時仍然跑得出同樣結果:用環境管理器固定套件版本,用容器固定整個執行環境。生資工具通常透過 Bioconda 或 BioContainers 安裝,工具清單見 生資工具。

選哪個 ​

工具隔離什麼需要 root可重現程度適合
uvPython 套件否高(uv.lock)純 Python 專案、腳本
renvR 套件否中高(renv.lock,不含系統函式庫)R 專案
conda / mamba任何語言的套件 + 部分系統函式庫否中(固定版本的 environment.yml);高(lock 檔)生資命令列工具、混合語言、HPC 上安裝軟體
Docker整個使用者空間(OS 套件、函式庫、工具)daemon 需要很高(映像檔 tag / digest)交付分析環境、服務、CI、本機與雲端
Apptainer同 Docker,可直接執行 Docker 映像檔否很高(.sif 檔)共用 HPC 叢集
虛擬機整台電腦(含核心與 OS)—很高但笨重需要不同 OS、完整桌面、強隔離
text
只有 Python? ── 是 ──► uv
   │否
需要生資命令列工具 / 混合語言? ── 是 ──► conda / mamba(bioconda)
   │                                        │ 要交付給別人、長期重現、在 HPC 跑
   │                                        ▼
   └──────────────────────────────► 容器:本機 / 雲端用 Docker,HPC 用 Apptainer
                                       多個服務一起跑 → Compose;叢集營運 → Kubernetes

常見組合:開發時用 conda / uv;工作流引擎(Nextflow、Snakemake)每個步驟指定一個 BioContainers 映像檔,在 HPC 上以 Apptainer 執行。

筆記 ​

筆記內容回答的問題
CondaMiniforge、mamba、bioconda channel、environment.yml、匯出與 lock不用 sudo 怎麼裝生資工具?環境怎麼重建?
容器與虛擬化VM vs 容器、映像檔與 registry、編排容器和虛擬機差在哪?
Docker映像檔、容器、Dockerfile、掛載、網路、Compose怎麼建置、執行、分享容器?
Apptainer與 Docker 的差異、pull / exec / --bind、Slurm 中使用、.def 建置HPC 上怎麼跑 Docker 映像檔?
KubernetesPod、Deployment、Service、kubectl、除錯叢集上怎麼營運大量容器?
虛擬機VirtualBox 常見問題:縮小磁碟、共用資料夾、sudo什麼時候用 VM?常見問題怎麼解?