Paperspaceに置いた Stable Diffusion の成果物をまとめて持ち帰る

環境吹き飛ばしたとき用の自分用メモ。 

 アクセスの便利のために ./notebooks 直下に /storage/outputsとか /tmp のシンボリックリンクが張ってある。

スクリプト上は直に書いてあるので関係なし。

  root@nxik1uzm1k:/notebooks# ls -l . total 81 -rwxr--r-- 1 root root 1857 Mar 6 2024 backup.sh lrwxrwxrwx 1 root root 16 Feb 11 2024 outputs -> /storage/outputs drwxr-xr-x 22 root root 53 Sep 16 2024 stable-diffusion-webui -rwxr--r-- 1 root root 1648 Nov 5 2023 tbackup.sh lrwxrwxrwx 1 root root 4 Oct 4 2023 tmpdir -> /tmp -rw-r--r-- 1 root root 75354 May 28 09:59 webui2.ipynb</blockquote>  

 /stable-diffusion-webui/outputs は /storage/outputs のシンボリックリンクにしてある。 そうした方がいいようなことが書いてあったからそうしてあるけど意味があるかは謎い。 root@nxik1uzm1k:/notebooks# ls -la ./stable-diffusion-webui/ total 790 drwxr-xr-x 22 root root 53 Sep 16 2024 . drwxr-xr-x 4 root root 8 May 28 09:59 .. (略) lrwxrwxrwx 1 root root 16 Feb 26 2024 outputs -> /storage/outputs (略)  

バックアップ用シェルスクリプト。 

引数なしで実行すると前日分(UTC基準なので日本時間だと前日の9時から今日の8時59分)の生成物を /tmp に保存する。 

引数 n を受け付ける。

n日前のバックアップを取る動作をする。

デフォルトは 1 (つまり前日)。 0を渡せば当日分のバックアップを作る。 

 自分の保存の仕方に合わせて ./stable-diffusion-webui/outputs/txt2img-images/yyyy-mm-dd/*.{png,txt}と ./stable-diffusion-webui/outputs/txt2img-grids/yyyy-mm-dd/*.{jpg,txt}と ./stable-diffusion-webui/outputs/txt2img-grids/yyyy-mm-dd/*.pngとをそれぞれ別のzipアーカイブにするようになっている。

  #!/usr/bin/bash if [ $# = 0 ]; then DAYAGO=1 else DAYAGO=$1 if ! [[ "$1" =~ ^[0-9]+$ ]]; then echo "Argument Error" exit 1 fi fi FNAMEDATE=$(date +%Y%m%d --date ${DAYAGO}' day ago') DIRDATE=$(date +%Y-%m-%d --date ${DAYAGO}' day ago') BASEDIR="/notebooks/stable-diffusion-webui/outputs" OUTPUTDIR=${BASEDIR}"/txt2img-images/" OUTPUTFILE="/tmp/output-"${FNAMEDATE}".zip" GRIDSDIR=${BASEDIR}"/txt2img-grids/" GRIDSFILE="/tmp/grids-"${FNAMEDATE}".zip" GRIDSFILE2="/tmp/grids_png-"${FNAMEDATE}".zip" I2IDIR=${BASEDIR}"/img2img-images/" I2IFILE="/tmp/i2i-"${FNAMEDATE}".zip" echo $FNAMEDATE echo $DIRDATE echo $BASEDIR echo $OUTPUTDIR echo $OUTPUTFILE echo $GRIDSDIR echo $GRIDSFILE echo $I2IDIR echo $I2IFILE #exit if [ -d $OUTPUTDIR/${DIRDATE} ]; then cd $OUTPUTDIR # ディレクトリが存在するから実行 if [ ! -f $OUTPUTFILE ]; then # zipが無ければ実行 zip $OUTPUTFILE ./${DIRDATE}/* else echo "すでにあるので実行しません" echo $OUTPUTFILE fi fi if [ -d $GRIDSDIR/${DIRDATE} ]; then cd $GRIDSDIR # ディレクトリが存在するから実行 if [ ! -f $GRIDSFILE ]; then # zipが無ければ実行 zip $GRIDSFILE ./${DIRDATE}/*.jpg ./${DIRDATE}/*.txt else echo "すでにあるので実行しません" echo $GRIDSFILE fi if [ ! -f $GRIDSFILE2 ]; then # zipが無ければ実行 zip $GRIDSFILE2 ./${DIRDATE}/*.png else echo "すでにあるので実行しません" echo $GRIDSFILE2 fi fi if [ -d $I2IDIR/${DIRDATE} ]; then cd $I2IDIR # ディレクトリが存在するから実行 if [ ! -f $I2IFILE ]; then # zipが無ければ実行 zip $I2IFILE ./${DIRDATE}/* else echo "すでにあるので実行しません" echo $I2IFILE fi fi echo "処理終了: 忘れずにダウンロードしてください" ls -lh /tmp/*.zip  

 こんな感じに作られるので要るのをダウンロード。絵が欲しいだけなら output だけでも。

  -rw-r--r-- 1 root root 9.6M May 28 12:11 /tmp/grids-20250527.zip -rw-r--r-- 1 root root 556M May 28 12:11 /tmp/grids_png-20250527.zip -rw-r--r-- 1 root root 548M May 28 12:11 /tmp/output-20250527.zip