lyakaap

リージョンについて：使えるGPUの種類的にus-west1-b (オレゴン)が良さそう。 異なるアカウント間でのディスクイメージのやり取りは出来なそう？ カスタムイメージで、pytorch-cuda10のものがある。これを使うと楽かもしれないけど、環境を変に変えると逆に不便になるかもなので様子見。

割当について

IAMと管理＞割り当てから変更可能。 場所はus-west1とグローバルでフィルターした方が見やすい。 割り当て要求が必要なのはこれらの項目。

• CPUs | 8

lyakaap

Ubuntu Server setup

nvidia-driver & cuda10 installation https://medium.com/@zhanwenchen/install-cuda-10-1-and-cudnn-7-5-0-for-pytorch-on-ubuntu-18-04-lts-9b6124c44cc

ネットワーク

1. /etc/netplan/50-cloud-init.yaml を以下を参考に変更。

lyakaap

#!/usr/bin/env bash

echo "id,height,width" > size.csv
echo Documents/landmark/input/train2018/*.jpg | xargs identify | awk '
    {
        gsub("x",",",$3)
        match($1,"[0-9a-f]{16}")
        id = substr($1,RSTART,RLENGTH)
        printf "%s,%s\n",id,$3
    }

lyakaap

import sys
import traceback
import pdb

"""
This module is for debugging without modifying scripts.

By just adding `import debug` to a script which you want to debug,
automatically pdb debugger starts at the point exception raised.
"""

lyakaap

wget --keep-session-cookies --save-cookies=cookies.txt --post-data 'username=lyakaap&password=XXXXXX&submit=Login' https://www.cityscapes-dataset.com/login/
wget --load-cookies cookies.txt --content-disposition https://www.cityscapes-dataset.com/file-handling/\?packageID\={1..4}
rm -rf index*