Creating and Starting a Preemptible Instance | Compute Engine Documentation | Google Cloud Platform
学習モデルを1エポック毎または学習結果が良くなるエポック毎にアウトプットしておいて、Soft Off信号を受け取ったらそれをGCSなりS3なりに置けば良いか https://cloud.google.com/compute/docs/instances/create-start-preemptible-instance#handle_preemptioncloud.google.com
Container Engine でプリエンプティブ VM を使用する | Container Engine | Google Cloud Platform
プリエンプティブVM=AWSのスポットインスタンス https://cloud.google.com/container-engine/docs/preemptible-vm?hl=jacloud.google.com