エラーメッセージでググる限りでは、 >the launch timed out and was terminated 「Primary Device(ディスプレイデバイス)に指定されているGPUで長時間カーネル関数を実行しすぎている」 (探したページではPrimary Deviceを切り替えて対処していたが、基本全部使うGPU検索ではどうか……) >all CUDA-capable devices are busy or unavailable 「ゾンビプロセスがGPUを占有している」(1つ目のエラーのせいで発生したエラーってことか？) 「fork()する前にcudaThreadExit()すればいいんじゃね」(要するに処理のミス？) 「ドライバを少し古いものに戻してみるのはどうか」(GPUあるある) てなかんじかな。
