有一些计算会在远程的机器上完成,会生成比较大的数据量。计算完成后,需要取回到本地。
希望能够实现,在计算完成后,本地机器主动去取回数据。
目前的方案:使用 rsync 去每小时同步远程的目录,同步前 kill 掉还在进行的 rsync 。
存在的限制:
1.远程机器上无法安装新工具,只有普通的权限,不能长时间运行程序 /脚本。
2.远程的数据生成事件不定时,不能提前预测。
3.因为数据比较大,传输时间通常要好几个小时。
想请教大家有没有好的解决方案,谢谢。
希望能够实现,在计算完成后,本地机器主动去取回数据。
目前的方案:使用 rsync 去每小时同步远程的目录,同步前 kill 掉还在进行的 rsync 。
存在的限制:
1.远程机器上无法安装新工具,只有普通的权限,不能长时间运行程序 /脚本。
2.远程的数据生成事件不定时,不能提前预测。
3.因为数据比较大,传输时间通常要好几个小时。
想请教大家有没有好的解决方案,谢谢。
