美文网首页
极客云数据存取说明

极客云数据存取说明

作者: Joker64 | 来源:发表于2020-04-14 15:47 被阅读0次

    极客云是一个性价比较高的云服务器平台,本文主要记录极客云常规使用说明。

    极客云主机中有一个公用数据存放路径“\data_public”,存放一些常见的公开数据集,对于所有用户可见。

    除此之外,云主机中还包含一个“\data”文件夹,用于存放每个注册用户提前上传的私人数据集,这些数据集不会随着主机的释放而丢失,但是需要每月支付0.5元/GB的费用用于存储这些私人数据,而且\data文件夹是一个网络位置,不要在这个文件夹内进行解压操作,更不能直接从这个文件夹读取数据进行训练。
    从\data文件夹向\input文件夹转移数据:
    rsync -ah --progress /data/somefile.gz /input/ && gzip -d /input/somefile.gz
    或者
    rsync -ah --progress /data/somefile.tar /input/ && tar -xvf /input/somefile.gz

    训练数据要放置在\input文件夹下,读写速度更快,但是\input文件夹会随着主机的释放而清空,因此要及时将其中的训练结果放回到\data文件夹中。由于上传 和下载的速度差异,此时不能使用rsync转移数据,可以使用如下命令将数据压缩并移动到\data中,然后在“我的数据”中下载就可以了。
    zip -r /input/file_u_want.zip /output/dir_u_want && cp /input/file_you_want.zip /data/

    相关文章

      网友评论

          本文标题:极客云数据存取说明

          本文链接:https://www.haomeiwen.com/subject/sahtvhtx.html