0


使用恒源云服务器跑深度学习(使用pycharm_professional,FileZilla,xshell)

一、前言

恒源云的“新手入门”和“文档中心”其实就很不错。恒源云官网

在官网里就能直接下载oss.exe,Xshell,FileZilla

不过每个人都有每个人的喜好。比如我,我使用的IDE是Pycharm专业版,文件传输选择恒源云的oss.exeFileZilla,命令行操控采用Xshell。这几个软件一起实用都能很好的实现我的需求

说一下它们各自的优点

Pycharm专业版:可远程操控,并且我用习惯了,需要破解,建议上淘宝

oss.exe:速度极快,免费

FileZilla:可视化操作,免费,但是只能传小数据,传输速度一般

Xshell:方便,连接稳定,免费

二、操作

1.创建账户

它会免费赠送50G的oss存储。

2.使用OSS将本地电脑的数据上传服务器

在恒源云下载oss.exe,采用命令行格式传输数据。在自己本地的电脑中,可直接打开oss.exe(如果是直接打开.exe文件,则前缀不用加“oss”)。

先登录账号

login

再输入自己在恒源云创建的账号和密码,即可登录

随后使用如下命令传输数据。注意,数据必须为压缩包形式

cp xxx1 oss://xxx2

其中

xxx1为本地文件的路径

xxx2为服务器文件夹的路径

这样在我的数据中心就能看到了

3.创建实例

实例是指:我们具体租的电脑,选一个合适自己的显卡

选择实例镜像,第一次创建实例,选择官方的镜像即可

4.将服务器数据上传我们的实例

(1)开机

这里要先让实例开机,实例开机后,“在登录指令”那里会有实例的主机名、账号名、密码。

可将其复制在txt中,方便使用

(2)使用Xshell命令行远程登录

接着用Xshell远程登录实例

如果有时候出现连接着就突然断开连接的现象,那么可以想Xshell换成Putty,Putty同样也免费易使用

(3)在实例环境下操作

登录后,使用oss。由于oss已经默认被加入到了实例的环境变量中,可使用如下命令

oss login

oss cp oss://xxx2 xxx3

第一行是登录

第二行:xxx2是储存在服务器中的数据,xxx3是想要在实例中存放数据的位置。恒源云建议放在**/hy-tmp/**中初始50GB免费,扩容价格每GB 0.0004元/小时)

随后,解压压缩包,推荐使用7z

先安装

apt-get install p7zip-full -y

相关命令

7z x compress.zip -o/hy-nas

7z x compress.rar

第一行:“compress.zip”指压缩包名字,-o后面接解压文件夹名字

第二行:直接解压至当前文件夹

压缩命令

zip -r compress.zip directory

directory是压缩结果的目录

5.使用pip管理python包

使用pip命令非常方便

pip list

pip install xxx

pip install --update xxx

6.使用pycharm专业版远程调试程序

(1)在菜单中打开 Tools -> Deployment -> Configuration

(2)选择SFTP

(3)填写服务器名称,随意填

(4)点SSH configuration

(5)点加号

(6)填写服务器信息,Host是服务器名,User name是用户名,Port为端口号,Password为密码,点击Test Connection,如果提示能连接,那么说明上述信息填写没有问题,接着选OK。

(7)修改Python解释器

我们通常在自己电脑中是使用自己电脑下的解释器,那么现在我们使用服务器

这里Interpreter在图中有误应为**/usr/bin/python设置Sync folders,该选项为设置实例中的同步目录**,这里很重要

Local Path也要修改,这里是本地程序的路径

这样就完成了本地程序与服务器程序同步的操作,还可以在Tool-Deployment-Automatic Upload自动上传程序。当运行本地程序时,会自动上传程序。注意,如果只是程序,那么上传速度很快;如果是同步数据集,那么速度很慢,不如先将数据集压缩成压缩包再利用先前的方法上传实例更快

此外,如果出现无法同步的现象,那么多试试Deployment中的东西(我估计是BUG)。

7.使用FileZilla上传与下载数据

(1)在文件->站点管理器填写实例相关信息,然后协议要用SFTP

(2)选择连接后,就能可视化传数据了。使用鼠标拖动就能完成

标签: pytorch 深度学习

本文转载自: https://blog.csdn.net/m0_53392188/article/details/124339442
版权归原作者 若oo尘 所有, 如有侵权,请联系我们删除。

“使用恒源云服务器跑深度学习(使用pycharm_professional,FileZilla,xshell)”的评论:

还没有评论