实用ssh命令|端口转发访问远程集群jupyter服务

作者:ahworld
链接:seurat结果转为scanpy可处理对象
来源:微信公众号seqyuan
著作权归作者所有,任何形式的转载都请联系作者。

使用ssh key的目的是使得两台机器之间建立互信,从其中一台登陆到另一台时不需要密码。就古代兵符


ssh key的生成

生成密钥对(公钥和私钥)方法:在命令行界面执行以下命令,然后一直按回车键(遇到选择,使用默认值)。

ssh-keygen -t rsa

执行完以上命令会生成~/.ssh目录,.ssh目录会生成以下两个文件:

  • id_rsa # 私钥
  • id_rsa.pub # 公钥

命令行工具

上面ssh key的生成需要用到命令行工具,对于linux系统来说不做赘述,macos系统就是终端工具

如果是windows系统,建议使用MobaXterm

后续所指的执行命令,均指的是此命令行界面执行

节点间免密登陆

此处指的节点可以为远程linux计算集群也可以是本地电脑,我们统称为节点

想要从<u>由A</u>节点通过ssh<u>免密码登录到B</u>节点,需要执行以下操作:

A节点的~/.ssh/id_rsa.pub里的内容添加到B~/.ssh/authorized_keys

多级免密登陆

如果从A节点需要通过B节点跳转才能访问C节点,A节点到C节点的免密跳转设置方法:

  1. 把A的~/.ssh/id_rsa.pub里的内容添加到B的~/.ssh/authorized_keys
  2. 把A的~/.ssh/id_rsa.pub里的内容添加到C的~/.ssh/authorized_keys
  3. 把B的~/.ssh/id_rsa.pub里的内容添加到C的~/.ssh/authorized_keys

涉及到更多中间跳转的情况依上方法类推设置:把前面节点的公钥加入到后面节点的authorized_keys文件。

ssh登陆快捷键设置

可以通过配置~/.ssh/config文件实现ssh快捷键登陆远程节点

如果是上图的情况:

  • A节点可以直接登陆B节点
  • B节点可以直接登录C节点
  • A节点不能直接登录C节点

可以这样配置A节点(本地电脑)~/.ssh/config里的内容:

Host vpnB
    Hostname s.seqyuan.com
    Port 520
    User ahworld
    IdentityFile ~/.ssh/id_rsa
    
Host C
    Hostname 192.168.0.200
    User ahworld
    IdentityFile ~/.ssh/id_rsa
    Port 22
    ProxyCommand ssh -W %h:%p vpnB

本地电脑按照如上设置之后

  • 想要登录B节点,可执行ssh vpnB命令
  • 想要登录C节点,可执行ssh C命令
  • 想要拷贝A节点的<u>/path/test.txt</u>文件到C节点的/path2/目录,可执行scp -r /path/test.txt C:/path2/
  • 想要拷贝C节点的<u>/path3/qwer.txt</u>文件到A节点的当前目录,可执行scp -r C:/path3/qwer.txt ./

访问远程web服务

我们经常用到远程web服务的情况:

  • 远程集群建立python3 –m http.server,便于本地电脑浏览器查看远程集群的图片
  • 使用远程linux集群建立的jupyter或者rstudio-server计算服务

linux集群建立jupyter服务的教程见

本地电脑和远程web服务处于同一内网的情况

ssh端口转发

# 远程linux集群
Host: s.seqyuan.com
HostPort: 520
JupyterPort: 8900 (jupyter服务port)
User: ahworld

如果本地电脑能够通过ssh -p 520 ahworld@s.seqyuan.com命令(或者前面的快捷命令ssh vpnB)登录远程节点,但是不能通过在本地电脑浏览器输入远程浏览器的网址:jupyter端口(s.seqyuan.com:8900)直接访问远jupyter服务,解决方案为在本地电脑命令行执行以下命令:

ssh -N -f -L localhost:8787:localhost:8900 -p 520 ahworld@s.seqyuan.com

然后在本地电脑浏览器输入127.0.0.1:8787就能访问s.seqyuan.com节点建立的端口为8900的jupyter服务了。

ssh 端口转发的主要参数意义:
  • -f:后台认证用户/密码,通常和-N连用,不用登录到远程主机
  • -N:不执行脚本或命令,通常与-f连用,不使用Shell窗口,纯做转发的时候用,如果你在映射完成后继续在服务器上输入命令,去掉这个参数即可
  • -L:本地端口:目标IP:目标端口
  • -p:被登录的ssd服务器的sshd服务端口
  • -C:压缩数据传输
  • -g:在-L/-R/-D参数中,允许远程主机连接到建立的转发的端口,如果不加这个参数,只允许本地主机建立连接

ssh端口转发-多级跳转

如果是上图的情况,或者中间涉及更多级的跳转,想要在A节点(本地电脑)访问终节点(图中的C节点)建立的jupyter服务,可以在本地电脑命令行执行以下ssh端口转发命令(前提:设置ssh快捷键):

ssh -N vpnB -C -c 3des-cbc -L 8787:192.168.0.200:8901

然后本地浏览器输入127.0.0.1:8787就能访问C节点的jupyter服务

如果涉及多级跳转-N后的vpnB需要改成终节点的上一级跳转节点的快捷键。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 159,290评论 4 363
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,399评论 1 294
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 109,021评论 0 243
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,034评论 0 207
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,412评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,651评论 1 219
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,902评论 2 313
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,605评论 0 199
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,339评论 1 246
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,586评论 2 246
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,076评论 1 261
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,400评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,060评论 3 236
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,083评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,851评论 0 195
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,685评论 2 274
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,595评论 2 270

推荐阅读更多精彩内容