大数跨境

在你的手机上使用 Jupyter(或随时随地使用 Jupyter)

在你的手机上使用 Jupyter(或随时随地使用 Jupyter) Python程序员
2019-12-27
0
导读:回想一下,你每天处于停工期的时间都被浪费了。在地铁上的一小时,在车管所的那个下午,服务器宕机后,等待 IT

回想一下,你每天处于停工期的时间都被浪费了。在地铁上的一小时,在车管所的那个下午,服务器宕机后,等待 IT 部门维护重启的那 20 分钟。如果在那段时间里,你做一些数据科学的工作,不是很好吗?


为此,我开始考虑能不能在手机上运行 Jupyter。起初我试着在我的手机上通过 Termux 命令行应用安装 Jupyter,但是效果不理想。于是我对自己说『等等,Jupyter 不是可以使用服务器/客户端模式运行然后运行在浏览器上么?为什么不自己搭建一个服务器呢?』。几个小时后(好吧,也可能更多时间,因为我还不时地用 Google 搜索一些东西),我在一台虚拟服务器上托管了我的 Jupyter notebook 应用。现在,我就可以从桌子上的笔记本桌面无缝地转换到其它地方工作,沙发上使用平板电脑,利用手机都可以,甚至是在房间里的其它座位上。数据科学无处不在。


实际上这并不容易,尤其是对新手而言,找不到如何在远程机器上安装 Jupyter 的教程。当我开始动手的时候,我觉得这些可能会对其它人有所帮助。将自己的研究成果整合起来并为以后复现提供些帮助,这是个很好的注意。这绝对是一篇很棒的博客!

所以,事不宜迟,我们现在就开始设置远程服务器并运行 Jupyter。


1. 注册一个虚拟服务器


为了安装 Jupyter 实例,方便随时随地运行,我们需要创建一个虚拟服务器。虚拟服务器是一个从第三方租用的服务器。所以你不用自己购买、安装并维护服务器硬件。至少对于一台非常基础的服务器来说,它不需要花费多少钱。有很多公司都可以提供这项服务。Amazon lightsail 就是一个,不过我更倾向于使用 Digital Ocean。


Digital Ocean 会给你分配一个微应用「droplet」,他们是这么给他们的虚拟服务器命名的。起价是 5 美元,然后在往上涨。唯一不足的是,数据科学有时会占用大量的计算资源,而 5 美元的服务器运行那些略微复杂的数据科学任务时,可能要花费很长的时间。你可以将你的「droplet」升级到更高的规格,这个非常简单,不需要任何迁移或者操作。我自己用的是 10 美元的「droplet」,并且它运行的还不错。如果以后我需要用到笔记本上更强大的 RAM 计算能力以及独立显卡,我可以在笔记本上新建一个分支并运行。


跳转到 digitalocean.com 的首页并创建一个账户。然后会要求你创建你的第一个项目。创建项目不需要花费任何成本,它只是要求你至少拥有一个项目来管理你的「droplet」。下一屏将是你的这个项目的仪表盘。点击右上角的绿色「创建」按钮,并选择菜单中的「Droplet」。Digital Ocean 提供了一份如何创建「droplet」的指南,我会带你逐步了解它。

在「创建 Droplet」页面,配置呢,保持默认选择 Ubuntu,然后执行标准计划。下面你可以看到每月计划选项,按自己的意愿进行选择(向左滚动可以看到更多低价的计划)。你还可以添加存储区块,这个不是必须的。就近选择一个数据中心,将「附加选项」留空。对于权限认证,你可以根据需要选择 ssh key 密钥,并且熟悉它的工作模式。本教程中,建议你使用「一次性密钥」,稍后我将会向你介绍如何使用 ssh key 密钥(也许吧)。当然,「创建多少 Dropets」这里是只有一个「droplet」啦。


在「选择主机名」的地方,输入任何你希望的名字,稍后会以此创建小型服务器。你还可以选择使用备份,只是需要额外支付一美元。之后,点击绿色的大按钮「创建 Droplet」。看!你现在已经拥有了一台自己的虚拟主机了!几分钟后,你会收到一封邮件,里面是你的新服务器的 IP 和密码。有了这些,你就可以登录到服务器的命令行,然后进行设置。


2. 设置你的新服务器


Digital Ocean 发送的邮件包含以下信息:

  • 你创建的「droplet」的 IP 地址

  • 你创建的「droplet」的密码


为了完成我们教程的目标,假定你的 IP 地址为:

    168.167.34.187.34


当然,你 IP 会与此不同、之后在本教程的任何地方看到这个 IP,都将其替换成你自己的 IP 就可以了。


我们会使用 ssh 来连接到服务器。SSH 是一个可以在机器之间建立安全连接的实用命令行程序。来看看命令行终端。如果你是在 WIndows 系统上,只有少数几个选择。最简单的是使用 git bash,它可以胜任。下载 Windows 版本的 git 安装包。另外,你还可以启用 Windows 中的 Linux 子系统,然后在机器上安装 Ubuntu 系统。最烦人的方式则是使用 PuTTY,我甚至都不想介绍它。如果你用的是 Mac,好吧,我听说 Mac 内置了一个终端,所以……


>>> 今日签到口令:4nwk <<<


当你打开了命令行,输入:

ssh root@168.167.34.187.34

然后会提示输入 root@168.167.34.187.34 对应的密码。手动输入或者粘贴你收到的邮件中的密码。注意,你在命令行的提示下输入或粘贴密码的时候,实际上不会显示任何文本,而且光标也是保持不动。


恭喜!你现在已经进入到服务器了。当登录到一台全新的虚拟机上,第一件事就是更新系统。


首先:

sudo apt update

然后:

sudo apt upgrade



这个会将你的系统更新到最新版本。


更新完成之后,下一步就是设置一个拥有 sudo 权限的新用户账户。

adduser [enter a user name here] usermod -aG sudo [the username you made]



现在切换到该用户:

su [new user name]

太棒了!现在我们来安装 Anaconda 以及所有我们要用到的 Python 包,包括 Jupyter。


3. 安装 Anaconda,然后是 Jupyter


也许你会觉得可以使用 apt-get 来安装 Anaconda,对吗?然而事实并非如此。这里有一个我发现的有效的视频。像往常一样,我还是会引导你完成那些视频中没有说明的如怎样获得其下载链接等部分。


进入 Anaconda.com 然后点击下载。在页面顶部选择 Linux ,然后确认你看到的是 Linux 安装程序下载链接。鼠标右键点击「Python 3.7 版本下载」按钮,然后点击「复制链接地址」。现在回到你的终端,这时候应该是处于 ssh 程序连接服务器状态。创建一个新的目录,然后 cd 切换到目录内(这个你应该清楚怎么做,对吧?)。然后,运行下面的命令:

sudo wget [粘贴从anaconda拷贝的链接]

这样就会将 Anaconda 的 bash 脚本下载到当前目录内。输入然后运行:

sudo bash [刚刚下载的文件的名称 ( 输入Anaconda然后按tab键应该会自动补全)]

一直选择 yes 点击下去。让它自己去下载,可能会需要几分钟。


恭喜,你现在已经将 Anaconda 安装到服务器了。

sudo reboot

等几分钟后再使用 ssh 重新登录到服务器。你可以用之前创建的用户直接输入 user@168.167.34.187.34 登录,而不是 root@168.167.34.187.34。无论哪种方式,当你登录到服务器上时,要确保你是用的是 user 账户。


4. 配置 Jupyter


现在我们来设置一下 Jupyter,这样你就可以通过网络来访问它。勒纳博士声明,他的博客文章对这里而言是很宝贵的资源。到目前为止,我们的方法与他的已略有不同,但是我们还是使用和他一样的方式配置 Jupyter。请先确保你已经 ssh 连接到服务器,并且以你创建的用户账户登录(且是安装了 Anaconda 的用户)。确保你的 conda base 处于激活状态(命令行中用户名之前提示 「base」)。


然后,在终端输入以下命令:

jupyter notebook --generate-config

这会生成一个我们可以修改和编辑的配置文件。当你运行这个命令的时候,会提示「将默认配置写入[文件路径]」。你可以复制这个路径并打开以编辑:

sudo nano [配置文件路径]

继续看文件中后面的四行,将它们修改为我下面展示的样子,然后取消注释以生效(即删除行开始前的 # 标记)。在 nano 中,你可以使用 CTRL + W(或 Mac 中的相应按键)搜索来转到对应行。

c.NotebookApp.open_browser = Falsec.NotebookApp.ip = '0.0.0.0'c.NotebookApp.password = ' 'c.NotebookApp.token = ' '

为了方便,将密码和 Token 留空。确保在单引号之间没有空格。如果你是希望拷贝粘贴上面的内容,请确认将里面的空格去掉,我只是将其放在里面,来表明它不是单一的双引号。这个仅仅是在你希望使用最短路径方式连接远程 Jupyter 进行工作,而不关心其安全性。


不过,你可以为 Jupyter notebook 设置密码,而且你也应该这么做。否则每个人都可以打开你的 notebook 并删除你的所有数据。说不准就有脑子不好使的人呢。


目前为止,我已经讲明了使其工作的步骤。但是我们还需要做一些其他的事情来添加密码。


首先,在配置文件中,不要设置 c.NotebookApp.token 的值,将其保持为默认值(通常为 "")。如果需要,你可以在运行 Jupyter 的时候再次使用 --generate-config file 命令,然后点击「yes」,这样会将配置信息重置为原始状态(并且你需要重新设置我们上面描述的另外三行)。


完成这些之后,再回到命令行并运行下面的命令:

jupyter notebook password

这会要求你重新输入密码,执行并记住密码。当需要的时候,我们会用到的。现在需要记住,如果你需要修改密码时,只需要重新输入上面的命令(如果你忘记了旧密码, 这里不会要求你输入旧密码以设置新密码)。


5. 配置防火墙


警告!!!我没有很好的想象力,也没有多种防火墙和网络安全的专业技能。我只是通过我的方式来完成一些我需要完成的事。我不会对任何因你使用的方法而造成的安全问题或漏洞负责。我建议你先研究透彻并思考一下你的安全策略。这篇教程仅仅是以教育为目的,实际上只是方便数据科学的学生使用测试数据。如果你有任何敏感数据,我希望你在部署到 vps 上之前三思而后行。


现在的主要目标是设置防火墙。


在命令行中,依次输入下面的命令:

sudo ufw default deny incomingsudo ufw default deny outgoingsudo ufw allow ssh sudo ufwallow 8888 sudo ufw enable

上面基本是拒绝了除 ssh 连接(先确认这一点,否则你可能会锁死你的服务器)和端口 8888 (用于运行 Jupyter 服务器)外的所有连接到服务器上的输入与输出流量。


为了增加安全性,最好是只允许来自你自己设备 IP 地址的流量。为此,你需要在默认情况下拒绝所有输入输出流量,然后为以下特定 IP 地址打开 22 及 8888 端口:

sudo ufw allow from [ip of device you own] to any port 22sudo ufw allow from [ip of device you own] to any port 8888

对于所有需要允许访问服务器的设备 IP 地址,都必须执行上面的操作。


6. 现在,启动 Jupyter


启动时间到!


使用 cd 命令切换到 root 文件夹以外的任何文件夹。我喜欢切换到存放着我的 Jupyter 项目及其他所有仓库的文件夹中。之后,运行下面命令:

nohup jupyter notebook &

这会在后台开始运行 Jupyter,并回到命令行。


现在打开你的浏览器,然后在地址栏输入以下内容,会导航到你的 Jupyter 服务器:

167.34.187.34:8888

实际上,你还可以设置将域名转发到服务器,这样就可以使用 www.dataperson.com:8888 或者其他域名来替换输入你的 IP 地址。这些都是由你托管服务器的公司执行的。如果你使用的是 Digital Ocean,转到你的仪表盘,点击「droplet」名称旁边的菜单图标,然后单击「添加域」。剩下的相信你自己也可以完成。


如你是按上面我展示的那样设置了密码,你会看到一个登录页并要求你输入密码或 Token。输入密码后,你就可以看到 Jupyter 在运行了。


现在你已经可以在任何地方使用 Jupyter 了。在任何浏览器上输入服务器的地址就可以了。


万物皆有可能。


编码愉快!


英文原文:https://thekhan314.github.io/jupyter_on_your_phone_or_anywhere_really
译者:敦伟


【声明】内容源于网络
0
0
Python程序员
1234
内容 2525
粉丝 0
Python程序员 1234
总阅读0
粉丝0
内容2.5k