云计算课程实验
You can not select more than 25 topics Topics must start with a letter or number, can include dashes ('-') and can be up to 35 characters long.

450 lines
17 KiB

3 years ago
  1. # Assignment 2 指南
  2. ## `******注意,实验结束请立即删除云主机,节省费用******`
  3. ## `******注意2,实验未结束且短期内不会继续实验,也请删除云主机。下次实验时重新创建******`
  4. ### 重要技巧:如果实验未结束,可以通过制作主机镜像来保存当前状态,下次实验时用这个镜像创建云主机,从当前状态开始继续实验。步骤如下
  5. - 关机并制作镜像。制作完成后删除云主机。![关机](img/assignment2/关机.png)![镜像](img/assignment2/镜像.png)
  6. - 下次从镜像创建云主机。![创建](img/assignment2/创建.jpeg)
  7. ## 实验内容
  8. - 安装Docker并测试:`实验步骤 一)`
  9. - 了解并学习简单的Docker指令:`实验步骤 二)`
  10. - 利用Docker部署一个简单的静态网页App :`实验步骤 三)`
  11. - 使用Dockerfile完成复杂应用的搭建:`实验步骤 四)`
  12. ## 实验要求(仔细看)
  13. - #### 完成所有步骤,并在实验报告([模板下载](file/assignment2/学号-实验二.docx))中完成穿插在本指南中的`作业1~作业4`(只需要截图)。实验报告转成`“学号-实验二.pdf”`,并上传至http://113.31.104.68:3389/index.htm
  14. - #### 实验报告上传deadline:`10月16日`
  15. ## 使用产品
  16. 云主机uhost, 私有网络vpc,基础网络unet, 容器镜像库uHub
  17. ## 需要权限
  18. 云主机uhost, 基础网络unet,容器镜像库uhub,容器服务udocker
  19. ## 实验步骤
  20. ### 零)前期工作
  21. #### 请根据Assignment1的要求[创建云主机](Assignment1.md),并使用ssh远程登录(可以直接使用root用户进行后续操作;如果登录个人账户进行操作,遇到permission问题时需在命令前面加上sudo再运行)
  22. #### `Hint:` 本实验需要访问host的端口,请使用`-L `命令将`host`的`32768、32769、8000、8080`四个端口映射到本地,具体命令可以参考如下:
  23. ```bash
  24. $ ssh root@113.31.104.108 -L 32769:0.0.0.0:32769 -L 32768:0.0.0.0:32768 -L 8080:0.0.0.0:8080 -L 8000:0.0.0.0:8000
  25. ```
  26. ### 一)安装Docker并测试
  27. #### 1. Docker是什么?
  28. > 一个开放源代码项目,通过在Linux上提供**OS级虚拟化**的附加抽象层和自动化层,使**容器**内软件应用程序的部署自动化。
  29. #### 简单来说,Docker是一种工具,它使开发人员,系统管理员等可以轻松地在沙盒(称为*容器*)中部署其应用程序,以在主机操作系统(即Linux)上运行。Docker的主要好处是,它允许用户将**具有所有依赖关系的应用程序打包到**用于软件开发**的标准化单元**中。与虚拟机不同,容器不具有高开销,因此可以更有效地利用基础系统和资源。
  30. #### 2. 在Linux上安装Docker环境
  31. > 直到几个版本之前,在OSX和Windows上运行Docker还是很麻烦的。但是,最近,Docker已投入大量资金来改善其用户在这些OS上的入职体验,因此,现在运行Docker是一个轻而易举的事。
  32. #### 这里只介绍如何在Linux上安装和运行Docker, 如果同学们想要在其他系统上尝试使用Docker,可以参考Docker官网给出的教程(如何在[Mac](https://docs.docker.com/docker-for-mac/install)、[Linux](https://docs.docker.com/install/linux/docker-ce/ubuntu)或[Windows]([Windows](https://docs.docker.com/docker-for-windows/install))上使用Docker)
  33. #### a) 安装docker
  34. #### 推荐使用如下命令安装docker
  35. ```bash
  36. $ curl -fsSL https://get.docker.com | bash -s docker --mirror Aliyun
  37. ```
  38. #### 按照提示将自己的用户加入docker的用户组(root 用户无需操作)
  39. ```bash
  40. $ sudo usermod -aG docker your-user
  41. ```
  42. #### 基本的docker启动与查看状态命令如下
  43. ```bash
  44. $ service docker start
  45. $ service docker stop
  46. $ service docker restart
  47. $ service docker status
  48. ● docker.service - Docker Application Container Engine
  49. Loaded: loaded (/usr/lib/systemd/system/docker.service; disabled; vendor preset: disabled)
  50. Active: active (running) since Mon 2020-10-05 21:34:37 CST; 1min 45s ago
  51. Docs: https://docs.docker.com
  52. Main PID: 1954 (dockerd)
  53. Tasks: 8
  54. Memory: 40.1M
  55. CGroup: /system.slice/docker.service
  56. └─1954 /usr/bin/dockerd -H fd:// --containerd=/run/containerd/containerd.sock
  57. ```
  58. ## **为保证试验正常进行,请根据以下步骤修改docker镜像源为ucloud**
  59. #### 1.登录`ucloud docker hub`
  60. ```bash
  61. $ docker login uhub-edu.service.ucloud.cn -u username
  62. Password:
  63. WARNING! Your password will be stored unencrypted in /root/.docker/config.json.
  64. Configure a credential helper to remove this warning. See
  65. https://docs.docker.com/engine/reference/commandline/login/#credentials-store
  66. Login Succeeded
  67. ```
  68. #### 出现`login succeeded`表示登陆成功
  69. #### 2.将如下内容写入`/etc/docker/daemon.json`中(没有则创建. ps: 需保证`docker`已经运行过,否则会出现`/etc/docker`文件夹不存在)
  70. ```json
  71. {
  72. "registry-mirrors": ["https://uhub-edu.service.ucloud.cn","https://uhub.service.ucloud.cn","https://registry.docker-cn.com","http://hub-mirror.c.163.com"]
  73. }
  74. ```
  75. #### 之后重新启动`docker`即可
  76. #### b) 测试Docker是否安装成功
  77. #### 当你的按照上述步骤安装完docker之后,可以通过运行如下命令来测试docker是否安装成功
  78. ```bash
  79. $ docker run hello-world
  80. Hello from Docker.
  81. This message shows that your installation appears to be working correctly.
  82. ...
  83. ```
  84. #### 3. 尝试使用busybox
  85. > 到此为止,你的docker环境已经安装完成并且正常运行,接下来我们尝试一些更加复杂的工作
  86. #### 在这个部分,我们将要通过`docker run`命令去开启一个`BusyBox container`
  87. #### a) 首先,我们通过运行如下命令从互联网拉取`BusyBox Image`:
  88. ```bash
  89. $ docker pull busybox
  90. ```
  91. > 如果运行过程中遇到 **permission denied** 此类的错误,可以尝试在命令前加入 **sudo** 命令
  92. #### b) **pull** 命令可以将`busybox image`从docker仓库中拉取到本地,你可以使用**docker image**命令查看系统上目前已有的**image**.
  93. ```bash
  94. $ docker images
  95. REPOSITORY TAG IMAGE ID CREATED VIRT
  96. busybox latest c51f86c28340 4 weeks ago 1.10
  97. ```
  98. #### c) 我们接下来继续尝试使用`docker run`命令来运行`busybox`
  99. ```bash
  100. $ docker run busybox
  101. $
  102. ```
  103. #### d) 可以发现命令运行完,什么也没有发生。这不是bug,当我们执行`docker run`命令时,docker会从本地查找`image`,然后加载`image`并在容器中运行command。让我们加入自定义的command再试一次
  104. ```bash
  105. $ docker run busybox echo "hello from busybox"
  106. hello from busybox
  107. ```
  108. `**************作业1:请将上述涉及docker run/image的操作界面截图,并插入实验报告中***************`
  109. ### 二) 熟悉Docker指令
  110. #### 让我们来尝试不同的**docker command**
  111. #### 1. docker ps
  112. > **docker ps** 命令可以查看当前正在运行的所有容器的状态,包括`CONTAINER ID`、`IMAGE`、`COMMAND`、`CREATE (创建时间)`、`STATUS (容器状态)`
  113. #### 让我们查看目前有哪些容器正在运行
  114. ```bash
  115. $ docker ps
  116. CONTAINER ID IMAGE COMMAND CREATED STATUS
  117. ```
  118. #### 可以看到控制台输出了了一个空的列表,这是正常的,因为目前没有容器正在运行。如果需要查看包括不在运行的所有容器,我们可以加入 **-a** 参数
  119. ```bash
  120. $ docker ps -a
  121. CONTAINER ID IMAGE COMMAND CREATED STATUS
  122. 305297d7a235 busybox "uptime" 11 minutes ago Exited (
  123. ff0a5c3750b9 busybox "sh" 12 minutes ago Exited (
  124. 14e5bd11d164 hello-world "/hello" 2 minutes ago Exited (
  125. ```
  126. #### Wow~ 之前运行过的容器全部都出现在输出中了~
  127. #### 2. docker run -it
  128. > **docker run -it** 可以在我们创建 **container** 的同时,以交互式的形式获取到 **container shell** 的控制权. 我们可以在**docker run **命令中使用**--name custom_name** 来指定container的名称,若不指定,docker会为我们随机生成一个名字
  129. #### 接下来我们使用 **run -it** 命令来创建一个 `busybox container`:
  130. ```bash
  131. $ docker run -it busybox sh
  132. / # ls
  133. bin dev etc home proc root sys tmp usr var
  134. / # uptime
  135. 05:45:21 up 5:58, 0 users, load average: 0.00, 0.01, 0.04
  136. ```
  137. #### 3. docker rm
  138. > **docker rm -args** 可以删除不在运行的**container**,`args`可以是**container name/id** (可以不写完整,但必须保证唯一)
  139. #### 下面让我们尝试删除上面的两个**busybox container**
  140. ```bash
  141. $ docker rm 305297d7a235 ff0a5c3750b9
  142. 305297d7a235
  143. ff0a5c3750b9
  144. ```
  145. #### 也可以通过如下命令删除
  146. ```bash
  147. $ docker rm 305 ff
  148. 305297d7a235
  149. ff0a5c3750b9
  150. ```
  151. #### 现在使用`ps`命令检查一下是否删除成功吧!
  152. `**************作业2:请手动创建centos image的container,将终端命令和`container cpu`信息截图,并插入实验报告中***************`
  153. > Hint: 可以使用**lscpu**命令查看linux的硬件信息,显示界面大致如下
  154. ```bash
  155. $ lscpu
  156. Architecture: x86_64
  157. CPU op-mode(s): 32-bit, 64-bit
  158. Byte Order: Little Endian
  159. CPU(s): 4
  160. On-line CPU(s) list: 0-3
  161. Thread(s) per core: 1
  162. Core(s) per socket: 1
  163. Socket(s): 4
  164. Vendor ID: GenuineIntel
  165. CPU family: 6
  166. Model: 158
  167. Model name: Intel(R) Core(TM) i7-7700HQ CPU @ 2.80GHz
  168. Stepping: 9
  169. CPU MHz: 2800.000
  170. BogoMIPS: 5616.00
  171. L1d cache: 32K
  172. L1i cache: 32K
  173. L2 cache: 256K
  174. L3 cache: 6144K
  175. ...
  176. ```
  177. ### 三) 使用docker创建静态webapp
  178. #### `docker`与虚拟机不同之处在于,在部署复杂的应用时,`docker`可以灵活的从`docker hub`中`pull`各种`image`(如:`mysql`、`sqlserver`、`java`、`php`.etc.),并将它们自由的组合到一起,使得每个`container`都能发挥自己独特的作用。那么我们先从简单的部署单页面的静态网页开始吧!
  179. #### 1. 运行`static-web app`
  180. #### `docker hub`上有许多开发者们上传的`image`,我们可以自由下载并且使用,这里我们使用到的`image`是`prakhar1989/staticsite`,这是一个搭载了简单的静态单页面的Nginx镜像,让我们来试者运行它:
  181. ```bash
  182. $ docker run --rm cloud_computing/static_site
  183. Nginx is running...
  184. ```
  185. > `--rm` 参数的作用是当container运行结束时系统自动删除该container
  186. #### 如果顺利的话,你的终端会出现`nginx is running...`,但是目前容器对我们来说是一个完全封闭的环境,我们并没有办法去访问`container`的端口
  187. #### 2. 将`container`映射到本地
  188. 到此为止,我们已经部署了一个静态的`nginx container`但是并没有办法去访问,`docker`提供了许多接口去解决这个问题,我们可以通过添加参数的方式将`container`的端口或者文件夹映射到本地
  189. #### docker提供了如下一些参数
  190. | -d | 将container置于后台运行 |
  191. | :---------------------------: | :---------------------------------------------------: |
  192. | -p local_port:container_port | 将container 的某个端口映射到本地 |
  193. | -P | 将container所有正在监听的端口全部映射到本地的随机端口 |
  194. | -v local_path:contatiner_path | 将container的某个文件路径映射到本地 |
  195. #### `static-site`默认监听的`80`和`443`端口我们使用上述参数尝试将它映射到本机
  196. ```bash
  197. $ docker run -d -P --name static_site cloud_computing/static_site
  198. e61d12292d69556eabe2a44c16cbd54486b2527e2ce4f95438e504afb7b02810
  199. ```
  200. #### 查看docker给我们映射的端口
  201. ```
  202. $ docker port static_site
  203. 80/tcp -> 0.0.0.0:32769
  204. 443/tcp -> 0.0.0.0:32768
  205. ```
  206. #### 可以看到`docker`将`container`的`80`和`443`分别映射到了本机的`32769`和`32768`两个端口上
  207. #### 3.打开浏览器,访问`http://localhost:32769`,得到如下页面:(若`docker`随机映射端口不是`32768/32769`可以无需验证此步骤)
  208. ![static-web](img/assignment2/static-web.png)
  209. `**************作业3:尝试使用-v、--rm和-p (请将container的80端口映射到host的8000端口)等参数,创建cloud_computing/static_site容器***************`
  210. #### 具体步骤如下:
  211. #### 1.若提示continer正在运行中,可以使用`docker stop static_site && docker rm static_site`删除正在使用的容器并重新创建.
  212. #### 2. 创建`/var/html`文件夹
  213. ```bash
  214. mkdir /var/html
  215. ```
  216. #### 3.在`/var/html`中新建`index.html`文件,复制[index.html文件](file/assignment2/index.html)中的内容到文件中,并修改以下部分为自己的信息
  217. ```html
  218. <div class="container">
  219. <div class="row">
  220. <div class="one-half column" style="margin-top: 25%">
  221. <h4>Hello Docker!</h4>
  222. <p>This is being served from a <strong>docker</strong> container running Nginx.</p>
  223. <p>my id is xxxx,my name is xxx</p>
  224. </div>
  225. </div>
  226. </div>
  227. ```
  228. #### 4. 尝试使用`-p、-v、-d、--rm、--name`参数创建`cloud_computing/static_site`的`container`,具体要求为:映射`container`的`80`端口到`host`的`8000`端口,映射`container`的`/usr/share/nginx/html/mypage`路径到`/var/html`文件夹,`container`名称以自己的学号命名
  229. #### 5.访问本地浏览器:`http://localhost:8000/mypage`
  230. #### 6.将浏览器界面包括url截图,将创建container的终端界面截图,并插入到实验报告中 (浏览器界面类似下面图片所示)
  231. ![浏览器界面](img/assignment2/static-web-2.png)
  232. ### 四) 熟悉Dockerfile的简单使用
  233. #### 到现在为止,同学可能会疑惑,这种docker的镜像到底是如何创建的呢?这里就要使用到一个概念: `Dockerfile`
  234. #### 1.从repo中下载[附件](/file/assignment2/demo.zip),通过`scp`命令上传到云服务器并解压
  235. ```bash
  236. $ scp demo.zip root@113.31.105.65:~
  237. root@113.31.105.65's password:
  238. demo.zip 100% 1308 142.4KB/s 00:00
  239. $ unzip demo.zip
  240. Archive: demo.zip
  241. creating: demo/
  242. inflating: __MACOSX/._demo
  243. inflating: demo/Dockerfile
  244. inflating: demo/app.py
  245. ```
  246. #### 2.查看Dockerfile
  247. #### 这是一个`Flask App`,是一个用`python`写的网页应用,我们进入`demo`文件夹,只有两个文件`app.py、Dockerfile`
  248. #### 首先我们使用`cat app.py`命令查看`app.py`的内容,显示如下:
  249. ```python
  250. from flask import Flask
  251. app = Flask(__name__)
  252. @app.route('/')
  253. def hello():
  254. return 'hello world!'
  255. if __name__ == '__main__':
  256. app.run(host='0.0.0.0')
  257. ```
  258. #### 看不懂没有关系,这就是一个很简单的flask应用,它定义了一个路由,当我们访问:`http://localhost:5000/`的时候,浏览器会给我们返回`hello world!`
  259. #### 接下来我们继续查看`Dockerfile`:
  260. ```dockerfile
  261. # 拉取python镜像作为基本环境
  262. FROM cloud_computing/python:latest
  263. # 设置额外信息
  264. LABEL description="Dockerfile Demo for ECNU"
  265. # 在container中运行命令(这一步在container安装pip依赖)
  266. RUN pip install flask -i https://pypi.tuna.tsinghua.edu.cn/simple
  267. # 将本地目录拷贝到container并且设置为工作目录
  268. ADD ./app.py /opt
  269. WORKDIR /opt
  270. # 将5000端口暴露出来
  271. EXPOSE 5000
  272. # 容器启动的执行命令
  273. CMD python app.py
  274. ```
  275. #### 可以看出`Dockerfile`的书写非常简单易懂,涉及到几个命令
  276. | FROM | 指定容器来自的镜像 |
  277. | :-----: | :----------------------------------------------------------: |
  278. | RUN | 容器中运行shell命令 |
  279. | ADD | 将本地文件传送到容器指定位置 |
  280. | WORKDIR | 将容器中某个目录设置为工作目录(当前目录) |
  281. | EXPOSE | 将容器中某个端口暴露出来(如上述flask工作在5000端口,将其暴露出来) |
  282. | CMD | 容器启动自动执行的shell命令 |
  283. | LABEL | 设置一些额外的信息 |
  284. #### 通过`dockerfile`的方式,我们就可以将各种各样的环境打包成镜像上传到`docker hub`上供他人使用
  285. #### 3.打包镜像
  286. #### 在当前目录(`Dockerfile`同级目录),执行如下命令,`docker`会自动将当前环境部署打包为一个`image`
  287. ```bash
  288. $ docker build -t user-name/image-name .
  289. ```
  290. #### 通过上面的命令,我们就在本地打包好了一个名叫`username/image-name`的镜像,我们可以通过之前学习的`docker run`命令去创建该镜像的`container`
  291. **************作业4:利用dockerfile将当前环境打包为 `英文姓名/demo` 的`image`,并通过`docker`命令将创建该镜像的`container`,将`5000`端口映射到本地的`8080`端口。将打包镜像的命令、创建容器的命令以及浏览器页面截图,并插入实验报告中***************