云计算课程实验
25개 이상의 토픽을 선택하실 수 없습니다. Topics must start with a letter or number, can include dashes ('-') and can be up to 35 characters long.

155 lines
6.7 KiB

4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
4 년 전
  1. # Assignment 7 指南
  2. ## `******注意,实验结束请立即删除云主机、UFS文件存储和UAI Train交互式训练任务,节省费用******`
  3. ## `******注意2,实验未结束且短期内不会继续实验,也请删除所有上述资源。下次实验时重新创建******`
  4. ## 实验内容
  5. - 创建文件存储: `实验步骤 一)`
  6. - 创建云主机,并挂载文件存储:`实验步骤 二)`
  7. - 在文件存储中创建一个项目文件夹,并在学院GitLab中新建一个同步仓库:`实验步骤 三)`
  8. - 创建UAI Train交互式训练任务,启动并切换成编辑模式: `实验步骤 四)`
  9. - 使用交互式训练任务训练一个能够识别MNIST手写数字的神经网络:`实验步骤 五)`
  10. ## 实验要求
  11. - 完成所有步骤,并在实验报告([模板下载](file/assignment7/学号-实验七.docx))中完成穿插在本指南中的作业1~作业4)。实验报告转成“学号-实验七.pdf”,并上传至http://113.31.104.68:3389/index.htm
  12. - 实验报告上传deadline: `12月4日`
  13. ## 使用UCloud产品
  14. 云主机UHost、文件存储UFS、镜像库UHub、AI训练UAI Train、私有网络VPC、基础网络UNet
  15. ## 需要权限
  16. 云主机UHost、文件存储UFS、镜像库UHub、AI训练UAI Train、基础网络UNet
  17. ## 基础知识
  18. `MNIST:` MNIST是一个手写数字数据库,包含60000个训练样本和10000个测试样本,是一个能够快速上手的、用于尝试机器学习和模式识别技术的数据集。以下是部分MNIST中的样本。
  19. <kbd>
  20. <img src="img/assignment7/ass7-mnist.png">
  21. </kbd>
  22. ## 实验步骤
  23. ### 一)创建一个文件存储
  24. #### 1)在产品->存储中选择“文件存储UFS”,然后点击创建文件系统。
  25. #### 2)如下图,存储类型选择SSD性能型,100GB,按时付费。
  26. <kbd>
  27. <img src="img/assignment7/ass7-createufs.png">
  28. </kbd>
  29. #### 3)创建完毕后,点击添加挂载点,如下图所示选择一个VPC网络,使得相应的子网是DefaultNetwork,点击确定。这样我们等一下在DefaultNetwork下面创建一个云主机,就能把这个文件存储挂载到云主机上。
  30. <kbd>
  31. <img src="img/assignment7/ass7-setmount.png">
  32. </kbd>
  33. #### 4)点击“管理挂载”,查看挂载信息,记住文件存储所在的ip地址,第二)步中我们把这个文件存储挂在到云主机上。
  34. <kbd>
  35. <img src="img/assignment7/ass7-mountinfo.png">
  36. </kbd>
  37. ### 二)将文件存储挂载到云主机上,使得它在逻辑上成为云主机的一个分区
  38. #### 1)创建一个1核1G的云主机,绑定弹性IP,按时付费(这个云主机必须在文件存储所挂载的子网中,否则无法和文件存储通信)
  39. #### 2)登录云主机,安装NFS
  40. ```
  41. sudo yum install -y nfs-utils
  42. ```
  43. NFS(Network File System)是一个能够使得本地主机访问远程主机文件系统的应用程序。因为步骤一)创建的文件存储对于当前的云主机来讲是一个远程存储(网络存储),使用NFS协议才能将其挂载到当前云主机上。
  44. #### 3)在云主机上挂载文件存储,挂载点为/mnt
  45. ```
  46. sudo yum mount -t nfs4 你的文件存储IP地址:/ /mnt
  47. ```
  48. #### 3)打开浏览器,输入 `http://你的云主机外网ip`,测试app是否正常运行。正常则进入下一步。
  49. <kbd>
  50. <img src="img/assignment6/ass6-llq.jpeg">
  51. </kbd>
  52. #### 4)将云主机连到负载均衡器。回到前面添加服务节点的界面,输入端口80,则所有可添加的节点都会出现(以内网ip形式)。将你的云主机对应的内网ip,转移到待添加节点,点击确定。这时候显示健康检查“失败”,不用管它,我们在浏览器中输入 `http://你的负载均衡器ip`,奇迹发生了!我们也能访问flask app!!并且这时候健康检查也变成“正常”。
  53. <kbd>
  54. <img src="img/assignment6/ass6-addserver.jpeg">
  55. </kbd>
  56. ## `**************作业1:请将浏览器中通过负载均衡ip访问flask app的界面,以及负载均衡器中服务节点界面截图,并插入实验报告***************`
  57. #### 5)此时负载均衡器只连接了一个服务实例,等同于单机访问。`为步骤三做准备,请在这一步制作当前云主机的镜像`。
  58. ### 三)使用ab进行http服务器压力测试
  59. #### 1)使用步骤二)中制作的镜像,创建三个最低配置的云主机(`和之前一样,只是在云主机创建界面用“自制镜像”,并且不需要弹性ip`),可以选择三台主机一次性创建
  60. <kbd>
  61. <img src="img/assignment6/ass6-createuh.png">
  62. </kbd>
  63. #### 2)创建完毕后,使用有外网ip的那台云主机,逐个ssh到三台内网机器上(通过内网ip),然后每台机器直接启动docker服务,并运行flask app容器(因为已经全都安装并且build好了 :smiley_cat: :smiley_cat: :smiley_cat:)
  64. <kbd>
  65. <img src="img/assignment6/ass6-intra.jpeg">
  66. </kbd>
  67. <kbd>
  68. <img src="img/assignment6/ass6-intrassh.jpeg">
  69. </kbd>
  70. #### 3)现在让我们把这三个云主机连接到负载均衡器,并且从负载均衡器中删除刚才的具有外网ip的节点(接下来我们要用外网ip节点做压测)。首先我们禁用掉其中的两个节点,只保留一个节点在启用状态。如下图所示。
  71. <kbd>
  72. <img src="img/assignment6/ass6-3s.jpeg">
  73. </kbd>
  74. ## `**************作业2:请将此时连接到负载均衡的服务节点(三个)截图,并插入实验报告***************`
  75. #### 4)登录具有外网ip的云主机,安装ApacheBench
  76. ```
  77. sudo yum -y install httpd
  78. ```
  79. #### 5)运行压测命令。`-c`表示并发数,即同时发生的请求数,`-n`表示请求总数,`http://106.75.216.169/`替换成你的负载均衡器ip。所以这里对我们的flask app并发1000个请求,总共发出10000个请求。结果如下图所示。
  80. ```
  81. ab -c 1000 -n 10000 http://106.75.216.169/
  82. ```
  83. <kbd>
  84. <img src="img/assignment6/ass6-ab.jpeg">
  85. </kbd>
  86. > 这里我们关注几个重要结果
  87. > 1) Time taken for tests:压测总时间
  88. > 2) Requests per second: 平均每秒处理请求数
  89. > 3) Time per request: 平均每个请求处理时间
  90. #### 6)接下来,请逐渐启用第2和第3个服务器节点,然后再运行上面的压测命令。
  91. ## `**************作业3:请将启用一个节点、两个节点、三个节点时的压测结果分别截图,并插入实验报告***************`
  92. 注意,由于有网络因素干扰,每个实验你可以多进行几次压测,得到比较正常的结果再截图。
  93. ## `**************作业4:假设现在压测结果显示单台机器的Requests per second为30,一天中的请求峰值时间是2个小时,总共需要处理5千万个请求,请问需要至少准备多少台机器才可能平稳度过峰值请求?***************`