porpocornn

云服务:

1

任务一:运行一个网站

1#同一个region不同的可用区内网AZ是互通的。

 

    1>www.huaweicloud.com购买一个弹性云服务器

    2>远程登陆

  3>命令行解释

    >free -m

    >yum -y install httpd

    >server httpd start

    >cd /var/www/html

     >echo Hello,beijing > index.html

  4>浏览器输入https://192.168.2.1

 

任务二:公有云上实现网络规划

1#VPC定义:公有云上自定义网络空间{私有云搬在云上}; 虚拟私有云(vitual private cloud); 

2#相当于vpc 路由器

3#VPN虚拟局域网   

 

    1>创建一个虚拟的私有云

  2>

  3>

     4>vim /etc/services //定义端口

   

 

 

任务三:实现云上主机的安全  

1#安全组=防火墙    演示实验

2# 默认情况下,同一个安全组之间的地址访问不受限制

3# 不同安全组默认拒绝所有

 

任务四:实现百万级高并发

1#单台web服务器并发3000台

2#负载均衡调度器只负责调度转发公网地址+内网地址(LVS / HAProxy / F5) 

  1.>部署三台服务器

  2.>下载安装包

  3.>做浏览器    

 

云计算:

2

1#云计算特点:按需自助服务/广泛的网络接入/资源池化/快速弹性伸缩/可计量服务

2#云计算:由传统的企业自建模式变成租用的商业模式

3#模式特点:从一个可以配置的资源共享池按自主的获取资源(服务器/存储/网络/服务)

4#资源模式的特点:快速的供应和释放,和服务商交互达到最小。

5#云计算部署模式:私有云/社区云/公有云/混合云

 

6#云计算的服务模式:IaaS/PaaS/SaaS

  iaas:云基础设施即服务:出租处理能力,存储能力,网络容量等基本计算资源( 网络,存储,计算,虚拟化 )

  pass:云平台及服务:为客户开发的应用程序提供可部署的云环境( 可开发环境,服务 )

  saas:云软件及服务:在网络上提供可直接 使用的应用程序( 软件 )

    

 

7#云计算的8个通用点

  7.1. 大规模

  7.2. 同质化

  7.3. 虚拟化

  7.4. 弹性计算

  7.5. 低成本软件

  7.6. 地理分布

  7.7. 服务定位

  7.8. 先进安全技术  

 

8# 云计算的硬件架构:计算架构

  整体性能最优/基于软件可靠/增加节点实现可拓展性

 

9# 云计算

     东西向流量

  紧耦合DC

 

10# FusionCompute虚拟化软件是华为的云操作系统软件;FusionCompute是的FusionShere虚拟化部件,主要提供资源虚拟化和虚拟化资源池管理功能。

  

  ...1

    

    ...2

   

  ...3

   

  ...4 

  

  ...5

  

  ...6

  

 

11#OpenStack是一个开源的云计算管理平台项目,是云计算的框架

 

12#云服务/云计算云和虚拟化的关系:

  # 云:系统的控制面板

  # 虚拟化:云的数据面

  # 云计算可以没有虚拟化

  #云只是系统的控制面,不包括系统的数据面组件,如hypervisor,存储和网络设备等。

  

  1>买windows服务器

  2>windows自带远程登陆

 

 

存储:

3

1#IBM/EMC:

2#数据存储

  狭义的数据存储:

  广义的数据存储:

3#SSD固态 更容易坏

  ... 1基本知识  RADI:独立磁盘冗余阵列

  

   ...2基本常识

   

  ...3基本常识

   

1#硬盘的最小单位:扇区

2#RAID最小单位:Bit,是位元

3# 传统RAID 1.0(所有RAID都是用条带化写入数据):

  3.1#RAID 0 
    3.1.1 把RAID组中所有硬盘的容量和性能汇总

    3.1.2 RAID 0 至少2块硬盘

    3.1.3 没有安全保障,没有冗余

       3.1.4 应用场景: 用于对安全性没有要求,对性能有要求

    

  3.2#RAID 1  

    3.2.1 镜像RAID  

    3.2.2 RAID 1 只能有2块硬盘,容量/厂家/PN/SN 也要一样

    3.2.3 硬盘性能下降,空间浪费,没有性能

    

  3.3#RAID 3

     3.3.1热插拔/热备盘/数据盘/3才有校验盘

     3.3.2 RAID 3 至少3块硬盘,只可以支持一块 

     3.3.3 蘋繁读取数据,校验盘计算压力大,校验盘容易故障。

     3.3.4 使用场景: 归档文件,读多写少( 监控/流媒体/图片/视频 )

    

  3.4#RAID 5 

    3.4.1 有几个校验盘就可以换几个盘,最多可以坏1快盘,5没有校验盘

    3.4.2 空间浪费,性能影响,分摊,降低了硬盘的故障率,没性能,只有安全

    3.4.3 使用场景:任何场景

    

 

  3.5#RAID 6

    3.4.1RAID 6 P+Q工作原理  技术:RAID6 P+Q // RAID 6 DP

    3.4.2 至少需要N+2个硬盘来构成整列,至少需要4块盘

    3.4.3 性能折损

    3.4.4 应用场景:数据可靠,

    

  3.6#RAID 10  

    3.4.1 RAID10=RAID1+RAID0最多坏2块盘,硬盘数量总是偶数

    3.4.4安全级别很高很高, 既有性能,也有安全,适合银行

    

  3.7#RAID 50

    3.5.5 RAID10 = RAID 5 + RAID 0

    

 

 

 

 

4#RAID的数据保护方式:镜像 / 奇偶效验法 XOR算法(相同为假,相异为真);

5#传统RAID缺陷: 1.冷热数据不均匀,热点放在HHD,冷放在SSD上。2.数据重构速度慢

6#RAID2.0:

     

    ...1

    

 

    ...2

    

 

    ...2

    

 

  6.1#CK,是存储池内的评判空间切分成若干个固定大小的物理空间,是组成RAID的基本单位

 

  6.2#没有恢复这玩意说法,只有数据重构=找回数据 ;

 

 

存储虚拟映射主机(虚拟化)步骤:

1. ping 通

2. 防火墙

3. 

4. 

  

4大数据

北大青鸟教育 / 流数据

1#大数据:利用常用软件工具捕获,管理和处理数据消耗超过可容忍的数据集。

2#特点:体量巨大 / 处理速度慢 / 类型繁多 / 价值密度低 

3#数据来源: 社交数据 / 机器数据 

4#大数据时代已经到来: 硬件成本 / 网络带块的提升 / 云计算的兴起 / 智能终端的普及 / 社交网络电商平台 /物联网  

5#大数据不能: 不能代替管2理的决策力 / 不能代替有效的商业模式 /不能无目的开发知识 / 不能代替专家的作用 / 不能一次建模终身受益

6#大数据应用方面:政府和公共安全,体育 ,旅游,金融等 

7#大数据企业挑战:6大数据人才 5数据安全 1模糊数据的价值 2数据碎片化 3数据可用性低质量差 4数据相关的架构和管理技术

    

 

 8# HDFS + HBASE 

  传输文件在存储数据都会遇见1数据越大,会遇见存储的瓶颈需扩容2文件过大耗时  

9#扩容的两种方式:横向扩容(增加服务器)+ 纵向扩容(增加内存和磁盘)

10# 宕机

11# HDFS在Hadoop默认为128M,可追加:

  11.0一次写入,多次读取,不能修改,只能追加,高吞吐量。

  11.1易于扩展的分布式的文件系统,特点:高容错性,高吞吐量,大文件存储,流量式数据访问

  11.2适合大文件存储与访问/流量数据访问,不适合大量小文件存储,随机写入,低延迟读取。

  

 

   11.3 HDFS架构: Master/salve主从节点

    

 

     ...HDFS数据写入流程

   

 

      ...HDFS数据读取流程

  

    

    ...HDFS可靠性

         

12#HBase:文件存储式系统

  12.0

  

 

  12.1应用场景

  

  ACID :原子性/独立性/一致性/持久性

 

   

1643 樊老师

 

 

 

5人工智能

 1#

 

 

 

 

 

 

 

 

 1643895775 

fanlaoshi 

 

 176 7170 1371白henan

 

云服务      50%  

存储 20% 

人工智能 15% 

大数据 15% 

线上理论考试  1.5h

 

分类:

技术点:

相关文章:

  • 2021-12-03
  • 2021-12-13
  • 2021-12-05
  • 2022-02-09
  • 2022-12-23
  • 2022-02-08
  • 2021-10-10
  • 2021-09-10
猜你喜欢
  • 2022-12-23
  • 2021-05-20
  • 2022-12-23
  • 2021-12-12
  • 2021-11-04
  • 2022-12-23
  • 2021-08-19
相关资源
相似解决方案