Linux 之磁盘


磁盘管理

磁盘管理的外部结构

1
2
3
4
5
6
7
1. 两类磁盘
	1）固态：个头小
	2）机械：个头大
2. 磁盘接口：和主板连接传输数据的
	SATA：家用级，速度慢，存储服务器，测试服务器，1T，2T，4T    
	SAS： 企业级，速度快，用户服务访问，300G,600G,15000rpm
磁头在盘片，寻道，寻址，

磁盘管理的内部结构

1
2
3
4
5
6
7
8
9
10
11
12
13
1. 磁盘主轴转速：
		家用笔记本： 7200K  rpm每分钟转速
		企业磁盘  ：标准15000rpm  10000rpm
2. 磁头： 读取数据，数量就是盘面数量，磁力感应，不接触盘面
3. 盘片： 2片 
4. 扇区：516字节， 
5. 磁盘使用整数计算，1G=1000M 1T=1000G
6. RAID 磁盘阵列、阵列卡、RAID卡
	1）作用：把磁盘逻辑的组合在一起，可以形成更大的磁盘存储
		（1）可以获得更大的容量
		（2）获得更高的性能
		（3）获得更大的安全性
	2）级别：
最少盘数 总容量 安全冗余 读写速度 使用场景
Raid 0 1 所有磁盘之和 数据损坏无法恢复 最快 只要求速度，架构，从服务器
Raid 1 2 所有磁盘的一半 百分百恢复 读快写慢 只要求安全，不要求速度，系统
Raid 5 3 所有磁盘的n-1 最多损坏1块 01折中 对安全速度一般，访问量稳定，数据库主库
Raid 10 4 可以损坏一半 损失一半 读写很快 对安全和性能大，高并发，高访问量数据库

逻辑卷管理

磁盘分区理论

1
2
3
4
5
6
7
8
9
10
11
12
13
1. 两种情况需要分区：
系统分区：
	   1）安装操作系统/boot  swap /  物理机 基于物理机的虚拟化，云平			台不需分区
	   
	   2）磁盘不够用，增加磁盘存储，
2. 磁盘分区 MBR格式，只支持4个主分区，2T以下磁盘容量，fdisk命令分区
	1）分区的方式：
	   1） 四个主分区 c d e f
	   2） 三个主分区+一个扩展分区+一个逻辑分区
	   3） 1个主分区+一个扩展分区+多个逻辑分区
	   
    2）磁盘分区名称
磁盘名称 分区名称 三个主分区+一个逻辑分区
第一块：sda 第一个分区：sda1 第二个分区：sda2 第三个分区：sda3
第二块：sdb 第一个分区：sdb1 第二个分区：sdb2 第三个分区：sdb3
第三块：sdc 第一个分区：sdc1 第三个分区：sdc3 第四个分区：sdc4 第一个逻辑分区：sdc5
/boot SWAP /

磁盘分区操作，MBR格式分区

1
2
3
4
5
6
1. 添加磁盘并查看
	1）虚拟机添加磁盘。。。需要重启，不支持在线扩容
	2）云服务器添加磁盘。。。不需要重启，支持在线扩容 
	3）在系统中查看能否发现新加的磁盘
	  （1）ll /dev/sdb   //dev存放硬件设备的目录
	  （2）fdisk -l      //查看分区信息
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
2. 分区 mbr格式，小于2t用fdisk
	1）fdisk /dev/sdb   //使用fdisk 对sdb分区
	2）d 删除分区  g 创建GPT格式分区    l 列出所有分区类型
	   m 列出菜单  n 创建新的分区      p打印分区表
	   t 改变分区类型id  w保存到磁盘中，使用fdisk分区，默认只保存在内	   存中，按w才会写入到磁盘中
	   
磁盘分区 GPT格式，支持128个主分区，支持大于2T的磁盘容量，parted分区
1）m 列出菜单

2）n 默认主分区
 	（1）n--回车--回车--回车--+50M--p打印查看当前分区
 	（2）n--回车--回车--回车--+30M--p
 	（3）n--回车--回车--回车--+30M--p
 	（4）n--p--回车--回车--p
 	（5）d 删除第四个分区，默认删除最后一个分区
 	（6）n--回车--回车--回车 创建扩展分区
 	（7）n--回车--+30M 分配逻辑分区
 	（8）n--回车--+30M 逻辑分区
 	（9）n--回车--+30M 逻辑分区
 	
3）w 保存到磁盘中
1
2
3
3.磁盘格式化
 	（1）mkfs.xfs /dev/sdb1 
 	//mkfs.xfs centos7.x默认的文件类型
1
2
3
4
5
4. 挂载使用
 	（1）系统临时挂载点：/mnt 用来挂载
 	（2）永久挂载点：自己创建目录
 	（3）mkdir /data
 	（4）mount /dev/sdb1 /data
1
2
3
5. 检测挂载情况
 	（1）df -h  //查看是否挂载
 	（2）touch 1.txt
1
2
3
4
5
6
7
8
6. 加入开机自动挂载
 	（1）写入/etc/rc.local  必须给源文件+x权限，但是不规范
 	（2）写入 /etc/fstab
 /dev/sdb1  /data   xfs  defaults 0 0
 	（3） blkid  //查看uuid，
 	（4）uuid= as /data xfs defaults 0 0
 	（5）mount -a  //检测挂载配置是否正确
 	（6）df - h
1
2
3
7. 卸载
	（1）umount /data 卸载
	（2）umount -f /data 强制卸载

MBR格式，只存储，不分区，直接挂载

1
2
3
4
5
6
7
8
1. 添加磁盘
	插磁盘，购买
2. 格式化
	mkfs.xfs /dev/sdb
3. 挂在使用
	mount /dev/sdb /data
4. 加入开机自动挂载
	/etc/fstab

磁盘分区操作，GPT格式分区

非交互式GPT格式分区

1
2
3
4
5
6
1. 添加磁盘并查看
	1）虚拟机添加磁盘。。。需要重启，不支持在线扩容
	2）云服务器添加磁盘。。。不需要重启，支持在线扩容 
	3）在系统中查看能否发现新加的磁盘
	  （1）ll /dev/sdc   //dev存放硬件设备的目录
	  （2）fdisk -l      //查看分区信息
1
2
3
4
5
6
7
8
9
2.parted分配磁盘
	1）parted /dev/sdc   //进入parted
	2）mktable gpt       //创建分区类型为GPT格式
	3）print             //查看分区表
	4）mkpart primary 0 100G //创建一个主分区，从0开始到100G结束
	5）I
	6）fdisk -l          //查看分区信息
	7）rm 5              //删除分区
	8）quit              //退出
1
2
3. 格式化
	1）mkfs.xfs /dev/sdc1
1
2
4. 挂载使用
	1）mount /dev/sdc1 /data
1
2
3
5. 加入开机自动挂载
	1）blkid
	2）/dev/sdc1 /data1 xfs defaults 0 0

命令行交互式GPT格式分区

1
2
3
4
5
6
7
8
9
1. mkpart       //parte交互式的分区
2. primary		//分区的名称
3. xfs			//文件系统xfs
4. 100G			//开始大小
5. 200G			//结束大小
6. print		//查看分区信息
7. mkpart primary 200G 300G   //继续分区
8. mkpart primary 300G 400G   //继续分区

在命令行非交互式GPT格式分区

1
2
3
4
1. parted /dev/sdc print   //在命令行输入
2. parted /dev/sdc rm 4    //删除第四个分区
3. parted /dev/sdc mkpart primary 300G 500G //创建一个200G的分区
4. parted /dev/sdc print   //显示分区表信息
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
小结：
mktable     mklabel修改分区类型
mklabel gpt
mkpart 主分区的名称 起始大小  结束大小
mkpart  4             0    100G
rm 分区编号
rm 4 删除第四个主分区
print 查看当前的分区表

企业分区方式一：   
1. 加磁盘
2. 分区和格式化
	1）把磁盘先分成一个主分区 sdc1
3. 格式化第一个分区
	1）mkfs.xfs  /dev/sdc1
4. 直接挂载
	1）mount /dev/sdc1 /data

企业分区方式二：   大于2T怎么分区
1. 加磁盘
2. 直接格式化
	1）mkfs.xfs -f /dev/sdc   //强制格式化
	2）df -h
3. 直接挂载
	1）mount /dev/sdc /data
	直接把sdc整块磁盘分区 
1
2
面试题：给一块磁盘，大于2T，怎么分区

5个企业案例

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
1. 企业案例：java环境内存不够用，大量占用swap
内存不够用，会导致杀死占用内存最大的进程，保护系统安全

什么情况下出现oom，内存溢出
1.java进程导致，本身占用内存
2.程序设计问题
3.网络波动导致

创建swap分区
安装操作系统，进行分区，swap，内存的1-1.5倍
安装完操作系统临时扩充swap

1.创建一个文件作为swap
	dd命令
	1）dd   if=/dev/zero     of=/tmp/1000m      bs=1M   count=1000 
	  命令  input 输入内容   output 输出到文件中  block=1M  复制1000次
	2）作用：把磁盘剩余空间临时创建一个文件	

2.让这个文件成为swap,类似mkfs.xfs  格式化
	1）mkswap /tmp/1000m

3.让swap文件加入到系统的swap中
	1）swapon /tmp/1000m   //临时加入
	2）free -h             //查看内存使用情况
4.swap永久生效+,或者/etc/fstab中
	1）vim /etc/rc.local
	2）加入swapon /tmp/1000m
	3）chmod +x /etc/rc.d/rc.local
5.卸载
	1）swapoff  /tmp/1000m
1
2
3
4
5
6
7
8
9
2. 案例： 磁盘中存储空间不够，如何查找大文件
	1) find / -type f -size +1G     //线上环境不允许搜索/  只能搜索目录

	2) 搜索目录大小
	du -h /* //第一步 统计/目录下所有的目录的大小
	du -h /*|grep G //过滤所有包含G的目录和文件
	du -h /var/*|grep G
	du -h /var/log/*|grep G
	find /var/ -type f -size +1G
1
2
3
4
5
6
3. 案例： 小文件过大导致inode占满，无法写入数据
	查看系统中的小文件
	按照目录的大小进行查找
	文件名称存储在上级的目录中的 block中
	文件越多目录的block越大
	find / -type d -size +1M
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
4. 项目案例：日志文件过大导致磁盘被占满，扩充磁盘，并且日志路径不能变化
httpd服务   web服务  日志写入固定的位置
/var/log/httpd/access_log
模拟服务日志文件
	1)yum -y install httpd
	2)systemctk start httpd
使用游览器访问10.0.0.200

第一步：添加磁盘
第二步：初始化
第三步：挂载使用
	1)mount /dev/sdc /data
把日志文件移动到新的磁盘下
	2)mv /var/log/httpd/access_log /data

对日志做一个软连接到源日志目录下
	3)ln -s /data/access_log /var/log/httpd/access_log

软链接
	4)ln -s /opt/source.txt /root/source.txt
    		     源文件    目标文件

最后一步
systemctl 
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
5. 案例：删除一个文件如何是真正删除一个文件，为什么磁盘没有被释放
	inode 硬链接为0，并且没有被进程所调用
第一步：模拟文件被占用
dd if=/dev/zero of=/root/5g bs=1M count =5000

第二步：使用两个命令调用
	1）tail 5g
	2）less 5g

第三步：删除5g的文件，发现正常删除，但是磁盘没有释放
	1）rm -rf 5g
	2）df -h
第四步：查看被什么进程所调用lsof
	3）yum -y install lsof
	4）lsof|grep 5g
第五步：杀死被占用的进程
	5）kill -9 4027
	6）kill -9 4076
	   df -h
1
2
3
4
5
6
7
8
9
10
小结：
	磁盘分区：
	mbr：只支持小于2T的磁盘分区，使用fdisk
	gpt：支持大于2T的磁盘分区，使用parted
案例：
	1)创建swap
	2)磁盘被占满如何查找大文件    du
	3)磁盘被占满如何查找小文件
	4)磁盘被占满如何解决，软链接
	5)删除文件，文件被进程占用，磁盘无法释放
赏

谢谢你请我吃糖果

支付宝
微信

扫一扫，分享到微信

微信分享二维码

tag:

    缺失模块。
    1、请确保node版本大于6.2
    2、在博客根目录（注意不是yilia根目录）执行以下命令：
    npm i hexo-generator-json-content --save

    3、在根目录_config.yml里添加配置： 

      jsonContent:
    meta: false
    pages: false
    posts:
      title: true
      date: true
      path: true
      text: false
      raw: false
      content: false
      slug: false
      updated: false
      comments: false
      link: false
      permalink: false
      excerpt: false
      categories: false
      tags: true

很惭愧，做了一些微小的工作