在windows下的屏蔽坏道的方法
机械硬盘坏道的文件系统级别的屏蔽方法_硬盘如何屏蔽坏扇区-CSDN博客
https://blog.csdn.net/cyuyan112233/article/details/139408503?spm=1001.2014.3001.5502 【免费】磁盘坏道屏蔽工具磁盘坏道屏蔽工具_机械硬盘屏蔽坏扇区资源-CSDN文库 https://download.csdn.net/download/cyuyan112233/89391425 写文章-CSDN创作中心 机械硬盘坏道的文件系统级别的屏蔽方法_硬盘如何屏蔽坏扇区-CSDN博客 https://blog.csdn.net/cyuyan112233/article/details/139408503
9:02 2024/7/2
从2024年5月25拿到一个坏道盘到现在240702已经一个多月了。
把这一个多月不停地连续的探索屏蔽方法和实验算是成功的结果,打算整理成资料封存。待有缘人拿去直接使用。
总结如下:
只要磁头没断!能识别盘,能分区,那就还能继续用。哈哈哈~~~ 拼夕的9一个的320g的坏道盘。目前速度稳定,屏蔽之后无异常。7个坏道盘,目前就坏了一个,还是我使劲捏硬盘上下面,插入电源,我就发现,上面的铁壳,好像是和磁盘吱!的一声,,,剐蹭到了,这铁壳貌似有点柔。再次插入就不识别了,这个纯属人工误操作意外,
总结一下,那就是手要拿磁盘两边!!!再次声明是两边两侧,不要上下捏着插电!!!不然高速的磁盘就容易触碰到上面的铁壳。经个人测试半个多月连续工作,每日写入读出测试文件到另一个分区然后继续。目前依旧稳定中,事实证明,还是比较靠谱的。坏盘最怕的就是断电,万一不识盘那就真的凉了,所以,尽可能的运行后就运行不要断电了。这样经过屏蔽坏道的硬盘,可以用很久。
在linux下屏蔽坏块的方法
这里的坏块取决于linux的磁盘格式的块大小
查看方法如下
sudo dumpe2fs /dev/sda > /a/2/dd.txt
打开文件找到下面的
Block size: 4096
我这里是4096,意思就是块大小4096也就是4K
有坏道的磁盘分区方法
可以用pe下的dg工具格式化成ext4 记得块大小4096,不管默认不默认都手动靠谱
linux分区使用fdisk
个人建议只要能分区然后格式化成功就可以
如果发现格式化不成功,那么方法如下
第一种分区方法,直接把整个磁盘格式化
linux下格式化
sudo mkfs.ext4 -b 4096 /dev/sdb
如果格式化失败,那就重新分区
第二种分区方法
使用fdisk
建立一个主分区,然后格式化
如果失败、
第三种分区方法
建立一个扩展分区,然后创建一个逻辑分区
sudo mkfs.ext4 -b 4096 /dev/sdb5
如果失败,使用winpe下的dg试试,总之,分区格式化成功就ok
关于ext4日志文件
这个我前后从偶然发现日志文件可以外部存储后,我就突然发现,坏道盘,是可以安全的使用,前提就是两个条件
日志文件完整安全性,磁盘没彻底挂掉
于是就有了前几天的实验,折腾和查找资料的过程很艰辛,这个启示是关键字找到的
EXT4的data=journal模式能否避免用户数据丢失? - 知乎
https://www.zhihu.com/question/434318992
sudo dumpe2fs /dev/sdb
sudo mke2fs -O journal_dev /dev/sdc
sudo mkfs.ext4 -J device=/dev/sdc /dev/sdb5
看完了上面的这个参考资料,我就突然很兴奋,因为我们分区格式化,日志都是写在坏盘上的
万一超级快不完整写到坏块上了,那就真灰飞烟灭了
如果把日志写在靠谱的文件系统上,日志文件不占太大
这样就保证了日志安全,具体操作如下
这里测试方法两种,
第一种,使用磁盘设备当日志文件存储
第二种,使用文件设备当日志文件存储
测试一
1g
sudo mke2fs -b 4096 -O journal_dev /dev/sdb
sudo mkfs.ext4 -b 4096 -J device=/dev/sdb /dev/sdc
sudo dumpe2fs /dev/sdc > /a/2/dd.txt
lsblk -f
sdb jbd 1.0 6e737ca1-0e71-47e0-b608-df3e8c3b7a24
sdc ext4 1.0 6afb52ba-ce22-4d4f-9d00-7ebe900a1fd0
挂载方法
mount /dev/sdc /a/3
卸载方法
umount /dev/sdc
或者
umount /a/3
使用文件当日志文件存储
dd if=/dev/zero of=/a/2/200M_01.img bs=1024 count=0 seek=200000
# 第一步:找出空闲的回环设备编号
losetup -f -l
挂载文件到设备
sudo losetup /dev/loop0 /a/2/200M_01.img
删除设备
sudo losetup -d /dev/loop0
继续前面把文件当日志文件
mke2fs -b 4096 -O journal_dev /dev/loop0
创建文件系统
mkfs.ext4 -b 4096 -J device=/dev/loop0 /dev/sda5
查看系统日志
sudo dumpe2fs /dev/sda5 > /a/2/dd.txt
cat /a/2/dd.txt |less
测试挂载
mount /dev/sda /a/3
tune2fs -O journal_dev -J device=/dev/loop0 /dev/sda5
trest!!!okok
tune2fs -j -J device=/dev/loop0 /dev/sda5
或添加给已存在的文件系统: tune2fs -O journal_dev -J device=/dev/ext4-journal-device /dev/ext4-device
okok
设置uuid
tune2fs -U 2fc3a081-4669-4d95-affa-d7f191ba77c5 /dev/sda5
自动挂载
vi /etc/rc.local
添加
/a/r2.sh
vi r2.sh
#!/bin/bash
var=$(losetup -f)
losetup $var /a/2/200M_01.img
tune2fs -J device=$var /dev/sda5
mount /dev/sda5 /a/sda5
var=$(losetup -f)
losetup $var /a/2/log_sda6_100M.img
tune2fs -J device=$var /dev/sda6
mount /dev/sda6 /a/sda6
8,将Ext3文件系统的日志功能独立:
1、创建200M的/dev/sdb1 格式化为ext3
2、dumpe2fs /dev/sdb1查看文件系统功能中包含的has_journal
3、Tune2fs –O ^has_journal /dev/sdb1 去掉默认原有的日志功能
4、再分一个200M的分区./dev/sdb2. 日志卷的block必须等于 /dev/sdb1
Mke2fs –O journal_dev –b 1024 /dev/sdb2
5、将/dev/sdb2作为/dev/sdb1的日志卷.
Tune2fs –j –J device=/dev/sdb2 /dev/sdb1
!!!!!!!!!!!!!!
14:47 2024/7/2
50g 200m 日志占比
在这一步,mkfs.ext4 -b 4096 -J device=/dev/loop0 /dev/sda5
Ubuntu可以
root@ccyy:~# mkfs.ext4 -V
mke2fs 1.47.0 (5-Feb-2023)
Using EXT2FS Library version 1.47.0
root@ccyy:~#
树莓派不可以
root@raspberrypi:/a/2# mkfs.ext4 -V
mke2fs 1.46.2 (28-Feb-2021)
Using EXT2FS Library version 1.46.2
root@raspberrypi:/a/2#
打算更新一下这工具试试
tytso/e2fsprogs: Ext2/3/4 file system utilities
https://github.com/tytso/e2fsprogs
看了一下版本1.47.1
【免费】e2fsprogs-1-47-1.tar.gz资源-CSDN文库 https://download.csdn.net/download/cyuyan112233/89507370?spm=1001.2014.3001.5503
git clone https://github.com/tytso/e2fsprogs.git
备份一下源码
tar -czvf e2fsprogs_1_47_1.tar.gz ./e2fsprogs
cd e2fsprogs
mkdir build
cd build
../configure
make
make install
root@raspberrypi:/a/2/e2fsprogs_1_47_1/e2fsprogs/build# mkfs.ext4 -V
mke2fs 1.47.1 (20-May-2024)
Using EXT2FS Library version 1.47.1
顺便找了一下别人的资料
e2fsprogs编译
export PATH=/usr/local/arm/gcc-linaro-6.3.1-2017.02-x86_64_aarch64-linux-gnu/bin:$PATH
cd e2fsprogs
mkdir build
cd build
../configure –host=aarch64-linux-gnu cc=arm-linux-gcc –prefix=/home/git/Tools/e2fsprogs/build
make
make install
————————————————
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
原文链接:https://blog.csdn.net/lra2003/article/details/82685192
mkfs.ext4 -b 4096 -J device=/dev/loop0 /dev/sda5
根据sudo dumpe2fs /dev/sda > /a/2/dd.txt
可以看到Journal UUID 这个就是ext4文件系统的日志文件对应的设备uuid
Required extra isize: 32
Desired extra isize: 32
Journal UUID: fd54eb07-a4f9-4022-adca-2a694318aa5b
Journal device: 0x0700
Default directory hash: half_md4
Directory Hash Seed: 0d330010-9c63-4f44-9cfd-d510cd8a6ff6
Checksum type: crc32c
Checksum: 0xbb5eee7c
这里的参考资料
EXT4外部日志设备:
1,当日志设备丢失时:
移除不可用的日志:tune2fs -O ^has_journal /dev/ext4-device
检查修复文件系统: fsck/repair
(注: tune2fs -O has_journal /dev/ext4-device 会创建内部日志)
2,创建ext4外部日志
格式化日志设备:mke2fs -b 4096 -O journal_dev /dev/ext4-journal-device
创建一个新的文件系统: mkfs.ext4 -J device=/dev/ext4-journal-device /dev/ext4-device
或添加给已存在的文件系统: tune2fs -O journal_dev -J device=/dev/ext4-journal-device /dev/ext4-device
这样就创建了块大小4096的ext4文件系统
参考资料如下
21:09 2024/6/26
linux查看文件系统格式
第一种方法
lsblk -f
16:06 2024/6/26
第二种方法
sudo file -sL /dev/sda1
#输出
/dev/sda1: Linux rev 1.0 ext4 filesystem data ...
挂载ext4
Linux File Systems for Windows | Paragon Software
https://www.paragon-software.com/home/linuxfs-windows/
windows开启测试模式
bcdedit /set testsigning on
大概流程
一,坏块查找
二,屏蔽坏块
下面就是坏块查找并记录到文件中
参考资料
21:39 2024/6/25
e2fsck(8) - Linux 手册页 https://man7.org/linux/man-pages/man8/e2fsck.8.html
badblocks(8) - Linux manual page https://man7.org/linux/man-pages/man8/badblocks.8.html
21:15 2024/6/25
e2fsck(8) - Linux manual page https://man7.org/linux/man-pages/man8/e2fsck.8.html
!!!use 正在使用的!!!
这里要设置块大小和磁盘相同
badblocks -b 4096 -s -c 1 -v -o /a/2/bads5.txt /dev/sda 78142805 10072565
查找坏块从17953845 到 17954070
badblocks -b 4096 -e 10 -s -c 1 -v -o /a/2/bads6.txt /dev/sda 17954070 17953845
检测完重新检测跳过之前的记录
badblocks -i /a/2/bads5.txt -b 4096 -s -c 2 -v -o /a/2/bads6.txt /dev/sda5
可以查看磁盘具体block总数和大小
sudo dumpe2fs /dev/sda5 > /a/2/dd.txt
e2fsck -l /a/2/bads4.txt /dev/sda5 -y
根据上面5和6生成的
e2fsck -l /home/administrator/2.txt /dev/sda5 -y
下面的这个命令有知道具体用途追加留言,谢谢!
fsck -l /a/2/bads2.txt /dev/sda1
可以使用 dd 命令使用 conv=noerror, sync 参数先备份目标区域的数据,在修复后用 dd 写回
你其实不应该用badblock命令的,你直接用e2fsck -c就行了,这相当于先用badblock执行一次只读扫描,然后自动把坏块写进inode,或者你用e2fsck -cc,这等于先执行一次badblock -n(非破坏读写扫描)然后自动把坏块写进inode。
上面的方法适用于,坏道不是非常多的,如果检测超过半天的,那就直接下面的方法检测坏块
之前检测坏,不对,应该是快报废的硬盘检测太慢用下面的
在检测前使用screen这个工具,可以关闭ssh后,继续在screen运行
使用方法
创建 screen -S 会话名称
例如 screen -S mmmmmmmmmm
然后就自动进入了,如果销毁,输入 exit 回车 就出来了,之前的就没了
如果查看 screen -ls
如果进入 screen -r 会话名称
快捷的方法应该是 输入 screen -r 按两次以上的tab按键会自动补全会话
把当前的会话放后台使用按键组合键 screen+a 然后按d
我用的下面脚本如果遇到错误就跳过100M为单位的扫描那是非常速度的。
如果没坏道,速度不是特别快,毕竟是一个个的扫描错误不遗漏,这个跳过100M使用到的情景是,例如坏道临近的很多,那就没必要挨个扫描了,扫描到错误,直接跳100M的继续扫描遇到坏的就跳过100M的单位
屏蔽也是这个原理,大概意思就是 屏蔽坏道为中心,前面100M后面100M都给屏蔽掉,因为遇到了坏块就跳过了单位100M,所以这个跳过节省的时间就是密集型的坏道磁盘,100M是25000个块一个块是4K=4096字节
如果一个块一个块的扫描如果都是坏的那就是100M要扫描25000次,一个大概扫描几秒,太可怕了想想
如果错误跳过25000 继续挨个扫描 遇到再次跳跃25000,还是比较快的
如果磁盘基本没什么坏道整体扫描时间比较久。此屏蔽方法需要配合二次处理生成日志的软件使用,补充完整的屏蔽文件列表
例如坏块扫描到的是125715 1500716 145351
那么,软件读入这三个数值,处理4k对齐方式,然后根据这两个数值处理屏蔽 之前处理windows级别的是扇区一个扇区512字节,4k对齐也就是4096/512=8个扇区,现在处理linux的块为单位,目前我格式化使用的是4096为block的单位,一个块4096, 如果不加-b 4096 默认的就是1024,所以,这里一定要注意的是
block全局要统一。不然,格式化的默认1024,检测坏块单位4096,这很明显,检测的跳过比1024大。如果按这个屏蔽好的也被屏蔽了。格式化不成功,的情况下,检查一下,日志文件的块大小,检查一下格式化文件系统的块大小,这里我就卡了2天,因为日志文件格式化是默认的,1024,ext4格式化使用的是指定的4096,结果死活格式化不成功,我还以为是mkfs.ext4文件版本的问题,升级了这工具集也没解决,后来发现是日志文件的块大小是1024是错误的,应该格式化日志文件加上-b 4096 格式化ext4分区加上 -b 4096这样两个相同一致,就不会出错了
第一个和第二个数值属于连接在一起的,那么一个循环开始从第一个前面的N个块开始到第二个结束的N个屏蔽,有效区域大小预设为4个N,考虑到对齐是 1的前后 2的前后 所以占了1的两个,2的两个,总共为4个4k对齐,如果想更安全,把这个块对齐设置成跳过的块一样的大小,也就是100M,有效区域就是大于N*4=400M才算有效区域,例如总共650m,那么经过块取整屏蔽650-400=250m可用空间。中文不行,凑合看,看不懂的看源码可以。哈哈。。。
具体的软件源码在下面链接,不明白的可以留言
目前这样的方法非常速度。
建立一个 test.py
python
#!/usr/bin/env /bin/python3.9
#-*- coding:utf-8 -*-
import os
import time
import subprocess
#240703 v03 修复遇到坏块,变量未赋值bug
#240702 v02 修复检测结束后为空,结束跳出
#查看块总数
#root@raspberrypi:/a/2# sudo dumpe2fs /dev/sda5 |grep "Block count"
#dumpe2fs 1.47.1 (20-May-2024)
#Block count: 13107200
#root@raspberrypi:/a/2#
#badblocks -b 4096 -s -e 1 -c 1 -v -o /a/2/bads6.txt /dev/sda5
#sudo dumpe2fs /dev/sda5 > /a/2/dd.txt
#cat dd.txt |less
#Checking blocks 0 to 78142805
#a=17950434
#a=18736084
#1912902
a=1910000
a_end=13107200
#a_end=10073565
#遇到坏块跳过的块
#100M
a_step_num=25000
tmp_bad_txt="/a/2/tmp.txt"
bad_txt="/a/2/bad.txt"
device="/dev/sda6"
#txt="head -n 1 "+tmp_bad_txt+""
#var=subprocess.getoutput(txt)
#print(var)
#time.sleep( 500 )
#读取第一行文本,追加到另一个文本文件中
#txt="head -n 1 "+tmp_bad_txt
#var=subprocess.getoutput(txt)
#print(var)
#txt="echo "+var+" >> "+bad_txt
#var=subprocess.getoutput(txt)
#time.sleep( 500 )
while a < a_end:
#检测到坏块1个跳出
txt="badblocks -b 4096 -s -e 1 -c 1 -v -o "+tmp_bad_txt+" "+device+" "+ str(a_end)+" "+str(a)
print(txt)
os.system(txt)
#time.sleep( 50 )
#读取坏块文件追加到坏块日志
#读取第一行文本,追加到另一个文本文件中
txt="head -n 1 "+tmp_bad_txt
var=subprocess.getoutput(txt)
a=int(var)
print(var)
if(var==""):
a=a_end
break
txt="echo "+var+" >> "+bad_txt
var=subprocess.getoutput(txt)
#time.sleep( 500 )
print(a)
#time.sleep( 50 )
a=a+1
a+=a_step_num
用上面的脚本跑完,得到一个/a/2/bad.txt
这里得到的是一个粗略的坏块列表
例如我们遇到坏块 1坏掉了,跳过了2500 然后从25002开始
但是1-25001坏块未知,所以写个小软件,原理如下
读入bad.txt
屏蔽坏块前后N个块的坏块完整的记录到日志
badblocks坏块日志工具源码
https://download.csdn.net/download/cyuyan112233/89484946
这个是易语言写的日志处理,如果有厉害点的看看给改成Python的发我一份,感谢~!
屏蔽坏块
e2fsck -l /a/2/bads4.txt /dev/sda5 -y
昨天经过屏蔽都是50G的空间,loop0是 sda5的日志文件 sda5 可使用空间46.6G
loop1是 sda6的日志文件 sda6 可使用空间14.9G
root@raspberrypi:~# lsblk -f
NAME FSTYPE FSVER LABEL UUID FSAVAIL FSUSE% MOUNTPOINT
loop0 jbd 1.0 145ab1f2-03b1-420b-9860-3ec981f69c38
loop1 jbd 1.0 85bdb8dd-b291-4aeb-8e4a-e904fe268161
sda
├─sda1
├─sda5 ext4 1.0 282d7a5e-22f1-41f0-baa4-3769eb0b9de9 46.6G 0% /a/sda5
└─sda6 ext4 1.0 9546e28e-3ed9-4847-a2fc-7a865ded1704 14.9G 65% /a/sda6
mmcblk0
├─mmcblk0p1 vfat FAT32 bootfs 1697-900D 204.6M 20% /boot
└─mmcblk0p2 ext4 1.0 rootfs 6848c53e-95c6-4a65-bcf9-2e5ad58c3893 874.9M 83% /
树莓派折腾的如下
mkfs.ntfs -f -Q /dev/sda1
给docker更换地方
mount /dev/sda1 /a/3
dd if=/dev/zero of=/a/3/20g bs=1024k count=0 seek=20000
docker文件存储20g
cp -R /var/lib/docker /var/lib/docker_bak
mount /a/3/20g /var/lib/docker
12:41 2024/6/21
sudo passwd root #执行后会要求输入两次设置root的新密码
sudo passwd --unlock root #解锁root账户
su root #输入密码后切换到root账号
sudo sed -i "s/^#PermitRootLogin.*/PermitRootLogin yes/g" /etc/ssh/sshd_config #开启root账户的SSH权限
sudo systemctl restart ssh #重启SSH服务,以后就可以用root账户直接SSH登入了。
10:21 2024/6/21
https://gitee.com/wanfeng789/docker-hub
sudo mkdir -p /etc/docker
sudo tee /etc/docker/daemon.json <<EOF
{
"registry-mirrors": ["https://do.nark.eu.org"]
}
EOF
sudo systemctl daemon-reload
sudo systemctl restart docker
8:45 2024/6/21
制作一个docker用的镜像,用于安装lnmp环境
https://cdimage.ubuntu.com/ubuntu-core/22/stable/current/ubuntu-core-22-armhf+raspi.img.xz
sudo mount -o loop /path/to/your/image.img /mnt/my_mount_point
11:05 2024/6/11
树莓派启动后安装向日葵客户端
reated symlink /etc/systemd/system/multi-user.target.wants/phtunnel.service → /lib/systemd/system/phtunnel.service.
Installation, please later...
Successful installation of Phddns Service.
+--------------------------------------------------+
| Oray Phtunnel Raspberry 5.1.0 |
+--------------------------------------------------+
| SN: oray009d64ee39e2 Default password: admin |
+--------------------------------------------------+
| Remote Management Address http://b.oray.com |
+--------------------------------------------------+
/var/lib/dpkg/info/phddns.postinst: line 13: [: too many arguments###########################################.............................................................]
Created symlink /etc/systemd/system/multi-user.target.wants/phtunnel.service → /lib/systemd/system/phtunnel.service.
Installation, please later...
Successful installation of Phddns Service.
+--------------------------------------------------+
| Oray Phtunnel Raspberry 5.1.0 |
+--------------------------------------------------+
| SN: oray009d64ee39e2 Default password: admin |
+--------------------------------------------------+
| Remote Management Address http://b.oray.com |
+--------------------------------------------------+
W: Repository is broken: phddns:armhf (= 5.1.0) has no Size information
ps930882at6.vicp.fun:23312
①树莓派3.0.3版本命令格式为:systemctl start phddns
其中start为命令操作,stop(停止)|restart(重启) |status(状态)|version(版本)|reset(重置)同理
树莓派3.0.0-3.0.2版本操作命令相同,具体如下:
卸载:dpkg -r phddns
每小时自动重启花生壳
15:39 2024/6/12
crontab -e
0 */1 * * * /a/r1.sh
定时任务内的内容
#!/bin/bash
sudo /bin/phddns restart
sudo /bin/phtunnel restart &
共享放在sda1的启动挂载
administrator@raspberrypi:~ $ sudo blkid /dev/sda1
/dev/sda1: LABEL="320" BLOCK_SIZE="512" UUID="6818E4E518E4B36C" TYPE="ntfs" PARTUUID="24052501-01"
sudo vi /etc/fstab
proc /proc proc defaults 0 0
PARTUUID=ab4e1900-01 /boot vfat defaults 0 2
PARTUUID=ab4e1900-02 / ext4 defaults,noatime 0 1
# a swapfile is not a swap partition, no line here
# use dphys-swapfile swap[on|off] for that
PARTUUID=24052501-01 /a/3 ntfs defaults 0 0
sudo vi /etc/samba/smb.conf
[a_3]
comment = a_3
path = /a/3
guest ok = no
browseable = yes
create mask = 0600
directory mask = 0700
read only = no
sudo smbpasswd -a root
这样局域网windows使用
\\raspberrypi
或者
\\192.168.199.46
下面安装树莓派唤醒功能,这样回家可以远程开局域网任何一台可以网卡唤醒的机器
用于唤醒其他物理电脑,里面可以安装todesk或者向日葵
3楼办公电脑
sudo apt install wakeonlan
wakeonlan <待唤醒计算机的MAC地址>00-E0-7B-68-11-62
192.168.199.54