Perl区分文件换行符类型

背景

在Windows上使用Perl判断文件时何种换行符时,处理CR LF类型的换行符时,也识别成了LF。

思路

  1. Windows上的换行是 CRLF , Unix上是 LF , Mac CR
  2. 在Windows平台使用Perl读取文件创建文件句柄时,未对file handler设置binmode,了解到binmode模型作用是采用非二进制读取模式时,双字节换行符CR LF在读取时转换为LF,写入时将LF转换为CR LF。这对于使用双字节分隔文本文件行的操作系统(MS-DOS)至关重要,但对使用单个字符的操作系统(Unix,Mac OS,QNX)没有影响。
  3. chomp是去除每行行末的记录分隔符(record separator),这个分隔符的值是可以通过 perl内置变量 / (input record separators )来设置,默认情况下Windows和Linux上 / 的值都是 LF

处理

所以Perl脚本在读取DOS文本时,行末换行符CR LF 被自动转行成 LF ,此后去判断单行记录时,返回结果均是LF,未能正确识别出文件的换行符类型,基于此原因。修改代码如下(测试)

perl 复制代码
#!/usr/bin/perl

use strict;

my $path = '/export/script/perl_scripts';

my @files = qw /a.txt b.txt/;

my $newLine = '';

for my $f (@files)
{
    my $fullPath = sprintf "%s/%s",$path,$f;

    # 获取首行
    open(INFILE,$fullPath) or die "dont open this file ${fullPath}";

    # 此函数设置在操作系统上以二进制形式读取和写入FILEHANDLE的格式。
    # 采用非二进制读取模式时,双字节换行符CR LF在读取时转换为LF,写入时将LF转换为CR LF。
    # 这对于使用双字节分隔文本文件行的操作系统(MS-DOS)至关重要,但对使用单个字符的操作系统(Unix,Mac OS,QNX)没有影响。
    binmode(INFILE); # 设置二进制读取模式,保留文件中的原始换行符
    my $line = <INFILE>;
    close INFILE;

    if($line =~ '\r\n')
    {
        $newLine = 'CRLF';
        print "windows newline\n";
    }elsif($line =~ '\n')
    {
        $newLine = 'LF';
        print "linux newline\n";
    }elsif($line =~ '\r')
    {
        $newLine = 'CR';
        print "mac newline\n";
    }else
    {
        print "is a single line without newline\n";
    }
    print "${fullPath} newline is ${newLine}\n";

    # 采用如下去除换行符方式,替换chomp方法,可在任意平台处理任意换行符类型的文件
    $line =~ s/[\r\n]+\Z//g;

}
## 运行结果如下
# linux newline
# /export/script/perl_scripts/a.txt newline is LF
# windows newline
# /export/script/perl_scripts/b.txt newline is CRLF

思路源自:https://blog.csdn.net/fibonaccian/article/details/42168725

相关推荐
开开心心_Every1 小时前
快速隐藏程序工具自定义快捷键一键切换
java·开发语言·前端·spring·智能手机·word·intellij-idea
chenbingjie_c1 小时前
C++ 多态完全指南:从虚函数重写到虚函数表原理
开发语言·c++
吴卫斌1 小时前
定投ETF实战指南(四):行业/主题ETF——定投的“进攻端“
开发语言·python·股票·量化
超级架构师2 小时前
PRAXO-CORE 2.5.0:用 conformance 和显式边界构建 Go Agent 框架
开发语言·人工智能·后端·golang·ai编程·智能体框架·praxo-core
叼烟扛炮3 小时前
Linux 学习笔记(四十三):网络编程进阶——自定义协议解决 TCP 粘包与守护进程
linux·开发语言·网络·笔记·tcp/ip
LMT流氓兔4 小时前
第五单元——第十六课:给书店助手加上网页界面
java·开发语言·jvm·人工智能·oracle·langchain·1024程序员节
专注仿真4 小时前
梯度提升类(XFBoost)算法详解与代码实例
开发语言·人工智能·python·算法·大模型训练·控制算法
外收内放4 小时前
Python基础语法练习题(75)
开发语言·python·学习
starzy19905 小时前
Scala循环与判断:一切皆表达式的控制流
开发语言·人工智能·scala
starzy19905 小时前
Scala类和对象:从构造器到样例类的完整指南
开发语言·后端·scala