PDF文档中文本解析

常用的PDF文档解析解决方案有两种。

一是通过文档结构读取解析,另一种是通过ocr技术处理。

这里我们主要说一下文档读取解析的方案,现在常用的解析库有mupdf、pdfium、Aspose等第三方库来处理。其中mupdf、pdfium为开源、免费的。Aspose是一款收费的商业库。

下边我们分别说一说各种库的使用。

mupdf

库编译以及链接至项目中这里就不做介绍了我们主要说一下使用该库做文本提取,代码示例如下:

cpp 复制代码
std::string strPath = "pdf.pdf";
fz_context* ctx = fz_new_context(NULL, NULL, FZ_STORE_UNLIMITED);
fz_register_document_handlers(ctx);
fz_document* doc = fz_open_document(ctx, strPath.c_str());
int nCount = fz_count_pages(ctx, doc);
if (nCount > 0)
{
    //这里我们只演示第一页数据的获取,如果需要获取其他页的则自行处理
    fz_stext_page* text_page = fz_new_stext_page(ctx, fz_bound_page(ctx, page));
    fz_device* device = fz_new_stext_device(ctx, text_page, NULL);
    fz_run_page(ctx, page, device, fz_identity, NULL);
    fz_stext_block* block;
    
    SStringW sstrData;
    for (block = text_page->first_block; block; block = block->next)
    {
        if (block->type == FZ_STEXT_BLOCK_TEXT)
        {
            fz_stext_line* line;
            for (line = block->u.t.first_line; line; line = line->next)
            {
                fz_stext_char* ch;
                for (ch = line->first_char; ch; ch = ch->next)
                {
                    //获取字符
                    SStringW sstrChar;
                    sstrChar.Format(L"%c", ch->c);
                    sstrData += sstrChar;     
                    //获取字体
                    std::string strFont = ch->font->name;
                    //其他参数获取可自行实现,具体能获取那些可参考fz_stext_char结构,比如颜色、大小、位置等数据
                    //TODO:                                                                                                        
                }    
                sstrData += L"\n";        
            }        
        }  
    }
}

pdfium

代码示例如下:

cpp 复制代码
std::string strPath = "pdf.pdf";
FPDF_InitLibrary();
FPDF_DOCUMENT document = FPDF_LoadDocument(strPath.c_str(), nullptr);
if (!document)
{
    //error
}
int nCount = FPDF_GetPageCount(document);
if (nCount > 0)
{
    //这里我们只演示第一页数据的获取,如果需要获取其他页的则自行处理
    FPDF_PAGE page = FPDF_LoadPage(document, 0); // 加载第一页 (索引 0)
    if (page) 
    {
        std::wstring wstrText; 
        FPDF_TEXTPAGE text_page = FPDFText_LoadPage(page);
        if (text_page)
        {
            int char_count = FPDFText_CountChars(text_page);
            for (int i = 0; i < char_count; ++i) {
                unsigned short ch = FPDFText_GetUnicode(text_page, i);
                wchar_t wide_char = static_cast<wchar_t>(ch);
                wstrText += wide_char;
            }
            FPDFText_ClosePage(text_page);     
        }             
    }
}

在实际使用中发现使用mupdf解析文本时每一个block即为一段落的文本。但是在pdfium中获取的文本为整页中的所有文本,如果要划分段落则需要使用者自己根据字符的位置信息自己做归类处理。

Aspose

代码示例如下:

cpp 复制代码
if (!System::IO::File::Exists(u"Example1.pdf"))
{
    //文件不存在
}
auto extractor = MakeObject<Facades::PdfExtractor>();
extractor->BindPdf(u"Example1.pdf");
extractor->ExtractText();

auto memStream = MakeObject<System::IO::MemoryStream>();
extractor->GetText(memStream);

auto unicode = System::Text::Encoding::get_Unicode();
String allText = unicode->GetString(memStream->ToArray());
相关推荐
Lucis__1 小时前
再探类&对象——C++入门进阶
开发语言·c++
程序设计实验室1 小时前
使用命令行删除 Windows 网络映射驱动器
windows
北京不会遇到西雅图2 小时前
【SLAM】【后端优化】不同优化方法对比
c++·机器人
jndingxin2 小时前
c++多线程(6)------ 条件变量
开发语言·c++
程序员莫小特2 小时前
老题新解|大整数加法
数据结构·c++·算法
用户31187945592184 小时前
Windows 电脑安装 XTerminal 1.25.1 x64 版(带安装包下载关键词)
windows
洲覆4 小时前
C++ 模板、泛型与 auto 关键字
开发语言·数据结构·c++
Logintern094 小时前
windows如何设置mongodb的副本集
数据库·windows·mongodb
千里马-horse5 小时前
Async++ 源码分析7--parallel_reduce.h
开发语言·c++·async++·parallel_reduce
江公望5 小时前
Qt QThread使用方法入门浅解
c++·qt