puppeteer

Dsw_FE1 个月前
爬虫·puppeteer
应用node Puppeteer爬取数据Puppeteer 是一个由 Google 开发的 Node 库,它提供了一个高级 API 来通过 DevTools 协议控制 Chrome 或 Chromium 浏览器。这使得 Puppeteer 在多种场景下都非常有用,以下是一些主要的应用场景:
struggle_coder1 个月前
前端·chrome·node·puppeteer
【Could not find Chrome This can occur if either】Error: Could not find Chrome (ver. 125.0.6422.78). This can occur if either
阿莫、2 个月前
node.js·express·puppeteer
Puppeteer的基本使用及多目标同时访问在项目文件夹根目录中创建 .puppeteerrc.cjs 文件,文件内容如下:注:安装 Puppeteer 时,它会自动下载最新版本的用于测试的 Chrome,该方法适用于不希望将安装的浏览器(Chrome)安装在默认路径下。浏览器默认下载到 $HOME/.cache/puppeteer 文件夹(从 Puppeteer v19.0.0 开始)。根据自身实际可跳过该步骤。
JuneRain3 个月前
javascript·puppeteer
从一个接口请求全过程分析网页性能指标最近工作中遇到一个需求:输入任意系统内的某个页面地址,罗列出尽可能多的页面性能指标数据,并且想办法收集起来。
车家大少爷3 个月前
chrome·centos·node·puppeteer
centos node puppeteer chrome报错问题原因:缺少谷歌依赖包,安装以下即可请开始你的表演
垂慕容3 个月前
puppeteer
puppeteer 自动化检测常用 API (第三弹)本文是常用 puppeteer 技巧的最后一篇文章。希望大家在读完之后有所收获,文章中的代码相当于是一个个的单元,因此如果大家能够收藏一下供日后使用的话,笔者会非常感谢!
垂慕容3 个月前
puppeteer
puppeteer 自动化检测常用 API (第一弹)介绍几个自动化测试前端页面的时候使用到的,常用的 puppeteer 技巧,了解这些技巧,定能让你的自动化测试过程事半功倍。如果在此基础之上能够融会贯通,左右逢源,则前端测试之旅岂不直接起飞,入无人之境?
垂慕容3 个月前
puppeteer
puppeteer 自动化检测常用 API (第二弹)咱们书接上文,这篇文章继续列出常用的十个 puppeteer 中常用的方法,希望各位大佬提出宝贵的意见。
程序员也要学好英语3 个月前
puppeteer
puppeteer疑难杂症解决记录最近在工作中遇到了两个比较棘手的问题,花费了较长时间解决。因此做下记录,免得日后遇到相同问题又浪费时间。
车家大少爷3 个月前
前端·node·puppeteer
puppeteer使用示例云顶之弈官网自己从0到1开发的,微信小程序【云顶宝藏】求求点个5星好评吧!本地环境 window系统 node版本:v18.16.1
茶无味的一天3 个月前
开源·测试·puppeteer
「迅排设计」服务端生成图片压测报告我们都知道 puppeteer 是比较占用 cpu 和内存的,迅排设计采用从服务端截图的方式来生成图片存在一个问题:启动消耗会比较大,因此有些朋友会担心服务器是否能够承受住压力,这篇文章就用实验和数据来解答这个疑问。
闹闹前端4 个月前
前端·node.js·puppeteer
CentOS8.5部署nextjs和使用puppeteer总结根据提示一路回车即可找不到 Chrome (ver. 119.0.6045.105)。解决方案:在项目根目录下配置 .puppeteerrc.cjs 文件
杨老头儿4 个月前
前端·javascript·puppeteer
都2024年了?你还不会使用Puppeteer?众所周知在开发的过程中,数据一直是推动整个业务链条的重要一环,通过爬虫进行数据的爬取和更新也是日常的操作,目前支持爬虫的语言很多:Python、Java、Ruby 还有Nodejs ,也就是今天主角Puppeteer, 它是由 Google Chrome 官方团队维护以Node.js 为基础的开源工具,主要用于控制和自动化谷歌浏览器(Google Chrome)或其他兼容的浏览器操作。
sxuan5 个月前
前端·性能优化·puppeteer
如何自动化获取接口请求时间的详细数据前期调研过发现puppteer无法获取content_download数据。这里采用playwright 进行操控浏览器。
枣把儿5 个月前
前端·nestjs·puppeteer
使用puppeteer爬取掘金个人信息上一篇文章《使用puppeteer爬取掘金热榜》里,用了puppeteer的一些基础语法就完成了数据的爬取,这种可见即可爬的方式对于普通的使用者在感觉上来说,还是非常可靠和实用的。这次依旧是选择爬掘金的个人信息,但绕开了最麻烦的一步。
柠檬阳光5 个月前
前端·浏览器·puppeteer
伪指纹浏览器开发的那些事就是通过开源的chromium浏览器进行二次简单的封装不涉及到重新编译chromium,配合puppeteer进行轻微的指纹修改开发
DylanlZhao6 个月前
爬虫·云计算·puppeteer
你知道 FaaS 还能用 Puppeteer 吗?笔者最近在做个小工具,需要爬一些数据。这种场景显然用 FaaS 是最划算的,于是有了这篇《不用爬虫,用 FaaS 来获取股票期权数据》。
老梁Java6 个月前
puppeteer
Puppeteer实践-节省时间的利器看网上大多提到Puppeteer都是用它来做自动化测试,爬虫等等,而我在看到这个工具的第一想法是,它能否帮我提高开发过程中使用工具的效率。
KnowledgeHasNoLimit7 个月前
前端·puppeteer
gitee pages 自动更新新思路gitee pages 博客痛点是即使发布了最新的代码,依旧无法像 github 博客一样自动更新站点。除了大佬通过 git Actions 可以完成自动更新,就是手动点击 ,我介个 就是把手动点击界面的操作脚本话,在自己的博客项目 package.json 中配置一个命令映射到执行脚本即可。
aring7 个月前
前端·puppeteer
在Puppeteer中Chrome、Chromium历史版本怎么选?最近用Puppeteer搞自动化测试,虽然Puppeteer会自动安装合适Chrome版本,但是需要使用魔法,一般会使用--PUPPETEER_SKIP_DOWNLOAD跳过,转而手动安装部署无头Chrome浏览器,遇到的问题是:Chrome只提供最新稳定的版本下载入口,历史版本非常难找。而Chromium历史版本就相对好找。翻了很多相关Chrome和Chromium的资料,记录分享下。