Puppeteer
Puppeteer实践-节省时间的利器
前言 看网上大多提到Puppeteer都是用它来做自动化测试，爬虫等等，而我在看到这个工具的第一想法是，它能否帮我提高开发过程中使用工具的效率。 在我的工作环境中，线上服务查慢接口，看日志等等需要首先登录jumpserver，再一步步寻址找到我需要的工具，点开它，选择自己需要的服务查看日志，查看耗时 ......
puppeteer的简单使用
引言 对于编写应用程序，尤其是要部署上线投入生产使用的应用，QA是其中重要的一环，在过去的工作经历中，我参与的项目开发，大多是由测试同学主要来把控质量的，我很少编写前端方面的测试代码，对于测试工具的使用，也基本停留在一个小玩具的样子，所以接触的也少，回忆上一次写单元测试，还是在一个vue3的课程中使 ......
[FAQ] puppeteer 清空输入框的值 并 重新输入
一种方式是，清空输入框可以通过如下注入代码实现，但是可能存在 和页面本身的操作 存在优先级问题。 await page.evaluate( () => document.getElementById("inputID").value = "") 推荐另一种方式，用 puppeteer 对页面元素执行 ......
Puppeteer 入门与进阶: 快速上手
Puppeteer API: https://puppeteer.bootcss.com/api 1. 安装： $ yarn add puppeterr 2. 网页截图实例： const puppeteer = require('puppeteer'); (async () => { const b ......
[GPT] 同为 nodejs 库的 Puppeteer 和 cheerio 的区别是什么
Puppeteer 和 cheerio 是两个完全不同的库，用途和功能也截然不同。 Puppeteer 是一个 Node.js 库，它使用 Chrome 或 Chromium 浏览器作为渲染引擎，通过使用 Chrome 的 Headless 模式进行网页的解析和操作。 它提供了一组 API，可以让用 ......
Puppeteer入门教程
Puppeteer 简介 Puppeteer 是一个node库，他提供了很多操纵Chrome的API, 让我们可以通过 javascript 模拟人工操作浏览器。既然是浏览器，那么我们在浏览器上做的事情, 都可以通过 Puppeteer切换成自动操作；具体 Puppeteer 可以做 生成网页截图或 ......
使用Electron+Puppeteer实现万媒易发，一键发布原创文章到各大主流博客平台！
使用Electron+Puppeteer实现万媒易发，一键发布原创文章到各大主流博客平台 引言 作为一名热衷于原创文章的程序员，我们常常面临的问题是如何高效地将精彩的内容分享到各大主流博客平台，以扩大影响力。为了解决这一难题，我开发了一款名为“万媒易发”的多平台自动发布文章工具，通过Electron ......
部署 puppeteer 应用
使用 docker-compose 快速部署应用 下面是 docker-compose.yml 文件 version: '3' services: renderer: image: ghcr.io/zenato/puppeteer-renderer:latest ports: - 3000:3000 ......
如何在Puppeteer中设置User-Agent来绕过京东的反爬虫机制？
概述 京东作为中国最大的电商平台，为了保护其网站数据的安全性，采取了一系列的反爬虫机制。然而，作为开发者，我们可能需要使用爬虫工具来获取京东的数据。 正文 Puppeteer 是一个由 Google 开发的 Node.js 库，它提供了高级的 API，用于控制无头浏览器（Headless Brows ......
How to fix waitForFunction TimeoutError of puppeteer All In One
How to fix waitForFunction TimeoutError of puppeteer All In One
page.waitForFunction 超时错误
TimeoutError: Waiting failed: 30000ms exceeded
......
[GPT] 使用 nodejs的 puppeteer 库使用完关闭后，linux上面有很多 chrome 进程
在使用 Node.js 的 Puppeteer 库时，如果你在使用完后关闭了浏览器，但在 Linux 上仍然存在很多 Chrome 进程，可能是因为没有正确地关闭所有相关的进程。 可以尝试以下方法来确保所有的 Chrome 进程都被正确关闭： 1. 确保调用了 browser.close() 方法来 ......
利于puppeteer获取网络资源的直链
## 背景 比如我想使用curl 或者 页面按钮点击直接下载个网盘资源，那就会出现问题。 因为目前各大网盘给的分享链接都是一个页面，而且大部分还都做了防盗机制，你无法简单的获取真实下载连接！ 但是我们可以利用puppeteer来做到！ ## 蓝奏云 lanzou-helper.js ```js im ......
centos8安装puppeteer
## 背景 我计划使用puppeteer爬点html数据，结果windows11上没问题 但在我的服务器centos8上确报错。 ```shell [root@104 auto-task]# npm run start > auto-task@1.0.0 start > node src/main. ......
[FAQ] 对于 Puppeteer 和 Chromium 在 Linux 上的安装，需要安装哪些依赖库
比如 puppeteer/chrome/linux-114.0.5735.133/chrome-linux64/chrome 到底要装哪些依赖。 一般根据报错提示，安装缺少的即可，以下是一般需要的： $ sudo apt-get install libatk1.0-0 libatk-bridge2. ......
Mac M1（arm 系列芯片）如何安装 Chromium | Puppeteer
最近写个脚本用到 puppeteer，然后安装 Chromium 出现一点问题，这里记录一下解决方案。 Puppeteer 自动安装失败 在 Puppeteer 安装时会自动安装 Chromium，然而却总是报错 502 导致下载失败，直接下载可以下载，命令行 wget 也可以，猜测是因为 Pupp ......
Puppeteer+RabbitMQ：Node.js 批量加工pdf服务架构设计与落地
全文约8500字，阅读时长约10分钟。 智慧作业最近上线「个性化手册」（简称个册）功能，一份完整的个性化手册分为三部分： •学情分析：根据学生阶段性的学习和考试情况进行学情分析、归纳、总结，汇总学情数据；•精准推荐：推荐算法基于学情数据结合知识图谱进行精准练习题推荐；•错题回顾：错题的阶段性回顾复习 ......
Yunzai-Bot运行报错：[ERRO] puppeteer Chromium 启动失败 解决方法
前提：一定是本机安装了chrome 各路方法汇总： 重新下载puppeteer依赖(与现版本似乎不匹配)解决yunzai云崽报错puppeteer Chromium 启动失败 | 花落尽终归尘 (clt6.cn) ln -vsf libre2.so /lib/libre2.so.9小白求教，pupp ......
Puppeteer介绍
Puppeteer是什么 Puppeteer是一个Node库，它提供了一个高级API来通过DevTools协议控制Chromium或Chrome。 可以使用Puppeteer来自动化完成浏览器的操作，官方给出的一些使用场景如下： 生成页面PDF 抓取 SPA（单页应用）并生成预渲染内容（即“SSR” ......