最新 最热

基于Puppeteer实现前端SSR完美接⼊⽅案

CSR 全称是 Client Side Rendering 代表的是客户端渲染。顾名思义,就是在渲染⼯作在客户端(浏览器)进⾏,⽽不是在服务器端进⾏。举个例⼦,我们平时⽤vue,react等框架开发的项⽬,都是先下载 html ⽂档(不是最终的完全的 html),然...

2024-05-20
2

使用浏览器自动化框架开发了一款多平台自动发布工具——万媒易发

作为一名充满热情的开发者,我一直在追求更高效的工作方式。近期,我成功地利用浏览器自动化框架Puppeteer和node.js,自主开发了一款强大的多平台自动发布工具——万媒易发。在这篇文章中,我将分享整个开发过程,涉及的关键技...

2023-11-20
2

无头浏览器自动化:Puppeteer 帮你释放效能 | 开源日报 No.64

这个开源项目主要是为那些想深入研究、学习 Linux 内部工作原理等技术专业人士而设计。其优势在于能够帮助用户更好地理解 Linux 操作系统,并且允许他们自由修改、调整操作系统来满足特定需求。...

2023-10-28
1

如何在Puppeteer中设置User-Agent来绕过京东的反爬虫机制?

京东作为中国最大的电商平台,为了保护其网站数据的安全性,采取了一系列的反爬虫机制。然而,作为开发者,我们可能需要使用爬虫工具来获取京东的数据。...

2023-10-24
3

使用Puppeteer爬取地图上的用户评价和评论

在互联网时代,获取用户的反馈和意见是非常重要的,它可以帮助我们了解用户的需求和喜好,提高我们的产品和服务质量。有时候,我们需要从地图上爬取用户对某些地点或商家的评价和评论,这样我们就可以分析用户对不同地区或行业...

2023-09-06
1

使用Puppeteer构建博客内容的自动标签生成器

标签是一种用于描述和分类博客内容的元数据,它可以帮助读者快速找到感兴趣的主题,也可以提高博客的搜索引擎优化(SEO)。然而,手动为每篇博客文章添加合适的标签是一件费时费力的工作,有时候也容易遗漏或重复。本文将介绍如...

2023-09-05
3

使用Puppeteer提升社交媒体数据分析的精度和效果

社交媒体是互联网上最受欢迎的平台之一,它们包含了大量的用户生成内容,如文本、图片、视频、评论等。这些内容对于分析用户行为、舆情、市场趋势等有着重要的价值。但是,如何从社交媒体上获取这些数据呢?一种常用的方法是...

2023-08-29
3

从网页中提取结构化数据:Puppeteer和Cheerio的高级技巧

网页数据抓取是一种从网页中提取有用信息的技术,它可以用于各种目的,如数据分析、竞争情报、内容聚合等。然而,网页数据抓取并不是一件容易的事情,因为网页的结构和内容可能会随时变化,而且有些网站会采用反爬虫措施,阻止或...

2023-08-28
2

使用Python和Puppeteer渲染框架进行数据可视化

在信息爆炸的时代,数据可视化成为了一种强大的工具,帮助我们更好地理解和分析数据。Python和Puppeteer渲染框架的结合,为我们实现数据可视化提供了一种简单而强大的方式,本文将介绍如何使用Python和Puppeteer渲染框架进行...

2023-08-10
1

使用Puppeteer进行UI自动化测试

Puppeteer是一个Node库,提供了一种高级API来通过DevTools协议控制Chrome或Chromium。在这篇文章中,我们将详细介绍如何使用Puppeteer进行UI自动化测试。

2023-08-10
1