Python爬虫批量下载图片、文档、素材实操全过程
批量下载图片、文档、素材，Python 爬虫实操全过程做 PPT 找配图、自媒体找素材、备课存课件、设计找高清图。一页网页几十张图，手动右键另存，最少折腾十几分钟。PDF、Word 模板挨个点开下载，手指点到发酸，效率极低。
10款免费GitHub工具，一键抓取全网公开资源，程序员必存
付费爬虫工具动辄几百块年费，整理10款GitHub免费开源神器，零基础也能采集网页公开资料。不管是做新媒体调研、学生写论文查资料，还是程序员搭建本地AI知识库，大家都有同一个痛点:市面上商用采集工具收费太贵，按月开通会员成本很高，普通人长期用根本不划算。
MediaCrawler 实测：七个平台收进一套采集流程
1. 这个 Skill 是做什么的MediaCrawler 是面向数据采集学习者和内容研究者的多平台公开信息采集项目，支持把小红书、抖音、快手、B 站、微博、贴吧、知乎放进一套流程；继续看下去，可以判断它是否适合你的样本采集与本地分析任务。
Python 网页解析：BeautifulSoup 提取静态页，Selenium 拿下动态页
拿到网页源码只是第一步，真正的难点是从 HTML 里精准提取想要的数据。这篇讲两个核心工具：BeautifulSoup（静态页解析）和 Selenium（动态渲染页面）。⚠️ 合规提醒：只爬取允许访问的公开内容，遵守 robots.txt 与服务条款。
浏览器播放的视频怎么抓取资源？分享个万能方案
日常浏览网页时，大量教学视频、行业短片、宣传视频仅支持在线播放，浏览器没有原生下载按钮。很多人不知道浏览器可以借助扩展程序抓取视频资源，盲目使用录屏方式，不仅画质降低，还耗费手机、电脑性能。不同浏览器扩展兼容性参差不齐，新手很难挑选合适工具。
网页公开数据手动复制太慢？Python 自动抓取并同步生成 Excel 报表
导读： 每一位做数据分析、竞品调研、运营复盘或行政采购的小伙伴，在日常工作中常常需要从各大公开网站、行业资讯平台或政企公开网收集最新的表格数据。
GitHub 79.2K Star！这个Python爬虫库，网站改版了也能继续抓
它一套框架，全覆盖所有抓取场景:静态网页抓取 → HTML 解析 → JS 动态渲染 → 高强度反爬绕过 → 全站批量爬取 → 代理轮换 → AI 自动化对接 → RAG 数据集采集。
Node.js 爬虫数据采集：Cheerio 与 Puppeteer 网页抓取技术对比
在进行网页数据采集时，选择合适的爬虫工具通常归结为一个核心问题：目标页面是否使用 JavaScript 渲染内容？如果答案是否定的，你可能不需要复杂的完整浏览器；如果答案是肯定的，选择错误的工具要么让你完全丢失数据（抓取到一片空白），要么会浪费极其高昂的服务器资源。