项目简介:功能完善的 TypeScript 网页爬虫框架,支持无头浏览器、自动翻页、代理轮换、请求拦截和数据清洗一条龙。
核心功能:支持反爬绕过、JS 渲染页面、分布式部署、自动重试、存储到多种格式。
技术栈:TypeScript / Playwright / Puppeteer / 分布式爬虫
详细描述:提供类似 Scrapy 的高级抽象,支持 JavaScript 重度渲染的 SPA 网站,自动处理 Cookie 和 Session,配合代理池可隐藏采集痕迹,稳定高效。
游客,本帖隐藏的内容需要积分高于 20 才可浏览,您当前积分为 0 |