分享一个快速构建 Web Scraper API 的开源工具,只要你会 css 选择器 / JQ 就能快速上手,简单易用。

96 天前
 sead

工具地址: https://github.com/serping/express-scraper

之前发布的工具Cheerio Tree ,由于还没有文档,没有点代码功底,很难理解工作逻辑。

文档和 DEMO 会陆续更新,此工具拉回来就有简单的 DEMO 用例。

线上的 DEMO ,Scraper API 地址,可以直接打开访问。

https://www.proxysites.ai/category

https://wordpress.com/tags

本工具支持 Vercel 部署,比 nextjs 轻量,vercel 部署时间 20 ~ 30s

特色

核心工具包

关于部署

由于还是个 nodejs 新手,不知道 vercel 如何自动部署 ts 版的 express ,

目前处理方式是 build 输出到 dist ,然后通过配置 vercel.json 实现部署。

如果更新代码忘记 build ,就不会发布最新代码。。。希望哪个大佬可以指点下迷津!

2132 次点击
所在节点    分享创造
1 条回复
wildmaker
95 天前
可以,适合我等菜鸟

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1058852

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX