有没有一种爬虫服务，只需要我指定网站和规则，就可以定时爬数据，并且可以提供我指定格式的 json api 的

[Brucepac]

如题，希望各路大佬知道，告知一下。

PS：本人比较喜欢看自然科学相关的文章，经常看环球科学的网站，加上我是做 iOS 开发的，所以我想用 swift 做一个 app 方便看文章。

本来是想自己做全栈的，包括设计和前后端(前后端全用 swift)，但是由于我对爬虫方面的知识不太了解，我想先完成 app，后期再用 Perfect 自己学习写爬虫程序。所以要是有现成的爬虫并且是开源的就最好了😄。

[loading]

幽灵蛛

[malagebidi]

用 huginn+feedly，完全满足需求。

[devjoe]

直接加载整个网页，然后利用 XPath 解析就行

[bogun]

可以试一下 portia，可视化爬虫

[likuku]

IFTTT ？

[chroming]

可以看下 pyspider

[ospider]

那你就先 mock 一个数据开发呗，做完再说。说不定中途就放弃了

[lScarlet]

马克

[brotherlegend]

看大佬们回答

[yuanfnadi]

toapi
可以把网站变成 api

[silencefent]

神箭手

[giuem]

https://wrapapi.com/

[safedogcc]

这不就是我的 APP [下一栈]( https://nextstack.xyz)
该做的事吗！

原理也是一样，把网站的 html 或者 rss 或者 json api 转换成固定的 json 数据格式，只不过不用爬虫，直接在客户端进行爬取解析，欢迎体验！

[coolloves]

马克

[zhtttyecho]

马克

[zhesheng]

马克

[anonnymous]

克马

[Esora]

mark

[leriou]

八爪鱼试试

[sohoer]

可以先试用下 hicrawler.com ，目前支持 json api 或发布到 wordpress