请教大家有没有可视化爬虫的经验

2018-05-17 13:51:57 +08:00
 linhanqiu

目前有个想法，大致是类似 portia 那样，点击某一块区域最后得到数据，想问一下这里面的具体难度在哪里

3363 次点击
所在节点    Python
10 条回复
tingyunsay
2018-05-17 14:03:22 +08:00
https://github.com/scrapy/scrapely
https://binux.blog/2016/12/data-highlighter/
jisibencom
2018-05-17 15:16:03 +08:00
本来就应该可视化的，可是这样把市场行情拉低了
ml1344677
2018-05-17 15:29:46 +08:00
现在那些采集器不就是这样吗
huanchena
2018-05-17 15:34:57 +08:00
看看这个 https://www.cnblogs.com/buptzym/p/9031753.html
muziki
2018-05-17 15:35:57 +08:00
pysider 貌似在加这个功能
muziki
2018-05-17 15:36:17 +08:00
@muziki pyspider
linhanqiu
2018-05-17 16:17:43 +08:00
@huanchena 好的
linhanqiu
2018-05-17 16:18:06 +08:00
@tingyunsay 看过这两个，感觉跟自己想要的还是有点茶差距
linhanqiu
2018-05-17 16:18:27 +08:00
@muziki 好的，我去看看
jyf
2018-05-18 09:01:47 +08:00
我记得章亦春以前介绍过他们在一淘搞过个项目叫 vdom 什么的就是干你这个事的

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/455587

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX