V2EX › greatghoul 的所有回复 › 第 74 页 / 共 122 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 ... 70 71 72 73 74 75 76 77 78 79 ... 122

❮

❯

2016 年 9 月 18 日

回复了 miaobug 创建的主题 › 程序员 › 最近在做一个要求从 IE6 开始兼容的项目...求老司机指点

推荐 table 布局，妥妥的

2016 年 9 月 17 日

回复了 miaoxu9999 创建的主题 › Python › 想要自学爬虫

我就是一边学写爬虫，一边学习 py 的语法，相比干学知识点和语法，在用中学才是最棒的。

2016 年 9 月 17 日

回复了 jybox 创建的主题 › 职场话题 › 关于刷月饼事件我来唱点反调

本来写了一堆回复，但想了想，作者的价值观和我的不符嘛，那还说个什么，干脆 block 了。

2016 年 9 月 15 日

回复了 wl879 创建的主题 › 分享发现 › 给质疑有阅读障碍，分享一款好用的 chrome 插件

开源的吗？正在写一个类似的，不过明显你这个更好。

2016 年 9 月 15 日

回复了 doubleflower 创建的主题 › 奇思妙想 › 最近在写爬虫，发现一个干死 99.9999%爬虫的办法

现在很多网站都是 js 动态渲染的，传统的发 request 的爬虫根本占不到 90.99999%，现在好多爬虫都是直接跑的 phantomjs ，还有跑在 Chrome Extension 上面的，那些弱鸡的规则压根不顶用，甚至还有直接截屏 ocr 的。。。

楼主你还停留在上个时代。

2016 年 9 月 15 日

回复了 doubleflower 创建的主题 › 奇思妙想 › 最近在写爬虫，发现一个干死 99.9999%爬虫的办法

@doubleflower 那处理无限 header 呢？这总不能 stream 了吧。

都不用处理

httplib.IncompleteRead: IncompleteRead(0 bytes read)

curl 都会很快中断，还别说专门写爬虫了。

2016 年 9 月 15 日

回复了 doubleflower 创建的主题 › 奇思妙想 › 最近在写爬虫，发现一个干死 99.9999%爬虫的办法

@doubleflower 你这规则也太简单了

2016 年 9 月 15 日

回复了 whahuzhihao 创建的主题 › 程序员 › freelancer 凭空扣了我的钱

https://www.freelancer.com/feesandcharges/

见会员计划

2016 年 9 月 15 日

回复了 doubleflower 创建的主题 › 奇思妙想 › 最近在写爬虫，发现一个干死 99.9999%爬虫的办法

kill 掉爬虫非常简单呀

https://gist.github.com/greatghoul/7352ba71134cf9079eb5e049c235cd64

楼主你写的爬虫太烂了。。

另外你的链接不可见，总要写在源码里面吧，人家分析你网站的时候要是觉察不出来那还写的什么爬虫，就算你随机返回，人家爬虫多测试几次就知道了，针对你的伎俩，分分钟就有应对策略了。

还什么超大响应，你不知道有 chunk 和 stream 这种东西吗？你以为那些抓取电影资源的爬虫都是把整部电影读进内存里面吗？

2016 年 9 月 15 日

回复了 doubleflower 创建的主题 › 奇思妙想 › 最近在写爬虫，发现一个干死 99.9999%爬虫的办法

> 在网站的页面里随机插入坏链接

牺牲用户体验

> 或在检测到是爬虫时，返回无限大响应的请求

一般写爬虫超时，或者超量，就有机制自动 kill 掉了

最寂寞的就是写了一堆反爬虫的策略，发现都没有生效过，没人来爬。。。

2016 年 9 月 15 日

回复了 sneezry 创建的主题 › 分享发现 › 有人给出一个漂亮的价格收买我写的 Chrome 扩展，然后被我谢绝了

为楼主点赞。

2016 年 9 月 14 日

回复了 beimenjun 创建的主题 › Overwatch › 问：《守望先锋》国服会不会死于外挂？

《守望前线》
《攻略先锋》
《。。。》

一大批新作会冒出来，可以换妆，还可以带宠物，可以装扮基地， xxxx

2016 年 9 月 13 日

回复了 jadecoder 创建的主题 › Android › 终于对 Android 绝望了，再铁粉也忍不了国内的应用环境

android 挺好的