V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  vtwoextb  ›  全部回复第 14 页 / 共 17 页
回复总数  326
1 ... 6  7  8  9  10  11  12  13  14  15 ... 17  
2018-03-07 16:02:41 +08:00
回复了 vtwoextb 创建的主题 分享创造 张大妈五险一金以及税后工资计算器 http://hizdm.cn
@Antidictator 多少钱的时候不准啊
2018-03-07 16:02:15 +08:00
回复了 vtwoextb 创建的主题 分享创造 张大妈五险一金以及税后工资计算器 http://hizdm.cn
@galenzhao 确实是,数据也不好收集
2018-03-06 18:32:52 +08:00
回复了 vtwoextb 创建的主题 分享创造 张大妈五险一金以及税后工资计算器 http://hizdm.cn
@chucongqing 多谢 已修改
2018-02-25 13:24:11 +08:00
回复了 skywind3000 创建的主题 Vim Vim 中文速查表(Cheatsheet)
好东西
2017-12-29 18:55:04 +08:00
回复了 Va1n3R 创建的主题 Python 万能的 V2er,有没有大牛爬取了过网易云的所有评论..
@Va1n3R 你看看 重启一下 宿舍的路由器 ip 变不变 要是变就行 要是不变 那就只能用代理了
2017-12-29 17:54:27 +08:00
回复了 Va1n3R 创建的主题 Python 万能的 V2er,有没有大牛爬取了过网易云的所有评论..
用这个就行 github.com/hizdm/dynamic_ip 采用重启或重新拨号路由器就可以
2017-12-29 17:52:25 +08:00
回复了 Va1n3R 创建的主题 Python 万能的 V2er,有没有大牛爬取了过网易云的所有评论..
更换 IP 策略
2017-12-29 17:25:40 +08:00
回复了 lixuda 创建的主题 Python 有谁在做抓取京东,天猫,亚马逊商品信息
张大妈比价网 上有 这里有抓取代码 https://github.com/hizdm/dynamic_ip
进大厂
2017-12-25 23:17:48 +08:00
回复了 51300520 创建的主题 Python 那些卖代理 IP 的商人,他们的代理 IP 又是哪儿来的?
同求
@jeterli 可以重新拨号
@hotea yes 程序自动判断 自动重启
定时用 crontab 就行

还有对方屏蔽你 树莓派上 用 动态 ip 策略很爽 https://github.com/hizdm/dynamic_ip
e14
2017-11-15 08:54:03 +08:00
回复了 alphab 创建的主题 Python 爬虫如何爬取有变量的 URL?似乎是网站 js 自动生成的
@alphab 你可以用 python 语言按照 php 代码的逻辑实现 或者 用 python 调用 php 代码也可以
2017-11-14 17:37:56 +08:00
回复了 alphab 创建的主题 Python 爬虫如何爬取有变量的 URL?似乎是网站 js 自动生成的
和 callback=jQuery17206316937206666016_1510628406488 这个无关 这只不过是 jsonp 格式 请求数据,我刚才测试了一下 途牛应该是 根据 ip 请求次数过于频繁途牛直接给你返回错误了,你等一会在请求 数据是能出来的,看目前情况 你刷的太频繁了 可能会把你的 ip 列入黑名单。我原来也遇到过这种问题 写了一个 动态换 ip 的爬虫 https://github.com/hizdm 你可以参考一下
2017-11-13 10:51:18 +08:00
回复了 Reign 创建的主题 程序员 防止下载链接被爬虫抓取,有没有最好的方法?
有必要加 个 滑动的 解锁功能就行 , 既能保证用户良好的 体验 ,又能滤掉大部分爬虫,这样就行了 没有百分之百,,, 我就比较喜欢研究爬虫 我现在爬了某东 一年多了 也还没有阻止我 https://github.com/hizdm/dynamic_ip 这本身就是攻与防的较量,要在利益之间做权衡
2017-11-13 09:08:24 +08:00
回复了 wvc 创建的主题 程序员 根据这次双十一评价一下天猫和京东
挂羊头买狗肉
1 ... 6  7  8  9  10  11  12  13  14  15 ... 17  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1578 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 24ms · UTC 16:45 · PVG 00:45 · LAX 08:45 · JFK 11:45
Developed with CodeLauncher
♥ Do have faith in what you're doing.