V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
V2EX  ›  qsnow6  ›  全部回复第 87 页 / 共 101 页
回复总数  2002
1 ... 83  84  85  86  87  88  89  90  91  92 ... 101  
2018 年 1 月 6 日
回复了 xiaottt 创建的主题 深圳 2018 年房价走势预计会如何?
信大嘴强
2018 年 1 月 5 日
回复了 Livid 创建的主题 Python pyenv 入门介绍
习惯用 pyenv 吧,自带的 venv 没有太多资料,用不习惯
提前 6 天
2018 年 1 月 4 日
回复了 Nick2VIPUser 创建的主题 程序员 (请教)如何提高爬虫的效率/采集速度
2018 年 1 月 4 日
回复了 Nick2VIPUser 创建的主题 程序员 (请教)如何提高爬虫的效率/采集速度
加钱买多点代理就行了
import requests

response = requests.get("http://www.baidu.com")
print(response.text)
2018 年 1 月 4 日
回复了 Nick2VIPUser 创建的主题 程序员 (请教)如何提高爬虫的效率/采集速度
给个参考值,scrapy 单进程可以达到 7200 pages/min
2018 年 1 月 4 日
回复了 Nick2VIPUser 创建的主题 程序员 (请教)如何提高爬虫的效率/采集速度
@Nick2VIPUser 不是带宽限制,应该是切换线程的问题;

多线程跑的话,一般情况下 10-12 左右是最快的,更增加更多的线程速度反而会下降。
2018 年 1 月 4 日
回复了 Nick2VIPUser 创建的主题 程序员 (请教)如何提高爬虫的效率/采集速度
百万级应该没啥问题啊,大部分时间都是在网络耗时上面。
不过,切换线程是有开销的,如果想进一步提升性能的话,建议用异步 or 协程。
2018 年 1 月 4 日
回复了 frozenway 创建的主题 PHP 有没有永远不会卡顿的浏览器推荐
wget 不行吗
卧底
2018 年 1 月 4 日
回复了 serge001 创建的主题 Python Python 的包管理感觉怎么这么不优雅。。。
pip 是不考虑安装环境的,如果你要安装的库里面需要系统环境支持的话,就需要自己把环境配好。
比如 lxmlx,就是个大魔王,网上搜下,多少人躺过这个坑。

如果不涉及 C 库或者系统环境还好,不然还真的蛮头疼的。

所以 conda 就是为了解决这个的,真的很好用,安装包的时候,顺带帮你把这个包所需的环境包也装了。
2018 年 1 月 4 日
回复了 qsnow6 创建的主题 问与答 osx 有没有清理后台 or 启动项的方法
@1more
@yyfearth

Dr.Cleaner 也只是清理下垃圾文件和卸载应用程序啊,好像没啥特别的。

如果需要清理一些无用的后台进程,比如通过 brew 安装或者驻留在 service 里的有什么辅助工具么
2018 年 1 月 3 日
回复了 lcj2class 创建的主题 程序员 百度统计的来源列,看不到搜索的搜索词
用搜索引擎自家的统计即可破
2018 年 1 月 3 日
回复了 goodryb 创建的主题 生活 最近什么事都怕麻烦,不喜欢折腾,老了吗?
因为你的时间变的值钱了
还是得要注释,最低成本的方法。

把代码写成诗。。能行的话你也不会上来求助了
2018 年 1 月 3 日
回复了 qsnow6 创建的主题 问与答 osx 有没有清理后台 or 启动项的方法
@yyfearth 试过后回来反馈
2018 年 1 月 2 日
回复了 liv11d 创建的主题 程序员 膜拜单车也要跑路了?不能退押金耶
小蓝还可以退吗 表示登陆不上去了
1 ... 83  84  85  86  87  88  89  90  91  92 ... 101  
About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   3855 Online   Highest 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 45ms · UTC 05:05 · PVG 13:05 · LAX 22:05 · JFK 01:05
♥ Do have faith in what you're doing.