stillzhl 最近的时间轴更新 stillzhl 最近的时间轴更新 |
stillzhl时光最疯狂 🏢 App Annie / Solutions Architect V2EX 第 26171 号会员，加入于 2012-08-31 18:36:41 +08:0050
 23  |
Highly3
stillzhl.github.io
北京
stillzhl
不卑不亢
| App Annie 北京求一名优秀 backend 酷工作 • stillzhl • 2021 年 1 月 15 日 • 最后回复来自 mumubin | 5 |
| [北京] 滴滴出行-信息安全部招聘 Java 实习生 酷工作 • stillzhl • 2017 年 7 月 5 日 • 最后回复来自 stillzhl | 2 |
| 推荐一个字体相关的 brew cask room 程序员 • stillzhl • 2015 年 7 月 4 日 • 最后回复来自 freefcw | 5 |
| 有人再用 V2EX 的 workspace 么？出来分享下经验哦 程序员 • stillzhl • 2014 年 8 月 25 日 • 最后回复来自 magine | 9 |
| [分享]homebrew cask，两个字--“好用” macOS • stillzhl • 2015 年 6 月 23 日 • 最后回复来自 wohenyingyu01 | 16 |
| Yosemite 今日又有更新，itunes 更新到 12 啦 macOS • stillzhl • 2014 年 7 月 22 日 |
| [北京]出尼康D3200单反，送单反包和存储卡 二手交易 • stillzhl • 2013 年 11 月 30 日 • 最后回复来自 stillzhl | 1 |
| 想买港行的设备，但又得要发票，有人知道哪里可以买到么？ Apple • stillzhl • 2013 年 11 月 28 日 • 最后回复来自 stillzhl | 18 |
stillzhl 最近回复了
2021 年 1 月 14 日 回复了 stillzhl 创建的主题 › 酷工作 › App Annie 北京求一名优秀 backend |
@mumubin 当然可以，没问题的，我们用 G-Suit(Gmail, Google Doc, Google calendar ) + Slack + Zoom 这些做在线协作，支持全面的 Work From Home
2021 年 1 月 14 日 回复了 stillzhl 创建的主题 › 酷工作 › App Annie 北京求一名优秀 backend |
@linnana 语言不是问题，面试的话会先在线做几道算法题，之后就是面试，会聊项目经历等等
2017 年 7 月 5 日 回复了 stillzhl 创建的主题 › 酷工作 › [北京] 滴滴出行-信息安全部招聘 Java 实习生 |
@MrMario 对的，我这个项目的人都是 base 在北京的
2016 年 9 月 6 日 回复了 gouwudang 创建的主题 › 酷工作 › [南京]求 Python 工程师、UI 设计师（全职： 8-16K*13 个月，实习： 200-400￥/天，入职成功送 iPhone 6s） |
帮顶，购物党不错的，之前在那工作过，南京的朋友可以踊跃投递！
2015 年 10 月 29 日 回复了 dai269619118 创建的主题 › Python › scrapy 抓取速度问题 |
@JoshOY cpu 用到极限应该是利用率达到 100% ＊ 核心数，这才算是跑满多核 CPU 了。
@dai269619118 我觉得这里边你问了两个问题：
1 、为什么 8 个线程只用了 10%的 cpu ？
python 由于 GIL 的问题，单个进程里边的多线程并不能真正利用多核 cpu 的新能，不能实现多核上的并行，这能在单个核上并发之行。不过这对于爬虫这种 IO 密集型的程序已经足够了。在等待网络 IO 的时候， cpu 可以并发进行解析网页等计算。
2 、如何提高爬虫的抓取速度？
提高抓取速度的关键就是加快网络 IO ，可以从多个方面来解决这个问题，比如 1 、在本地做 dns 缓存； 2 、增加对页面的并发请求量等等措施。当然这些工作强大的 scrapy 框架已经都考虑到了。你可以自己去 google 里面搜索关于爬虫的 papper 阅读，关键词可以是“ Web Crawler"/"Distribute Web Crawler"等等，爬虫的架构以及性能分析等都很详细。
@dai269619118 我觉得这里边你问了两个问题：
1 、为什么 8 个线程只用了 10%的 cpu ？
python 由于 GIL 的问题，单个进程里边的多线程并不能真正利用多核 cpu 的新能，不能实现多核上的并行，这能在单个核上并发之行。不过这对于爬虫这种 IO 密集型的程序已经足够了。在等待网络 IO 的时候， cpu 可以并发进行解析网页等计算。
2 、如何提高爬虫的抓取速度？
提高抓取速度的关键就是加快网络 IO ，可以从多个方面来解决这个问题，比如 1 、在本地做 dns 缓存； 2 、增加对页面的并发请求量等等措施。当然这些工作强大的 scrapy 框架已经都考虑到了。你可以自己去 google 里面搜索关于爬虫的 papper 阅读，关键词可以是“ Web Crawler"/"Distribute Web Crawler"等等，爬虫的架构以及性能分析等都很详细。
2015 年 9 月 11 日 回复了 smartdie 创建的主题 › 求职 › 今天去面试 ONEAPM（蓝海讯通）的 Python 开发被 HR 恶心到了 |
@ultimate010 看来你路子很广 :D
2015 年 9 月 11 日 回复了 smartdie 创建的主题 › 求职 › 今天去面试 ONEAPM（蓝海讯通）的 Python 开发被 HR 恶心到了 |
@KotiyaSanae 哎呀 被你发现了
2015 年 9 月 11 日 回复了 smartdie 创建的主题 › 求职 › 今天去面试 ONEAPM（蓝海讯通）的 Python 开发被 HR 恶心到了 |
@hantsy 我明显是在开玩笑。。
2015 年 9 月 11 日 回复了 smartdie 创建的主题 › 求职 › 今天去面试 ONEAPM（蓝海讯通）的 Python 开发被 HR 恶心到了 |
我也吐槽一下，昨天上午去参加 oneapm 的面试，二面答的不好，感觉被 pass 了，结果出来一个项目经理和我聊，问我住在哪，目前薪资多少，然后就没进一步谈。当时我以为面试过了，但感觉挺莫名其妙的。结果没过多久就告诉我“不匹配”。我想说，不匹配，为什么要问我现在的薪资，简直厚颜无耻！一万只草泥马在眼前飞过。。。
2015 年 9 月 11 日 回复了 smartdie 创建的主题 › 求职 › 今天去面试 ONEAPM（蓝海讯通）的 Python 开发被 HR 恶心到了 |
是让你去做 DevTest 的。。。
Select Language