stillzhl 最近的时间轴更新 stillzhl 最近的时间轴更新 | stillzhl时光最疯狂 App Annie / Solutions Architect V2EX 第 26171 号会员，加入于 2012-08-31 18:36:41 +08:0050  23  |
Highly3
stillzhl.github.io
北京
stillzhl 不卑不亢
| App Annie 北京求一名优秀 backend 酷工作 stillzhl 2021-01-15 16:15:56 PM 最后回复来自 mumubin | 5 |
| [北京] 滴滴出行-信息安全部招聘 Java 实习生 酷工作 stillzhl 2017-07-05 09:28:28 AM 最后回复来自 stillzhl | 2 |
| 推荐一个字体相关的 brew cask room 程序员 stillzhl 2015-07-04 00:48:41 AM 最后回复来自 freefcw | 5 |
| 有人再用 V2EX 的 workspace 么？出来分享下经验哦 程序员 stillzhl 2014-08-25 17:39:28 PM 最后回复来自 magine | 9 |
| [分享]homebrew cask，两个字--“好用” macOS stillzhl 2015-06-23 09:34:11 AM 最后回复来自 wohenyingyu01 | 16 |
| Yosemite 今日又有更新，itunes 更新到 12 啦 macOS stillzhl 2014-07-22 10:26:40 AM |
| [北京]出尼康D3200单反，送单反包和存储卡 二手交易 stillzhl 2013-11-30 15:48:21 PM 最后回复来自 stillzhl | 1 |
| 想买港行的设备，但又得要发票，有人知道哪里可以买到么？ Apple stillzhl 2013-11-28 11:12:29 AM 最后回复来自 stillzhl | 18 |
stillzhl 最近回复了
2021-01-14 19:24:59 +08:00 回复了 stillzhl 创建的主题 酷工作 App Annie 北京求一名优秀 backend |
@mumubin 当然可以，没问题的，我们用 G-Suit(Gmail, Google Doc, Google calendar ) + Slack + Zoom 这些做在线协作，支持全面的 Work From Home
2021-01-14 19:20:45 +08:00 回复了 stillzhl 创建的主题 酷工作 App Annie 北京求一名优秀 backend |
@linnana 语言不是问题，面试的话会先在线做几道算法题，之后就是面试，会聊项目经历等等
2017-07-05 09:28:28 +08:00 回复了 stillzhl 创建的主题 酷工作 [北京] 滴滴出行-信息安全部招聘 Java 实习生 |
@MrMario 对的，我这个项目的人都是 base 在北京的
2016-09-06 21:29:33 +08:00 回复了 gouwudang 创建的主题 酷工作 [南京]求 Python 工程师、UI 设计师（全职： 8-16K*13 个月，实习： 200-400￥/天，入职成功送 iPhone 6s） |
帮顶，购物党不错的，之前在那工作过，南京的朋友可以踊跃投递！
2015-10-29 18:24:10 +08:00 回复了 dai269619118 创建的主题 Python scrapy 抓取速度问题 |
@JoshOY cpu 用到极限应该是利用率达到 100% ＊ 核心数，这才算是跑满多核 CPU 了。
@dai269619118 我觉得这里边你问了两个问题：
1 、为什么 8 个线程只用了 10%的 cpu ？
python 由于 GIL 的问题，单个进程里边的多线程并不能真正利用多核 cpu 的新能，不能实现多核上的并行，这能在单个核上并发之行。不过这对于爬虫这种 IO 密集型的程序已经足够了。在等待网络 IO 的时候， cpu 可以并发进行解析网页等计算。
2 、如何提高爬虫的抓取速度？
提高抓取速度的关键就是加快网络 IO ，可以从多个方面来解决这个问题，比如 1 、在本地做 dns 缓存； 2 、增加对页面的并发请求量等等措施。当然这些工作强大的 scrapy 框架已经都考虑到了。你可以自己去 google 里面搜索关于爬虫的 papper 阅读，关键词可以是“ Web Crawler"/"Distribute Web Crawler"等等，爬虫的架构以及性能分析等都很详细。
@dai269619118 我觉得这里边你问了两个问题：
1 、为什么 8 个线程只用了 10%的 cpu ？
python 由于 GIL 的问题，单个进程里边的多线程并不能真正利用多核 cpu 的新能，不能实现多核上的并行，这能在单个核上并发之行。不过这对于爬虫这种 IO 密集型的程序已经足够了。在等待网络 IO 的时候， cpu 可以并发进行解析网页等计算。
2 、如何提高爬虫的抓取速度？
提高抓取速度的关键就是加快网络 IO ，可以从多个方面来解决这个问题，比如 1 、在本地做 dns 缓存； 2 、增加对页面的并发请求量等等措施。当然这些工作强大的 scrapy 框架已经都考虑到了。你可以自己去 google 里面搜索关于爬虫的 papper 阅读，关键词可以是“ Web Crawler"/"Distribute Web Crawler"等等，爬虫的架构以及性能分析等都很详细。
2015-09-11 20:24:36 +08:00 回复了 smartdie 创建的主题 求职 今天去面试 ONEAPM（蓝海讯通）的 Python 开发被 HR 恶心到了 |
@ultimate010 看来你路子很广 :D
2015-09-11 20:23:37 +08:00 回复了 smartdie 创建的主题 求职 今天去面试 ONEAPM（蓝海讯通）的 Python 开发被 HR 恶心到了 |
@KotiyaSanae 哎呀 被你发现了
2015-09-11 20:23:21 +08:00 回复了 smartdie 创建的主题 求职 今天去面试 ONEAPM（蓝海讯通）的 Python 开发被 HR 恶心到了 |
@hantsy 我明显是在开玩笑。。
2015-09-11 18:53:06 +08:00 回复了 smartdie 创建的主题 求职 今天去面试 ONEAPM（蓝海讯通）的 Python 开发被 HR 恶心到了 |
我也吐槽一下，昨天上午去参加 oneapm 的面试，二面答的不好，感觉被 pass 了，结果出来一个项目经理和我聊，问我住在哪，目前薪资多少，然后就没进一步谈。当时我以为面试过了，但感觉挺莫名其妙的。结果没过多久就告诉我“不匹配”。我想说，不匹配，为什么要问我现在的薪资，简直厚颜无耻！一万只草泥马在眼前飞过。。。
2015-09-11 18:44:24 +08:00 回复了 smartdie 创建的主题 求职 今天去面试 ONEAPM（蓝海讯通）的 Python 开发被 HR 恶心到了 |
是让你去做 DevTest 的。。。
Select Language