使用python爬虫抓站的一些技巧总结：进阶篇
以前写过一篇使用python爬虫抓站的一些技巧总结，总结了诸多爬虫使用的方法；那篇东东现在看来还是挺有用的，但是当时很菜（现在也菜，但是比那时进步了不少），很多东西都不是很优，属于”只是能用”这么个层次。这篇进阶篇打算把“能用”提升到“用得省事省心”这个层次。 一、gzip/deflate支持 现在的网页普遍支持gzip压缩，这往往可以解决大量传输时间，以VeryCD的主页为例，未压缩版本247K，压缩了以后45K，为原来...
技术文章精选
低噪声、高可扫读；标题、摘要、来源、标签一目了然。
近 24 小时热文
- 1浏览器的工作原理：新式网络浏览器幕后揭秘近 24 小时 57 浏览
- 2iOS安全系列之二：HTTPS进阶近 24 小时 31 浏览
- 3apt 的 update 和 upgrade近 24 小时 30 浏览
- 4Linux Used内存到底哪里去了？近 24 小时 25 浏览
- 5HTML5视频的那些事儿近 24 小时 24 浏览
- 6Vim（gvim）编程字体推荐近 24 小时 23 浏览
- 7Icon设计要点――信息传达的准确度（一）近 24 小时 23 浏览
- 8获取Dom元素的X/Y坐标近 24 小时 23 浏览
- 9Linux如何统计进程的CPU利用率近 24 小时 23 浏览
- 10iOS 保持界面流畅的技巧近 24 小时 23 浏览
近 3 天热文
- 1浏览器的工作原理：新式网络浏览器幕后揭秘近 3 天 85 浏览
- 2iOS安全系列之二：HTTPS进阶近 3 天 72 浏览
- 3iOS 保持界面流畅的技巧近 3 天 70 浏览
- 4apt 的 update 和 upgrade近 3 天 69 浏览
- 5使用python/casperjs编写终极爬近 3 天 65 浏览
- 6Unix高级环境编程系列笔记近 3 天 59 浏览
- 7HTML5视频的那些事儿近 3 天 58 浏览
- 8android 开发入门近 3 天 57 浏览
- 9你应该知道的16个Linux服务器监控命令近 3 天 54 浏览
- 10Linux如何统计进程的CPU利用率近 3 天 53 浏览
最新文章
采集自各技术站点的近期文章。
AXURE 原型设计教程2――变量控制不同场景的交互演示
该教程适合追求axure功能使用最大化的人，并不是原型设计的目的。追求方便、快速设计交互原型的同学可以无视这篇文章。 实例演示： 演示地址（axure 6 beta生成） 原理： 1. 通过Axure的变量来记录对应的场景 2. 用master 的 onPageLoad 事件根据变量的值来判断dynamic panel对应的state Ps: 该教程实际上我上一篇变量教程的升级版本，有兴趣的同学可以看这里：Axure 实现网站登录的交互 实例教程： 实例说明：需要设计一个电子商...
Axure 实现网站登录的交互
原理：1. 通过变量来记住用户的状态，是处于登录前还是登录后；2. 用master 的 onPageLoad 事件来判断是显示登录前的界面还是登录后的界面。
从代码看不同层次程序员的进化
不久前，在互联网上出现了一篇有趣的文章，讲的是对于同一个问题，不同层次的程序员编出的Phthon代码显示出了不同的风格，代码都很简单，有趣。
如何看待新产品的“目标群体”
目标群体，相信每一个从业者对这四个字都非常熟悉，就像射手眼前的标靶，恨不得一击命中。对于一个还在构思中的新网络产品，目标群体意味着什么？ “意味着未来一切产品需求的归属：靶心；也意味着一切营销手段的能量：射程。”
云计算与物联网
但凡说起一个概念，有两种我以为是很要不得的评论：其一、这个概念老啦，其实多久多久以前就有了，不就是那啥啥？一派“我早就知道了”的样子；其二、这个概念纯属炒作，没见什么落地的应用嘛，有啥意思？一派“我看得贼清楚”的样子。 第一种评论的思路就是类似那种：炸弹？咳，我们老祖宗就有火药啦，一幅“有啥稀奇”的做派，其实完全就是固步自封的思想根源。第二种思路呢，则过于短视，只晓得眼门前有没有用，是鼠目寸...
用户研究的常用方法的选择和使用
我们讨论了四种用户行为分析方面的可用性研究方法。但是我们看到，没有一种研究方法是完美的，所以，我们在研究的时候要组合多种用户研究方法，并根据研究目标和数据整理分析方法以及预算和研究时间等来做合理的选择。
重温《二维设计基础》
俗话说“温故而知新”在看了中国美院王雪青老师的《二维设计基础概论》视频后很受启发。王老师对设计的梳理与总结很见功力，解析的深刻而清晰，好的东西不敢独享，在此与大家一起分享。先来了解一下什么是二维设计基础？维度的定义一维只有长度，呈一种相对的线形状态；二维有长度与宽度，呈相对的面形状态......
漫谈互联网产品商业需求文档（BRD）的设计（１）
BRD是英文”Business Requirement Document“的缩写，根据英文直译过来就是”商业需求文档“的意思，指的就是基于商业目标或价值所描述的产品需求内容文档（报告），其核心的用途就是用于产品在投入研发之前，由企业高层作为决策评估的重要依据。 BRD与PRD的差异 BRD不同于常......
CES 2011 移动设备界面的视觉盛宴
19世纪末，汽车制造业疯狂发展，从空间和速度上改变着人们的生活。时隔一个世纪后，20世纪80年代，个人电脑和互联网的急剧发展，正以莫尔定律的速度影响着当下每个人。CES 2011（国际消费电子展）在美国时间1月9日的拉斯维加斯完美闭幕，一场惊心动魄的变革正在拉开序幕……
强制刷新本地 DNS 缓存记录
为了提高DNS 解析的记录，很多操作系统都会提供缓存DNS 记录的功能，但是，这可能会为测试DNS 服务或域名设定带来麻烦。为了测试出准确的结果，我们需要强制刷新本地 DNS 缓存记录。这里提供Windows 与 Linux 客户端上的操作说明。一、Windows 客户端获得缓存中的DNS ：ipconfig /displaydns强制清除DNS 缓存：ipconfig /flushdns 如果您觉得DNS Client服务带来麻烦，可以用在控制面板----服务 中停止，或使用下面的命令停止该服...
linux 查看自己系统装于何时
想知道自己的linux 系统装于何时：ls -lct /etc/ | tail -1 | awk '{print $6, $7, $8}'
互动、关系以及博客为什么不能做社区
楔子部门的技术经理某天晚上和我讨论。推荐（或者分享神马的）这个互动为什么在网易博客里做不起来？大的观点大家是一致的：人群原因。细细想来这其实触及到了社区的一些根本。网易博客的人群的确不适合，那么具体不适合的原因是什么？推荐这个动作产生的动机实际上有这几种： 1.我推荐给我的好朋友看。这种情形很常见，QQ密友群里经常可以见到大家分享最近的趣事。 2.我推荐和我兴趣一致的人看。这是垂直社区里的情况，推荐的...
阅读的价值之体验设计
您是否为了省钱总是喜欢找他人借阅？您是否觉得阅读只是心血来潮与工作没多大关系，可有可无？您是否总是期望找到电子书而不愿意花银子购买新书？您知道自己为阅读付出的最大成本是什么？您是否常常在阅读过一本书藉后，才发现不是自己要看的那一本？您是否常常发现书架上很多书籍都是一时冲动买下的，直到现在......
视觉设计分享―专题页面篇
视觉设计分享―专题页面篇
网络犯罪的现状【附相关统计数据】
在黑市上购买一串偷来的信用卡号码需要花费多少钱？用租来的僵尸网络（僵尸网络是指采用一种或多种传播手段，将大量主机感染bot程序（僵尸程序），从而在控制者和被感染主机之间所形成的一个可一对多控制的网络 ）或架设虚假的网上购物商店来窃取用户身份又需要多少花费呢？ 网络犯罪包括窃取信用卡号码、洗钱、僵尸网络和其他黑客活动，目前已经在网络上形成了一个巨大的产业。
电视评测网站分析
与朋友探讨“电视评测网站”，这里站在网易的角度给出分析草稿。不善之处，恳请指出。作于2011年元月13日。 宏观 入口一、搜索“电视 评测” 分析1：国内百度市场占有率高，应更重视百度的搜索引擎优化。因此，下文部分以红色字网站百度序进行详析。 分析2：搜索引擎均未能将用户带入“家电频道”。在谷歌搜索“网易 家电”，第二页打开的竟是2007年的版本，说明网易家电相对建设缓慢，当抓紧进度。
未知高度的图片垂直居中
图片的宽度和高度是未知的，没有固定的尺寸，在这个前提下要使图片在一个固定了宽度和高度的容器中垂直居中。最近的在做的项目就有这个需求，所以先把一些常用的方法都收集整理了一下。下图是理想中的效果图，外部容器的宽度和高度固定，中间的图片宽度和高度未知，但是图片要始终要相对于外部的容器垂直居中。
文案不纠结，神马也变浮云
从前有一个提示层文案，让小强很纠结并表示压力很大： 此订单已提交成功。你购买物品可能X-X工作日内送到。因电话不通导致联系不上。我们将不负任何责任！在收到该商品后XX天内，如果商品出现损害您权益等安全问题，您可以凭借交易时提供的手机号码或交易号到5173安全战略合作伙伴xx网申请赔偿。
写在 0x20 岁之前
还有一天，我的人生就进入第三个 0x10 年。 第一个 0x10 年里我无忧无虑。 当我路还走不稳时，我就喜欢拿着彩色笔涂鸦。我妈盼望着我长大能当一名画家。理论上我应该能遗传点我爸这方面的基因的。可惜我不努力，最终辜负了母亲的殷切期望。 在我还小的时候，我坐在老爸的自行车后座上，父亲问，你长大了想做什么？那是我第一次考虑这个问题。我说，做个数学家吧。那时我参加小学生的数学奥赛，成绩还不错。他不是很满意这个答案...