专注 K8S研究
发布时间:2013-09-01 23:54:42
(1)分布式:爬虫应该能够在多台机器上分布执行;(2)可伸缩性:爬虫结构应该能够通过增加额外的机器和带宽来提高抓取速度;(3)性能和有效性:爬虫系统必须有效地使用各种系统资源,例如,处理器、存储空间和网络带宽。(4)质量:鉴于互联网的发展速度,大部分网页都不可能及时出现在用户查.........【阅读全文】
发布时间:2013-09-01 23:43:03
title:python 爬虫抓取心得分享0x1.urllib.quote('要编码的字符串')如果你要在url请求里面放入中文,对相应的中文进行编码的话,可以用:urllib.quote('要编码的字符串') query = urllib.quote(singername) url = 'http://music.baidu.com/search?key='+query response = urllib.urlopen(url) text = response.read(.........【阅读全文】
发布时间:2013-09-01 22:46:47
写了那么多篇找工作的文章,再写几篇就完了,也算是对自己一段时间的一个总结。近来发现自己博客上python技术点的文章有点少,为了防止自己总是遗忘,还是写出来的好。前几天刚看完《Linux/Unix设计思想》,真是一本不错的书,推荐想提高自己代码质量的童鞋看一下,里面经常提到要以小为美,一个程序做好一件事,短小精悍.........【阅读全文】
发布时间:2013-08-30 18:07:03
setWindowFlags(Qt::WindowCloseButtonHint);//哈哈窗口只有一个关闭按钮 使用方法:1: clientMainWindow::clientMainWindow(QWidget *parent) : QMainWindow(parent,Qt::WindowCloseButtonHint) { } 2 clientMainWindow::clientMainWindow(QWidget *parent).........【阅读全文】
发布时间:2013-08-30 15:21:03
好久没写技术相关的博文,这次写篇有意思的,关于一个有意思的游戏——QQ找茬,关于一种有意思的语音——Python,关于一个有意思的库——Qt。这是一个用于QQ大家来找茬(美女找茬)的辅助外挂,开发的原因是看到老爸天天在玩这个游戏,分数是惨不忍睹的负4000多。他玩游戏有他的乐趣,并不很在意输赢,我做这个也只是.........【阅读全文】