专注 K8S研究
发布时间:2013-09-02 00:29:08
以下实验在虚拟机上进行,实验平台为Centos 6.2。新增两个硬盘sdb,sdc,其容量大小均为8G。 实验要求:分别在两个硬盘上创建一个大小为5G的主分区sdb1,sdc1;创建卷组vg_data,使其包括sdb1,sdc1两个分区;在卷组vg_data上创建一个大小为8G的逻辑卷lv_share,并使lv_share加载可用。 一、系统.........【阅读全文】
发布时间:2013-09-01 23:54:42
(1)分布式:爬虫应该能够在多台机器上分布执行;(2)可伸缩性:爬虫结构应该能够通过增加额外的机器和带宽来提高抓取速度;(3)性能和有效性:爬虫系统必须有效地使用各种系统资源,例如,处理器、存储空间和网络带宽。(4)质量:鉴于互联网的发展速度,大部分网页都不可能及时出现在用户查.........【阅读全文】
发布时间:2013-09-01 23:43:03
title:python 爬虫抓取心得分享0x1.urllib.quote('要编码的字符串')如果你要在url请求里面放入中文,对相应的中文进行编码的话,可以用:urllib.quote('要编码的字符串') query = urllib.quote(singername) url = 'http://music.baidu.com/search?key='+query response = urllib.urlopen(url) text = response.read(.........【阅读全文】
发布时间:2013-09-01 22:46:47
写了那么多篇找工作的文章,再写几篇就完了,也算是对自己一段时间的一个总结。近来发现自己博客上python技术点的文章有点少,为了防止自己总是遗忘,还是写出来的好。前几天刚看完《Linux/Unix设计思想》,真是一本不错的书,推荐想提高自己代码质量的童鞋看一下,里面经常提到要以小为美,一个程序做好一件事,短小精悍.........【阅读全文】