数据抓取的艺术（三）：抓取Google数据之心得

yifangyouyifangyou.blog.chinaunix.net

首页　| 　博文目录　| 　关于我

yifangyou

博客访问： 4217924
博文数量： 291
博客积分： 8003
博客等级：大校
技术积分： 4275
用户组：普通用户
注册时间： 2010-10-30 18:28

文章分类

全部博文（291）

geode（1）
交叉编译（1）
路由器（1）
技术会议（1）
移动开发（3）

flash（1）
IOS（11）
项目管理（1）
mac（7）
翻译（2）
读书（8）
phonegap（0）
java（26）
javascript（5）
android（3）
虚拟机（5）
php（15）
win7技巧（4）
硬件（1）
windows（12）
c开发（13）
shell（2）
windows技巧（7）
linux系统（32）
linux环境开发（18）
perl（11）
日记（25）
开发（46）
数据库（22）
未分配的博文（8）

文章存档

2017年（1）

2013年（47）

2012年（115）

2011年（121）

2010年（7）

我的朋友

最近访客

推荐博文

数据抓取的艺术（三）：抓取Google数据之心得

发布时间：2013-05-17 10:00:04

本来是想把这部分内容放到《数据抓取的艺术（二）》之中。但是随着任务的完成，我越来越感觉到其中深深的趣味，现总结如下：（1）时间时间是一个与抓取规模相形而生的因素，数据规模越大，时间消耗往往越长。所以程序优化变得相当重要，要知道抓取时间越.........【阅读全文】

阅读(1767) | 评论(0) | 转发(0)

数据抓取的艺术（二）：数据抓取程序优化

发布时间：2013-05-17 09:59:55

接前文：《数据抓取的艺术（一）：Selenium+Phantomjs数据抓取环境配置》。一、程序优化程序优化：第一步开始：for i in range(startx,total): for j in range(starty,total): &.........【阅读全文】

阅读(1750) | 评论(0) | 转发(0)

数据抓取的艺术（一）：Selenium+Phantomjs数据抓取环境配置

发布时间：2013-05-17 09:58:27

数据抓取是一门艺术，和其他软件不同，世界上不存在完美的、一致的、通用的抓取工具。为了不同的目的，需要定制不同的代码。不过，我们不必Start from Scratch，已经有许多的基本工具、基本方法和基础框架可供使用。不同的工具、不同的方法、不同的框架的特点也不同。了解这些工具、方法和框架是首要任务，接.........【阅读全文】

阅读(2784) | 评论(0) | 转发(0)

Nginx Location配置总结

发布时间：2012-09-22 15:52:40

Location语法语法：location /uri/ { … } = 开头表示精确匹配 <......【阅读全文】

阅读(1647) | 评论(0) | 转发(0)

Glib实例学习（8）系列一（完）

发布时间：2011-07-13 19:42:06

系列一......【阅读全文】

阅读(2769) | 评论(0) | 转发(0)