离不开大数据的社会计算lk.blog.chinaunix.net

人在美国,有事QQ:172746574

  • 博客访问: 3169432
  • 博文数量: 299
  • 博客积分: 7846
  • 博客等级: 少将
  • 技术积分: 6454
  • 用 户 组: 普通用户
  • 注册时间: 2009-08-25 16:27
文章分类

全部博文(299)

微信关注

IT168企业级官微



微信号:IT168qiye



系统架构师大会



微信号:SACC2013

订阅
热词专题

发布时间:2013-05-16 15:45:45

     本来是想把这部分内容放到《数据抓取的艺术(二)》之中。但是随着任务的完成,我越来越感觉到其中深深的趣味,现总结如下:     (1)时间     时间是一个与抓取规模相形而生的因素,数据规模越大,时间消耗往往越长。所以程序优化变得相当重要,要知道抓取时间越.........【阅读全文】

阅读(15889) | 评论(5) | 转发(4)

发布时间:2013-05-16 13:02:12

      接前文:《数据抓取的艺术(一):Selenium+Phantomjs数据抓取环境配置》。一、程序优化程序优化:第一步开始:for i in range(startx,total):    for j in range(starty,total):  &.........【阅读全文】

阅读(17778) | 评论(0) | 转发(3)

发布时间:2013-05-15 15:08:14

   数据抓取是一门艺术,和其他软件不同,世界上不存在完美的、一致的、通用的抓取工具。为了不同的目的,需要定制不同的代码。不过,我们不必Start from Scratch,已经有许多的基本工具、基本方法和基础框架可供使用。不同的工具、不同的方法、不同的框架的特点也不同。了解这些工具、方法和框架是首要任务,接.........【阅读全文】

阅读(42920) | 评论(14) | 转发(3)

发布时间:2013-05-12 04:09:37

    mechanize是对urllib2的部分功能的替换,能够更好的模拟浏览器行为,在web访问控制方面做得更全面。结合beautifulsoup和re模块,可以有效的解析web页面,我比较喜欢这种方法。    下面主要总结了使用mechanize模拟浏览器的行为和几个例子(谷歌搜索,百度搜索和人人网登录等)1.初.........【阅读全文】

阅读(3372) | 评论(0) | 转发(0)

发布时间:2013-05-06 12:28:32

《合作的进化》读后感 感谢段钊老师的推荐,趁着五一国假我读完了《合作的进化》[1]。本书的作者是美国人罗伯特·阿克塞尔罗德,此人最早是一名政治学家,后因研究合作进化问题成名,参与过许多重要的国际政治经济合作事务,并见证了东西方冷战与苏联解体。然而,合作不只是政治问题,更是可以牵涉到个.........【阅读全文】

阅读(3269) | 评论(0) | 转发(0)

发布时间:2013-04-22 16:52:46

白皮书业内最可靠的Hadoop平台Apache Hadoop的MapR发行版——简单、可靠、快速的Hadoop内容目录概述战略性的Hadoop完整、先进、拥有强力支持的Hadoop发行版易用的Hadoop从批处理转向实时数据流内建数据压缩机制多集群支持筹划、搭建和.........【阅读全文】

阅读(4003) | 评论(0) | 转发(2)

发布时间:2013-02-06 11:08:06

......【阅读全文】

阅读(19896) | 评论(0) | 转发(0)

发布时间:2013-02-06 11:08:01

......【阅读全文】

阅读(12382) | 评论(0) | 转发(0)

发布时间:2013-02-04 19:02:11

     今天立春了。万物即将复苏,也包括人的心。沉寂的冬叔叔收起严肃的脸庞在悄然而去,温馨的春阿姨面带微笑正迎面走来。     在寒冷的北方、凌冽的北风纵然还要折磨我们几天,不过地下的小生命已经在穿衣服准备起床啦。不喜欢喧嚣的夏,也不喜欢无声的冬,比起蓝调的秋日,我.........【阅读全文】

阅读(1949) | 评论(0) | 转发(0)

发布时间:2012-12-25 20:43:31

        今天在微博上看到一本书的推荐《父亲那场永不停息的战争》,台湾作家王明珂著,百度百科介绍了他主要从事羌族及西南少数民族与北方游牧社会的田野调查研究,在历史人类学领域成绩卓著,影响深广。这使我想起来最近正在学习的研究方法论中提高的人种学方法。其实国外是很重视人种学、案例等定性研究的,可惜我国现在主流依旧是定量。    就是这本哦:    在由于我在网上搜书的详细目录一般只有三条具体的查找途径:一是当当;二是京东;三是亚马逊。随后,随便百度搜索了下,我非常惊诧!不就是想找一本书而已,多么典型的主......【阅读全文】

阅读(3791) | 评论(12) | 转发(2)
给主人留下些什么吧!~~

五岳之巅2015-12-27 17:01

10502chenjiao:来看看你,一生平安~老师

谢谢,新年快乐!

回复  |  举报

10502chenjiao2015-12-24 14:49

来看看你,一生平安~老师

回复  |  举报

电影vs程序员2013-08-22 18:03

专家,厉害

回复  |  举报

skyfish8u82013-01-08 17:37

请我glance报错如下,安装glance过程都没报错,怎么解决?

root@testB:~# glance index                    
Failed to show index. Got error:
There was an error connecting to a server
Details: [Errno -2] Name or service not known

回复  |  举报

mkholy2012-11-25 10:05

老师,我是你教过的学生,我有个小问题想请教一下,我一直在用win系统服务器,但是搭建DZ的话cpu总是跑满,我刚换了个LINUX,但是有几个小问题我想咨询一下,能把邮箱给我吗

回复  |  举报
留言热议
请登录后留言。

登录 注册