全部博文（272）
发布时间：2016-10-07 05:23:53
开发环境：Win10+Python3.5+Selenium+IE11硬件环境：联想MIIX700语言环境：English（US）在做数据爬取得时候，发现IE Driver出现白屏，跟着提示：“This is the initial start page for the WebDriver server“几经寻找，解决了问题。问题源自IE高版本的自我保护功能，使Selenium的切入机制遇到安全阻碍。解决方案如.........【阅读全文】
发布时间：2016-03-19 10:40:54
别和我说selenium中的webdriver用driver.page_source，我就是不想把整篇HTML文档每次都全部提出来做Soup。因为，对下面这样左右结构的论坛而言，每次内容的改变对于整个HTML页面而言实在是一个很小的部分，如果我想把整个网站所有MOOC课程评论爬下来的话，将要做多少无用功！ &nbs.........【阅读全文】
发布时间：2016-01-18 13:35:37
我在阿里云上碰到了这个问题，不论是64位还是32位都不行，如下图所示： 阿里官方给出的方案是安装时不选择Pip，如下图： 但是，为什么会这样呢？我查阅了Python官方Bug，在这里有回答http://bugs.python.org/issue10002.........【阅读全文】
发布时间：2016-01-13 09:28:14
由于Chrome速度快，因此很早便使用Chrome Driver淘汰了IE Driver和PhantomJS Driver。最近的抓取工作出现了一个令人头疼的事情，单开一个Driver做while 1循环，每隔5分钟扫描抓取目标对象。然而Chrome Driver总是会在4~5个小时僵死掉。我做了性能和时间的记录：Turn 1:硕博家园2016.........【阅读全文】
发布时间：2015-09-02 17:20:15
<br /><span style="color:#000000;"></span><span style="color:#000000;">1、前言</span><br /><span style="color:#000000;"> 前两天开了两个进程，把Python抓回的数据链接并发写入Mysql中，结果显示出错。后来一查才知道需要自己设置锁，好生麻烦。这时PostgreSQL进入了我的视野，因为这家伙原生.........【阅读全文】
发布时间：2015-08-22 10:49:07
selenium包含：Selenium IDE、Selenium Remote Control、Selenium Grid和Selenium WebDriver。具体而言：
1. Selenium IDE作为Firefox上的一个插件，提供录制功能，个人观点，如果能手写代码，就不要用这个东西。
2. Seleniu.........【阅读全文】
发布时间：2015-07-31 12:49:10
在Win8下经历惨痛的过程，耗费无数时间，结果依旧安装失败。
现在转战到Ubuntu14.04下。
首先，SuperScript需要Node.js，但版本最好不要高于0.10，我用apt-get install nodejs，安装上的是nodejs的0.10.20，但又发现报错说nodejs版本应该大于0.10.28好像。然后，删除掉原来安装的nodejs和npm：
su.........【阅读全文】
发布时间：2014-12-11 17:37:40
这个问题困扰我很久了，本来用Sublime编辑好Python文件，Ctrl+B即可，不知道怎么回事就是无法执行，控制台没有任何结果返回。最后，不得不回到Python IDLE的原始社会中。 今天，我又试着修改Preference下的配置文件，也是无果，百度一搜发现很多人都有这样的问题。于是，我就感觉.........【阅读全文】
发布时间：2014-12-02 10:19:45
最近一直在忙着写博士毕业论文，抽空关注了刚刚结束的世界互联网大会，在写了两篇吐槽感十足的博文后心想着我这颗老心脏可能无法再波起涟漪了。谁知某个慵懒的午后，CU发来消息告知有一场名为“可靠性能管理的第一步：真实用户体验”的在线讲座，出于对在线教育的好奇，也出于与毕业论文异曲同工的用.........【阅读全文】
skyfish8u82013-01-08 17:37
请我glance报错如下，安装glance过程都没报错，怎么解决？
root@testB:~# glance index
Failed to show index. Got error:
There was an error connecting to a server
Details: [Errno -2] Name or service not known
