用python抓取oj题目（2）——Sqlalchemy将数据存到数据库

chinaboy小宝chinaboy007.blog.chinaunix.net

首页　| 　博文目录　| 　关于我

chinaboywg

博客访问： 2890349
博文数量： 348
博客积分： 2907
博客等级：中校
技术积分： 2272
用户组：普通用户
注册时间： 2010-03-12 09:16

个人简介

专注 K8S研究

文章分类

全部博文（348）

elk（2）
docker（5）
error（0）
zabbix（21）
haproxy（2）
linux（11）
redis（2）
lvs（9）
squid（8）
nagios（4）
puppet（6）
html（1）
nginx（45）
apache（3）
mysql（65）
php（0）
python（114）

pycharm（1）

pip（1）

requests（1）

requests（0）

urllib（0）

logging（1）

flask（0）

lib（0）

pyqt4（14）

django（7）

beautifulsoup（11）

scrapy（3）

string（6）

pexpect（4）
shell（19）
linux（25）
other（4）
未分配的博文（2）

文章存档

2019年（22）

2018年（57）

2016年（2）

2015年（27）

2014年（33）

2013年（190）

2013年12月（6）
2013年11月（1）
2013年10月（1）
2013年09月（16）
2013年08月（33）
2013年07月（109）
2013年06月（24）

2011年（3）

2010年（14）

我的朋友

最近访客

推荐博文

用python抓取oj题目（2）——Sqlalchemy将数据存到数据库

发布时间：2013-07-06 01:10:44

　　上一篇http://www.2cto.com/kf/201204/125926.html 用BS分析好界面元素之后，将我们需要的信息放到一个info的list里面给返回来出来，方便期间，info包括这些东西## """ return 12 infos## 1.title 2.limit des 3.proble.........【阅读全文】

阅读(1753) | 评论(0) | 转发(1)

用python抓取oj题目（1）——用beautifulsoup分析oj元素

发布时间：2013-07-06 01:07:56

终于搞完了记录一下　　我的任务是hdoj和toj这两个，事实上也就一个。做hdoj用了4天的样子，toj一上午就ok了、、、所以撇开toj，直接用hdoj的东西来说。也就是肿么把oj上这些字儿啊图片啊神马的抓下来存到数据库的。当然，为了验证是否正确，django这个方便的东西是不能少的。　　btw：原来django的静态文件是.........【阅读全文】

阅读(2143) | 评论(0) | 转发(1)

urllib2使用总结

发布时间：2013-07-06 00:51:35

urllib2是Python的一个获取URLs的组件。他以urlopen函数的形式提供了一个非常简单的接口，具有利用不同协议获取URLs的能力，同样提供了一个比较复杂的接口来处理一般情况。 urllib2支持获取不同格式的URLs例如：ftp、Gopher等,并利用它们相关网络协议进行获取。 .........【阅读全文】

阅读(877) | 评论(0) | 转发(0)

urllib2库的使用细节

发布时间：2013-07-06 00:50:39

1 Proxy 的设置urllib2 默认会使用环境变量 http_proxy 来设置 HTTP Proxy。如果想在程序中明确控制 Proxy，而不受环境变量的影响，可以使用下面的方式：import urllib2enable_proxy = Trueproxy_handler = urllib2.ProxyHandler({"http" : 'http://some-proxy.com:8080'}).........【阅读全文】

阅读(564) | 评论(0) | 转发(0)

Beautiful Soup 帮助文档1 快速入门

发布时间：2013-07-06 00:27:07

......【阅读全文】

阅读(1003) | 评论(0) | 转发(0)

给主人留下些什么吧！~~

urgel_babay2016-05-11 11:05

转载了！仅作学习之用，谢谢

回复　　| 　举报

lkyuang2014-09-18 10:48

Echo "/usr/local/agent/sbin/zabbix_agentd -c /usr/local/agent/etc/zabbix_agentd.conf" >>/etc/tc.local

这个地方的开头 "Echo" 首字母不应该大写，末尾的“tc.local”是不是打错了啊 “rc.local”

回复　　| 　举报