python 的数据存储和调用问题求解。

2016-03-30 07:02:46 +08:00
 wukongkong
写了一个爬虫,爬某地房产销售数据,用 xlwt 生成 excle 存储。
现在想调用今天查询到的数据减去昨天的数据,得到当日的销售数据。
这个用 python 好自动化么,现在都是手工在操作,比较繁琐。

感觉这个用 excle 不是很方便,是不是用传说中的数据库?抱歉,技术渣渣,很多东西都不会。

感谢大家指点。
2704 次点击
所在节点    Python
9 条回复
virusdefender
2016-03-30 07:09:55 +08:00
写数据库吧
pimin
2016-03-30 07:20:11 +08:00
数据不是很大的话,直接 sqlite3 存数据。
因为日销售额其实是蛮常用的
如果每次用到都计算一遍非常浪费时间和资源
建议抓取的时候直接算好存库里,或者抓完之后单独写一个处理类似事物的模块
wukongkong
2016-03-30 07:35:36 +08:00
@pimin 感谢,数据库之前从未接触过。最多也就是 WordPress 接触过简单的数据库链接。数据库如果要学习的话有什么快速入门教程么。不求面面俱到,但求简单明了。
xiamx
2016-03-30 07:40:38 +08:00
excel...
wukongkong
2016-03-30 07:49:13 +08:00
@xiamx :)
之前是 excle 直接网站刷新数据,现在想一步步的自动化解决问题。
longear
2016-03-30 07:53:40 +08:00
exsle
pimin
2016-03-30 08:08:13 +08:00
Kirscheis
2016-03-30 10:47:51 +08:00
楼主用的竟然是传说中的 excel 数据库。。。如果每天都要爬的话可以试试 PostgreSQL 和 MySQL 。 Python 自带 SQLite ,如果数据量小的话也可以试试。
iam36
2016-03-30 15:14:14 +08:00
用 excel 模块咯 ,这几天微软还推出了官方的模块

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/267243

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX