web 开发,周期任务是怎样实现的?大字段放数据库还是另存 txt 好?

2014-03-18 12:46:26 +08:00
 bbhj3434
没完成多少个项目,所以很多东西都没有思路……
web的周期任务比如每周定时清空数据,每月排行榜这些应该怎样实现?是把定时任务扔到系统计划or数据库计划?

另:大字段(5000中文字,100w行左右)放数据库还是另存txt好?
3230 次点击
所在节点    Python
4 条回复
henices
2014-03-18 13:15:27 +08:00
Linux 想到crontab是比较自然的,Windows也有计划任务。
MarsWang
2014-03-18 13:25:16 +08:00
1、定期的任务事件一般都是写好脚本然后crontab定期执行,任务比较多的话会用一台单独的服务器去跑。

2、关于数据存储,这个看场景吧。具体不太清楚。
verfino
2014-03-18 15:17:58 +08:00
定时任务一般都是仍crontab的吧

数据存储,几百兆按行整理的数据可以放txt里,计算完压缩保存(有条件的话放SSD上计算)

每月排行榜的话就按天计算,存储好需要的数据到数据表(按天,或者按小时),然后按月统计计算
yakczh
2014-03-18 15:25:26 +08:00
txt

行按日期, 列按指标存放, 空值可以用-来占位

看数据粒度,如是是按天的话,全部存一个文件也有300多行

如果是小时,分钟,可以根据月份,季度名字统一文件命名规则

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/104819

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX