如何简化每天的数据发送流程?

2016-04-24 14:39:44 +08:00
 omg21
我现在每天采集一千条左右的数据,分三个时段采集,每次采完整理完后把数据输入到 Excel 中,再传给公司,公司再把数据发布到网站上,这就是我每天的流程。
我现在想的是,如何能简化这个流程?能不能在采集整理完成后自动发送到对方的网站上?还有没有其他的传递方式?
3623 次点击
所在节点    Python
17 条回复
pc10201
2016-04-24 15:52:39 +08:00
可以的,用 python+requests 可以做采集和群发,我以前就是做这个的
omg21
2016-04-24 17:04:48 +08:00
@pc10201 群发怎么讲?能详细说说吗?
我现在是把数据发给公司的技术员,然后他负责把数据传到公司网站上。
yeyeye
2016-04-24 17:16:51 +08:00
都能采集了 为什么不能自动发布?

你到底想问什么?问个问题这么难么?
omg21
2016-04-24 18:56:40 +08:00
@yeyeye 我现在是把数据发给公司的技术员,然后他负责把数据传到公司网站上。我不能直接接触网站程序。
cheerzeng
2016-04-24 21:16:35 +08:00
crontab 就可以定时发了吧?
jackroyal
2016-04-24 21:54:31 +08:00
公司网站给接口,然后采集完成自动通过接口发布就行啊
cloudqq
2016-04-24 23:34:33 +08:00
为何要导入到 EXCEL ?
SlipStupig
2016-04-25 03:26:00 +08:00
@omg21 让他开个 FTP 账号给你,你直接上传就完事了.....
julyclyde
2016-04-25 10:49:03 +08:00
建议辞职吧
目前贵公司的技术水平难以支持这么平常的应用
realpg
2016-04-25 11:38:29 +08:00
支持楼上
EXCEL 给“技术员”,技术员上传网站
而且公司有一个会 python 的人还这流程 还是辞职合适
ytmsdy
2016-04-25 18:55:59 +08:00
就不能直接写个客户端,你整理完了以后你自己发布到网站上?
omg21
2016-04-25 23:10:46 +08:00
楼主被你们这样说感觉好丢人啊,可是我这是五线小城,老板真是找不到会用 py 做个爬虫的人,我来之前全部是复制粘贴,现在老板已经感到很逆天了好么。
Aksura
2016-04-25 23:11:29 +08:00
omg21
2016-04-25 23:16:35 +08:00
而且我现在不在公司办公,我是每天采集下来整理好,发给公司的技术员,他再导入网站。
我之前的想法是我做一个网站,他的网站用框架页调用我网站上相应的页面,这样都省事,但是页面风格不一致,所以想了解下还有没有其他 的方法。
omg21
2016-04-25 23:17:41 +08:00
@Aksura 这是个什么东东?
omg21
2016-04-25 23:20:41 +08:00
@jackroyal 你是指网站给 post 接口,我直接往数据库里输入?
omg21
2016-04-25 23:26:37 +08:00
刘强东为了支持家乡的建设,非得在宿迁设置一个呼叫中心,现在知道后果了,实在是招不到合格的人才,没办法只好从邻近的徐州招聘。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/274046

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX