有没有不错的 RPA 工具,可以把网页内容抓取下来,

173 天前
 runninghipp

有一个需求,就是想通过 RPA 工具,(类爬虫工具),把一个网站的数据落成结构化的数据,比如 EXCEL 或者 TXT , 在对数据进行分析 ; (背景,研发、测试、产品都在类似禅道这样的系统进行相关任务单填写工时,想把数据弄下来,进行人效分析);

979 次点击
所在节点    问与答
5 条回复
Evrins
173 天前
这个需求不应该直接对接 禅道 的 api 吗?
zangai
173 天前
实在智能
CadonHo
173 天前
禅道有专门的 api ,直接从 api 里获取数据效率更高
EndlessMemory
173 天前
影刀看看
dassh
173 天前
直接查数据库吧

SELECT x.realname as 姓名, x.product_name as 所属产品, x.id as 编号, x.task_name as 任务名称, x.pri as 优先级,
x.estStarted as 预计开始, x.realStarted as 实际开始, x.deadline as 截止日期, x.finishedDate as 实际完成, DATEDIFF(x.finishedDate, x.deadline) as 延期(天),
format(x.estimate,1) as 最初预计, format(x.consumed,1) as 任务总消耗 FROM
(SELECT a.id,a.project, b.realname, a.name as task_name, a.pri, d.name as product_name, a.consumed, a.estimate, a.estStarted, a.deadline, a.realStarted, a.finishedDate FROM `zt_task` a
join zt_user b on a.finishedBy = b.account
join (select project, min(product) as product from zt_projectproduct group by project) c on a.project = c.project
join zt_product d on c.product = d.id
where a.status in ("done", "closed")
and a.deleted = 1
and a.finishedDate >={start} and a.finishedDate < {end}
) x
ORDER BY x.realname, x.product_name, x.finishedDate

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1054215

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX