结构化数据的爬取，存储，检索有什么好的实践吗？

[lyping]

工作的行业属于质检行业，因此工作中接触的单位都是质检单位，他们有个特点就是都会提供检测报告在询搜索，而且都在网上能查到检测报告的基本信息，如样品单位，编号，有的有图片（每一家的网站数据结构都有点不同，但又差别不大）。

曾经做过爬取工作，用的 python ，实现了其中一家机构报告的检索。但现在的情况是很多家，难道分别按数据结构建数据库？

另外这类服务存在法律问题吗？