大数据到底是干嘛的?正在做大数据项目但仍然一头雾水中……

2023-08-19 15:42:28 +08:00
 WangLiCha

是这样的,我是前端开发,然后公司内部调动新成立了一个开发大数据平台的组,然后我就被调过去了,只是以一个普通前端开发的身份,我本身也没做过任何大数据相关的工作,更没有过相关的知识储备。

然后就发现海量的陌生概念和陌生名词出现在了我的视野里,什么数据仓库,数据域,数据湖,数据市集,数据指标等等等等。毕竟我是前端开发,不了解后台的实际实现方式只是照着需求硬开发也能做出能交差的产品来,但是我还是不知道我到底做了个啥……

4789 次点击
所在节点    程序员
42 条回复
Chad0000
2023-08-19 15:44:01 +08:00
就是一堆名词,说得好像大数据这个词出来前就不存在大数据的业务似的。类似的概念参考:云。
dji38838c
2023-08-19 15:46:46 +08:00
做 ppt
你做基础业务的不用关心。
wangxiaoaer
2023-08-19 15:49:41 +08:00
@Chad0000 更该参考的是 数据挖掘吧
Chad0000
2023-08-19 15:50:47 +08:00
@wangxiaoaer # 3
哈哈,提醒了我,之前确实流行这个术语。不过你看大数据感觉更高大上了
billlee
2023-08-19 15:51:44 +08:00
我是大数据后台开发,后台的实现方式也和这些概念没什么关系。
i8086
2023-08-19 15:53:36 +08:00
更多用于对外宣传。近些年有:区块链+、元宇宙、智慧+、5G+、大数据、大预言模型……

区块链发票、智慧+生活、5G+交通、5G+医疗、
owen800q
2023-08-19 15:56:10 +08:00
大数据 == 爬虫
xmumiffy
2023-08-19 15:56:40 +08:00
数据库改名:大数据
NoOneNoBody
2023-08-19 15:59:04 +08:00
前端的话,主要应该就是做展示吧?
统计图表、数据排版整齐……

如果到你这里就是一堆数据,那不用关心什么概念,非展示的当成类别,展示的就当成座标的名称、行列的名称就好了
如果你做的不是展示,还要做修正计算,例如 sum, avg 之类,那就另说
snw
2023-08-19 16:07:34 +08:00
数据仓库( data warehouse )不是什么新概念,至少在 1980 年代就已经有商业应用了。
数据市集( data mart )也是有了数据仓库后自然延伸的概念,比数据仓库更小,一般是从数据仓库里提取了一小部分数据,便于做报告。就像商店从仓库里取出部分货物放到货架上一样。
以上两个都是很早就有的概念,和大数据没直接关系,和传统 OLAP 、ETL 等概念关系更大一些。

传统数据大多是结构化数据,用二维表很容易存储,用 ETL 很容易处理,用 OLAP 很容易分析。
大数据,是现在数据量更加庞大、数据关系和逻辑更加复杂(比如非结构化数据),需要和传统数据库不同的设计和工具,概念大概出现在 2010 年代前期。
数据湖( data lake )是和大数据差不多时期出现的概念。

至于数据域、数据指标,虽然能搜到,但具体不太清楚。

大部分是数据库管理员的事情,和前端工作关系不大,前端可能要做的是 BI 报告平台。
cheese
2023-08-19 16:09:41 +08:00
大数据前端跟提到的概念没啥关系,主要工作就是当一个画表画图机器人,界面越炫酷越科幻,越牛逼
hcbb
2023-08-19 16:19:23 +08:00
把数据放到一块,进行数据分析,数据挖掘
WangLiCha
2023-08-19 16:35:53 +08:00
@snw 我感觉这些概念就是,换了名字的数据库,抽象的数据库,数据库的数据库……?
报表只算我们要做的东西的一部分,主要还是要做一个具体操作数据仓库啥的中台页面,所以才会疑惑我做这些东西到底是干嘛的
WangLiCha
2023-08-19 16:36:48 +08:00
@billlee 这么来说有必要弄懂了解这些概念的应该只有产品经理或者项目经理了?
jackOff
2023-08-19 17:32:14 +08:00
术语太多以至于我有时候觉得这不是后端和爬虫,可能是报表员的工作
Kiriya
2023-08-19 17:36:41 +08:00
通过统计细分用户
yunye
2023-08-19 17:56:52 +08:00
大数据就是说数据非常多,非常牛逼
yuluoxinsheng
2023-08-19 18:04:43 +08:00
真不如业务后端开发
metalvest
2023-08-19 18:10:36 +08:00
大数据重点在这个“大”字。量变引发质变,换个词:相变,再换个词:涌现
akira
2023-08-19 18:10:51 +08:00
大数据前期上前端就是人多的没地方用了。。。

猜测是让你去做大屏之类的 数据展示吧,反正你就按需求去后台请求数据,然后用不同的图表展示出来就可以了。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/966674

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX