预约成功
一、BI和大数据的关系是什么——概念
Bi,也称为商业智能分析,是针对个人的解决方案。它的功能是整合企业数据,快速准确地向需求方提供数据。它由数据同步、数据仓库、数据可视化、策略算法等部分组成。这是一个相对抽象的概念。作者将在将来更新什么是数据仓库。如果你不明白,可以关注作者的后续博客
大数据的本义是具有4V特性的海量数据,我觉得人们常说的大数据可以理解为所谓的大数据工程师,他利用Hadoop、spark等工具处理数据,目的是为自己的企业做商业智能。
在我看来,大数据实际上是实现Bi的一种方式。
二、BI和大数据的关系是什么——工作职责
Bi工程师可能在很多公司负责报表的制作,他们的工作内容主要是利用一些报表软件开发不同类型的报表,如在传统行业中,使用tableau、BIEE、echarts等实现通用详细报表或热图、上下滚动和下钻地图等,SQL可能需要一定的互联网相关工具能力。
不同公司的大数据工程师的职责是不同的。一是底层平台的开发和维护,比如构建和维护Hadoop集群,开发调度平台或基于某些调度平台的二次开发,开发可视化平台,ad hoc查询平台,这类工作需要很强的编码能力,并且有通用开源数据产品的源代码二是做数据开发,搭建自己公司的数据仓库平台,从数据同步到数据仓库模型设计再到数据开发。这种工作需要很强的SQL开发和优化能力,以及一些基本的Java和python开发能力。我们需要编写UDF或MR、storm程序等;第三个是做所有事情~
每个公司对其职位和工作内容的定义可能略有不同。这只是个人意见
三、BI和大数据的关系是什么——个人认知
我认为未来的数据部门将由以下几个部分组成:
基础工程组:负责Hadoop/spark集群、开发调度平台、报表平台等底层开发工作的建设和维护,这是我在工作职责中提到的第一个情况
数据开发组:负责企业数据仓库模型的设计,基础工程组开发的数据平台上的数据开发,可视化平台上报表的配置,包括实时和离线两部分
策略算法组:主要负责对数据开发组完成的部分数据表中所需的数据进行处理,实现搜索、排序、推荐、动态调价等功能模块。
对于想问大数据或Bi开发薪酬的朋友来说,影响薪酬的因素与你从事的方向、技术能力、公司对其职位的关注程度、岗位需求的紧迫性和个人运气有关。因此,即使谈论Bi与大数据的关系,也不会影响到各个行业的发展。不管你做什么工作,总有高薪的人。你可以选择你喜欢做的深度。
BI和大数据的关系是什么?优秀的大数据工程师都搞懂了,Bi,也称为商业智能分析,是针对个人的解决方案。它的功能是整合企业数据,快速准确地向需求方提供数据,你能处理好吗?如果您还担心自己理解不了这些基础知识,那么下方的资料下载链接一定会帮助你。