搜公司、看面经、查工资
BI ETL工程师
BI ETL工程师是做什么的?本页面为用户提供了BI ETL工程师的岗位职责,以及本职位近些年的薪资待遇情况、就业趋势、招聘趋势、面试经验等信息,综合图表数据多方面解析该职位的热度。
2024-06-28 03:00:00 更新
主页
工资
就业
招聘
面试
BI ETL工程师简介
岗位职责
简介 开源BI系统分类 这些众多的BI项目从规模和对BI系统支撑的完善程度上来说,大体可以分为Framework、Stand-alone Tools和BI Suit三种类型。 Framework 开源框架,这是在商业BI系统中所没有的。我们可以使用它们来构建自己的BI工具,或者增强和扩展我们的BI解决方案。 Stand-alone Tools 独立的BI工具,这是开源项目中数量最多的一类。很多工具只侧重BI系统中的某个环节和方面,如ETL、Report、OLAP和Database等等。 BI Suit 在统一的架构下提供了多种BI系统的特性的工具集合。不管是商业软件还是开源软件,还没有任何一个套件提供了完整的端到端的BI解决方案。这些开源的BI Suit是通过连接多个其他的组件和工具的方式形成套件的,由于BI系统涉及到的工具是非常多的,所以整合一套完整的BI解决方案是很困难的。 BI解决方案中的工具 一个完整的BI解决方案中有多种工具来完成BI系统中各个阶段的工作。 应用工具 BI可应用工具 ETL工具 数据抽取、转换和加载工具。优秀的ETL工具应该具有以下特性: 1、 Workflow Management, Job Execution and Scheduling Manager。能方便地定义流程并自动化执行ETL任务。 2、 Centralized Metadata Repository and Management。集中存储和管理符合业界标准的元数据。 3、 Data Profile and Validation。可以检验数据的质量。 4、 High Performance。在大负荷的任务执行中仍然有良好的性能。 5、 Scalable, Platform Independent。具有良好的弹性,支持多种操作系统和数据库系统,能操作多种异构的数据源。 6、 Open Architecture and API。具有开放的架构和易于使用的二次开发接口。 较为知名的开源ETL工具有: 1、 KETL,由具有IBM和KPMG背景的Kinetic Networks公司开发,已经有多年的产品应用历史,成功应用于一些产品中,在点击流(ClickStream)分析应用中表现出色。KETL采用Plug-in的架构,使用Java开发。 2、 KETTLE,为一个元数据驱动的ETL工具。已经加入Pentaho。 3、 Clover ETL,为一个基于Java的ETL Framework,可以用来开发自己的ETL应用。 4、 Enhydra Octopus,为一个基于Java的ETL工具,使用JDBC来连接各种数据源,易于使用和部署。曾有人应用于电信网络资源分析系统中。 报表工具 优秀的报表工具通常具有以下特性: 1、 支持多种数据源。 2、 直观的可视化设计器,简单易用的报表定制功能。 3、 方便的数据访问和格式化,丰富的数据呈现方式。 4、 符合数据呈现的通用标准,能和应用程序很好地进行结合。 5、 易于扩展和部署。 较为知名的开源报表工具有: 1、 JasperReports,一个优秀的Java报表工具,始于21,JasperSoft公司持续开发和支持该工具。该工具类似于商业软件 Crystal Report,支持PDF、HTML、XLS、CSV和XML文件输出格式,现在是Java开发者最常用的报表工具。 2、 OpenReports,提供基于web的灵活报表解决方案,通过浏览器自动生成动态PDF,XLS,HTMLCSV 和Chart报表,它是用Java开发的,使用JasperReports 作为报表引擎,利用到的开源技术有Hibernate,Veloctiy,Webwork。 3、 JFreeReport,是Pentaho的一部分,它是一个优秀的用来生成报表的Java类库。它为Java应用程序提供一个灵活的打印功能并支持输出到打印机和PDF, Excel, HTML和XHTML, PlainText, XML和CSV文件中。 报表功能 Eclipse BIRT 是Eclipse下面的一个企业智能和报表 工具,能为J2EE的WEB应用程序创建漂亮醒目的PDF或者HTML格式的报表,它提供了核心的报表功能。 分析工具 OLAP工具 联机分析处理工具。开源的OLAP工具也分为MOLAP、ROLAP和HOLAP,优秀的OLAP工具通常有以下特性: 1、 良好的执行性能,能快速地进行分析处理工作。 2、 良好的适用性和可伸缩性。 3、 开放式接口和丰富的API。 较为知名的开源OLAP工具有: 1、 Mondrian,是Pentaho的一部分,为一个用Java开发的OLAP服务器,实现了MDX语言、XML解析和JOLAP规范,可以不写SQL就能分析存储于SQL 数据库的庞大数据集,可以封装JDBC数据源并把数据以多维的方式展现出来。 2、JPivot,是一个JSP 自定制的标签库,可以绘制一个OLAP表格和图表。用户可以执行典型的OLAP导航,如下钻,切片和方块。它使用Mondrian 作为其OLAP服务器。它使用WCF (Web Component Framework) ,基于XML/XSLT来渲染Web UI组件。JPivot在元数据缓存方面的过于简化的整体性初始化装载的做法将限制它只能处理很小的立方体(Cube)。 数据库 开源的数据库也有很多,大多数为关系型数据库,少数为应用于数据仓库环境做了专门的优化工作。Bizgres以PostgreSQL为基础进行了数据仓库环境下的优化,提高了分析查询性能。 BI套件 下面列出相对成熟和完整,并且有借鉴意义的开源BI套件。 Bizgres Bizgree为GreenPlum公司主导的开源项目,和Sun公司达成合作关系。Bizgres为BI应用而对PostgreSQL做了优化,提高了大负荷的并行计算能力,在BI环境中,相对于普通的关系型数据库具有卓越的数据处理性能。Bizgres的数据库平台可以和KETL和JasperReports进行整合,从而形成一个BI套件: 1、 数据库:BI专业数据库Bizgres,或者大型应用中的高性能服务器Bizgres MPP,能比普通关系数据库快2倍 2、 ETL工具:KETL 3、报表工具:JasperReports Openi Openi是一个Java开发的Web应用,能对OLAP服务器、关系数据库和数据挖掘服务器进行分析和报表展示,非常易于使用和部署,界面美观友好,后续还将支持数据挖掘和ETL等。Openi主要包括: 1、 OLAP展示:JPivot 2、报表工具:JFreeChart 3、 分析数据源连接器 Pentaho Pentaho是一个以工作流为核心的、强调面向解决方案而非工具组件的BI套件,整合了多个开源项目,目标是和商业BI相抗衡。它包括: 1、工作流引擎:Shark and JaWE 2、 数据库:Firebird RDBMS 3、 集成管理和开发环境:Eclipse 4、报表工具:Eclipse BIRT 5、 ETL工具:Enhydra/Kettle 6、 OLAP Server:Mondrian 7、 OLAP展示:JPivot 8、 数据挖掘组件:Weka 9、应用服务器和Portal服务器:JBoss 1、单点登陆服务及LDap认证:JOSSO 11、 自定义脚本支持:Mozilla Rhino Javascript脚本处理器 由上可见Pentaho是一个很完善的BI解决方案。Pentaho偏向于与业务流程相结合的BI解决方案,侧重于大中型企业应用。 SpagoBI SpagoBI是 集成了Mondrain和JProvit,能够通过OpenLaszlo产生实时报表。SpagoBI使用java开发,不依赖于具体的操作系统,有很强的扩展能力。它主要包括: 1、 报表工具:JasperReports /Eclipse BIRT/ iReport 2、 OLAP Server:Mondrian 3、 OLAP展示:JPivot 4、 数据挖掘组件:Weka 5、 Map引擎:Geo 6、 ETL:BIE 7、 搜索引擎:Lucene 8、 Dashboard:OpenLaszlo 9、 Portal Server:JBoss/ Tomcat/ JOnAS 根据其Roadmap可以看出,SpagoBI将融入更多的BI功能,甚至BI之外的功能。
展开
BI ETL工程师工资
详情
月收入平均值
¥
19,692
高于平均值占比
0%
月收入中位数
¥
17,912
近一年趋势
下降
整体分布
历年变化
最低:¥2,200
最高:¥78,800
*BI ETL工程师在全国的平均月薪为¥19,692,中位数为¥17,912,其中¥12k-16k工资占比最多,约32%。
BI ETL工程师就业
详情
同比上月,人才热度
+0.53%
BI ETL工程师招聘
详情
同比上月,职位数量
+0.12%
BI ETL工程师面经
详情
匿名用户
BI ETL工程师
确定通过
面试过:
上海音智达信息技术公司
接到面试通知,到公司先做了一张卷子,题目非常简单,sql就没有超过20行的。然后Pe和人事一起面试,问题都不难,薪资要求啊,对数据库了解多少这种。
2 年前 发布
2
匿名用户
BI ETL工程师
感觉靠谱
面试过:
汉得HAND
面试官人很好,电话面试,都是比较基础的问题,大概聊了有半个多小时。技术面完还有人事面试,经过了两轮面试。
2 年前 发布
1
匿名用户
BI ETL工程师
感觉没戏
面试过:
友邦资讯科技(广州)有限公司
1、进去先搞一个钟的英语笔试题,浪费时间; 2、面试来了个女面试官,问题都是关于管理方面,招的却是工程师,全程瞎吹,静静看他装,却得不出个所以然。 3、据他描述,都是哪里有坑往哪填,而不是按岗位做事。 4、工作环境,路过见到的办公室都是并排的桌子,没有私人空间。
...查看更多
包含1个问题,1个回答
Q:老板说不出的需求,吩咐下属跟进,需要提出什么问题帮助了解?
2 年前 发布
1
匿名用户
BI ETL工程师
确定通过
面试过:
上海文思海辉
先是HR电面,然后技术经理面试,HR主要是问一些基本信息及薪资要求,技术经理主要是围绕项目经验展开。
包含1个问题,1个回答
Q:整个项目遇到过最困难的事。
2 年前 发布
相关岗位
工程师
软件工程师
测试工程师
软件开发工程师
机械工程师
软件测试工程师
软件研发工程师
运维工程师
java工程师
java开发工程师
首页
BI ETL工程师
热门职位
薪资待遇
就业趋势
热招岗位
面试经历
BI岗位职责
bi专员岗位职责
BI顾问岗位职责
BI产品经理岗位职责
BI经理岗位职责
物资部主管岗位职责
物流质检员岗位职责
物流副总师岗位职责
五金冲压模具工程师岗位职责
温泉部经理岗位职责
卫星通信工程师岗位职责
微贷业务部部长岗位职责
微贷客户经理岗位职责
网页游戏推广员岗位职责
网络系统维护专员岗位职责
网络爬虫研发工程师岗位职责
网络媒体公关专员岗位职责
网络后台程序员岗位职责
外协跟单员岗位职责
外派前厅经理岗位职责
BI工资
bi专员工资
BI顾问工资
BI产品经理工资
BI经理工资
物资部主管工资
物流质检员工资
物流副总师工资
五金冲压模具工程师工资
温泉部经理工资
卫星通信工程师工资
微贷业务部部长工资
微贷客户经理工资
网页游戏推广员工资
网络系统维护专员工资
网络爬虫研发工程师工资
网络媒体公关专员工资
网络后台程序员工资
外协跟单员工资
外派前厅经理工资
BI就业前景
bi专员就业前景
BI顾问就业前景
BI产品经理就业前景
BI经理就业前景
物资部主管就业前景
物流质检员就业前景
物流副总师就业前景
五金冲压模具工程师就业前景
温泉部经理就业前景
卫星通信工程师就业前景
微贷业务部部长就业前景
微贷客户经理就业前景
网页游戏推广员就业前景
网络系统维护专员就业前景
网络爬虫研发工程师就业前景
网络媒体公关专员就业前景
网络后台程序员就业前景
外协跟单员就业前景
外派前厅经理就业前景
BI招聘
bi专员招聘
BI顾问招聘
BI产品经理招聘
BI经理招聘
物资部主管招聘
物流质检员招聘
物流副总师招聘
五金冲压模具工程师招聘
温泉部经理招聘
卫星通信工程师招聘
微贷业务部部长招聘
微贷客户经理招聘
网页游戏推广员招聘
网络系统维护专员招聘
网络爬虫研发工程师招聘
网络媒体公关专员招聘
网络后台程序员招聘
外协跟单员招聘
外派前厅经理招聘
BI面试
bi专员面试
BI顾问面试
BI产品经理面试
BI经理面试
物资部主管面试
物流质检员面试
物流副总师面试
五金冲压模具工程师面试
温泉部经理面试
卫星通信工程师面试
微贷业务部部长面试
微贷客户经理面试
网页游戏推广员面试
网络系统维护专员面试
网络爬虫研发工程师面试
网络媒体公关专员面试
网络后台程序员面试
外协跟单员面试
外派前厅经理面试