面经详情

1）hadoop中的数据倾斜表现：有一个多几个Reduce卡住，卡在99.99%，一直不能结束。各种container报错OOM异常的Reducer读写的数据量极大，至少远远超过其它正常的Reducer伴随着数据倾斜，会出现任务被kill等各种诡异的表现。2）hive中数据倾斜一般都发生在Sql中group by和join on上，而且和数据逻辑绑定比较深。3）Spark中的数据倾斜Spark中的数据倾斜，包括Spark Streaming和Spark Sql，表现主要有下面几种：Executor lost，OOM，Shuffle过程出错；Driver OOM；单个Executor执行时间特别久，整体任务卡在某个阶段不能结束；正常运行的任务突然失败；...查看更多

数据仓库岗，电话面试，两个面试官分别提问，基本就是按照简历写的来问。 第一个面试官问的问题比较具体，flume自定义拦截器怎么做的？实现了什么接口？kafka和Rabit mq两种消息队列有什么区别，kafka怎么保证精准一次消费之类。第二个面试官问了一些数仓建模方面的问题，怎么建模？逻辑模型和物理模型有什么区别之类的，你在工作中主要负责什么？面试准备不充分导致很多问题没说好，面试官直接说，你这简历上写的你都不熟练啊。。。...查看更多

一面     过程大约1小时，算法是多路归并排序，项目环节主要关模块设计和问题解决方案，同时会追问一些框架的基础知识，比如Kafka如何保证数据准确，重平衡的触发条件和过程等等。    大约1小时，主要过程是项目介绍，痛点和解决方案。最后笔试题是SQL，给出用户的行为轨迹，计算1/7/15日用户留存和连续x天登录的用户数量。...查看更多

供后来的人参考： 1.柠檬微趣公司的宾果消消消，是我曾经最爱玩的游戏，今天要卸载了，不知道他们怎么进去的柠檬微趣，面试好难。2.上来就是经典面试问题的罗列，本来想通过项目介绍来鼓吹实习和项目呢。完全被问懵的状态。几个问题下来，面试官充满了鄙视。。。问我到底会啥，数据库行不。。。我说可以吧。。。数据库1.什么是脏读2.数据库的三大范式–回答出两个 第二范式让举例子（举了订房间的例子）数据库回答出来了，就问网络了解不，对话如下：👇网络技术：“网络这块你了解嘛？–嗯 也是了解一点 --好吧，那我告诉你，你的面试结束了，这样太差了，很多公司都这么问的，秋招准备太不充分了。你的面试没有通过。”一共15分钟29秒，透心凉，心飞扬，秋招愈挫愈勇啊~...查看更多

2022年2月春节后的一个周三报了交通银行软件开发中心，当天下午就收到了周五面试和笔试的通知。北京这边是交行软开的分部，在西单的图书大厦。笔试不管自己报的是后端开发、安卓、IOS还是数据库 统一考Java。。。。下午13点多开始面试，两个面试官一个是人力的 另一个估计是处室的。我报的岗位是数据仓库工程师，因为已经拿到了中信银行软开的Offer，所以聊得还好。处室的领导说交行估计给不了中信那么高的工资，但交行距离我家还挺近的。3月初收到了交行的北调和体检通知，具体后边了解到薪酬我再回来补充...查看更多