大数据etl工程师

金三银四已经到来，各方码农，攻城狮是否已经开始蠢蠢欲动。前几天收到Aibee面试要求，今儿下午过去试水。hr小姐姐领到会议室给你了瓶水，不一会面试官大哥过来。直接开门见山聊技术。项目不太关心。因为所面的是平台架构组。  Java：  1， String 为什么区别于别的类型变量 为final定义  2，Sting a = “A” 和new String（“A”）区别  3，垃圾回收算法，标记整理 复制  4, g1 cms区别  5，项目实战中该怎么配置的  6，类加载器 双亲委派机制  接下来大数据： 1，hadoop服务之前有哪些进程  2，Spark DAG划分原则 3，如何能避免 spark 做shuffle  4，将spark job提交到yarn上 任务启动流程  5，spark-submit源码层面 6，如何优化shuffle  7，flink和spark区别  8，fllink 窗口函数 适合场景  9，调度框架用过哪些（想往Airflow上靠）  10，spark 反压机制如何配置 ？ 源码层面如何实现？ 然后手撕算法  1，动态规划+回文判断（中等）  2，链表反转（易） 以上二选一手撕 最后反问环节？ 我 ：面试这个岗位具体工作内容是什么？  答: ：该岗位是通过python将各种大数据组件串联起来 提供基础数据存储和运算平台 含监控+调度等一系列功能。  该岗位优势： 可不码砖业务逻辑，只潜心研究组件源码 劣势: 需转Python ，用python实现中间件过程一小时左右。整体难度 中等偏上。整个过程面试官很友善。一直是在试探对组件的 认知程度和底层源码的了解深度。人狠nice 公司初创型公司，做智能人脸识别方向。供参考...查看更多