Cloudera 面试经历

背景

我是一名有 2 年工作经验的大数据工程师，曾经主要负责 Hadoop 生态圈的数据处理、分析、存储等工作。最近我发现 Cloudera 正在招募一名与我技能对口的大数据工程师，于是我便准备了相关简历并尝试了一次 Cloudera 的面试。

面试流程

Cloudera 的面试流程主要包括如下几个步骤：

1. 笔试
2. 初试
3. 终试

笔试

Cloudera 的笔试主要考察基础编程知识和场景题解决能力，包括但不限于以下几点：

• Java 中 synchronized 关键字作用和用法
• 实现一个可以排序的链表
• 给出一组日志数据，如何寻找其中的 Top N 日志
• 利用 MapReduce 统计一篇英文文章中各单词的词频
• 修改 Hadoop 源代码实现自定义排序

总体来说难度还是比较中等，如果你平时有学习过 Java 和 Hadoop 的话应该不会有太大问题。

初试

初试面试官会要求你回答一些基础问题，其中可能会包括：

• Hadoop 的 MapReduce 原理
• YARN 的节点管理和资源调度机制
• Spark 和 Hadoop 的异同点

一些算法题和场景题也会出现在初试中，以下是我遇到的一些问题：

1. 有一个 100GB 的数据文件，每行数据格式如下：id,name,score，求出其中前 10 名的 name 和 score。
2. 给定两个排好序的数组 A 和 B，它们的长度分别为 m 和 n，设计一个 O(log(m+n)) 的算法，在 A 和 B 中查找第 k 大的元素。

终试

终试的面试官会进一步深入探讨你的技术水平和工作经验，可能会询问一些项目中遇到的问题以及如何解决的、对 Hadoop 生态圈的看法和建议、对行业前景的预测等等。以下是我遇到的一些问题：

1. 你在之前的工作项目中遇到过哪些有挑战性的问题，你是如何解决的？
2. 你对于传统 Hadoop 以外的技术和框架有没有一些研究和尝试？例如 Spark、Flink、Kafka 等。
3. 你觉得大数据行业未来的发展趋势是什么？你会如何准备自己来应对？

总结

整个面试流程下来大概用了两周的时间，最后我也顺利通过了终试。我觉得 Cloudera 的面试难度还是比较大的，需要考虑到很多因素，例如基础知识、场景题解决能力、工作经验、对行业的认识和预测等等。但总体来说，如果你有足够的基础储备和实际工作经验，应该是可以通过这次面试的。