大数据工程师面试-汇总-【不定期更新】

痛定思痛。 2022-06-01 01:53 202阅读 0赞

继续分享，大数据相关。

出处：http://www.hlwwiki.com/w/index.php/BigData

# BigData #

> 大家遇到好的大数据相关的问题,请点击下面链接进行提交，谢谢！
> 
> [大数据版块问题收集页面][Link 1]

## 目录 ##

\[隐藏\]

*  [1大数据 (问题正在收集整理当中)][1_]
    
     *  [1.1hadoop][]
     *  [1.2hbase][]
     *  [1.3hive][]
     *  [1.4spark][]
     *  [1.5storm][]

## 大数据 (问题正在收集整理当中)\[[编辑][Link 2] | [编辑源代码][Link 3]\] ##

### [hadoop ][hadoop]\[[编辑][Link 4] | [编辑源代码][Link 5]\] ###

1.  [mapreduce的工作原理 ][mapreduce]
2.  [fsimage和edit的区别？ ][fsimage_edit]
3.  [列举几个配置文件优化][Link 6]
4.  [谈谈数据倾斜，如何发生的，并给出优化方案][Link 7]
5.  [简单概括安装hadoop的步骤 ][hadoop 1]
6.  [简单概述hadoop的join的方法 ][hadoop_join]

### [hbase][]\[[编辑][Link 8] | [编辑源代码][Link 9]\] ###

1.  [RowKey设计原则 ][RowKey]
2.  [Hbase内部是什么机制 ][Hbase]
3.  [Hbase过滤器实现原则][Hbase 1]
4.  [HBase, zookeeper 搭建过程][HBase_zookeeper]
5.  [hbase 写数据的原理是什么 ][hbase 1]
6.  [hbase读数据的原理是什么][hbase 2]
7.  [hbase 宕机如何处理][hbase 3]

### [hive][]\[[编辑][Link 10] | [编辑源代码][Link 11]\] ###

1.  [Hive 有哪些保存元数据的方式 并有哪些特点 ][Hive _]
2.  [hive内部表和外部表区别][hive 1]
3.  [什么是hive][hive 2]
4.  [hive 如何权限控制？][hive 3]
5.  [生产环境中为什么建议使用外部表 ][Link 12]
6.  [hive 跟 hbase 的区别是 ][hive _ hbase]

### [spark][]\[[编辑][Link 13] | [编辑源代码][Link 14]\] ###

### [storm][] ###

[Link 1]: http://www.hlwwiki.com/w/index.php?title=Bigdata:collect&action=edit&redlink=1
[1_]: http://www.hlwwiki.com/w/index.php/BigData#.E5.A4.A7.E6.95.B0.E6.8D.AE_.28.E9.97.AE.E9.A2.98.E6.AD.A3.E5.9C.A8.E6.94.B6.E9.9B.86.E6.95.B4.E7.90.86.E5.BD.93.E4.B8.AD.29
[1.1hadoop]: http://www.hlwwiki.com/w/index.php/BigData#hadoop
[1.2hbase]: http://www.hlwwiki.com/w/index.php/BigData#hbase
[1.3hive]: http://www.hlwwiki.com/w/index.php/BigData#hive
[1.4spark]: http://www.hlwwiki.com/w/index.php/BigData#spark
[1.5storm]: http://www.hlwwiki.com/w/index.php/BigData#storm
[Link 2]: http://www.hlwwiki.com/w/index.php?title=BigData&veaction=edit&section=1
[Link 3]: http://www.hlwwiki.com/w/index.php?title=BigData&action=edit&section=1
[hadoop]: http://www.hlwwiki.com/w/index.php/%E5%88%86%E7%B1%BB:Hadoop
[Link 4]: http://www.hlwwiki.com/w/index.php?title=BigData&veaction=edit&section=2
[Link 5]: http://www.hlwwiki.com/w/index.php?title=BigData&action=edit&section=2
[mapreduce]: http://www.hlwwiki.com/w/index.php?title=Mapreduce%E7%9A%84%E5%B7%A5%E4%BD%9C%E5%8E%9F%E7%90%86&action=edit&redlink=1
[fsimage_edit]: http://www.hlwwiki.com/w/index.php?title=Fsimage%E5%92%8Cedit%E7%9A%84%E5%8C%BA%E5%88%AB&action=edit&redlink=1
[Link 6]: http://www.hlwwiki.com/w/index.php?title=%E5%88%97%E4%B8%BE%E5%87%A0%E4%B8%AA%E9%85%8D%E7%BD%AE%E6%96%87%E4%BB%B6%E4%BC%98%E5%8C%96&action=edit&redlink=1
[Link 7]: http://www.hlwwiki.com/w/index.php?title=%E6%95%B0%E6%8D%AE%E5%80%BE%E6%96%9C%E4%BC%98%E5%8C%96&action=edit&redlink=1
[hadoop 1]: http://www.hlwwiki.com/w/index.php?title=%E7%AE%80%E5%8D%95%E6%A6%82%E6%8B%AC%E5%AE%89%E8%A3%85hadoop%E7%9A%84%E6%AD%A5%E9%AA%A4&action=edit&redlink=1
[hadoop_join]: http://www.hlwwiki.com/w/index.php?title=%E7%AE%80%E5%8D%95%E6%A6%82%E8%BF%B0hadoop%E7%9A%84join%E7%9A%84%E6%96%B9%E6%B3%95&action=edit&redlink=1
[hbase]: http://www.hlwwiki.com/w/index.php/%E5%88%86%E7%B1%BB:Hbase
[Link 8]: http://www.hlwwiki.com/w/index.php?title=BigData&veaction=edit&section=3
[Link 9]: http://www.hlwwiki.com/w/index.php?title=BigData&action=edit&section=3
[RowKey]: http://www.hlwwiki.com/w/index.php?title=RowKey%E8%AE%BE%E8%AE%A1%E5%8E%9F%E5%88%99&action=edit&redlink=1
[Hbase]: http://www.hlwwiki.com/w/index.php?title=Hbase%E5%86%85%E9%83%A8%E6%98%AF%E4%BB%80%E4%B9%88%E6%9C%BA%E5%88%B6&action=edit&redlink=1
[Hbase 1]: http://www.hlwwiki.com/w/index.php?title=Hbase%E8%BF%87%E6%BB%A4%E5%99%A8%E5%AE%9E%E7%8E%B0%E5%8E%9F%E5%88%99&action=edit&redlink=1
[HBase_zookeeper]: http://www.hlwwiki.com/w/index.php?title=HBase%E6%90%AD%E5%BB%BA%E8%BF%87%E7%A8%8B&action=edit&redlink=1
[hbase 1]: http://www.hlwwiki.com/w/index.php?title=Hbase%E5%86%99%E6%95%B0%E6%8D%AE%E5%8E%9F%E7%90%86&action=edit&redlink=1
[hbase 2]: http://www.hlwwiki.com/w/index.php?title=Hbase%E8%AF%BB%E6%95%B0%E6%8D%AE%E5%8E%9F%E7%90%86&action=edit&redlink=1
[hbase 3]: http://www.hlwwiki.com/w/index.php?title=Hbase_%E5%AE%95%E6%9C%BA%E5%A6%82%E4%BD%95%E5%A4%84%E7%90%86&action=edit&redlink=1
[hive]: http://www.hlwwiki.com/w/index.php/%E5%88%86%E7%B1%BB:Hive
[Link 10]: http://www.hlwwiki.com/w/index.php?title=BigData&veaction=edit&section=4
[Link 11]: http://www.hlwwiki.com/w/index.php?title=BigData&action=edit&section=4
[Hive _]: http://www.hlwwiki.com/w/index.php?title=Hive%E6%9C%89%E5%93%AA%E4%BA%9B%E4%BF%9D%E5%AD%98%E5%85%83%E6%95%B0%E6%8D%AE%E7%9A%84%E6%96%B9%E5%BC%8F&action=edit&redlink=1
[hive 1]: http://www.hlwwiki.com/w/index.php?title=Hive%E5%86%85%E9%83%A8%E8%A1%A8%E5%92%8C%E5%A4%96%E9%83%A8%E8%A1%A8%E5%8C%BA%E5%88%AB&action=edit&redlink=1
[hive 2]: http://www.hlwwiki.com/w/index.php?title=%E4%BB%80%E4%B9%88%E6%98%AFhive&action=edit&redlink=1
[hive 3]: http://www.hlwwiki.com/w/index.php?title=Hive_%E5%A6%82%E4%BD%95%E6%9D%83%E9%99%90%E6%8E%A7%E5%88%B6&action=edit&redlink=1
[Link 12]: http://www.hlwwiki.com/w/index.php?title=%E7%94%9F%E4%BA%A7%E7%8E%AF%E5%A2%83%E4%B8%AD%E4%B8%BA%E4%BB%80%E4%B9%88%E5%BB%BA%E8%AE%AE%E4%BD%BF%E7%94%A8%E5%A4%96%E9%83%A8%E8%A1%A8&action=edit&redlink=1
[hive _ hbase]: http://www.hlwwiki.com/w/index.php?title=Hive_%E8%B7%9F_hbase_%E7%9A%84%E5%8C%BA%E5%88%AB%E6%98%AF&action=edit&redlink=1
[spark]: http://www.hlwwiki.com/w/index.php?title=%E5%88%86%E7%B1%BB:Spark&action=edit&redlink=1
[Link 13]: http://www.hlwwiki.com/w/index.php?title=BigData&veaction=edit&section=5
[Link 14]: http://www.hlwwiki.com/w/index.php?title=BigData&action=edit&section=5
[storm]: http://www.hlwwiki.com/w/index.php?title=%E5%88%86%E7%B1%BB:Storm&action=edit&redlink=1