1、hadoop运行的原理?
2、mapreduce的原理?
3、HDFS存储的机制?
4、举一个简单的例子说明mapreduce是怎么来运行的 ?
5、面试的人给你出一些问题,让你用mapreduce来实现?
比如:现在有10个文件夹,每个文件夹都有1000000个url.现在让你找出top1000000url。
6、hadoop中Combiner的作用?
成都-小白(393283308) 2011/9/30 15:05:51
再发个面试时的经典题目
现有1亿个整数均匀分布,如果要得到前1K个最大的数,求最优的算法。
(先不考虑内存的限制,也不考虑读写外存,时间复杂度最少的算法即为最优算法)
我先说下我的想法:分块,比如分1W块,每块1W个,然后分别找出每块最大值,从这最大的1W个值中找最大1K个,那么其他的9K个最大值所在的块即可扔掉,从剩下的最大的1K个值所在的块中找前1K个即可。那么原问题的规模就缩小到了1/10。
问题:
1.这种分块方法的最优时间复杂度。
2.如何分块达到最优。比如也可分10W块,每块1000个数。则问题规模可降到原来1/100。但事实上复杂度并没降低。
3.还有没更好更优的方法解决这个问题。
分享到:
相关推荐
面试hadoop可能被问到的问题,你能回答出几个.docx
Hadoop_Spark相关面试问题总结 - Hadoop知识库.pdf Hadoop_Spark相关面试问题总结 - Hadoop知识库.pdf Hadoop_Spark相关面试问题总结 - Hadoop知识库.pdf
面试hadoop可能被问到的问题你能回答出几个 ? 1、hadoop运行的原理? 2、mapreduce的原理? 3、HDFS存储的机制? 4、举一个简单的例子说明mapreduce是怎么来运行的 ? 5、面试的人给你出一些问题,让你用mapreduce来...
Hadoop、hive、hbase常见面试题!!! Hadoop、hive、hbase常见面试题!!! Hadoop、hive、hbase常见面试题!!! Hadoop、hive、hbase常见面试题!!!
本文档总结了企业面试过程中所有可能遇到的Hadoop生态相关的问题,以及具体的答案
Hadoop大数据常见面试题库
Hadoop面试100题.pdf
超人学院hadoop面试葵花宝典
Hadoop面试100题
Hadoop面试题目及答案.pdfHadoop面试题目及答案.pdfHadoop面试题目及答案.pdfHadoop面试题目及答案.pdfHadoop面试题目及答案.pdfHadoop面试题目及答案.pdfHadoop面试题目及答案.pdfHadoop面试题目及答案.pdfHadoop...
大数据面试资料,很全面,包括新手最关注的的数据量和处理时间
国内第一部hadoop面试葵花宝典,如果从事找hadoop云方面可,这个必看!
Hadoop和hive大数据面试题,压缩包一共有三个文件一共超过两百个大数据就业实用相关面试题
常见java面试,大数据方面,hadoop原理,hive,hbase,spark面试等的常问问题
hadoop面试
面试题汇总,比较全面的总结和题型筛选,面试题汇总,比较全面的总结和题型筛选,
整理的一些hadoop面试题及答案,希望对你有帮助 整理的一些hadoop面试题及答案,希望对你有帮助
Hadoop面试45个题目及答案.doc Hadoop面试45个题目及答案.doc Hadoop面试45个题目及答案.doc