计算机hadoop学习过程个人总结
我在本学期的小组学习中主要担任的工作是基础了解hadoop架构的工作原理和优势。并为大家进行了hadoop的入门级讲解。下面我就对我的学习过程做一个
总结。
Hadoop入门
Hadoop是一个分布式系统基础架构。用户可以
……(新文秘网https://www.wm114.cn省略212字,正式会员可完整阅读)……
件,使用传统的系统可能会花费非常长的时间,但是使用hadoop就会解决这一问题。Hadoop具有高可靠性、高扩展性、高效性、高容错性。Hadoop是由MapReduce实现的。MapReduce模型就是就是为一个复杂的问题提供一个简单的接口,将众多具有相同特征的有用数据统一处理,提高程序的并行效率。而MapReduce所完成的就是将隐藏并行化、容错、负载均衡的那些杂乱细节放在一个库中。MapReduce库为用户提供了两个函数:Map函数、Reduce函数。Map函数负责接受用户的一个输入对,然后找到他们中间的具有相同特征的数据。Reduce函数是由用户自定义的,用来统一处理这些数据。
个人感受
说实话,在老师交给我们这个任务之前,我们并不能真正说清楚什么是云计算,不理解云计算的优势。所以刚开始的学习是云里雾里的,分不清方向,但是随着对MapReduce的学习,我们渐渐明白了什么是云计算。明白了云计算在大数据计算上的优势。然后渐渐学习了hadoop架构,逐步让自己对云计算有了一个深入一点的了解。通过这次的 ……(未完,全文共935字,当前仅显示594字,请阅读下面提示信息。
收藏《计算机hadoop学习过程个人总结》)