实战派带你玩真正的大数据,14周高强度特训!

锋云网

 找回密码
 快速注册

QQ登录

只需一步,快速开始

搜索
查看: 8698|回复: 14

Hadoop源代码分析之HDFS篇

  [复制链接]
发表于 2011-1-13 17:36:56 | 显示全部楼层 |阅读模式
本帖最后由 cloudcomputing 于 2011-1-13 17:43 编辑

本文的源代码分析结合了技术博客和hadoop0.19.0版本的源代码,并融入了自己的理解。

本文的分析以http://caibinbupt.javaeye.com/为基础,但侧重点不同。本文分析的目标如下:
1,删繁就简,考虑一个最简单、能跑起来的HDFS是如何实现的,对于一些系统升级等细节不涉及。
2,理清系统的主要模块之间的交互关系,便于从整体上把握系统。对模块采用内外两种方式分析。先搞明白模块的外部接口,干什么用,怎么用。再考虑模块的内部是如何怎么实现的。技术博客中对模块内部是如何实现的解释比较多,本文更多的从如何使用模块的角度讲
3,从改进和研究的角度去看系统,重点关注有研究价值部分的代码(例如,块的放置策略,MapReduce的调度策略)实现,找到相关的代码,搞清楚修改代码需要使用哪些API,目前的实现策略是什么。



下载: Hadoop源代码分析之HDFS篇【w-w.cn】.rar (1.18 MB, 下载次数: 80)
学大数据 到大讲台
回复

使用道具 举报

匿名  发表于 2011-1-14 15:15:53
路过,向研究源码的人致敬
学大数据 到大讲台
回复 支持 反对

使用道具

发表于 2011-1-17 12:49:45 | 显示全部楼层
致敬,一样儿一样儿的
学大数据 到大讲台
回复 支持 反对

使用道具 举报

发表于 2011-1-25 08:01:53 | 显示全部楼层
我也致敬
学大数据 到大讲台
回复 支持 反对

使用道具 举报

发表于 2011-2-14 17:48:53 | 显示全部楼层
thank you for sharing this
学大数据 到大讲台
回复 支持 反对

使用道具 举报

发表于 2011-4-25 11:13:31 | 显示全部楼层
楼主分析的很好,学习了~
学大数据 到大讲台
回复 支持 反对

使用道具 举报

发表于 2011-6-10 16:23:15 | 显示全部楼层
谢谢分享
学大数据 到大讲台
回复 支持 反对

使用道具 举报

发表于 2011-8-17 16:37:10 | 显示全部楼层
牛人!顶一下
学大数据 到大讲台
回复 支持 反对

使用道具 举报

发表于 2011-11-13 18:17:09 | 显示全部楼层
lz,thx~~~
学大数据 到大讲台
回复 支持 反对

使用道具 举报

发表于 2012-3-9 13:26:48 | 显示全部楼层
不错的资料,谢谢分享
学大数据 到大讲台
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 快速注册

本版积分规则

在线咨询|关于锋云|联系我们|手机版|投诉建议|版权声明|云计算|Hadoop|大数据|锋云网 ( 京ICP备13050990号 )

这是云计算时代的精英部落,这是中国最大的云计算社区 —— 锋云网(sharpcloud.cn)!

本站CDN/存储服务由本站CDN/存储服务由又拍云提供提供

Powered by Discuz! X3.2

© 2001-2015 Sharpcloud.cn

 

锋云网官方QQ群

中国云计算精英群(ID:64924638)中国云计算精英群      Hadoop技术交流群②(ID:25728812)Hadoop技术交流群②      Spark技术交流群(ID:413581066)Spark技术交流群

Hadoop技术交流群(ID:113156288,2000人群已满)

返回顶部