教学视频:深入浅出 Google File System
三剑客:
GFS ,BigTable, Mapreduce
文件系统
存储:
Master(包含Metadata(文件名等信息&索引,索引记录Chunk保存在哪个ChunkServer))—》ChunkServer(记录存在ChunkServer里的Chunk的位置,包含多个Chunk(包含多个block))

每个block里除了存储数据,还存储了一个32bit的checksum,是整个block数据的哈希,用于每次读取数据的时候检查数据是否有错误。
网友评论