天天看点

谷歌三篇论文读后感

谷歌三篇重要论文读后感TOC

在老师的引导下,我读了谷歌三篇重要论文,由于计算机知识还相对薄弱,所以不能对文献里的内容读得通透,但脑海里还是搭建起了一个模糊的框架。

Google Mapreduce:一种处理和生成超大数据集的编程模型;

Google File System:一个面向大规模密集型应用、可伸缩的分布式文件系统

Google Bigtable:一个用来处理海量数据的分布式、结构化数据存储系统。

搜索引擎的支撑构架:

各类应用application
算法模型MapReduce
数据模型Bigtable
文件系统GFS
linux file system

这三篇论文所提及到的三大技术——编程/算法、文件系统、存储系统为当下互联网社会中大数据的发展奠定了重要基础。

给我影响最深的是Google新的分布式概念,分布式本身不是一个新的概念,但是在这三篇论文中,分布式的概念更像是微积分。它把复杂的问题分解成无数个简单、规则的问题,分而治之,然后求和,得出结论。

在我看来,不论是Google Bibtable、Google File System还是Google MapReduce,对IT技术者的启示都是巨大的,它让我们懂得的不仅仅技术,更是种思想,Google在系统中始终会人为设定一个权限较高的角色,充当领导者,完成本应该是程序员完成的任务分配或者重新分配,这使得整个系统有较强的自我管理能力,不至于因为有一些必然发生的错误导致系统崩溃。

以上就是我的一些收获,学习路上,且学且思。