云计算与 大规模数据并行处理技术 黄宜华 南京大学 计算机科学与技术系 软件新技术国家重点实验室 妩媚人生

http://www.5may.net/妩媚人生 http://www.5may.net/

主要内容

第一部分：云计算技术简介 简要介绍云计算及其主要特点，云计算发展背景与现状，云计算的 关键技术

第二部分：MapReduce大规模数据并行处理技术 简要介绍Google和Hadoop MapReduce大规模数据并行处理技术 第三部分：大规模数据并行处理技术研究与应用 介绍大规模数据并行处理技术研究，主要讨论大规模数据并行算法 研究、大规模数据索引查询技术、以及Hadoop改进和优化技术研究

妩媚人生

http://www.5may.net/妩媚人生 http://www.5may.net/

第一部分 云计算技术

妩媚人生

http://www.5may.net/妩媚人生 http://www.5may.net/

云计算技术简介

什么是云计算？

Cloud Computing, Utility Computing, Service Computing…… 通过集中式远程计算资源池，以按需分配方式，为终端用户提供 强大而廉价的计算服务能力

工业化部署、商业化运作的大规模计算能力

一种新的、可商业化的计算和服务模式

计算能力像水电煤气一样，按需分配使用

资源池物理上对用户透明就像在云端一样

妩媚人生

http://www.5may.net/妩媚人生 http://www.5may.net/

云计算的主要特点

妩媚人生

• http://www.5may.net/

• 透明的云端计算服务

• “无限”多的计算资源，强大的计算能力

• 按需分配，弹性伸缩，取用方便，成本低廉

• 资源共享，降低企业IT基础设施建设维护费用

• 应用部署快速而容易

• 软件/应用功能更新方便快捷

• 节省能源，绿色环保

• 集计算技术之大成，具有很强的技术性、工程型特点

妩媚人生 http://www.5may.net/

云计算的分类

按云计算服务层面进行分类

SaaS ： Software as a Service 提供各种应用软件服务

PaaS ： Platform as a Service 提供软件支撑平台服务

IaaS ： Infrastructure as a Service 提供接近于裸机 ( 物理机或虚拟机 ) 的计算资源 和基础设施服务

妩媚人生

http://www.5may.net/妩媚人生 http://www.5may.net/

云计算的分类 按云计算服务层面进行分类

云计算应用服务软件
SaaS
如腾讯云词典
云计算软件支撑平台 PaaS 云计算
如Google AppEng
应用
云计算硬件平台
IaaS
如Amazon EC2
妩媚人生
http://www.5may.net/妩媚人生 http://www.5may.net/

云计算的分类

按云计算系统类型进行分类

• 美国联邦云计算战略报告中，定义了 4 中云： 公用云：提供面向社会大众、公共群体的云计算服务 如 Amazon 云平台， Google AppEng

公有云有很多优点，但最大的一个缺点是难以保证数据的 私密性

私有云：提供面向应用行业 / 组织内的云计算服务 如政府机关、移动通信、学校等内部使用的云平台 私有云可较好地解决数据私密性问题，对移动通信、公安 等数据私密性要求特别高的企业或机构，建设私有云将是 一个必然的选择

妩媚人生 http://www.5may.net/

云计算的分类

按云计算系统类型进行分类

• 社区云：提供面向社团组织内用户使用的云计算平台 如美国航天局(NASA) Nebula云平台为NASA内的研究人员

• 提供快速的IT访问服务

• 混合云：包含以上 2 种以上云计算类型的混合式云平台

妩媚人生

http://www.5may.net/妩媚人生 http://www.5may.net/

云计算发展背景

云计算技术的争议 反方：云计算是业界的商业性行为 正方：云计算是计算技术的重大发展趋势

个人认为：云计算技术有其发展的必然性和必要性

妩媚人生

http://www.5may.net/妩媚人生 http://www.5may.net/