1© Copyright 2009 EMC Corporation. All rights reserved.
Intelligent information management
and Hadoop on vCloud
常雷(Chang Lei)
chang_lei@emc.com
EMC中国实验室 (EMC Research China)
堵俊平(Du Junping)
jdu@vmware.com
VMWare
2© Copyright 2009 EMC Corporation. All rights reserved.
EMC中国实验室 (EMC Research China, ERCN)
ERCN于2007年5月在北京成立
ERCN属于EMC技术总裁办公室,
是EMC创新网络和中国卓越集团
(CoE)中最前沿的创新部门
ERCN是EMC在全球研发战略走出
美国本土的第一个研究实验室
ERCN的任务
– 扩展知识 (Expand Knowledge)
– 转化知识 (Transfer Knowledge)
– 利用知识 (Leverage Knowledge)
ERCN
Mission
at CoE
技术探索
Technology Explorations
大学合作
University Collaborations
全球创新
Global Innovation
3© Copyright 2009 EMC Corporation. All rights reserved.
智能云企业信息管理研究项目
智能
云企业信息管理
下一代企业
内容
财务内部控制制度的内容财务内部控制制度的内容人员招聘与配置的内容项目成本控制的内容消防安全演练内容
管理
虚拟化高性
能计算平台
智能搜索与
挖掘服务
4© Copyright 2009 EMC Corporation. All rights reserved.
SAAS
PAAS
IAAS
5© Copyright 2009 EMC Corporation. All rights reserved.
Virtual machine (with ant) Virtual machineVirtual appliance
Crawling (Ajax)
Cross Indexing
Data Mining
Billing
Advertising
Query Evaluation
Access Control
Distributed File system
Parallel Framework
Service API
云企业信息管理
vCompute vStorage vNetwork Availability Scalability …….
…
Shared data
Private data
data
data
data
data
6© Copyright 2009 EMC Corporation. All rights reserved.
虚拟化平台上的高性能计算
物理世界 vs 虚拟世界
代价模型
– 算法优化技术:CPU缓存的缺失率
– 数据库SQL语句优化:I/O代价模型,顺序读和随机读磁盘块
– 并行计算:通信代价…
vCloud环境下的代价模型
– 多个虚拟机共享同一台物理机的硬件资源
– CPU和内存可以很好的共享
– I/O的共享带来的问题
– 存储类型:SAN,NAS…
Hadoop大多用于海量数据处理
– HDFS,MapReduce, HBase…
挑战:Hadoop应该如何改变来适应虚拟化环境
7© Copyright 2009 EMC Corporation. All rights reserved.
AJAX应用数据获取
云计算,SaaS,Web 2.0促
进了Ajax的流行
Ajax应用特征:
– 丰富用户体验
– 网页很多Javascript脚本
– 页面的部分更新
– 单网址界面
Ajax数据获取挑战
– 事件很多,该触发那些事件?
– 需要理解Javascript
ajax.htminteraction DOM Tree
a.htm b.htm
c.htm d.htm
8© Copyright 2009 EMC Corporation. All rights reserved.
智能企业实体搜索
Joe Tucci
属性 (姓名,职位,地址…)
关系网络
图片….
相关文档 (经过分类、聚类、提取等)
9© Copyright 2009 EMC Corporation. All rights reserved.
Intelligent information management �and Hadoop on vCloud
EMC中国实验室 (EMC Research China, ERCN)
智能云企业信息管理研究项目
幻灯片编号 4
幻灯片编号 5
虚拟化平台上的高性能计算
AJAX应用数据获取
智能企业实体搜索
幻灯片编号 9
幻灯片编号 10
本文档为【HiC2009-Intelligent_information_management_and_Hadoop_on_vCloud_EMC】,请使用软件OFFICE或WPS软件打开。作品中的文字与图均可以修改和编辑,
图片更改请在作品中右键图片并更换,文字修改请直接点击文字进行修改,也可以新增和删除文档中的内容。
该文档来自用户分享,如有侵权行为请发邮件ishare@vip.sina.com联系网站客服,我们会及时删除。
[版权声明] 本站所有资料为用户分享产生,若发现您的权利被侵害,请联系客服邮件isharekefu@iask.cn,我们尽快处理。
本作品所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用。
网站提供的党政主题相关内容(国旗、国徽、党徽..)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。