IT企业利用云计算平台Hadoop的10种方式
来源:互联网 发布:苹果免费看书软件 编辑:程序博客网 时间:2024/05/29 04:34
如果你是世界上广大Hadoop用户的一员,你肯定知道Google曾经靠着分布式计算技术(Hadoop),在搜索引擎和广告方面取得了举世瞩目的成就。现在的Hadoop不仅是当年的老二Yahoo的专用产品了,从Hadoop长长的用户名单中,可以看到Facebook, 可以看到Linkedin,可以看到Amazon,可以看到EMC, eBay,Tweeter,IBM, Microsoft, Apple, HP…。国内的公司有淘宝、百度等等。而今天我们要探讨的是,Hadoop 作为基础云计算平台,除了广告,IT公司还用哪些方式在利用Hadoop。
1. 在线旅游
云计算供应商Cloudera COO Kirk Dunn 表示,目前上80%的世界在线旅游使用了Cloudera 的Hadoop服务。他没有透露具体的名单,但著名的Orbitz Worldwide是我知道的客户之一。
2. 移动数据
目前Cloudera为美国70%的智能手机提供Hadoop支持,我们可以确定Dunn讲的是无限供应商支持的移动数据储存和处理。
3. 电子商务
Dunn 表示Cloudia为美国超过1000万在线商家提供Hadoop服务,eBay是他们的一个大客户, 因为其要管理一个庞大的个人卖家市场,卖家数量达到1000万以上。而Ebay在用Hadoop服务90天后,纯利润增加了3%。
4. 能源发现
雪佛龙代表解释了他们公司利用Hadoop的实例:通过分类和处理海洋地震数据可以预测石油储备状况。
5. 节能
雪佛龙代表同时还表示Hadoop还用在节能上,雪佛龙利用Hadoop来支持其节能系统,顾客们按照系统提示节能的同时也节省了不少钱。而相关人士甚至表示这个理念可以用到精确和长期的基金预测上。
6. 基础架构管理
越来越多的IT公司在收集和分析他们的服务器数据,在Cloudera讨论会上, NetApp代表表示他们公司利用Hadoop技术从全部的安装点上收集设备logs(超过千万亿的logs数量)。
7. 图片处理
创业公司“Skybox图片”正是利用Hadoop来储存和处理图片的,这些图片是卫星根据地理变化的模式有规律地抓取的高清图片。Skybox最近获得了7000万美元的融资。
8. 欺诈识别
这是个经典实用的话题,这在财政机构和情报机构非常有市场。Cloudera客户之一Zions Bancorporation表示他们利用Hadoop储存一切可能预示欺骗性的用户交易和异常情况数据。
9. IT安全
除了基础架构管理,IT公司们也开始用Hadoop来处理恶意软件和网络攻击数据。去年Trust
就用hadoop为各种IP评定分数,然后各大公司就可以决定是否接受那些恶意IP的来访。
10. 医疗健康
目前Apixio正使用Hadoop来帮助他们对病人的回答做语义分析,从而帮助医生,护士更好的掌控病情。
Hadoop定义:
1. 一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。
2. Hadoop是一套开源的、基础是Java的、目前能够让数千台普通、廉价的服务器组成一个稳定的、强大的集群,使其能够对pb级别的大数据进行存储、计 算。已经具有了强大稳定的生态系统,也具有很多使用的延伸产品。比如做查询的Pig, 做分布式命名服务的ZooKeeper, 做数据库的Hive等等。
Via gigaom
- IT企业利用云计算平台Hadoop的10种方式
- 精简IT,敏捷商道 -- 企业云计算IT基础设施平台架构概览
- 传统IT巨头通过主导开源云计算平台的方式也在进入云服务市场
- 云计算:利用叶子云桌面虚拟化管理平台搭建企业的桌面云,叶子云初始化(三)
- 云计算:利用叶子云桌面虚拟化管理平台搭建企业的桌面云,简介(一)
- 云计算:利用叶子云桌面虚拟化管理平台搭建企业的桌面云,叶子云安装(二)
- 面向企业计算的用友公有云PaaS平台
- hadoop日志分析系统二 第二部分利用hadoop平台进行数据处理 第二中种方式 mapreduce方式
- hadoop日志分析系统二 第二部分利用hadoop平台进行数据处理 第三种方式 hive+sqoop+zookeeper方式
- 云计算:利用叶子云桌面虚拟化管理平台搭建企业的桌面云,首次使用服务器组(四)
- 基于Hadoop的云计算平台搭建(伪分布式)
- Hadoop云计算平台的数据挖掘分析pdf
- Hadoop的十大应用领域 云计算是什么 云计算技术 云计算基础 云计算概念 云计算平台
- IT企业是如何选择容器管理平台的
- 企业IT 的云计算演进路径--软件世界09年12月文章
- Hadoop平台在云计算中的应用
- Hadoop开源云计算平台
- 云计算向企业IT基础架构安全问题发起挑战
- 扩号匹配
- Html5 WebSocket API 的浏览器端简单使用
- Java编程中“为了性能”需做的26件事
- nbu 备份vmware 156错误解决方案
- Android API Demos学习(3) - Persistent State
- IT企业利用云计算平台Hadoop的10种方式
- SQL SERVER 锁 (二相锁)
- object-c math.h里的数学计算公式介绍
- Objective-c读写xml
- AOP实现(三)--spring2.0中pointcut定义
- Netty简介
- ios 动画基础
- word分节符
- AR技术在魔术上的应用II