炼数成金 大数据Hadoop
订阅

Hadoop

hadoop1.0.3真集群安装
hadoop1.0.3真集群安装
实验环境 192.168.56.2 Master.Hadoop 192.168.56.3 Slave1.Hadoop 192.168.56.4 Slave2.Hadoop 一 安装JDK # /etc/profile export JAVA_HOME=/usr/local/java/default export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre ...
详解Hadoop集群 窥探云时代并行处理
详解Hadoop集群 窥探云时代并行处理
本文将着重于讨论Hadoop集群的体系结构和方法,及它如何涉及到网络和服务器基础设施。开始我们先学习一下Hadoop集群运作的基础。Hadoop主要的任务部署分为3个部分,分别是:Client机器,主节点和从节点。主节点主要负 ...
Hadoop的辉煌还能延续多久?
Hadoop的辉煌还能延续多久?
Hadoop技术已经无处不在。不管是好是坏,Hadoop已经成为大数据的代名词。短短几年间,Hadoop从一种边缘技术成为事实上的标准。看来,不仅现在Hadoop是企业大数据的标准,而且在未来,它的地位似乎一时难以动摇。 谷 ...
实现Hadoop快速交互式查询:舍“谷歌Dremel”就是“开源Drill”
实现Hadoop快速交互式查询:舍“谷歌Dremel”就是“开源Drill”
大数据面临的一个很大的问题是大多数分析查询都很缓慢且非交互式。Google的Dremel能以极快的速度处理网络规模的海量数据。据谷歌的研究报告显示,Dremel能以拍字节(petabyte,PB,1PB等于1024TB)的数量级来进行查询 ...
大数据利器:Hadoop的十大应用场景
大数据利器:Hadoop的十大应用场景
谁在用Hadoop?这是个问题。在大数据背景下,Apache Hadoop已经逐渐成为一种标签性,业界对于这一开源分布式技术的了解也在不断加深。但谁才是Hadoop的最大用户呢?首先想到的当然是它的“发源地”,像Google这样的大型 ...
运行Hadoop的六种方式
运行Hadoop的六种方式
咨询顾问公司Ovum的高级分析师Tony Baer最近发表了一篇博客,深入探讨了EMC的Hadoop策略,作为大数据时代下的“标配”技术,一方面客户的需求迫在眉睫,另一方面市场中越来越多的软件或者服务提供商都为用户提供了相 ...
冒Hadoop之大不韪:8种方案取代HDFS
冒Hadoop之大不韪:8种方案取代HDFS
作为支持云计算开源实现的开源软件,Hadoop一路走来,已经成为下一代主流的分布式系统基础架构。这其中,分布式文件系统(HDFS)发挥了重要作用。但Hadoop并不完美。最为讽刺的是,Hadoop最大的缺点之一就是其最大的 ...
Apache Hadoop爆信息泄漏漏洞
Apache Hadoop爆信息泄漏漏洞
Hadoop大潮正在逐渐席卷所有美国的垂直行业,包括金融、传媒、零售、能源、以及制药等。Hadoop在树立大数据概念的同时,还对海量数据进行实时分析,并从分析得出的数据发现趋势,以提高企业赢利的能力。
Hadoop——你应该了解的大数据工具
Hadoop——你应该了解的大数据工具
如今Apache Hadoop已成为大数据行业发展背后的驱动力。Hive和Pig等技术也经常被提到,但是他们都有什么功能,为什么会需要奇怪的名字(如Oozie,ZooKeeper、Flume)。 Hadoop带来了廉价的处理大数据(大数据的数据容 ...
总结10个Hadoop的应用场景
总结10个Hadoop的应用场景
谁在用Hadoop?这是个问题。在大数据背景下,Apache Hadoop已经逐渐成为一种标签性,业界对于这一开源分布式技术的了解也在不断加深。但谁才是Hadoop的最大用户呢?首先想到的当然是它的“发源地”,像Google这样的大 ...
Facebook的Hadoop应用与故障转移方案
Facebook的Hadoop应用与故障转移方案
在《数据大爆炸 一分钟=60秒=海量数据》一文中,我们曾提到在短短的60秒内,Facebook的用户会分享684478条信息,Like按钮被点击34772次。庞大的业务量时刻考验着Facebook的数据处理能力。我们知道,Facebook使用Hado ...
Hadoop成为大数据关键部件
Hadoop成为大数据关键部件
由于认识到Hadoop的巨大潜力,更多的用户在使用现有Hadoop平台技术的同时,着手研发自有的技术,以对Hadoop堆栈进行补充。 如今,Apache的Hadoop技术在帮助企业管理海量数据的过程中变得越来越重要。包括NASA(美国国 ...
给Hadoop一个支点:撬动大数据
给Hadoop一个支点:撬动大数据
大数据大概是继云计算之后,最热门的科技名词了。一些科技厂商不约而同,纷纷打出大数据口号,情况就像云计算热潮一样。那么大数据到底是怎么回事? 大数据照字面翻译,就是"大数据",而这个"大",最起码包含3 ...
大数据案例分析:电信业Hadoop应用分析
大数据案例分析:电信业Hadoop应用分析
Hadoop伴随大数据一同火爆起来。现如今,Hadoop已经无人不知无人不晓。Hadoop从它一诞生的那天开始就与大数据深深地关联到了一起。众所周知,大数据多是出现在这些领域,包括金融、电信、保险以及一些大型互联网企业 ...
浅析Hadoop文件格式
浅析Hadoop文件格式
Hadoop 作为MR 的开源实现,一直以动态运行解析文件格式并获得比MPP数据库快上几倍的装载速度为优势。不过,MPP数据库社区也一直批评Hadoop由于文件格式并非为特定目的而建,因此序列化和反序列化的成本过高。本文介 ...

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

社区热帖

     

    GMT+8, 2019-11-22 16:02 , Processed in 0.072132 second(s), 16 queries .