炼数成金 大数据Hadoop
订阅

Hadoop

实战:如何在Linux上安装与配置Hadoop
实战:如何在Linux上安装与配置Hadoop
Hadoop最早是为了在Linux平台上使用而开发的,但是Hadoop在UNIX、Windows和Mac OS X系统上也运行良好。不过,在Windows上运行Hadoop稍显复杂,首先必须安装Cygwin以模拟Linux环境,然后才能安装Hadoop。  在Unix上 ...
Hadoop分布式数据库HBase的数据管理
Hadoop分布式数据库HBase的数据管理
HBase是一个类似Bigtable的分布式数据库,它的大部分特性和Bigtable一样,是一个稀疏的、长期存储的(存在硬盘上)、多维度的排序映射表。这张表的索引是行关键字、列关键字和时间戳。每个值是一个不解释的字符数组,数 ...
原创Hadoop基础题库
原创Hadoop基础题库
原本想出至少50题hadoop, HDFS, MapReduce, Zookeeper相关的基础题,现在暂时不进行了,把已经出的20多道题都奉上。暂时没有了出题的动力,可能觉得这东西出成题也没啥意义。总之权当巩固,各位权当消遣着瞧瞧。//Ha ...
Hadoop运维记录系列(二)
Hadoop运维记录系列(二)
下周准备去某地做Hadoop相关的技术培训,主要负责讲解Hadoop的安装部署和运维部分,赶制了一份PPT,将平时工作中遇到的问题也提取了一下,希望能对Hadoop运维相关人员有所帮助,算是个补上的运维记录吧,错误数据均来 ...
Hadoop运维记录系列(一)
Hadoop运维记录系列(一)
这两天参加了51CTO举办的云计算架构师峰会,办的非常好,很多干货。确实比一些名不副实的所谓大数据实际都是厂商推销产品的会议要强得多。但是其实这事跟Hadoop运维没关系,但是这两天集群发生的故障影响了我听报告。 ...
Hadoop专家分享大数据技术工具与最佳实践
Hadoop专家分享大数据技术工具与最佳实践
11月30日-12月1日,Hadoop与大数据技术大会(HBTC 2012)在北京新云南皇冠假日酒店已经成功落下帷幕,但留给整个技术界的深思还有很多。会场上,五十余位讲师干料十足的实践经验掀起了场内场外阵阵讨论的热浪,五大分 ...
Hadoop之父Doug Cutting勾勒大数据平台的未来
Hadoop之父Doug Cutting勾勒大数据平台的未来
Apache Haddo是一个批处理计算引擎,它是大数据核心的开源软件框架。Hadoop并不适用于真正实时数据可见性所需要的在线互动式数据处理,是这样的吗?Hadoop创造者兼Apache Hadoop项目创始人(同时也是Cloudera公司首席架 ...
Hadoop Job Tuning
Hadoop Job Tuning
Hadoop平台已经成为了大多数公司的分布式数据处理平台,随着数据规模的越来越大,对集群的压力也越来越大,集群的每个节点负担自然就会加重,而且集群内部的网络带宽有限,数据交换吞吐量也在面临考验,由此引发了人 ...
Hadoop中的三种调度算法
Hadoop中的三种调度算法
Hadoop 中的调度Hadoop 是一个通用系统,可以对一组分散的节点上的数据进行高性能处理。这样的定义也说明,Hadoop 是一个多任务系统,它可以同时为多个用户、多个作业处理多个数据集。这种多处理的能力也意味着 Hado ...
利用Hadoop保障大数据安全的九个技巧
利用Hadoop保障大数据安全的九个技巧
当企业转变为数据驱动的机器时,其潜力是巨大的:企业所拥有的数据可能成为获得竞争优势的关键。因此,企业的数据和基础设施的安全也变得比以往任何时候都重要。 在许多情况下,企业或组织都可能得到Forrester所说的 ...
Hadoop并行计算原理与分布式并发编程
Hadoop并行计算原理与分布式并发编程
我们通常说的分布式系统其实是分布式软件系统,即支持分布式处理的软件系统,它是在通信网络互联的多处理机体系结构上执行任务的,包括分布式操作系统、分布式程序设计语言及其编译(解释)系统、分布式文件系统和分布 ...
Hadoop在企业中运行的6种标配
Hadoop在企业中运行的6种标配
咨询顾问公司Ovum的高级分析师Tony Baer最近发表了一篇博客,深入探讨了EMC的Hadoop策略,作为大数据时代下的“标配”技术,一方面客户的需求迫在眉睫,另一方面市场中越来越多的软件或者服务提供商都为用户提供了相 ...
开源八预言:桌面linux将死Hadoop要火
开源八预言:桌面linux将死Hadoop要火
近两年,在IT圈中开源这个词已经变得越来越常见,人人开口闭口谈云计算OpenStack、大数据Hadoop、手机Android,开源Linux。开发者、运维人员和IT媒体们也开始关注Eucalyptus、OpenStack、Hadoop、Ubuntu这些开源项目 ...
Hadoop 回收站trash设置
Hadoop 回收站trash设置
Hadoop 回收站trash设置$ vi core-site.xml ?xml version=1.0??xml-stylesheet type=text/xsl href=configuration.xsl?!-- Put site-specific property overrides in this file. --configurationpropertynamefs.defa ...
【呕心沥血版】 完全分布式模式hadoop集群安装与配置
【呕心沥血版】 完全分布式模式hadoop集群安装与配置
终于成功了感谢天 感谢地 感谢大老虎 感谢海兄sun折磨了我好几天 完全分布式模式下hadoop安装与配置终于安装好了,下面我把步骤一一写出来 一、实验环境1.安装环境简介物理笔记本:i52.27GHz (4 CPU)4G内存320GB硬盘 ...

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

社区热帖

     

    GMT+8, 2019-7-18 03:21 , Processed in 0.140796 second(s), 16 queries .