搜书网 本次搜索耗时 0.008 秒,为您找到 457 个相关结果.
  • 1.2 Hadoop项目及其结构

    1.2 Hadoop项目及其结构 1.2 Hadoop项目及其结构 现在Hadoop已经发展成为包含很多项目的集合。虽然其核心内容是MapReduce和Hadoop分布式文件系统,但与Hadoop相关的Common、Avro、Chukwa、Hive、HBase等项目也是不可或缺的。它们提供了互补性服务或在核心层上提供了更高层的服务。图1-1是Hado...
  • 18.2 Hadoop Eclipse的介绍和使用

    18.2 Hadoop Eclipse的介绍和使用 18.2.1 Hadoop Eclipse的介绍 18.2 Hadoop Eclipse的介绍和使用 18.2.1 Hadoop Eclipse的介绍 Hadoop是一个强大的并行框架,它允许任务在其分布式集群上并行处理。但是编写、调试Hadoop程序都有很大的难度。正因为如此,Hadoop的...
  • 1.1.3 Hadoop的功能与作用

    1.1.3 Hadoop的功能与作用 1.1.3 Hadoop的功能与作用 我们为什么需要Hadoop呢?众所周知,现代社会的信息增长速度很快,这些信息中又积累着大量数据,其中包括个人数据和工业数据。预计到2020年,每年产生的数字信息中将会有超过1/3的内容驻留在云平台中或借助云平台处理。我们需要对这些数据进行分析处理,以获取更多有价值的信息。那么...
  • 1.1.4 Hadoop的优势

    1.1.4 Hadoop的优势 1.1.4 Hadoop的优势 Hadoop是一个能够让用户轻松架构和使用的分布式计算平台。用户可以轻松地在Hadoop上开发运行处理海量数据的应用程序。它主要有以下几个优点: 高可靠性。Hadoop按位存储和处理数据的能力值得人们信赖。 高扩展性。Hadoop是在可用的计算机集簇间分配数据完成计算任务的,这些集簇...
  • 附录B Hadoop默认HTTP端口号以及HTTP地址

    附录B Hadoop默认HTTP端口号以及HTTP地址 附录B Hadoop默认HTTP端口号以及HTTP地址 为了便于用户通过这些Web UI查看Hadoop当前运行状态,Hadoop对外提供了一些访问URL。这些URL的默认端口号汇总如表B-1所示。 Hadoop守护进程向用户提供的HTTP地址有以下几项。 ❑/logLevel:查看...
  • 13.2 Mahout的安装和配置

    13.2 Mahout的安装和配置 Config Mahout 13.2 Mahout的安装和配置 Mahout是一个开源软件,因此它有两种安装方式:一种是下载已经编译好的二进制文件进行安装(快速安装);一种是先下载源代码,然后再对源代码进行编译,最后再安装(编译安装)。下面我们分别对其进行介绍。 1.快速安装 下面为该方式的具体安装步骤: ...
  • 18.1 Hadoop Studio的介绍和使用

    18.1 Hadoop Studio的介绍和使用 18.1.1 Hadoop Studio的介绍 18.1 Hadoop Studio的介绍和使用 18.1.1 Hadoop Studio的介绍 Hadoop Studio是一个加快Hadoop开发进程的可视化开发环境。Hadoop Studio通过降低Hadoop的使用复杂度,让用户在更少的步...
  • 11.5 小结

    11.5 小结 11.5 小结 本章概括了旧版本(1.0之前版本)中Hadoop存在的安全问题,以及对安全的需求,并介绍了Hadoop 1.0中新加入的安全机制实现方案。 Hadoop 1. 0加入了Kerberos与令牌相结合的身份认证和基于ACL(Access Control List)的服务访问控制机制。客户端第一次访问服务器端时需进行Ker...
  • 大数据先行者

    35 2025-01-31 《大数据在中国》
    大数据先行者 中国正处于大数据的起步阶段,国外先行者的经验对我们具有十分重要的参考和借鉴价值。全世界的富有远见者早在多年前就已经开始了你追我赶,在自己大数据中心的建设上各显神通,力争在这场战争中取得先发优势。 ☆英特尔(Intel) 英特尔公司是全球最大的半导体芯片制造商,成立于1968年,具有几十年产品创新和市场领导的历史。全球第一个微处理器就由它...
  • 第2章 MapReduce设计理念与基本架构

    第2章 MapReduce设计理念与基本架构 2.1 Hadoop发展史 2.1.1 Hadoop产生背景 第2章 MapReduce设计理念与基本架构 第1章介绍了Hadoop学习环境的搭建方法,这是学习Hadoop需要进行的最基本的准备工作。而在这一章中,我们将从设计理念和基本架构方面对Hadoop MapReduce进行介绍,同样,这属于准...