云计算 列表 - 第 1 页

使用单节点集群安装 Hadoop

使用单节点集群安装 Hadoop Hadoop 是一种技术,可以跨集群对大量数据集进行分布式处理,范围从一台服务器到数千台服务器,确保高度的容错。 Hadoop 是一个框架,由以下基本模块组成: Hadoop Common - 包含其他 Hadoop 模块所需的库和实用程序 Hadoop 分布式文件系统 (HDFS) – 一种将数据存储在商用机器上的分布式文件系统,在整个集群中提供非常高的

Views:0  2020-09-17

如何在不使用 SSH 的情况下运行 Hadoop

如何在不使用 SSH 的情况下运行 Hadoop hadoop/bin 目录中的 start-all.sh 和 stop-all.sh 脚本将使用 SSH 启动一些 Hadoop 守护进程。 如果由于某种原因 SSH 在服务器上不可用,请按照以下步骤在不使用 SSH 的情况下运行 Hadoop。 目标是用“hadoop-daemon.sh”修改所有“hadoop-daemons.sh”。 “had

Views:0  2020-09-17

HDPCA 向现有集群添加新节点

HDPCA 向现有集群添加新节点 向 Live 集群添加新节点几乎类似于使用 ambari 安装新的 HDP 集群。 要添加新主机,我们必须启用从 ambari-server 到新主机的无密码 ssh。 准备工作 确保我们可以从 ambari-server 到要添加的新主机执行无密码 ssh。 我们已经在 ambari-server 中生成了私有 ssh 密钥(这在我们第一次安装 H

Views:0  2020-09-17

Hadoop MapReduce 框架

Hadoop MapReduce 框架 这篇博文介绍了 MapReduce 框架,该框架使我们能够以可靠和容错的方式在大型商用硬件集群上编写并行处理大量数据的应用程序。 此外,这篇文章描述了 MapReduce 的架构组件并列出了使用 MapReduce 的好处。 MapReduce 它是一个软件框架,使我们能够编写处理大量数据的应用程序,以可靠且容错的方式在大型商用硬件集群上并行处理。 在

Views:0  2020-09-17