主页 > 云储存 > > 正文

网站建设_华为云服_哪家好

来源:胜利云 发布时间:2021-09-25 16:42 标签:华为网站建设哪家
浏览:

时不时你会听到关于Hadoop、大数据、HANA——Hadoop集成。这些是什么?。作为Basis管理员,除了Basis之外,您还可以学习什么来提高您的域技能(请注意,SAP Basis本身就是一个大世界,拥有如此多的SAP产品、数据库、附加组件、硬件平台等。)

在SCN论坛上已经有很多博客详细讨论了大数据、Hadoop、HIVE等,其中一些非常有用,比如

尽管Apache Hadoop是开源的,但基本上有两种风格,一种来自Hortonworks,另一种来自Cloudera。它们都提供了已经部署的虚拟机,您可以下载这些虚拟机并在笔记本电脑上运行vmware或oracle virtualbox软件。我在博客中向您展示了如何实际部署一个apachehadoop解决方案,轻淘客旗舰版,它的组件包括Hive、Hbase、Zookeeper、Yarn/Map reduce和其他一些使用apacheambari的组件。apacheambari是一个在多节点机器中自动构建Hadoop集群的工具。与HANA的情况一样,Hadoop不需要昂贵的认证硬件,尽管它要求您拥有生产级硬件,这样由于硬件故障(特别是生产中的硬件故障)造成的中断变化就最小环境。那里下面是使用Ambari部署Hadoop集群的三个步骤。一个使用存储库构建和部署服务器,第二个部署ambari,第三个使用ambari&repositories将Hadoop部署到多节点集群。我们还需要看看ambari与hadoop的兼容性。下表指定了哪个Ambari版本支持哪个Hadoop版本

在这里,我们将通过准备主机服务器、下载repo文件、部署httpd web服务器以及最终在httpd服务器中部署repo文件来准备Ambari和Hadoop的服务器存储库,以用于部署Ambari,然后使用Ambari在2节点环境中部署Hadoop集群

主机Pr分离:检查文档"Hortonworks数据平台:自动安装Ambari"了解更多先决条件

2.确保节点具有完整的主机名。运行命令"hostname-f"检查

3.确保您有以下LINUX软件

4.确保您安装了Java。运行命令"yum install java-1.7.0-openjdk"

5.数据库和内存要求–Ambari需要一个关系数据库来存储有关集群配置和拓扑的信息。如果使用Hive或Oozie安装HDP Stack,它们还需要关系数据库。

Ambari:默认情况下,将在Ambari服务器主机上安装PostgreSQL实例。

Hive:默认情况下(在RHEL/CentOS/Oracle Linux 6上),Ambari将在Hive元存储主机上安装MySQL实例。

Oozie:默认情况下,大数据趋势,Ambari将在Oozie服务器主机上安装一个Derby实例

您也可以使用PostgreSQL、MySQL或Oracle的现有实例。对于Ambari数据库,如果您使用现有的Oracle数据库,请确保

Oracle侦听器在8080以外的端口上运行,以避免与默认的Ambari端口冲突。

还要确保每个主机上至少有8 GB的ram。Apache建议您至少有1 GB的ram可用。

6。创建无密码SSH。要让Ambari服务器在所有集群主机上自动安装Ambari代理,必须在Ambari服务器主机和集群中的所有其他主机之间设置无密码SSH连接。Ambari服务器主机使用SSH公钥认证来远程访问和安装Ambari代理。

.SSH/id\u rsa.SSH/id_rsa.pub公司

>> [根@adh-node-003/]#scp公司根@adh-node-001:/root/.ssh/id_rsa.pub公司/根/.ssh/

cat id_rsa.pub公司>>授权密钥

chmod 700~/.ssh chmod 600~/.ssh/授权密钥

7每个HDP服务都需要一个服务用户帐户。Ambari安装向导创建新的并保留任何现有的服务用户

8.在群集和浏览器主机上启用NTP

9.配置iptables:为了使Ambari在安装过程中与其部署和管理的主机进行通信,某些端口必须是打开和可用的。最简单的方法是暂时禁用iptables,云是什么,如下:

chkconfig iptables off/etc/init.d/iptables stop

安装完成后可以重新启动iptables。如果您环境中的安全协议阻止禁用iptables,您可以继续启用iptables,前提是所有必需的端口都已打开且可用。

10.禁用SELinux和PackageKit并检查umask值:要永久禁用SELinux,请在/etc/SELinux/config中设置SELinux=disabled

。这确保了SELinux在重启机器后不会自动打开,要将umask值设置为022,以root身份在所有主机上运行以下命令,

vi/etc/profile

然后,附加以下行:umask 022

设置本地存储库

如果您的群集位于防火墙后面,阻止或限制Internet访问,则可以使用本地存储库安装Ambari和堆栈,否则可以使用Internet访问Hortonwork存储库

1。获取存储库

Ambari存储库:如果您没有互联网接入来设置Ambari存储库,我的免费云,使用适用于您的操作系统系列的链接下载包含该软件的tarball。

Ambari 2.0.1 tarball链接:RHEL/CentOS/Oracle Linux 6

wget-nv

HDP堆栈存储库:如果您没有互联网接入来设置堆栈存储库,使用适用于您的操作系统系列的链接下载包含您计划安装的HDP堆栈版本的tarball。

HDP 2.2 tarball链接:RHEL/CentOS/Oracle Linux 6

wget-nv

wget-内华达州

2. 要开始设置本地存储库,请完成以下先决条件:

yum install yum utils createrepo

$tar xvf httpd-2.4.12.tar

$cd httpd-2.4.12

发表评论
验证码: 点击我更换图片

注:网友评论仅供其表达个人看法,并不代表本站立场。

热门文章

  • 对象存储_网站集约化建设_哪家好
    对象存储_网站集约化建设_哪家好

    对象存储_网站集约化建设_哪家好

    当戴夫·麦克卢尔首次提出海盗指标的概念时,它震撼了创业界的核心。尽管你现在可能知道他是500家初创企业的幕后推手,但在贝宝(PayPal)上市前担任...

  • 数据库_数据库事务原理_安全稳定
    <strong>数据库_数据库事务原理_安全稳定</strong>

    数据库_数据库事务原理_安全稳定

    为CloudFlare客户提供对源站的免费和高性能加密2014年秋季,CloudFlare推出了Universal SSL,并将通过HTTPS访问的网站数量增加了一倍。在短短几天内,我们颁发了...

  • 百度云_企业邮箱怎么设置签名_排行榜
    百度云_企业邮箱怎么设置签名_排行榜

    百度云_企业邮箱怎么设置签名_排行榜

    在快节奏的销售世界里,时间是无价的。这正是为什么你需要停止切换标签,使用新的Pipedrive Chrome扩展直接从Gmail使用Pipedrive的强大功能。如果你是一个狂...

  • 游戏服务器_节点服务器_优惠
    <strong>游戏服务器_节点服务器_优惠</strong>

    游戏服务器_节点服务器_优惠

    nomad0.11为任务引入了生命周期部分,可以用来表示任务依赖关系。这可以用来表示任务组中任务之间的任务依赖关系,甚至可以利用consur来表示任务间的任...

  • 企业邮箱_华为云techwave_企业级
    <strong>企业邮箱_华为云techwave_企业级</strong>

    企业邮箱_华为云techwave_企业级

    遵守一套不断发展的数据隐私法规的需求可能看起来很繁重,或者会导致公司停滞不前,不知道下一步该采取什么措施。如果不了解这些法规对日常运营的...

云储存

更多 >
  • <strong>香港带宽_视频云存储_0元</strong>
    香港带宽_视频云存储_0元

    这些年来,我参加过几次同性恋、双性恋、双性恋和双性恋的游行,在澳大利亚生活时,我曾多次为悉尼同性恋狂欢节做志愿者。现在,自从2014年我转到帕...

  • <strong>免备案CDN_备案老域名出售_三重好礼</strong>
    免备案CDN_备案老域名出售_三重好礼

    SAP Korea于6月10日和11日举办的首个"设计思维弹出式学校"取得了巨大成功。首尔的设计与共同创新中心团队领导了此次活动,该活动是与韩国最有影响力的商...

云储存天翼云_3096天百度云链接资源_返现
云储存百度云_服务器海外_最新活动
云储存CDN_腾讯的企业邮箱_9元
云储存云数据库_asp网站空间_学生机
云储存香港服务器_vpn服务器设置_精选特惠