ambari

Ambari HDP throwing FileNotFoundException for mapreduce.tar.gz while submitting the mapreduce job

末鹿安然 提交于 2020-06-27 17:20:05
问题 After installing a new Hadoop cluster using Ambari, I tried to submit a mapreduce job, but it failed throwing an error. Error: java.io.FileNotFoundException: File does not exist: hdfs://xx-xx-xxx-x:8020/hdp/apps/2.2.9.0-3393/mapreduce/mapreduce.tar.gz 回答1: Issue resolved after restarting all components from Ambari UI. 来源: https://stackoverflow.com/questions/36687032/ambari-hdp-throwing-filenotfoundexception-for-mapreduce-tar-gz-while-submitting

Error building ambari 2.7.5 Centos 7 (fails at ambari-admin step)

纵饮孤独 提交于 2020-06-26 06:14:52
问题 I am trying to build ambari 2.7.5 on Centos 7 per these instructions, which is relatively straightforward. However, when the build gets to ambari-admin, it fails. There are several posts out there that describe a supposed solution to this- which is editing "...ambari-admin/pom.xml" and setting the node and npm versions to match the versions installed on the server. Sadly, this does not work for me. And I have tried the versions of node/npm that come with Centos(EPEL), I have tried the LATEST

Ambari 2.7.5 installation failure on CentOS 7

不想你离开。 提交于 2020-05-14 02:26:04
问题 I am installing Apache Ambari 2.7.5 on a CentOS 7 machine. I am following the installation guide from the Apache website. The last command of Step 1 of the guide mvn -B clean install rpm:rpm -DnewVersion=2.7.5.0.0 -DbuildNumber=5895e4ed6b30a2da8a90fee2403b6cab91d19972 -DskipTests -Dpython.ver="python >= 2.6" -e ends with the following error: [INFO] ------------------------------------------------------------------------ [INFO] BUILD FAILURE [INFO] ---------------------------------------------

Ambari 2.7.5 installation failure on CentOS 7

时光怂恿深爱的人放手 提交于 2020-05-14 02:22:12
问题 I am installing Apache Ambari 2.7.5 on a CentOS 7 machine. I am following the installation guide from the Apache website. The last command of Step 1 of the guide mvn -B clean install rpm:rpm -DnewVersion=2.7.5.0.0 -DbuildNumber=5895e4ed6b30a2da8a90fee2403b6cab91d19972 -DskipTests -Dpython.ver="python >= 2.6" -e ends with the following error: [INFO] ------------------------------------------------------------------------ [INFO] BUILD FAILURE [INFO] ---------------------------------------------

ambari集成impala

旧巷老猫 提交于 2020-03-24 02:29:33
1.查看hdp版本,可在ambari-agent节点上查看 VERSION=`hdp-select status hadoop-client | sed 's/hadoop-client - \([0-9]\.[0-9]\).*/\1/'` 2.server节点上git克隆代码,其中下方$VERSION指的是上方的版本号 sudo git clone https://github.com/cas-bigdatalab/ambari-impala-service.git /var/lib/ambari-server/resources/stacks/HDP/$VERSION/services/IMPALA 如果出现SSL问题,可关闭SSL验证再执行 git config --global http.sslVerify false git config --global http.sslversion tlsv1 如果你没有安装git,可到 https://github.com/cas-bigdatalab/ambari-impala-service 地址上下载代码,放到目录/var/lib/ambari-server/resources/stacks/HDP/$VERSION/services/IMPALA下 如果你的git安装有任何问题,参考文章后方附录git的安装升级配置 3

在Ambari上添加Kerberos

拥有回忆 提交于 2020-03-18 13:31:26
一、准备阶段 1.下载jce并解压 jce下载地址: http://www.oracle.com/technetwork/java/javase/downloads/jce8-download-2133166.html [root@manager ~]# ls jce_policy-8.zip [root@manager ~]# unzip -o -j -q jce_policy-8.zip -d /usr/local/jdk/jre/lib/security/ 2.安装krb5 [root@manager ~]# yum install -y krb5-libs krb5-workstation 3.修改配置文件 [root@manager ~]# cat /etc/krb5.conf # Configuration snippets may be placed in this directory as well includedir /etc/krb5.conf.d/ [logging] default = FILE:/var/log/krb5libs.log kdc = FILE:/var/log/krb5kdc.log admin_server = FILE:/var/log/kadmind.log [libdefaults] dns_lookup_realm =

Ambari集群启动失败解决办法ERROR: Exiting with exit code -1

守給你的承諾、 提交于 2020-03-05 13:58:44
导入jar包时,出现: Using python /usr/bin/python Setup ambari-server ERROR: Exiting with exit code 1. REASON: File /usr/share/java/mysql-connect-java.jar does not exist ! 解决方案: ambari-server setup \ --jdbc-db = mysql \ --jdbc-driver = /usr/share/java/mysql-connector-java.jar 这里是connector,“tor” 来源: CSDN 作者: 樱浅沐冰 链接: https://blog.csdn.net/qq_45300786/article/details/104669798

Ambari 2.7.3.0 安装部署 hadoop 3.1.0.0 集群视频完整版

痞子三分冷 提交于 2020-02-25 19:14:29
一、前言 很多小伙伴也都知道,最近一直在做 Ambari 集成自定义服务的教学笔记和视频。 之前在准备 Ambari 环境的时候,考虑到有朋友会在 Ambari 安装部署时遇到问题,所以贴心的我呢,就在搭建 Ambari 环境的时候,把这个视频录制好了,总共时长共 87 分钟,将近1个半小时,附带移除 SmartSense 服务及 FAQ 。 也提前介绍一下搭建好的 Ambari 相关版本信息: Ambari:2.7.3.0 hdp:3.1.0.0 二、课程特色 三、课程大纲 四、观看须知 五、再唠叨一下 以上为安装 Ambari 以及部署 Hadoop 集群的视频介绍及宣传,完整视频已上传到 哔哩哔哩-bilibili 平台,视频链接: Ambari 2.7.3.0 安装部署 hadoop 3.1.0.0 集群完整版,附带移除 SmartSense 服务及 FAQ 。 很多小伙伴也都知道,最近一直在做 Ambari 集成自定义服务的教学笔记和视频。目前笔记已经完成 90 %,笔记一整理完,就会参考笔记录制 Ambari 集成自定义服务的教学视频。 Ambari 集成自定义服务脑图 ,如下图所示: **目前已整理好的笔记,**如下图所示: 一直在行动!希望大家也多多关注,多多宣传,谢谢! 点关注,不迷路 好了各位,以上就是这篇文章的全部内容了,能看到这里的人呀,都是 人才 。

基于ambari搭建hadoop生态圈大数据组件

醉酒当歌 提交于 2020-02-19 09:44:58
Ambari 介绍1 Apache Ambari是一种基于Web的工具,支持Apache Hadoop集群的供应、管理和监控。Ambari已支持大多数Hadoop组件,包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeper、Sqoop和Hcatalog等。 Apache Ambari 支持HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop和Hcatalog等的集中管理。也是5个顶级hadoop管理工具之一。 建议 需对hadoop生态圈的各个组件以及环境配置,参数有一定的知识,才建议使用ambari搭建 对比(CDH) 1、Hortonworks Hadoop区别于其他的Hadoop发行版(如Cloudera)的根本就在于,Hortonworks的产品均是百分之百开源。 2、Cloudera有免费版和企业版,企业版只有试用期。 3、apache hadoop则是原生的hadoop。 4、目前在中国流行的是apache hadoop,Cloudera CDH,当然Hortonworks也有用的5、Apache Ambari是一个基于web的工具,用于配置、管理和监视Apache Hadoop集群,支持Hadoop HDFS、Hadoop MapReduce、Hive、HCatalog,、HBase、ZooKeeper

0429-如何在Redhat7.4安装HDP3.0.1

别说谁变了你拦得住时间么 提交于 2020-02-19 00:27:44
温馨提示:如果使用电脑查看图片不清晰,可以使用手机打开文章单击文中的图片放大查看高清原图。 Fayson的github: https://github.com/fayson/cdhproject 提示:代码块部分可以左右滑动查看噢 1.文档编写目的 7月13日,Hortonworks在其官网宣布发布HDP3.0,相关介绍可以参考Fayson昨天的文章《Hortonworks正式发布HDP3.0》,最近又更新到了HDP3.0.1。本文档Fayson主要描述如何在Redhat7.4安装HDP3.0.1。HDP与CDH的安装步骤一致,主要包括以下四部分: 1.安全前置准备,包括安装操作系统、关闭防火墙、同步服务器时钟等; 2.外部数据库如MySQL安装 3.安装Ambari; 4.安装HDP集群; 本次Fayson的测试环境为 1.Ambari2.7.1 2.HDP3.0.1 3.Redhat7.4 4.JDK1.8.0_141 5.MariaDB-5.5.56 6.root用户安装 2.前置准备 2.1.hostname及hosts配置 集群中各个节点之间能互相通信使用静态IP地址。IP地址和主机名通过/etc/hosts配置,主机名通过/etc/hostname进行配置。 以Ambari节点(172.31.13.10)为例: hostname配置 /etc/hostname文件如下: