scm

CDH集群手动导入scm库

匿名 (未验证) 提交于 2019-12-02 23:51:01
一、手动导入 scm 库 /usr/share/cmf/schema/scm_prepare_database.sh mysql -h<mysql-host> -u<mysql-user> -p<mysql-pwd> --scm-host <scm-host> <scm-user> <scm-dbname> <scm-pwd> 其中 <mysql-host>,<mysql-user> <mysql-pwd> 是需要创建的 scm 库所在的 mysql 位置,对应的 mysql 的主机名,用户名和登录密码; <scm-host>,<scm_user>,<scm-dbname>,<scm-pwd>分别对应 cloudera-scm-server 部署在的主机名,scm 库的登录用户,scm 库的库名,scm 库的登录密码。 但是,当在使用云服务器的 rds 实例作为远程 mysql 时,执行以上脚本会报权限不够的错误。而在本地部署的 mysql 实例执行以上脚本则不会报错,主要原因是<mysql-user>是通过 grant all 命令来授权的,而使用 rds 实例时 grant all 命名是无法执行的,也就是使用 rds 时只能 grant 指定权限给用户,这样可能会导致一部分权限丢失,执行上面的自动建库脚本就会报权限错误。 解决方法: 由于 cloudera-scm

Redmine 配置

匿名 (未验证) 提交于 2019-12-02 23:49:02
原文链接: http://www.cnblogs.com/fromchaos/archive/2011/09/23/2185879.html 如果需要覆盖默认的Redmine配置,最简单的方式就是复制 config/configuration.yml.exampleΪ config/configuration.yml, 然后修改这个配置文件。修改完需要重启Redmine服务才能生效。 EMAIL /SMTP 服务器设置 参考 http://www.cnblogs.com/fromchaos/archive/2011/09/23/2185759.html SCM 设置 # Configuration of SCM executable command. # Absolute path (e.g. /usr/local/bin/hg) or command name (e.g. hg.exe, bzr.exe) # On Windows, *.cmd, *.bat (e.g. hg.cmd, bzr.bat) does not work. # Examples: # scm_subversion_command: svn # (default: svn) # scm_mercurial_command: C:\Program Files\TortoiseHg\hg.exe #

CDH故障解决

匿名 (未验证) 提交于 2019-12-02 23:40:02
1、CDH报错cloudera-scm-server dead but pid file exists   cd /var/log/cloudera-scm-server/...db中查看故障原因     Re: FATAL: lock file "postmaster.pid" already exists   如何解决?    service cloudera-scm-server-db stop   service cloudera-scm-server-db start   service clouder-scm-server start. 转载请标明出处: CDH故障解决 文章来源: CDH故障解决

CDH5.16.1集群企业真正离线部署

匿名 (未验证) 提交于 2019-12-02 23:36:01
1.离线部署大纲 MySQL离线部署 CM离线部署 2.规划 linux版本:CentOS 7.2 节点 MySQL组件 CM服务进程 hadoop001 MySQL Parcel Alert Publisher Event Server NN RM DN NM ZK hadoop002 Alert Publisher Event Server DN NM ZK hadoop003 Host Monitor Service Monitor DN NM ZK 3.下载源 CM cloudera-manager-centos7-cm5.16.1x8664.tar.gz Parcel CDH-5.16.1-1.cdh5.16.1.p0.3-el7.parcel CDH-5.16.1-1.cdh5.16.1.p0.3-el7.parcel.sha1 manifest.json JDK JDK8 下载jdk-8u202-linux-x64.tar.gz MySQL MYSQL5.7 下载mysql-5.7.26-el7-x86_64.tar.gz MySQL JDBC jar mysql-connector-java-5.1.47.jar 下载完成后要重命名去掉版本号 mv mysql-connector-java-5.1.47.jar mysql-connector-java.jar 1

0034-CM启动报InnoDB engine not found分析

匿名 (未验证) 提交于 2019-12-02 22:59:29
温馨提示:要看高清无码套图,请使用手机打开并单击图片放大查看。 1.问题描述 cloudera-scm-server服务启动失败,日志报错如下: 2017-09-10 10:23:47,267 ERROR main:com.cloudera.enterprise.dbutil.DbUtil: InnoDB engine not found. Show engines reported: [MRG_MYISAM, CSV, MyISAM, MEMORY] 2017-09-10 10:23:47,268 ERROR main:com.cloudera.server.cmf.bootstrap.EntityManagerFactoryBean: InnoDb engine isn't present or enabled. SCM requires InnoDb MySQL db engine. 2.问题复现 测试环为CDH5.12.1,以下为复现步骤。 将/tmp目录修改为755权限 [root@ip-172-31-6-148 /]# chmod 755 tmp/ [root@ip-172-31-6-148 /]# ll total 116 drwxr-xr-x. 231 root root 20480 Sep 10 15:48 tmp [root@ip-172-31-6-148 /]

搭建CDH实验环境,以三个节点为例的安装配置

匿名 (未验证) 提交于 2019-12-02 22:56:40
(一)实验环境 l 实验介质 n CentOS-7-x86_64-Everything-1708.iso n jdk-8u161-linux-x64.rpm n cloudera-manager-centos7-cm5.12.1_x86_64.tar.gz n CDH-5.12.1-1.cdh5.12.1.p0.3-el7.parcel n CDH-5.12.1-1.cdh5.12.1.p0.3-el7.parcel.sha1 n manifest.json l 准备三台CentOS虚拟机,三个节点:一个Cloudera Manager节点、两个Agent节点 安装如下: n CDH71:Server GUI、Development Tools、MariaDB n CDH72、CDH73:Server GUI、Development Tools (二)安装配置CentOS(每台机器) 注意把下面的两个选项选上 l Server With GUI l Development Tools l MariaDB Server(就是MySQL数据库):注意只在cdh71上安装 l 关闭防火墙 systemctl stop firewalld.service systemctl disable firewalld.service l 配置主机名:编辑/etc/hosts文件 l 配置免密码登录

cloudera-scm-agent start 启动失败

匿名 (未验证) 提交于 2019-12-02 22:56:40
cloudera-scm-agent start 启动失败 # /opt/cm-5.7.0/etc/init.d/cloudera-scm-agent start Starting cloudera-scm-agent: [FAILED] 查询日志 # cd /opt/cm-5.7.0/log/cloudera-scm-agent/ # ls cloudera-scm-agent.out # cat cloudera-scm-agent.out [22/Jun/2016 11:02:09 +0000] 3695 MainThread agent INFO SCM Agent Version: 5.7.0 Unable to create the pidfile. 原因 经过查找后发现/opt/cm-5.7.0/run目录下没有cloudera-scm-agent文件夹 # cd /opt/cm-5.7.0/run/ # ls cloudera-scm-server 解决方法 # mkdir /opt/cm-5.7.0/run/cloudera-scm-agent 文章来源: cloudera-scm-agent start 启动失败

java.sql.SQLException: Access denied for user &#039;root&#039;@&#039;d001&#039; (using password: YES)

匿名 (未验证) 提交于 2019-12-02 21:40:30
在安装CDH的时候报错了: root@d001:/var/cache/yum/x86_64/7/base# /opt/cm-5.13.0/share/cmf/schema/scm_prepare_database.sh mysql cdh -hd001 -uroot -proot -pwordemotion --scm-host d001 root root --force JAVA_HOME=/soft/jdk1.8.0_144 Verifying that we can write to /opt/cm-5.13.0/etc/cloudera-scm-server [ main] DbProvisioner ERROR Exception when creating/dropping database with user 'root' and jdbc url 'jdbc:mysql://d001/?useUnicode=true&characterEncoding=UTF-8' java.sql.SQLException: Access denied for user 'root'@'d001' (using password: YES) at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:964) at

Centos7 搭建 cloudera-manager 集群

筅森魡賤 提交于 2019-12-02 10:31:32
0、准备工作 关闭防火墙 # 所有节点 systemctl stop firewalld systemctl disable firewalld 禁止交换 # 所有节点 sysctl vm.swappiness = 0 禁用大页面 # 所有节点 echo never > /sys/kernel/mm/transparent_hugepage/defrag echo never > /sys/kernel/mm/transparent_hugepage/enabled 1、JDK 卸载现有 Java rpm -qa | grep java | xargs sudo rpm -e --nodeps 解压到 /opt/module 目录 tar -zxvf jdk-8u144-linux-x64.tar.gz -C /opt/module/ 配置环境变量 sudo vim /etc/profile #JAVA_HOME export JAVA_HOME = /opt/module/jdk1.8.0_144 export PATH = $PATH : $JAVA_HOME /bin 刷新配置 source /etc/profile 测试是否安装成功 java -version 2、MySQL 查看是否现有的包 rpm -qa | grep mariadb 如果有,删之 rpm -e -