bin

Spark配置

柔情痞子 提交于 2019-11-27 15:12:10
解压和重命名文件 tar -zxvf spark-2.2.0-bin-hadoop2.7.tgz mkdir /opt/spark mv spark-2.2.0-bin-hadoop2.7 /opt/spark/spark2.2 进入配置文件目录 cd /opt/spark/spark2.2/conf/ cp spark-env.sh.template spark-env.sh 编辑 spark-env.sh 在第二行空白处添加信息 vim spark-env.sh export SPARK_DIST_CLASSPATH=$(/opt/hadoop/hadoop2.7/bin/hadoop classpath) 配置环境变量 vim /etc/profile # Spark Config export SPARK_HOME=/opt/spark/spark2.2 export PATH=.:${JAVA_HOME}/bin:${SCALA_HOME}/bin:${SPARK_HOME}/bin:${HADOOP_HOME}/bin:${HADOOP_HOME}/sbin:${ZK_HOME}/bin:${HBASE_HOME}/bin:${HIVE_HOME}/bin:${KAFKA_HOME}/bin:${SQOOP_HOME}/bin:${FLUME_HOME}/bin:$

执行脚本出现bin/bash: bad interpreter: No such file o...

吃可爱长大的小学妹 提交于 2019-11-27 14:59:59
运行SHELL脚本时发生如下错误 -bash: ./test.sh: /bin/bash^M: bad interpreter: No such file or directory VI打开文件,没发现任何问题, 把/bin/bash改成/bin/sh -bash: ./test.sh: /bin/sh^M: bad interpreter: No such file or directory 依然报错,脚本内容在VI下没有任何问题,仔细一看错误消息,^M..明显在第一行末尾被加入了个^M, 这种情况应该有两种原因 1.在WIN底下用文本编辑工具修改过参数变量,在保存的时候没注意编码格式造成的, 2.也有可能是在VIM里修改,第一行末尾按到ctrl_v 错误原因之一很有可能是你的脚本文件是DOS格式的, 即每一行的行尾以\r\n来标识, 其ASCII码分别是0x0D, 0x0A. 可以有很多种办法看这个文件是DOS格式的还是UNIX格式的, 还是MAC格式的 (1). vi filename 然后用命令 :set ff? 可以看到dos或unix的字样. 如果的确是dos格式的, 那么你可以用set ff=unix把它强制为unix格式的, 然后存盘退出. 再运行一遍看. 2.可以用执行dos2unix 命令转换编码 #dos2unix myshell.sh 3..也可以用sed

Spring-Boot Banner

半世苍凉 提交于 2019-11-27 14:31:45
下载Spring-Boot源码,目录结构spring-boot-2.1.0.M2\spring-boot-2.1.0.M2\spring-boot-project\spring-boot\src\main\java\org\springframework\boot Banner为接口具体实现类二个,https://docs.spring.io/spring-boot/docs/2.0.5.RELEASE/api/ 一个存放图片资源,一个存放资源。 package com.jachs.jurisdiction.Jurisdiction; import java.io.BufferedInputStream; import java.io.FileInputStream; import java.io.FileNotFoundException; import java.io.FileReader; import org.springframework.boot.ImageBanner; import org.springframework.boot.ResourceBanner; import org.springframework.boot.SpringApplication; import org.springframework.boot.autoconfigure

jmeter环境配置

吃可爱长大的小学妹 提交于 2019-11-27 14:13:12
Java 8 安装 正常安装,一路默认就好,记住安装路径,配置环境变量时用得到。默认安装路径:C:\Program Files\Java\jdk1.8.0_91。 安装好之后会有两个文件夹一个是jdk 一个是jre(运行) 右键计算机属性---》高级系统设置---》环境变量---》 变量名: JAVA_HOME 变量值: C:\Program Files\Java\jdk1.8.0_91 (即jdk安装的位置) 变量名: Path (这个变量名已在系统变量中存在,现只需在这个值的后面添加以下变量值就可以了) 变量值: ;%JAVA_HOME%\bin;%JAVA_HOME%\jre\bin; 变量名: CLASSPATH 变量值: .;%JAVA_HOME%\lib;%JAVA_HOME%\lib\dt.jar;%JAVA_HOME%\lib\tools.jar;(记住前面的.) 打开cmd,输入java -version 回车,如果输出版本信息则安装成功,提示不是内部或外部命令则表示没有安装成功,可留言或自行百度解决。 Jmeter 安装 由于此软件是绿色版本,所以可解压在任意位置使用,解压后打开Jmeter目录,进入bin目录下,右键jmeter.bat发送到桌面快捷方式。也可以在cmd下输入jmeter启动; 注: 变量名: JMETER_HOME 或JAVA_HOME

CentOS 6.3安装配置JDK 1.6 和 Tomcat 7

百般思念 提交于 2019-11-27 14:00:46
最近想在linux环境下玩下java,先得搭个环境丫...网上有很多教程,但是由于系统版本或软件包版本等原因,安装都有些问题,经过自己整理和实践,整理安装配置步骤如下: 本系列文章使用的系统是CentOS 6.3 x64 mini;所有的软件包都统一下载到 /usr/local/src 下面,软件都安装到 /usr/local 下面 一、 安装 JDK 1、 卸载服务器自带的 jdk # java –version --查看 java 版本 # rpm –qa | grep jdk --查看服务器自带的 jdk # yum -y remove xxxx --卸载服务器自带 jdk(xxx 为显示的版本信息 ) # rpm –qa | grep gcj # yum –y remove xxxx 2、 安装 JDK # cd /usr/local/src --进入软件包的存放路径 # mv /usr/local/src/jdk-6u35-linux-x64.bin /usr/local/jdk-6u35-linux-x64.bin --把软件包剪切到安装目录 # cd /usr/local --进入安装目录 # chmod 755 jdk-6u35-linux-x64.bin --给软件包添加执行权限 # ./ jdk-6u35-linux-x64.bin --执行安装 3、

实现代码的自动部署

只谈情不闲聊 提交于 2019-11-27 13:59:23
一.代码的自动化部署方法: 1.搭建svn仓库编写hooks脚本,实现自动化部署。 2.jenkins与git结合实现代码的自动化部署。 3.结合ftp和rsync以及定时任务实现代码的自动化部署。 二、SVN部署简述: [root@e /]# yum install -y subversion --> 下载 [root@e /]# cd /data/ [root@e data]# mkdir testsvn -->创建仓库 [root@e testsvn]# svnadmin create /data/testsvn [root@e testsvn]# ls conf db format hooks locks README.txt [root@e testsvn]# cd conf/ [root@e conf]# ls authz passwd svnserve.conf [root@e conf]# vi svnserve.conf anon-access = read #匿名用户可读 auth-access = write #授权用户可写 password-db = passwd #使用哪个文件作为账号文件 authz-db = authz #使用哪个文件作为权限文件 realm = data/testsvn# 认证空间名,版本库所在目录 [root@e conf]# vi

sudo: /usr/bin/sudo must be owned by uid 0 and have the setuid bit set 的解决办法

穿精又带淫゛_ 提交于 2019-11-27 13:39:46
  Linux新建用户 ,sudo报错: sudo: /usr/bin/sudo must be owned by uid 0 and have the setuid bit set   解决办法:重置一下sudo的属性 chown root:root /usr/bin/sudo chmod 4755 /usr/bin/sudo   然后就ok了。 来源: https://www.cnblogs.com/justlove/p/11366036.html

redhat 7.6 安装Python3后配置 yum pip3 升级openssl

╄→гoц情女王★ 提交于 2019-11-27 13:27:52
安装python3后需要重新配置yum 配置yum vim /usr/bin/yum #! /usr/bin/python  #修改前#! /usr/bin/python2  #修改后 vim /usr/libexec/urlgrabber-ext-down #! /usr/bin/python #修改前 #! /usr/bin/python2 #修改后 配置 pip3 ln -s /usr/local/python3Dir/bin/pip3 /usr/bin/pip 使用pip 报错误: pip is configured with locations that require TLS/SSL, however the ssl module in Python is not available. 因为安装python之前 没有安装openssl 或者 openssl 版本过低. 升级 openssl # 下载opensll安装包 wget https://www.openssl.org/source/openssl-1.1.1c.tar.gz # 解压压缩包 tar -zvxf openssl-1.1.1c.tar.gz # 切换至openssl目录 cd openssl-1.1.1c # 指定openssl安装路径 ./config --prefix=/usr/local

redhat7.6 安装Python 3

ぃ、小莉子 提交于 2019-11-27 13:25:33
redhat7.6 默认安装了python2.7. 查看已安装python情况 cd /  # 定位到根目录 whereis python  # 查看python所在目录 /usr/bin cd /usr/bin  # 切到python目录 ll python*  # 查看python开头的相关文件详情mv python python.bak  #备份原python文件. 安装Python3 为避免因缺少依赖包出各种问题, 请跳过下面的步骤, 先安装文末的依赖包. # 新建python目录 mkdir /usr/local/python3 # 切换到新建的目录 cd /usr/local/python3 # 下载python3.7安装包 wget https://www.python.org/ftp/python/3.7.4/Python-3.7.4.tgz # 解压python包 tar -xvf Python-3.7.4.tgz # 切换到目录 cd Python-3.7.4 # 指定python3安装路径 /usr/local/python3Dir ./configure --prefix=/usr/local/python3Dirmakemake install 此时报错了<_> 1. ModuleNotFoundError: No module named '

Linux下配置node环境与failed to create symbolic link ‘/usr/bin/utserver’: File exists跟Error: Cannot find module '/root/node-v10.16.3-linux-x64/install'解决方法

有些话、适合烂在心里 提交于 2019-11-27 12:54:09
NodeJS下载地址(官网) https://nodejs.org/en/download/ 下载下来后是个tar,xz压缩包 通过xftp将压缩包上传到Linux服务器上 如我放在root目录下 使用xshell连接远程服务器 cd 到当前目录下(一般默认是root目录下) 执行以下命令解压 tar xvJf node-v8.9.4-linux-x64.tar.xz或者tar xf node-v8.9.4-linux-x64.tar.xz 差别在于xvJf可以看到解压情况,xf看不到 xvJf xf 建立软连接 配置node ln -s /root/node-v10.16.3-linux-x64/bin/node /usr/local/bin/node 配置npm ln -s /root/node-v10.16.3-linux-x64/bin/npm /usr/local/bin/npm PS:注意点 /root/node-v10.16.3-linux-x64/为node安装路径 软连接最后的英文需跟bin后面英文对应(注意中间有空格如:/node(这有个空格)/usr) 若执行命令时出现如下错误 如执行 npm install vue 报 Error: Cannot find module '/root/node-v10.16.3-linux-x64/install'