Setup

SaltStack之Master配置文件解析

柔情痞子 提交于 2019-12-04 08:40:01
Salt-master的配置文件位于/etc/salt/master,各项配置参数如下: ####################### 主配置 interface 默认值:0.0.0.0(所有的网络地址接口) 绑定到本地的某个网络地址接口 interface: 192.168.0.1 ipv6 默认值:False 设置master是否监听IPv6连接。如果设置为True,则interface选项也必须调整("interface: '::'") ipv6: True publish_port 默认值:4505 设置master与minion的认证通信端口 publish_port: 4505 user 默认值:root 运行salt进程的用户 user: root max_open_files 默认值:100000 每一个minion连接到master,至少要使用一个文件描述符,如果足够多的minion连接到master上,你将会从控制台上看到salt-master crashes: Too many open files (tcp_listener.cpp:335) Aborted (core dumped) 默认值这个值取决于ulimit -Hn的值,即系统的对打开文件描述符的硬限制 如果你希望重新设置该值或者取消设置,请记住这个值不能超过硬限制

Hadoop学习01_Single Node Setup

陌路散爱 提交于 2019-12-01 11:33:31
目的 本文的目的主要是为了说明如何单点配置hadoop,从而能使用单个节点进行Hadoop MapReduce 和Hadoop Distributed File System (HDFS)运算。 先决条件 平台支持 GNU/Linux 作为开发和生产环境. Hadoop 已经在 GNU/Linux 上验证了 2000 个节点的集群. Win32 也可以作为开发环境. 分布式操作不能再 Win32上进行很好的测试, 所以不能作为生产环境。 必要的软件 无论在Linux 还是在 Windows都需要如下软件: Java TM 1.6.x, 最好使用Sun的,一定要安装. ssh 一定要安装并且 sshd 一定要处于运行状态,从而使Hadoop scripts可以管理远程Hadoop实例(Hadoop daemons). 另外 Windows 环境还需要安装如下软件: Cygwin - 为以上安装的软件提供shell脚本支持. 安装软件 如果你的集群没有安装必要的软件,请安装他们. Ubuntu Linux 的一个例子: $ sudo apt-get install ssh $ sudo apt-get install rsync 在 Windows上, 如果在你安装cygwin的时候你没有安装必要的软件, 开启cygwin安装软件选择如下文件夹: openssh - the Net