ecs

本篇将在 阿里云ECS服务器部署HADOOP集群（一）：Hadoop完全分布式集群环境搭建 的基础上搭建。 1 环境介绍 一台阿里云ECS服务器：master 操作系统： CentOS 7.3 Hadoop： hadoop-2.7.3.tar.gz Java: jdk-8u77-linux-x64.tar.gz Flume： apache-flume-1.8.0-bin.tar.gz 2 Flume 下载 下载 apache-flume-1.8.0-bin.tar.gz 并在合适的位置解压缩，笔者这里解压缩的路径为: /usr/local 将解压得到的目录改名为 flume 1 cd /usr/local 2 mv apache-flume-1.8.0-bin/ flume/ 3 添加 Flume 环境变量 在"/etc/profile"中添加内容： 1 export FLUME_HOME=/usr/local/flume 2 export PATH=$PATH:$FLUME_HOME/bin 重新加载环境： source /etc/profile 4 修改 Flume 环境变量 1 cd /usr/local/flume/conf 2 cp ./flume-env.sh.template ./flume-env.sh 3 vim ./flume-env.sh 添加内容：

资料 网址 什么是云服务器ECS https://help.aliyun.com/document_detail/25367.html?spm=a2c4g.11186623.6.544.4e1e376dj5hRSf 专有网络与经典网络的区别： 专有网络（Virtual Private Cloud）：逻辑上彻底隔离的云上私有网络。您可以自行分配私网IP地址范围、配置路由表和网关等。 经典网络：所有经典网络类型实例都建立在一个共用的基础网络上。由阿里云统一规划和管理网络配置。 来源： https://www.cnblogs.com/cag2050/p/11874487.html

站点初始化： 1/ 建vpc: 简单的方法是用默认的vpc和交换机 建立一个ECS，就会让你选一个默认VPC和默认交换机 也可以自己建，规划好ip段: https://help.aliyun.com/document_detail/100380.html?spm=a2c4g.11186623.6.558.3b0b56e8BwNbio 云资源不可以直接部署在专有网络，必须属于专有网络内的一个交换机（子网）内 虚拟交换机(相当于AWS的子网) 一个vpc里的交换机之间是互通的，通过安全组来控制网段的访问 例子： 先规划vpc的私网网段； 10.0.0.0/8 规划子网：（用手机app算子网主机） 10.52.0.0/20 每个网段有4068台 10.52.16.0/20 可先建立两个vswitch,需要增加网段时再加 2/ ECS 本地盘，云盘的区别 本地盘就在宿主机上，i/o速度更快。 普通盘时sata。缺点，宿主机当了数据可能丢失。直接挂vm,有可能不支持快照。不能挂别的vm 云盘,就是SAN, i/o速度慢些，普通也是sata盘。底层有备份策略，数据更安全。有赔付协议。可以直接挂在主机上，支持快照。不能挂别的vm.可以用快照生成新的云盘挂别的vm. EIP: 建ecs是可以勾选公网ip,并且此公网IP重启后不会变。 EIP好处是：1/ 如果被攻击，可以给ECS重新绑定一个EIP.

参考资料： 《The Docker Book》- Testing with Docker 《Docker从入门到实践》– 标准化开发测试和生产环境 http://wiki.jikexueyuan.com/project/docker-technology-and-combat/environment.html 构建基于 Docker + Jenkins + Sahi 的 Web UI 自动化测试环境 http://www.ibm.com/developerworks/cn/opensource/os-cn-JenkinsDockerSahi/index.html 利用 Docker 构建高度集成化的 Chef 开发测试环境 http://www.ibm.com/developerworks/cn/cloud/library/1410_zhangyq_dockerwithchef/ 深入浅出Docker（四）：Docker的集成测试部署之道 http://www.infoq.com/cn/articles/docker-integrated-test-and-deployment/ Move fast and don’t break things! Testingwith Jenkins, Ansible and Docker https://developer.rackspace

阿里云ECS服务器CentOS7防火墙firewalld设置 ---------------------------------------------- 使用root登录 1.确保服务器系统处于最新状态 [root@localhost ~]# yum -y update 如果显示以下内容说明已经更新完成 Complete! 2.重启服务器 [root@localhost ~]# reboot 3.安装防火墙 [root@localhost ~]# yum install firewalld 4.设置在开机时启用防火墙服务 [root@localhost ~]# systemctl enable firewalld.service 4.查看防火墙状态 [root@localhost ~]# systemctl status firewalld 5.启动防火墙 [root@localhost ~]# systemctl start firewalld 6.增加80端口到防火墙规则 [root@localhost ~]# firewall-cmd --permanent --zone=public --add-port=80/tcp 7.增加3306端口到防火墙规则 [root@localhost ~]# firewall-cmd --permanent --zone=public -

一年一度双十一，阿里云又来促销。一开始感觉促销力度不大，动力不足。这几天静下心来，仔细研究，发觉还是有几个非常深的折扣的：分别是3折的8G 主从redis, 3.5折的ECS，和6折的OSS资源包。特别是3折的redis，绝对是抢阿里云的钱啊！分享给大家，手快有，手慢无，趁双11赶紧入货。 首先，先前往阿里云双11限时优惠传送门： http://t.cn/E5lY1Xt 点击过去后应该显示的是如下图的页面，红包领取只适用于新用户。而下面的双11限时优惠则是新老用户都可以享受了。 【超级划算deal1】往下滚动下，马上见到 8G Redis标准主从版，2376元/1年，相当于3折。这是个什么概念，一般8G的单节点Redis也要每年4000元左右，即使有6-7折的代理商折扣，也需要至少2400元/年。现在8G主从版 2376，简直就是抢钱啊！ 点击立即购买按钮，顺着购买流程，最后可以生成如下的确认订单页面，点击“确认购买”按钮即可。 【超级划算deal2】然后来看下上下周围的ECS折扣，大都是3年3.5折。一般阿里云ECS的包年折扣，是3年4.5折，或5年3折。最近正打算买几台5年3折的服务器，而3年3.5折绝对是超优性价比。 以Redis左边的ECS内存网络增强型se1ne为例，点击后将出现如下图的购买界面，选择相应的区域，实例，操作系统后，点击“立即购买”按钮即可。 注意事项：a)

前言 通常来说，自动化运维有两种类型的运维方式： 定时的脚本任务， 比如定时更换云服务的 acess key secret , 定时检查 ecs 对外暴露的端口等 报警事件的紧急处理, 比如 ecs 实例发生异常重启 在传统的运维中，对于定时任务的处理通常用crontab脚本来实现，但是一旦管理的机器多了，必定会对脚本进行集中管理，这个时候对集中管理脚本的机器的可用性、脚本里面会散落密码明文等相关信息以及定时任务执行的记录都是一个很大的挑战；而对于事件驱动的报警处理，要么是通过短信报警告知运维人员，要么需要自建服务来处理报警信息, 无论是哪种方式，财务成本和运维成本都很大。本文探讨一种新的运维方式，利用函数计算做自动化运维，以极低的成本就可以获得一个高可靠，高质量的运维服务。 函数计算 阿里云 函数计算 是一个事件驱动的serverless计算服务。通过函数计算，您无需管理服务器等基础设施，只需编写代码并上传。函数计算会为您准备好计算资源，以弹性、可靠的方式运行您的代码，具体表现为： 无需采购和管理服务器等基础设施 按需付费，比如对运维管控这类低频调用的系统，财务成本通常能节约90%以上 专注业务逻辑的开发，能极大提高开发效率，比如 十分钟上线弹性高可用的图片处理服务 稳定高可用，毫秒级别弹性伸缩，快速实现底层扩容以应对峰值压力 提供日志查询、性能监控、报警等功能快速排查故障

给了我提醒，是不是mysql8.0以上的版本密码策略和更改语法不对了。 重新操作一遍： #vim /etc/my.cnf 【mysql】 添加skip-grant-table #systemctl stop mysqld.service #systemctl start mysqld.service #mysql –u root [敲回车进入] mysql> flush privileges; Query OK, 0 rows affected (0.00 sec) mysql> alter user 'root'@'localhost'IDENTIFIED BY 'MyNewPass'; ERROR 1819 (HY000): Your password does notsatisfy the current policy requirements mysql> alter user 'root'@'localhost'IDENTIFIED BY 'MyNewPass@123'; ERROR 1396 (HY000): Operation ALTER USERfailed for 'root'@'localhost' mysql> alter user'root'@'%' IDENTIFIED BY 'MyNewPass@123'; 【mysql8

最近云盾老说有高危漏洞，看了看列表，好多内核相关的，Yum update 也无法解决，干脆升级内核好了。据说升级内核是危险操作，所以升级之前必须做好快照！ 快照创建完毕后，开始升级过程。 添加国内源，比如 阿里云 yum update 升级到Final版本 导入 KEY ,安装软件源: rpm --import https://www.elrepo.org/RPM-GPG-KEY-elrepo.org 添加ELRepo 4.1 Centos 6.x：rpm -Uvh http://www.elrepo.org/elrepo-release-6-8.el6.elrepo.noarch.rpm 4.2 Centos 7.x : rpm -Uvh http://www.elrepo.org/elrepo-release-7.0-3.el7.elrepo.noarch.rpm 安装长期维护版本内核：yum --enablerepo=elrepo-kernel install kernel-lt -y 修改/etc/grub.conf, 将default=1改成default=0, Centos7 因为使用Grub2，修改方式略有不同，修改/etc/default/grub，把default=0，然后运行命令grub2-mkconfig -o /boot/grub2/grub.cfg

使用yum安装mysql的时候出现； 阿里云自带的yum源 添加新的源之后出现问题，删掉新加的源之后还是报错。 http: //mirrors .cloud .aliyuncs .com /epel/ 7 /x86_64/repodata/repomd .xml : [Errno 14 ] curl #6 - "Could not resolve host: mirrors.cloud.aliyuncs.com; Name or service not known" 解决办法： ①下载新的yum源 cd /etc/yum .repos .d / wget -P . http://mirrors .aliyun .com /repo/Centos- 7. repo ②移除原来的ailyun的yum源 mv epel-Aliyun .repo /home/back 如果还是有问题的话就把CentOS-Base-Aliyun .repo 也给移除掉 ③清除缓存 yum clean all yum makecache 然后是安装MySQL yum中自带的貌似没有mysql的源 ①下载相关rpm包 wget http: //repo.mysql.com/mysql-community-release-el7-5.noarch.rpm ②安装 rpm rpm -ivh mysql