云计算

HADOOP单机系统安装

为君一笑 提交于 2019-12-03 10:43:07
一.安装和配置JDK 1.HADOOP是以JAVA语言写成的, 需要预先在本地计算 机上安装JDK,由于直接使用w get不能绕过 ORACLE的网站验证,可以使用下面代码下载。 wget --no-cookies --no-check-certificate --header "Cookie: gpw_e24=http%3A%2F%2Fwww.oracle.com%2F;oraclelicense=accept-securebackup-cookie" "http://download.oracle.com/otn-pub/java/jdk/8u77-b03/jdk-8u77-linux-x64.rpm" 2.将下载的JDK拷贝到所需要安装的目录下。如:/usr/jdk 3.安装JDK 4.配置JAVA_HOME以及CLASS_PATH,vi 进入/etc/profile,在文件最后加上如下语句 export JAVA_HOME=/usr/jdk/jdk1.7.0_71 export PATH=$JAVA_HOME/bin:$PATH export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar export JAVA_HOME PATH CLASSPATH 保存退出,执行下面命令使配置生效: source

写给那些一门心思想玩云计算的童鞋们!

六月ゝ 毕业季﹏ 提交于 2019-12-03 10:34:48
写给那些一门心思想玩云计算的童鞋们! 扎克伯格,大二的时候YY想要创立社交网站,于是就有了脸书; 比尔盖茨,20岁的时候YY决心投身计算机行业,于是就有了微软; 陈欧,大学期间靠着YY的信念和鱼丸粗面,创立了聚美; 王兴,大学期间的大学霸,更是YY着创造了校内/饭否/美团的互联网三大杀器; 而你,同样是一名大学生,相信你也有许多YY的突发奇想; 别担心,趁年轻,YY吧!也许下一秒就是你的突发奇想改变了世界! 学生党怎样才能步入IT大厂或成就个人事业? 首先,你可以尝试拥有一台 云服务器 ! 9.5元的学生专享云服务器,让你在技术圈更有话语权。 还有更多优惠套餐: 1核CPU 2G内存 1M带宽 40G硬盘 ¥86/年 1核CPU 1G内存 1M带宽 40G硬盘 ¥119/年(香港) 2核CPU 4G内存 3M带宽 40G硬盘 ¥799/3年 2核CPU 8G内存 5M带宽 40G硬盘 ¥1399/3年 点此领取云服务器 另外,分享一篇纯干货分享帖,不谈个人经验,只搬运牛人的技术“经验”。那么,学生党如何从零开始,成为云计算牛人,步入IT大厂或成就个人事业呢? 一、如果你想在云计算领域深造: 第一步,你要深入的了解云计算是什么 云计算从入门到实践之视频课程 贴上此课程的前几章,也许你能更好的了解从何学起。 第一章 分布式调度系统 第二章 分布式存储系统 第三章 分布式数据库 第四章

深入分析Docker镜像原理(上)

杀马特。学长 韩版系。学妹 提交于 2019-12-03 08:12:11
第一部分:Docker镜像的基本知识 1.1 什么是Docker镜像 从整体的角度来讲,一个完整的Docker镜像可以支撑一个Docker容器的运行,在 Docker容器运行过程中主要提供文件系统视角。例如一个ubuntu:14.04的镜像,提供了一个基本的ubuntu:14.04的发行版,当然此 镜像是不包含操作系统Linux内核的。 说到此,可能就需要注意一下,linux内核和ubuntu:14.04Docker镜像的区别了。传统虚拟机安装ubuntu:14.04会包含两部分,第一,某一个Linux内核的发行版本,比如Linux 3.8版本的内核;第二,第一个特定的Ubuntu发行版,这部分内容不包含Linux内核,但是包含Linux之外的软件管理方式,软件驱动,如 apt-get软件管理包等。 理解以上内容之后,就可以理解,为什么在一个Linux内核版本为3.8的ubuntu:14.04基础上,可以把Linux内核版本升级到3.18,而ubuntu的版本依然是14.04。最主要的就是:Linux内核版本与ubuntu操作系统发行版之间的区别。 Linux内核+ubuntu操作系统发行版,组成一台工作的机器让用户体验。那么灵活替换ubuntu操作系统发行版,那是不是也可以实现呢。那么Docker很方便的利用了这一点,技术手段就是Docker镜像。 Docker的架构中

亲测 免费的云主机

牧云@^-^@ 提交于 2019-12-03 06:36:55
这两天想搭建一个网站,由于用于学习就去网上搜集免费的云主机资源。 找到两款服务商: 1 阿.贝.云 2 三.丰.云 我这边首先的 三.丰.云,因为三.丰.云有免费云主机和云服务器两种。 如下是三.丰.云服务的配置: 虽然配置不高,毕竟是免费的 网站地址: https://www.sanfengyun.com 来源: https://www.cnblogs.com/zhanchii/p/11780928.html

【互动问答分享】第10期决胜云计算大数据时代Spark亚太研究院公益大讲堂

扶醉桌前 提交于 2019-12-03 05:37:26
“决胜云计算大数据时代” Spark 亚太研究院100期公益大讲堂 【第10期互动问答分享】 Q1 :Spark on Yarn的运行方式是什么? Spark on Yarn 的运行方式有两种:Client和Cluster模式 Client 模式如下所示: Cluster 模式如下所示: Q2 :Yarn的框架内部是如何实现的? Yarn 是一个框架,内部实现好了RM和NM: 公开课: 上海:9月26-28日,《决胜大数据时代:Hadoop、Yarn、Spark企业级最佳实践》 北京: 10月26-28日, 《决胜大数据时代:Hadoop、Yarn、Spark企业级最佳实践》 北京:11月1-3日,《决胜大数据时代:Hadoop、Yarn、Spark企业级最佳实践》 来源: oschina 链接: https://my.oschina.net/u/1791057/blog/310171

阿里云Linux安装软件镜像源

夙愿已清 提交于 2019-12-03 05:05:08
阿里云是最近新出的一个镜像源。得益与阿里云的高速发展,这么大的需求,肯定会推出自己的镜像源。 阿里云Linux安装镜像源地址:http://mirrors.aliyun.com/ CentOS系统更换软件安装源 第一步:备份你的原镜像文件,以免出错后可以恢复。 mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup 第二步:下载新的CentOS-Base.repo 到/etc/yum.repos.d/ CentOS 5 wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-5.repo CentOS 6 wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-6.repo 第三步:运行yum makecache生成缓存 yum clean all yum makecache 来源: oschina 链接: https://my.oschina.net/u/1462124/blog/592592

奇点云COO刘莹应邀出席《APEC SME大数据与人工智能论坛》

a 夏天 提交于 2019-12-03 04:31:49
10月24日-25日,由亚太经合组织(APEC)、韩国中小型及初创企业管理局(the Ministry of SMEs & Startups of Korea)主办的「APEC SME 大数据与人工智能论坛」在韩国首尔举行。​ 论坛以「大数据与人工智能如何驱动商业创新」为主题。来自韩国、中国、澳大利亚、俄罗斯、马来西亚等多个经济体的企业家、行业专家学者、政府领导及杰出代表齐聚一堂,分享企业的创新实践,共同展望数智化未来。 奇点云COO刘莹(花名:公主)作为嘉宾应邀出席,发表主题演讲,与参会代表们交流「数据+算法」落地商业应用的过程。 世界瞬息万变。从占卜、宗教到科学,人类认知世界的方式不断演进,在DT时代,我们有了「数字」这面明镜。 刘莹认为,数字是连接物理世界的宝贵符号。我们不仅可以用数字记录世界的变迁,还可以用数据和算法预测未来的变化,从而助力决策。简单来说,这也正是奇点云在帮助企业做的事。 在正式向海内外的与会者们介绍奇点云之前,刘莹首先分享了奇点云创始人兼CEO张金银先生(花名:行在)的数字化探索历程。 ·2004年,行在以「数据仓库专家」的身份加入阿里,负责搭建阿里巴巴的第一个数据仓库(DW)。 ·2012年,第一次和团队完成TCIF(淘宝消费者信息库)的搭建,整合打通了阿里巴巴消费者数据。现在阿里的消费者标签都源自TCIF。 ·2015年,在阿里云数加内部创业

云平台使用

狂风中的少年 提交于 2019-12-03 04:26:39
目录 新浪云 1 新浪云 这是我最早接触到的云平台,采用云豆扣除机制,当不使用时直接删除项目即可,云豆也可采用签到积分奖励,相对来说还是很划算的。 来源: https://www.cnblogs.com/youngao/p/11777158.html

阿里云创建新用户+Xftp6上传本地文件+Xshell6连接上阿里云系统+SQLyog连接上阿里云数据库

五迷三道 提交于 2019-12-03 03:58:29
阿里云创建新用户+Xftp6上传本地文件+Xshell6连接上阿里云系统+SQLyog连接上阿里云数据库 1.阿里云创建新用户+Xftp6上传本地文件+Xshell6进入阿里云LInux系统+SQLyog进入阿里云mysql软件 adduser +新用户名 passwd +新用户名 //输入新密码的时候,Linux只能用键盘字母上方的数字 2.本地Windows系统连接阿里云并传输文件办法: 3.使用xshell软件+root+在阿里云设置的密码 就可以直接连接上阿里云的Linux系统 4.SQLyog连接上阿里云的mysql数据库 4.1.先设置SSH,记得在阿里云管理--本地安全组---添加22端口开放 4.2.设置连接上阿里云mysql的账户以及密码,3306端口记得在阿里云实例--管理--本地安全组中开放 来源: https://www.cnblogs.com/domefy/p/11774642.html

同一路摄像头视频流接入RTSP_Onvif网页无插件直播流媒体服务器EasyNVR与其他平台播放视频有差异的原因分析

纵饮孤独 提交于 2019-12-03 02:27:30
背景分析 随着平安城市、智慧城市、雪亮工程、智能交通等各项建设的持续开展,安防逐渐得到普及,面对如此广阔的市场,对安防企业来说不仅仅是机遇更多的是挑战。为了解决这些问题,近年来,视频监控行业发展方向主要为:“高清化、网络化、智能化”。视频监控设备技术性极强,系统的创新升级同时也在引导市场需求的变化并创造了新的市场需求。 基于AI视频智能分析云终端 EasyNVR智能云终端是基于视频智能传输技术、视频AI分析技术、智能云组网技术、边缘计算技术、视频大数据技术、窄带通信技术、远程监测技术以及智能语音融合等多种技术于一体,研究一种提供视频流上云、存储、转发、视频AI功能的云终端产品,旨在帮助视频设备厂商、方案商与服务提供商,快速将存量或者新增的监控设备上云。同时提供丰富的视频算法,以及云边协同(算法云端训练、云端下发、边缘计算推理)的视频智能服务,实用性强、成本低、易于实施、便于推广。 同一路摄像头接入EasyNVR播放视频与其他平台有差异 同一路摄像头接入EasyNVR播放视频直播和海康或者是其他流媒体平台有差别,这是为什么? 解答问题 EasyNVR自身拥有流媒体服务器可以分发接入的摄像机视频流,海康自身平台或者硬盘录像机或者是其他平台是自身存在服务可以播放接入进来的摄像机。 EasyNVR虽然作为一个流媒体服务器,可以分发视频流,但是自身并没有做视频流的编解码或者分析处理