Elastic

学习云计算时，会阅读相关的专业文献。对于文献中经常出现的缩写形式的专业名词，做了一些积累。现于此博文中做个简单的分享，希望能对后来人有所帮助，平稳地入门云计算。 注：博文内容仅可用于参考，遇到分歧时，还需请教专业人士！ A 序号 英文缩写 英文 1 ACID Atomicity Consistency Isolation Durability 2 APN Active Programmable Network 3 AZ Available Zone   B 序号 英文缩写 英文 1 BIND Berkeley Internet Name Domain   C 序号 英文缩写 英文 1 CC Cluster Controller 2 CDN Content Delivery Network 3 CIFS Common Internet File System 4 CLC Cloud Controller 5 CMS Content Management System 6 CRM Customer Relationship Management 7 CSG Cloud Storage Gateway   D 序号 英文缩写 英文 1 DDNS Dynamic Domain Name Server 2 DaaS Data as a Service 3 DFS Distributed

(1)环境; elasticsearch 2.4.2 (2)：github上分支没有2.4.x版本的分支，笔者一度找了好久才找到下面一个版本关系对应表 elasticsearch与search-guard以及search-guard-ssl： （3）： 进入elasticsearch的bin目录，执行命令安装search-guard ./plugin install -b com.floragunn/search-guard-2/2.4.2.10 注：当es的版本大于2.2时，安装过程中可能会有WARNING提示，这个不影响。其它ES版本，请对照表格替换命令行后的版本号即可。 (4):安装 search-guard-ssl ./plugin install -b com.floragunn/search-guard-ssl/2.4.2.10 (5)安装完成后，会在plugins目录中生成两个目录 (6):下载 searchguard-ssl 的包，里面包含自动创建证书的脚本： wget https://github.com/floragunncom/search-guard-ssl/archive/v2.4.2.19.zip unzip v2.4.2.19.zip cd search-guard-ssl-2.4.2.19/example-pki-scripts/ 编辑脚本 vim

下一篇：Elasticsearch 入门安装 1、lucene (了解) apache 项目基金会的一个顶级项目(主要用于搜索) 1.2、什么是 Lucene lucene 是一个开源的搜索架构，它的作者就是当前hadoop(大数据)的作者 Lucene core： 基于 Java 开发，包含了搜索库，包含了搜索索引，包含了关键字的高亮显示/分词器 ... Solr： 借助于 lucene 进行开发的，就是使用lucene core 进行构建和开发的，并且提供了 json，py，ruby，java 各种API PyLucene： 其实也支持 python 无论是ES还是Solr都是基于Lucene进行开发的 2、Solr (了解) 一个搜索框架，支持分布式，solr 是构建在 Lucene 之上的，所支持格式 json，xml，csv . . . 3、ElasticSearch ES 是一个分布式使用 RestFul 风格的数据搜索引擎，也是构建在 Lucene 之上的，且数据储存格式只支持 JSON 格式。 3.1、ES 的三大核心 Index： 相当于关系型数据库中的库 Type： 相当于关系型数据库中的表 Document： 相当于关系型数据库中的表数据 3.2、ES 和 Solr 的区别 1、ES 下载以后直接可以使用；Solr 配置比较复杂 2、Solr 使用

3 月，跳不动了？>>> 　　在ELK中因为 logstash是在jvm上跑的，资源消耗比较大，对机器的要求比较高。而 Filebeat是一个轻量级的logstash-forwarder，在服务器上安装后，Filebeat可以监控日志目录或者指定的日志文件，然后将这些信息到发送给logstarsh或直接发送给elasticsearch。当发送数据到Logstash或Elasticsearch时，Filebeat使用一个 反压力敏感(backpressure-sensitive) 的协议来解释高负荷的数据量。当Logstash数据处理繁忙时，Filebeat放慢它的读取速度。一旦压力解除，Filebeat将恢复到原来的速度，继续传输数据。 　　Filebeat目前已经是Elastic Stack非常重要的组成部分了。 　　闲话少说，先来看一下filebeat怎么安装配置吧。 　　官网地址：https://www.elastic.co/guide/en/beats/filebeat/current/index.html 　　 一、 安装流程 　　在linux中的安装相当简单，在此主要说一下windows中的安装和配置： 　　1. 下载软件 　　　下载地址：https://www.elastic.co/downloads/beats/filebeat 选择相应的版本下载即可。 　　2.

3 月，跳不动了？>>> Logstash是一个数据收集引擎，它支持动态的的从各种数据源获取数据，并对数据进行过滤，分析，丰富，统一格式等操作，然后存储到用户指定的位置。 具体内容可看官网：https://www.elastic.co/cn/products/logstash 系统：CentOS7.2 官网地址：https://www.elastic.co/guide/en/logstash/current/installing-logstash.html#installing-logstash 1. 在 /etc/yum.repos.d/ 下新建logstash.repo 配置YUM源地址 内容如下： [logstash- 6 .x] name =Elastic repository for 6 .x packages baseurl =https: // artifacts.elastic.co/packages/6.x/yum gpgcheck= 1 gpgkey =https: // artifacts.elastic.co/GPG-KEY-elasticsearch enabled= 1 autorefresh = 1 type =rpm-md 2. 直接安装： sudo yum install logstash 安装后可在 /etc/systemd/system

3 月，跳不动了？>>> 阿里妹导读： 新冠状病毒疫情发生后，为了帮助抗攻击疫情，阿里云免费向全球公共科研机构提供高性能计算、SCC超级计算集群和>CPU/GPU机器、云超算及AI等技术。 近期，不少研究机构和高校在阿里云上E-HPC云超算上进行药物研发相关的数值计算，阿里云超算团队提供了技术支持与跟进。 本文主要介绍药物筛选阶段，E-HPC云超算如何帮助研发人员实现大量小分子库的快速并发处理。同时，介绍全球健康药物研发中心GHDDI算>力和成果共享开放平台的阿里云解决方案。 病毒、药物研发和高性能计算 一款药物的诞生周期极其漫长，从最早的新药研发到上市，至少要经历10年。 在疫情这般分秒必争的背景下，时间尤为珍贵。因此在本次过程中，许多科学家会尝试从已有的药物里面，找到能治疗新冠的药，免去了后续大量审批上市等步骤。 化合物发现阶段，以往的方法是通过大量实验做筛选，发现可能适合的化合物。如今，科学家尝试通过机器模拟分子化合物与靶点的相互作用，从而筛选出可能有效的化合物做实验。 在此过程中，高性能计算（HighPerformance Computing，简称HPC），常被称为“超算”，是现代药物研发必不可少的支持。 云计算的兴起更是改变了科学家获取算力、享受超算服务的方式。比如阿里云E-HPC 云超算产品，能够让科学家自助在云上搭建高性能集群系统，满足药物研发人员对计算平台的需求。

PUT es_for_axm/_settings { "number_of_replicas":0 } 来源： https://www.cnblogs.com/jxfy/p/12536413.html

3 月，跳不动了？>>> Elasticsearch作为一个开箱即用的搜索引擎，其丰富的功能和极低的使用门槛吸引着越来越多的公司和用户选择它作为搜索和数据分析的工具。用户在运维Elasticsearch集群时往往会遇到很多难题，具体来说有下面列举的几点： 使用方式往往比较粗糙，默认的设置并不适合每一个集群和业务，非精细化的设计将会极大的增加集群隐患； 集群出现问题，无法及时定位原因、寻找解决方案，低效的沟通或者解决问题的方式可能会使得问题变得愈发严重； ES提供的监控指标繁杂，指标多，意义不明确，需要一定的专业知识才可以理解，缺乏全局视角； 此外，集群潜在的异常无法发现，更不能及时规避风险。 因此，来自京东零售计算存储平台两位架构师将会为大家带来关于如何在 Elasticsearch 之上实现存储与计算分离的实践。 存储与计算分离是目前业界非常火的一个话题，要不要上车了解一下啊？本次分享的嘉宾主持人为 Elastic 中文社区创始人 Medcl 和现就职于 Google 的工程师吴斌。 京东 Elasticsearch 使用 ChubaoFS 实现计算存储分离 主讲人：王行行、刘硕然 活动直播将采用 Zoom 会议方式进行，请保存以下信息： 时间 ：2020年3月28日 03:00 下午 北京，上海 会议 ID ：590-508-385 会议密码 ：elastic 请于活动开始前

前言 最近开始尝试学习Elastic Search，因此决定做一些简单的整理，以供后续参考，快速上手使用ES。 简介 ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。 我们建立一个网站或应用程序，并要添加搜索功能，但是想要完成搜索工作的创建是非常困难的。我们希望搜索解决方案要运行速度快，我们希望能有一个零配置和一个完全免费的搜索模式，我们希望能够简单地使用JSON通过HTTP来索引数据，我们希望我们的搜索服务器始终可用，我们希望能够从一台开始并扩展到数百台，我们要实时搜索，我们要简单的多租户，我们希望建立一个云的解决方案。因此我们利用Elasticsearch来解决所有这些问题以及可能出现的更多其它问题。 可以简单地认为，ES是基于Lucene，进行了一些封装，可以作为一个独立的搜索服务。通过HTTP协议，将数据存放到ES中，并且向ES发出搜索请求以及得到回应。部署ES之后，可以为多个网站提供搜索服务。 同时，ES支持分布式，支持更多高级的搜索、数据分析等特性，作为入门级笔记，暂不多研究了。 安装 安装 jdk

环境： name3主机 elasticsearch-1.7.2 data1主机 elasticsearch-1.7.2 测试的elasticsearch都为单机版，所以产生的快照文件都在一个目录。 需求： 现在需要将name3中的数据都迁移到data1中 实现步骤： 1、编辑name3的配置文件，增加快照存储地址 vi elasticsearch.yml path.repo: ["/mnt/dfs/elastic/repo"] 2、重启elasticsearch ps -ef|grep elasticsearch kill -9 xxxx /opt/elasticsearch-1.7.2/bin/elasticsearch -Xmx32g -Xms32g -d 3.注册快照 curl -XPUT http://192.168.0.203:9200/_snapshot/my_repo -d ' { "type": "fs", "settings": { "location": "/mnt/dfs/elastic/repo" } }' 执行: curl http://localhost:9200/_snapshot 查看结果 执行快照请求--备份（快照名称：snapshot_20190926） curl -XPUT http://localhost:9200/_snapshot/my