听说,你的Loki还是单体?(下篇)

自作多情 提交于 2020-10-28 08:18:28

正文共729字
预计阅读时间:2分钟😂

相信大家看过《听说,你的Loki还是单体?(上篇)》之后对Loki的分布式架构有了一定的认识,那么本篇主要就是对上篇内容的实践。小白主要提供docker-composehelm两种方式将部署Loki集群的Demo版本。

在正式部署之前,我们还是先来看下Loki整体架构如下图:

我们本次部署清单里面主要涉及到的组件如下:

组件 副本数 说明
Cassandra 1 Loki Index存储
Minio 1 Loki S3存储
Consul 1 Loki 组件状态和哈希环存储
Redis 1 Loki 缓存
Gateway 2 Loki 网关
Distributor 3 Loki 组件
Ingester 3 Loki 组件
Querier 3 Loki 组件
Query-Frontend 2 Loki 组件
Table-Manager 1 Loki 组件

下载部署代码

$ git clone https://github.com/CloudXiaobai/loki-cluster-deploy.git

声明:以下部署均适用于demo环境,大家切勿直接用于生产环境
对于生产环境,请务必先解决Cassandra和Consul服务的高可用

通过docker-compose部署

  • 启动服务

$ cd loki-cluster-deploy/demo/docker-compose
$ docker-compose up -d
  • 服务清理

如果部署过程中遇到问题要清理环境的话,需要执行两个步骤

1. 停止容器
$ docker-compose down
2. 删除本地卷
$ docker volume rm
<docker-compose_cassandra_data>
<docker-compose_consul_data>
<docker-compose_minio_data>

通过helm部署

  • 进入helm 目录

$ cd loki-cluster-deploy/demo/helm/loki-cluster-demo
  • 声明StorageClass

$ cat values.yaml

...
loki-minio:
persistence:
- name: data
storageClass: "<your-StorageClass>"
size: 10Gi
accessMode: ReadWriteOnce
mount_path: /data
loki-consul:
persistence:
- name: data
storageClass: "<your-StorageClass>"
size: 1Gi
accessMode: ReadWriteOnce
mount_path: /consul/data
loki-cassandra:
persistence:
- name: data
storageClass: "<your-StorageClass>"
size: 5Gi
accessMode: ReadWriteOnce
mount_path: /bitnami
...
  • 启动服务

$ kubectl create ns <your_namespace>
$ helm template --name stable --namespaces <your_namespace> . - | kubectl apply -f -
  • 服务清理

如果部署过程中遇到问题要清理环境的话,执行如下命令:

$ helm template --name stable --namespaces <your_namespace> . - | kubectl delete -f -

提示:部署完成后Minio S3的默认认证信息如下:
ACCESS_KEY: key123456
SECRET_KEY: password123456

部署之后

按照如上完成配置后,我们需要将日志采集的客户端指向到Loki Gateway上

对于Gateway多实例部署在k8s的,需要在前端挂载一个负载均衡器做分流。
小白之前考虑用ingress做代理,考虑到现实意义不大,所以放弃。建议大家在外部的LoadBlance直接转发给loki-gateway的NodePort上

同理,Grafana的数据源,我们也要切换到Loki Gateway的地址,然后在Explor上查询日志验证是否正常

最后我们可以再看下Minio上的Bucket是否已经有日志块,如果有数据的话说明你的Loki Ingester已经工作正常。


往期推荐



听说,你的Loki还是单体?(上篇)

Loki和Fluentd的那点事儿

巧用缓存加速Loki查询

今日实践:Loki丝滑般的数据切换

今日实践:利用Grafana为你的Loki添加告警

关于云原生小白

云原生小白的创号目的是将平日里离大家较远云原生应用以实用的角度展现出来,站在小白的角度来看待和使用云原生,并以每篇文章解决一个实际问题的出发点带领大家走进云原生。


扫描二维码

获取更多精彩

云原生小白


本文分享自微信公众号 - MoeLove(TheMoeLove)。
如有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。

易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!