━Start。平常心_

删除指定的Endpoints：

1
2
3
4
5
6
7
8
9
10
11
12

var grace int64 = 0
var clientset *kubernetes.Clientset
clientset, err = kubernetes.NewForConfig(util.GetKubeConfig())
if err != nil {
    util.Logger.Error(err)
    return err
}
if err = clientset.CoreV1().Endpoints(namespace).Delete(strings.ToLower(clusterName), &metav1.DeleteOptions{GracePeriodSeconds: &grace}); err != nil {
    if !apierrors.IsNotFound(err) {
        return err
    }
}

删除指定的Service：

1、零值字段也更新

1
2
3
4
5
6
7
8
9
10

// gorm特性，当用struct更新时，里面的零值是不会被更新的，需要转换为map，这样零值也可被更新
hostsMap := structs.Map(&hosts)
// 更新集群相关信息，忽略对id字段的更新
dbUpdate := tx.Model(&hosts).Where("ip = ?", hosts.Ip).Omit("id").Updates(hostsMap)
if err = dbUpdate.Error; err != nil {
    return err
}
if dbUpdate.RowsAffected == 0 {
    return errors.New(fmt.Sprintf("Node ip [%s] was not exists.", ip))
}

一、前言

直接复制代码就可以用，实现了格式为tar.gz的压缩格式，也可以实现8GB以上的大文件的压缩与解压，主要是在解压的逻辑中添加了：

1
2
3
4

// 可压缩大于8GB的文件
tOut.setBigNumberMode(TarArchiveOutputStream.BIGNUMBER_STAR);
// 可压缩长名称文件
tOut.setLongFileMode(TarArchiveOutputStream.LONGFILE_GNU);

具体可参考：

• https://issues.apache.org/jira/browse/COMPRESS-194
• https://commons.apache.org/proper/commons-compress/javadocs/api-1.20/org/apache/commons/compress/archivers/tar/TarArchiveOutputStream.html

二、pom依赖

一、实战

1、通过正则表达式，获取想要的内容

• ^：正则表达式开头
• \w+：\w表示任意一个字母或数字或下划线，也就是A~Z、a~z、0~9、_ 中任意一个，+表达式至少出现1次，相当于{1,}
• \.：表示单纯的小数点
• ?：表达式匹配0次或1次，相当于{0,1}
• \d：任意一个数字，0~9中的任意一个
• *：表达式不出现或出现任意次，相当于{0,}

参考资料：

• https://yunlzheng.gitbook.io/prometheus-book/part-iii-prometheus-shi-zhan/operator/use-operator-manage-monitor
• https://www.qikqiak.com/k8s-book/docs/60.Prometheus%20Operator%E9%AB%98%E7%BA%A7%E9%85%8D%E7%BD%AE.html

一、Prometheus Operator能做什么

要了解Prometheus Operator能做什么，其实就是要了解Prometheus Operator为我们提供了哪些自定义的Kubernetes资源，列出了Prometheus Operator目前提供的️4类资源：

• Prometheus：声明式创建和管理Prometheus Server实例；
• ServiceMonitor：负责声明式的管理监控配置；
• PrometheusRule：负责声明式的管理告警配置；
• Alertmanager：声明式的创建和管理Alertmanager实例。

简言之，Prometheus Operator能够帮助用户自动化的创建以及管理Prometheus Server以及其相应的配置。

prometheus-operator chart包地址：https://github.com/coreos/prometheus-operator.git

https://github.com/prometheus-community/helm-charts

prometheus operator源码：https://github.com/prometheus-operator/prometheus-operator

kube prometheus yaml部署文件：https://github.com/prometheus-operator/kube-prometheus/tree/main/manifests，prometheus-operator的相关yaml文件在`manifests/setup`中。

基于Kube-Prometheus的manifests yaml文件，自己做的chart包：http://www.mydlq.club/article/10/

参考资料：

• https://yunlzheng.gitbook.io/prometheus-book/parti-prometheus-ji-chu/alert/alert-manager-use-receiver/alert-manager-extension-with-webhook
• https://icode.best/i/23664632412832
• https://blog.csdn.net/bluuusea/article/details/104619235（参数解释详细）
• https://system51.github.io/2021/07/12/Alertmanager/（告警通知示例详细）
• https://blog.csdn.net/qq_37843943/article/details/120665690 (group_wait、group_interval、repeat_interval对告警的影响)
• https://system51.github.io/2021/12/10/Alarm-time/ (关于 Alertmanager中group_interval与repeat_interval上的一些坑)

一、Prometheus内存消耗很大，大约10G

发现Prometheus每次拉取Elasticsearch Exporter指标，耗费时间很多，大约5秒，采集其他服务的exporter指标才几十毫秒。

通过请求http es exporter metrcis，发现接口返回的内容很多…再继续观察，发现该Elasticsearch集群索引数量竟高达3100多，大概问题的根源找到了，就是由于集群索引数量太多，导致Prometheus采集的指标几倍的增长。

一、问题描述

因为写 ambari 相关的文章比较多，所以有很多使用 ambari 的朋友加我好友，发现有很多初学者都会卡在一个地方，就是安装依赖 mysql 的服务会提示：MYSQL Connection: Error ，像安装 hive、oozie、ranger 等等服务都会遇到这个问题。

本文以安装 hive 服务为示例，给大家演示下如何解决 MYSQL Connection: Error 问题。