Filebeat8.4通过js处理Docker日志

  • 作者：Hui
  • 日期: 2022-09-01
  • 分类: 随笔
  • 浏览次数 ： 433

环境：

Elasticsearch 8.4.0

Kibana 8.4.0

Filebeat 8.4.0

 

js日志处理文件：

 

阅读全文

根分区磁盘拓展

    有时候我们使用云主机或者本地虚拟机的时候，没有区分系统盘和数据盘，而且也没有规划使用lvm，随着数据不断堆积，发现当初的磁盘分区已经满了。

今天来探索一下怎样进行磁盘分区扩容。

1. 使用fdisk或者partd进行分区重建

    可以参考一下华为云的文档。

    以下是一个脚本，适用于AWS EC2机器根分区只有8G的问题。 这里只适用于只有1个分区的情况 也就是只有一个sda1 将全部的容量重新分配给sda1然后挂载到/分区。

Shell
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
#!/bin/bash
Extend_Disk()
{
  # 格式化硬盘
    num=`fdisk -l | grep /dev/xvda | wc -l`
    df_num=`df -h | grep /dev/xvda | wc -l`
    if [[ ${num} == 2 && ${df_num} == 1 ]]; then
        echo "
          u # 转换一下显示的单位为cylinders(柱面)或sectors(扇区，默认)
          p # 打印当前的分区
          d # 删除当前分区
          n # 新建一个分区
          p
          1 # 新建第一个分区
          2048 # 默认就是2048扇区。MBR预留的
            # 空行别漏了
          p
          a # 把(引导分区)启动标记打回去
          1
          w # 保存当前修改的分区
        " | fdisk /dev/xvda
    fi
}
Extend_Disk

阅读全文

shell 中exec和xargs的用法和区别

今天摸鱼

Shell
1
2
3
4
5
6
7
8
9
10
11
12
# 常用的用法：
find . -name "*.txt" -exec rm {} \;  
find . -name "*.txt" | xargs rm
 
-exec
1.exec中参数是一个一个传递的，传一次参数执行一次rm；
2.文件名有空格等特殊字符可以正常处理。
 
-xargs
1.一次将参数传给命令，可以使用-n控制参数个数;
2.处理特殊文件名需要特殊处理:
find . -name "*.txt" -print0 |xargs --null/-0 rm

光说不练假把戏：

Shell
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
# 为了显示效果，这里先创建两个特殊文件
[root@tornado tmp] touch \"1\".python
[root@tornado tmp] touch \ 2.python
 
# 分别看看exec 和 xargs 执行的结果
[root@tornado tmp] find ./ -name "*.python" -exec echo {} \;
./"1".python
./ 2.python
[root@tornado tmp] find ./ -name "*.python" | xargs echo
./1.python ./ 2.python
 
# xargs 的执行结果在一行中看的不明显，加上-n 指定一下每次传入的参数为 1 个，如下
[root@tornado tmp] find ./ -name "*.python" | xargs -n 1 echo  
# 如果上面的echo 写成了 rm -rf 那么./目录会当场去世
./1.python
./
2.python
# 可以看到，xargs得出的结果是以上3个，而不是我们想要的'./"1".python' 和 './ 2.python'
 
# 下面特殊处理一下就可以正常处理了
[root@tornado tmp] find ./ -name "*.python" -print0 | xargs -n 1 --null echo
./"1".python
./ 2.python

xargs几种常用的用法：

Shell
1
2
3
4
5
6
# 使用-i/-I 替换字符
[root@tornado tmp] find  ./ -name "*.python" -print0 | xargs  -0 -i cp {} {}.bak
# -I可以指定自己喜欢的字符
[root@tornado tmp] find  ./ -name "*.python" -print0 | xargs  -0 -I [] cp [] [].old
# -t 可以先打印执行的命令之后再执行
# -p 会在执行前询问用户是否确认操作

摸鱼完成。

yaml中的多行文本和锚点引用

    平时工作上ansible-playbook、salt-sls、k8s-yaml遇到过很多次关于多行文本的书写方式，今天整理一些符号的用法和含义：

|： 多行字符串开始标识；(保留换行)
>： 同|,但是它会把中间字符串的换行符去掉，只保留一个(\n)； (折叠换行)
|+： 保留末尾的换行符;
|-： 删除末尾的换行符;
>-： 末尾的换行符也删掉;
>+： 同>;
&： 锚点标记;
*： 引用锚点。

1.关于yaml中竖线的作用和用法

字符串可以写成多行，从第二行开始，必须有一个单空格缩进。换行符会被转为空格。

字符串表示如下： 阅读全文