当前位置: 首页 > news >正文

【网络安全】用 Linux 命令行 CLI 日志文件处理指南

Linux 命令行 CLI 神技回忆录:日志文件处理指南(以 Zeek Logs 为例)

    • 1. CLI简介
    • 2. 基础操作
    • 3. 文件读取
    • 4. 查找与筛选
    • 5. 进阶操作
    • 6. Zeek 日志骚操作
    • 7. 结语

1. CLI简介

在数据分析的世界里,图形界面(GUI)确实很方便,尤其是进行可视化处理时,优势明显。但当我们需要处理海量数据时,GUI 就显得力不从心了 —— 性能受限、稳定性不足,甚至没有对应的功能按钮。

那么,当你想查看/提取某些信息,但 GUI 没有对应功能时怎么办?

掌握命令行(CLI)处理数据的能力,就是你的超级武器!
无论是在安全分析、日志调查,还是数据包处理时,灵活运用命令行工具、BPF 过滤器和正则表达式,能让你迅速找到想要的结果。

今天就为大家整理一份CLI 快速秘籍,帮助你高效处理日志文件!

2. 基础操作

操作CLI 命令
查看命令历史记录history
执行历史中的第10条命令!10
执行上一条命令!!

3. 文件读取

操作CLI 命令
查看文件内容cat sample.txt
读取文件的前10行head sample.txt
读取文件的后10行tail sample.txt

4. 查找与筛选

操作CLI 命令
提取第1个字段cat test.txt | cut -f 1
提取第一列cat test.txt | cut -c1
过滤特定关键词cat test.txt | grep 'keywords'
按字母顺序对输出进行排序cat test.txt | sort
按数字对输出进行排序cat test.txt | sort -n
消除重复的行cat test.txt | uniq
计算行数cat test.txt | wc -l
显示行号cat test.txt | nl

5. 进阶操作

操作CLI 命令
打印第 11 行cat test.txt | sed -n '11p'
打印 10-15 行cat test.txt | sed -n '10,15p'
打印 11 以下的行cat test.txt | awk 'NR < 11 {print $0}'
打印第 11 行cat test.txt | awk 'NR == 11 {print $0}'

6. Zeek 日志骚操作

操作CLI 命令
删除重复项并计算每个值的出现次数sort | uniq -c
按数字和递归方式对值进行排序sort -nr'
反转字符串字符rev
在每个点上拆分字符串并打印,保留前两个字段cut -d '.' -f 1-2
显示与“test”字符串不匹配的行grep -v 'test'
显示与“test1”和“test2”字符串中的一个或两个不匹配的行grep -v -e 'test1' -e 'test2'
查看文件信息file
在所有地方搜索“Testvalue1”字符串,组织列空间并用更少的资源查看输出grep -rin Testvalue1 * | column -t | less -S

7. 结语

命令行处理日志文件,初看可能有点枯燥,但真正掌握之后,你会发现:CLI 是数据世界里的光剑。
一行命令,可能胜过无数次鼠标点击!

下次处理 Zeek 日志或其他大数据文件时,试试这些技巧吧。
越熟练,效率越高!

相关文章:

  • 在springboot项目中,如何进行excel表格的导入导出功能?
  • 从OpenAI收购实时数据引擎揭示AI数据库进化方向
  • django之优化分页功能(利用参数共存及封装来实现)
  • 【Linux】Centos7 安装 Docker 详细教程
  • 5.3/Q1,GBD数据库最新文章解读
  • MySQL多查询条件下深度分页性能优化技巧及示例总结
  • 【Castle-X机器人】一、模块安装与调试:机器人底盘
  • JavaScript 笔记 --- part6 --- JS进阶 (part1)
  • 高性能电脑系统优化工具Advanced SystemCare PRO v18.3.0.240 解锁永久专业版
  • 华为云loT物联网介绍与使用
  • 【Castle-X机器人】五、物联网模块配置与调试
  • 4.26学习——web刷题
  • Vue3中AbortController取消请求的用法详解
  • 模态链:利用视觉-语言模型从多模态人类视频中学习操作程序
  • 计算机网络 | Chapter1 计算机网络和因特网
  • 数据库系统概论(五)关系模型的数据结构及形式化
  • 高中数学联赛模拟试题精选第19套几何题
  • Java数据结构——Stack
  • 机器学习(10)——神经网络
  • 代码随想录算法训练营第五十九天 | 1.ford算法精讲 卡码网94.城市间货物运输
  • 餐饮店直播顾客用餐,律师:公共场所并非无隐私,需对方同意
  • 朝鲜派兵库尔斯克是否有助于解决乌克兰危机?外交部回应
  • 洛阳原副市长收礼品消费卡,河南通报6起违反八项规定典型问题
  • 生于1987年,万宏宇已任内蒙古鄂温克旗委常委
  • 北京画院上海“点画”:评论家展场一对一评点
  • 小马智行彭军:今年是Robotaxi量产元年,有望3年后盈亏平衡