Linux 数据处理三剑客-L3

[183771798_7213]

1、Linux 三剑客之 grep

Linux 三剑客之 grep

基于正则表达式查找满足条件的行 内容检索 规则表达式 ^ # 锚定行的开始 如：'^grep’匹配所有以grep开头的行。 $ # 锚定行的结束 如：‘grep$’ 匹配所有以grep结尾的行。 . # 匹配一个非换行符的字符 如：'gr.p’匹配gr后接一个任意字符，然后是p。 匹配零个或多个先前字符 如：'*grep’匹配所有一个或多个空格后紧跟grep的行…

2、linux三剑客之awk

jck28-lucio-linux三剑客之awk

主要用作数据分段处理(默认空白分隔) awk 基本语法 awk 是 linux 下的一个命令，同时也是一种语言解析引擎 awk 具备完整的编程特性。比如执行命令，网络请求等 精通 awk，是一个 linux 工作者的必备技能 语法 awk 'pattern{action}' awk 上下文变量 开始 BEGIN 结束 END 行数 NR 字段与字段数 $1 $2 … $NF NF 整…

3、linux三剑客之sed

jck28-lucio-linux三剑客之sed

Sed流式编辑器简称，主要用于定位和修改数据 ## sed 基本语法与常用参数 语法结构 sed [addr]X[options] -e 表达式 sed -n ‘2p’ 打印第二行 sed ‘s#hello#world#’ 修改 -i 直接修改源文件 -E 扩展表达式 –debug 调试 [jck287213@shell.ceshiren.com…

4、linux三剑客与管道使用

jck28-lucio-Linux 三剑客与管道使用

## 程序运行环境输入与输出 标准输入 0 read a;echo $a 标准输出 1 echo ceshiren.com 错误输出 ls not_exist_dir scale 1000 width [jck287213@shell.ceshiren.com ~]$ read a; 1 [jck287213@shell.ceshiren.com …

5、【实战】三剑客实战之nginx日志分析实战

jck28-lucio-【实战】三剑客实战之nginx日志分析实战

按要求找出需要的数据 编写一个函数 find_error_log(),找出log中的404和500的报错 find_error_log(){ your code here } ## 找出访问量最高的ip，统计分析，取出top3 [jck287213@shell.ceshiren.com tless nginx.log | awk ‘{print $1}’|sort|uniq -c|s…

6、【实战】三剑客实战之性能、网络统计实战

jck-lucio-【实战】三剑客实战之性能、网络统计实战

Q&A 问题：统计一个进程的实时cpu数据需要用到哪个命令 统计top的性能(资源使用情况) perf_get(){ /#todo: 输出20s内某个进程的每秒的cpu和mem，并最后空出一行统计平均性能 } 找出链接总数 connection_summary(){ #todo: 链接所有的端口和对应的tcp连接状态，找出他们的连接总数吧 }

7、linux进阶命令

JCK28-lucio-linux进阶命令

Linux 进阶命令学习 curl jq curl 接口请求 curl是一个发起请求数据给服务器的工具 curl支持的协议FTP、FTPS、HTTP、HTTPS、TFTP、SFTP、Gopher、SCP、Telnet、DICT、FILE、LDAP、LDAPS、IMAP、POP3、SMTP和RTSP curl是一个非交互的工具 curl 发起 get 请求 curl -G url c…

8、linux环境配置

jck28-lucio-linux环境配置

  ## Bash自启动文件starup 1、系统级初始化文件/etc/profile 解…