awk(常用)

news2024/11/16 10:49:22

这个有点难 O.o

一、awk

#	语法
awk 参数  模式  {动作} 文件

#	第一列,包含p的
$1~"p"
#	第一列,不包含p的
$1!~"p"
#	开始时干嘛,结束时干嘛
awk 'BEGIN{开始时做的事}END{结束时做的事}{print $0}' 文件

1、内置变量(常用的)

FS	#	指定分割符 
NF	#	分了多少列
NR	#	行数
$0	#	全部列
$n	#	指定列
OFS	#	指定输出分隔符

2、小案例

#	显示文件第2行的内容
awk 'NR==2{ print NR,$0}'  文件
#	显示文件第2~4行的内容,且显示行号
awk 'NR==2,NR==4 {print NR,$0}' 文件
#	显示文件第3行的第1列和最后两列
awk 'NR==3{print $1,$NF-1,$NF}'  文件
#	显示名字以 j 开头的姓名、性别,带表头信息并用制表位分割信息(   $1~/^j/   )
awk 'BEGIN{print "姓名以j开头的信息如下:"} $1~/^j/ {printf "%s\t%.2f\t%.2f\n",$1,$3,$4 }' 文件
%s		字符串
%.2f	保留2位小数

3、有点小强度

#	查看 3-5 行以 - 作为分隔符,的第3和最后一列,显示行号
awk -F "-" 'NR==3,NR==5 {print NR,$3,$NF}' 文件
#	printf 指定格式
awk '{printf $1"\t"$2"\n"}' 文件
#	用 : 作为分隔符
awk -F ":" '{print $1,$3}' 文件
#	用 -- 作为输出分隔符
awk  'BEGIN{OFS="--"}{print $1,$NF}' 文件
#	查找数字后二位小数
awk '{printf "姓名:%s\t性别:%c\t\t分数:%2.f\n",$1,$2,$3} ' 文件
#	在开始是打印------结束是========
awk 'BEGIN{print "---"}END{print "==="}{print $0}' 文件
#	显示1-3行,指第一行,倒数第二行,倒数第1行
awk 'NR==1,NF==3{printf "%s\t%.2f\t%.2f\n",$1,$(NF-1),$NF}'  info2.txt 
#	求某一列的平均值
awk 'BEGIN{sum=0 }{sum+=$3} END{printf "%.2f",sum/NR } ' 文件 
#	某一列的和
awk 'BEGIN{sum=0}{sum+=$3}END{print sum}' 
#	求某一列的最大值
awk 'BEGIN{max=0}{if ($3>max) (max=$3)}END{print max}'
#	查找ip地址
ifconfig ens33 | awk 'NR==2{print $2}'
#	显示成一下图片那样
awk -F ":" 'BEGIN{print "用户名   uid     登入shell"} OFS="\t"{print  $1,$3,$NF}' /etc/passwd

#	把一些数据,写入文本进行练习
tom     M       99      98.5    95
peter   M       100     87      95.5
marry   F       98      85      94.5
jerry   M       99      75.5    87
john    M       80      76      84
rose    F       87      69      96

二、简单小工具

1、sort 排序

-f		忽略大小写
-t		指定分隔符
-nk	2	第二列数(升序)
-r		反向排序
-u		去重
#	字母顺序排序
sort 文本	
#	指定分隔符 : 降序排序第三列
sort -t ":" -rnk 3 /etc/passwd
#	升序排序
sort -t ":" -nk 3 /etc/passwd

2、unqi

uniq	去掉连续相同的行,进行去重
-c	显示重复的次数
-u	显示仅出现1次的

`一般配合sort,先排序,在去重`
sort 文件 | uniq 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2241451.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

EXPLAIN优化慢SQL

项目中发现数据查询很慢,导致前端超时等待的问题。经过日志打印发现,查询sql耗时10秒以上,相关sql如下: select distincttablemodel.*from pjtask_model tablemodelJOIN buss_type_permission a ON (tablemodel.fields_data_id …

Skywalking搭建-来自于图灵课堂

Skywalking主要用于链路追踪,日志收集查看,异常日志查看,服务监控弱一些,服务器监控可以使用prometheus 一、搭建服务端,使用startup.bat启动 配置持久化,如果是用mysql持久化,拷贝mysql链接包…

ZooKeeper单机、集群模式搭建教程

单点配置 ZooKeeper在启动的时候,默认会读取/conf/zoo.cfg配置文件,该文件缺失会报错。因此,我们需要在将容器/conf/挂载出来,在制定的目录下,添加zoo.cfg文件。 zoo.cfg logback.xml 配置文件的信息可以从二进制包…

计算机网络(11)和流量控制补充

这一篇对数据链路层中的和流量控制进行详细学习 流量控制(Flow Control)是计算机网络中确保数据流平稳传输的技术,旨在防止数据发送方发送过多数据,导致接收方的缓冲区溢出,进而造成数据丢失或传输失败。流量控制通常…

二元一次不定方程@整数解问题

文章目录 二元一次不定方程|整数解定理1整数解存在充要条件定理2 通解特解知识回顾利用辗转相除法求例 使用表达式凑出通解 二元一次不定方程|整数解 二元一次不定方程的一般形式为 a x b y c ax by c axbyc(1) 其中 a a a、 b b b、 c c c 是整数,且 a a a…

深入理解Flutter生命周期函数之StatefulWidget(一)

目录 前言 1.为什么需要生命周期函数 2.开发过程中常用的生命周期函数 1.initState() 2.didChangeDependencies() 3.build() 4.didUpdateWidget() 5.setState() 6.deactivate() 7.dispose() 3.Flutter生命周期总结 1.调用顺序 2.函数调用时机以及主要作用 4.生…

llama factory lora 微调 qwen2.5 7B Instruct模型

项目背景 甲方提供一台三卡4080显卡 需要进行qwen2.5 7b Instruct模型进行微调。以下为整体设计。 要使用 LLaMA-Factory 对 Qwen2.5 7B Instruct模型 进行 LoRA(Low-Rank Adapters)微调,流程与之前提到的 Qwen2 7B Instruct 模型类似。LoRA …

机器学习day2-特征工程

四.特征工程 1.概念 一般使用pandas来进行数据清洗和数据处理、使用sklearn来进行特征工程 将任意数据(文本或图像等)转换为数字特征,对特征进行相关的处理 步骤:1.特征提取;2.无量纲化(预处理&#xf…

Llama架构及代码详解

Llama的框架图如图: 源码中含有大量分布式训练相关的代码,读起来比较晦涩难懂,所以我们对llama自顶向下进行了解析及复现,我们对其划分成三层,分别是顶层、中层、和底层,如下: Llama的整体组成…

stm32在linux环境下的开发与调试

环境安装 注:文末提供一键脚本 下载安装stm32cubeclt 下载地址为:https://www.st.com/en/development-tools/stm32cubeclt.html 选择 linux版本下载安装 安装好后默认在家目录st下 > $ ls ~/st/stm32cubeclt_1.16.0 …

第T7周:Tensorflow实现咖啡豆识别

🍨 本文为🔗365天深度学习训练营 中的学习记录博客🍖 原作者:K同学啊 目标 具体实现 (一)环境 语言环境:Python 3.10 编 译 器: PyCharm 框 架: (二)具体步骤 1. 使…

亲测有效:Maven3.8.1使用Tomcat8插件启动项目

我本地maven的settings.xml文件中的配置&#xff1a; <mirror><id>aliyunmaven</id><mirrorOf>central</mirrorOf><name>阿里云公共仓库</name><url>https://maven.aliyun.com/repository/public</url> </mirror>…

LLM - 使用 LLaMA-Factory 微调大模型 Qwen2-VL SFT(LoRA) 图像数据集 教程 (2)

欢迎关注我的CSDN&#xff1a;https://spike.blog.csdn.net/ 本文地址&#xff1a;https://spike.blog.csdn.net/article/details/143725947 免责声明&#xff1a;本文来源于个人知识与公开资料&#xff0c;仅用于学术交流&#xff0c;欢迎讨论&#xff0c;不支持转载。 LLaMA-…

神经网络与Transformer详解

一、模型就是一个数学公式 模型可以描述为:给定一组输入数据,经过一系列数学公式计算后,输出n个概率,分别代表该用户对话属于某分类的概率。 图中 a, b 就是模型的参数,a决定斜率,b决定截距。 二、神经网络的公式结构 举例:MNIST包含了70,000张手写数字的图像,其中…

鲸鱼机器人和乐高机器人的比较

鲸鱼机器人和乐高机器人各有其独特的优势和特点&#xff0c;家长在选择时可以根据孩子的年龄、兴趣、经济能力等因素进行综合考虑&#xff0c;选择最适合孩子的教育机器人产品。 优势 鲸鱼机器人 1&#xff09;价格亲民&#xff1a;鲸鱼机器人的产品价格相对乐高更为亲民&…

Flink Source 详解

Flink Source 详解 原文 flip-27 FLIP-27 介绍了新版本Source 接口定义及架构 相比于SourceFunction&#xff0c;新版本的Source更具灵活性&#xff0c;原因是将“splits数据获取”与真“正数据获取”逻辑进行了分离 重要部件 Source 作为工厂类&#xff0c;会创建以下两…

路漫漫其修远兮,吾将上下而求索---第一次使用github的过程记录和个人感受

文章目录 1.仓库位置2.新建仓库3.配置仓库4.克隆和上传5.推荐文章和我的感受 1.仓库位置 这个仓库的位置就是在我们的这个个人主页的右上角&#xff1b;如果是第一次注册账号的话&#xff0c;这个主页里面肯定是不存在仓库的&#xff0c;需要我们自己手动的进行创建&#xff1…

npm list -g --depth=0(用来列出全局安装的所有 npm 软件包而不显示它们的依赖项)

您提供的命令 npm list -g --depth0 是在 Node Package Manager (npm) 的上下文中使用的&#xff0c;用来列出全局安装的所有 npm 软件包而不显示它们的依赖项。 这是它的运作方式&#xff1a; npm list -g --depth0-g: 指定列表应包括全局安装的软件包。--depth0: 限制树形结…

tdengine学习笔记

官方文档&#xff1a;用 Docker 快速体验 TDengine | TDengine 文档 | 涛思数据 整体架构 TDENGINE是分布式&#xff0c;高可靠&#xff0c;支持水平扩展的架构设计 TDengine分布式架构的逻辑结构图如下 一个完整的 TDengine 系统是运行在一到多个物理节点上的&#xff0c;包含…

K8S单节点部署及集群部署

1.Minikube搭建单节点K8S 前置条件&#xff1a;安装docker&#xff0c;注意版本兼容问题 # 配置docker源 wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo# 安装docker环境依赖 yum install -y yum-utils device-m…