awk实现Left、join查询、去除重复值以及局部变量讲解例子

2017年02月06日 72 阅读

最近看到论坛里面有几个不错的小例子，对于学习awk还是有帮助，在这儿详细的说一下一、类似数据库中的left join查询复制代码 代码如下:[root@krlcgcms01 mytest]# cat a.txt //a.txt111 aaa222 bbb333 cccc444 ddd[root@krlcgcms01 mytest]# cat b.txt //b.txt111 123 4562 abc cbd444 rts 786要求输出结果是111,aaa...

shell自定义函数的6个特点总结

2017年02月06日 74 阅读

最近系统的学习了一下shell的函数，总体感觉根其他语言的函数差不多，不过它也有自身的特点一，调用函数必须在定义函数的后，不然会报错的复制代码 代码如下:funfun （）{echo "aaaaaa"}fun返回结果如下：复制代码 代码如下:[root@krlcgcms01 mytest]# sh fun.shfun.sh: line 1: fun: command not found //第一次调用fun是报错的，fun没有定义aaaaaa //第二次调...

shell备份文件、重命名文件、删除指定文件的3个脚本分享

2017年02月06日 68 阅读

因为经常会用到shell脚本，所以经常会写一些，但是我从来没有系统的学习过shell脚本，遇到问题，就去看手册，或者google一下，到了一定的程度才发现自己的基础真的好差。下面在系统学习shell时，顺便写了点有用的小脚本。1，备份目录下面文件复制代码 代码如下:#！/bin/bashE_BADARGS=65case $# in //$#表示转入参数的个数，sh bak.sh ./ .sh 有二个参数./和.sh0） // 参数为空时，提示错误，并且退出...

总结的7个shell字符串操作方法和实例分享

2017年02月06日 71 阅读

每一种语言都有他独自的字符串操作方法，shell也一样，下面以以例子的方式，简单介绍常用方法。1，取得字符串长度复制代码 代码如下:string=abc12342341 //等号二边不要有空格echo ${#string} //结果11expr length $string //结果11expr "$string" : ".*" //结果11 分号二边要有空格,这里的:根match的用法差不多2，字符串所在位置复制代码 代码如下:expr index $s...

awk中NR和FNR的区别小结和实例演示

2017年02月06日 71 阅读

一，NR和FNR的不同NR:表示当前记录数FNR:也表示当前记录数，但是FNR的作用域只在一个文件内.如果重新打开文件,FNR会从1开始.二，实例说明1，测试文件aaa,cccc复制代码 代码如下:[root@Blackghost test2]# cat aaa //测试文件aaa1111:23434:zhanghoadsf:asdf:ccc[root@Blackghost test2]# cat ccc //测试文件ccc1111:23434:zhang...

awk命令、awk编程语言详细介绍和实例

2017年02月06日 72 阅读

一，什么是awkawk是linux下的一个命令，他对其他命令的输出，对文件的处理都十分强大，其实他更像一门编程语言，他可以自定义变量，有条件语句，有循环，有数组，有正则，有函数等。他读取输出，或者文件的方式是一行，一行的读，根据你给出的条件进行查找，并在找出来的行中进行操作，感觉他的设计思想，真的很简单，但是结合实际情况，具体操作起来就没有那么简单了。他有三种形势，awk，gawk，nawk，平时所说的awk其实就是gawk。二，awk中的记录，域，分割符...

shell脚本中使用iconv实现批量文件转码的代码分享

2017年02月06日 68 阅读

在开发中，我们经常需要对N多文件编码进行更改，iconv只能对单文件的进行更改，怎么办呢？我们写一个shell脚本来解决这个问题。例子一：使用shell脚本实现批量转码的操作。#！/bin/sh #convertCodeFilePath=$1 fromCode=$2 toCode=$3for i in {1..1} do [ -f $convertCodeFilePath ] if [ $? -eq 0 ] then iconv -f $fromC...

使用iconv批量改变文件编码的shell脚本

2017年02月06日 65 阅读

这篇文章主要介绍了编写shell脚本，使用iconv批量改变文件编码的脚本代码,需要的朋友可以参考下。用法示例：cd ~/workspace/XXXProject~/iconv_shell.sh ./ *java好了，直接上代码~~#！/bin/bashif [ "$#" ！= "2" ]; thenecho "Usage: `basename $0` dir filter"exitfidir=$1filter=$2echo $1for file in `...

Shell脚本读取ini配置文件的实现代码2例

2017年02月06日 70 阅读

一、简单版参考stackoverflow的例子，改了一个出来：复制代码 代码如下:while IFS="= " read var valdo if [[ $var == [*] ]] then section=$（echo $var | sed "s/^[（.*）]$/1/"） elif [[ $val ]] then if [ -z $section ];then declare "${var}=$val" else declare "${section...

Linux中执行shell脚本的4种方法总结

2017年02月06日 73 阅读

bash shell 脚本的方法有多种，现在作个小结。假设我们编写好的shell脚本的文件名为hello.sh，文件位置在/data/shell目录中并已有执行权限。方法一：切换到shell脚本所在的目录（此时，称为工作目录）执行shell脚本：复制代码 代码如下:cd /data/shell./hello.sh./的意思是说在当前的工作目录下执行hello.sh。如果不加上./，bash可能会响应找到不到hello.sh的错误信息。因为目前的工作目录（/...

Shell+Linux命令实现日志分析

2017年02月06日 66 阅读

一、列出当天访问次数最多的IP命令：复制代码 代码如下:cut -d- -f 1 /usr/local/apache2/logs/access_log |uniq -c | sort -rn | head -20原理：复制代码 代码如下: cut -d, --delimiter=DELIM use DELIM instead of TAB for field delimiter 表示用-分割，然后-f 1 -f, --fields=LIST select...

shell脚本连接、读写、操作mysql数据库实例

2017年02月06日 71 阅读

本文介绍了如何在shell中读写mysql数据库。主要介绍了如何在shell 中连接mysql数据库，如何在shell中创建数据库，创建表，插入csv文件，读取mysql数据库，导出mysql数据库为xml或html文件， 并分析了核心语句。本文介绍的方法适用于PostgreSQL ，相对mysql而言，shell 中读写PostgreSQL会更简单些。1. 连接mysql 数据库shell中连接数据库的方法很简单，只需要指定用户名，密码，连接的数据库名称...

收集的48个Shell脚本小技巧

2017年02月06日 62 阅读

本文收集了一堆的shell脚本技巧，我说过，我写博客主要是作一些学习笔记，方便自己查阅，所以，我会搞出这么一篇文章，也没有什么不可理解的。关于这些技巧的出处，诶，我也忘了，可能来自theunixschool、 commandlinefu、酷勤网和igigo.net，当然了，也有部分是我自己的经验心得，管他呢，进了我的脑子就是我的了。0. shell 调试复制代码 代码如下:sh -x somefile.sh在somefile.sh 文件里加上set+x s...

CentOS下redis自启动shell脚本

2017年02月06日 79 阅读

用这个脚本管理之前，需要先配置下面的内核参数，否则Redis脚本在重启或停止redis时，将会报错，并且不能自动在停止服务前同步数据到磁盘上：复制代码 代码如下:# vi /etc/sysctl.confvm.overcommit_memory = 1然后应用生效：复制代码 代码如下:# sysctl -p然后增加服务并开机自启动：复制代码 代码如下:# chmod 755 /etc/init.d/redis# chkconfig –add redis# ...

awk中实现ord函数功能

2017年02月06日 73 阅读

在awk中并未直接提供ord函数，所以在将某个字符转换为码时，需要自己来实现复制代码 代码如下:awk "BEGIN{for （i = 0; i < 256; ++i） {ord[sprintf（"%c", i）] = i;} }" " { print ord["a"]; ord ["b"]; }"这里主要是构造了ord为key,val的数据结构，key为char字符，val对应的ascii码附：awk得到字母的ASC值实现复制代码 代码如下:-（d...

自己常用的一些shell脚本分享

2017年02月06日 73 阅读

自己写了一下小的shell实例，虽然很小，但所有的大的程序都是由小的模块堆积起来的，程序员一定要懂得一种脚本的书写，而我，只会在linux下工作，所以就只能写linux的shell脚本了，呵呵，本文会陆续更新，给自己加油！1.模拟linnux登录shell复制代码 代码如下:#/bin/bashecho -n "login:" read nameecho -n "password:"read passwdif [ $name = "cht" -a $pas...

Shell脚本实现自动发送邮件的例子

2017年02月06日 67 阅读

1、编辑用户Home目录下的.muttrc文件，设置发信环境。复制代码 代码如下:# cat /root/.muttrc set envelope_from=yesset from=owinux@sina.cnset realname="Owinux"set use_from=yesset rfc2047_parameters=yesset charset="utf-8"2、发信脚本复制代码 代码如下:# cat automail.sh #！/bin/sh...

shell脚本实现拷贝大文件显示百分比的代码分享

2017年02月06日 66 阅读

复制代码 代码如下:#！/bin/shstrace -q -eread cp -- "${1}" "${2}" 2>&1 | awk "{ count += $NF if （count % 10 == 0） { percent = count / total_size * 100 for （i=0;i<=percent;i++） printf（"="）; printf（">"）; printf （"%2.0f%% ", percent）;...

shell脚本中执行python脚本并接收其返回值的例子

2017年02月06日 74 阅读

1.在shell脚本执行python脚本时，需要通过python脚本的返回值来判断后面程序要执行的命令例:有两个py程序 hello.py复制代码 代码如下:def main（）: print "Hello"if __name__=="__main__": main（）world.pydef main（）: print "Hello"if __name__=="__main__": main（）shell 脚本 test.sh复制代码 代码如下:pytho...

linux系统中的列出敏感用户的脚本代码

2017年02月06日 65 阅读

此处的敏感用户是指这个用户属于多个组，或者这个用户属于的组名跟这个用户名不一样#！ /bin/bash #list user who belong to more than one group #and list user who belong to the group which isn"t the same as the username #w is whitelist,we will not think user in this whitelist ...