WestTwoFlag

命令历史（history命令，或~/.bash_history文件）的功能主要是使用户避免重复输入很长的命令。但是每个铜板都有两面，命令历史由于是明文保存，所以如何你在bash的命令行中输入了一些特殊的重要的信息，那么这些信息就很可能被其他人轻而易举的获取。

命令历史的另外的一个问题是，我们使用频率最高的命令并不是我们最希望保存下来的命令。什么命令使用频率最高？无非是ls, cd, who, ps等等。保存这些命令一点价值都没有。占用一些磁盘空间倒是小事，他们会把我们真正想要保持的命令挤出.bash_history文件才是大事。

那么，如何是好？ 

 

 (More)

这个问题的描述大概如下

一个文本里面的一些行中存在一些注释，注释的格式和C的类似（/* .. */)不过不用考虑注释跨行的case。而且一行中可能存在多个注释。现在的需求是将这行中所有的注释移动的行尾。

其实这个问题并不复杂。 

 (More)

The question is got from a forum. Actually, the question is very simple if you understand the usage of command `date`.

date is a very insteresting command, which can understand what you said in netural language. eg.

$date --date='2 days ago'
Wed Dec 26 20:06:29 CST 2007

Wow, it know what do you want!  For more powerful feature, you could man it or info it.

As far as the question in titile,  if we can convert the date string into seconds from 1970-1-1, it would be solved easily.

For example, we need to print all date from 2007-7-1 to 2007-8-1. First we need to know how many seconds of two dates from 1970-1-1 00:00:00.

$date -d 2007-7-1 +%s
1183219200

$date -d 2007-8-1 +%s
1185897600

Okay, then it should be know that command date not only can convert a date string to the seconds from era, but also can convert a seconds to a date string. e.g.

$date -d "2007-1-1 12345sec"
Mon Jan  1 03:25:45 CST 2007

Oops,  so powerful.

Okay, i think you may know the answer of the question.

#!/bin/bash
for ((i=0; i< 30; i++));do
    date -d '2007-7-1 $i day'  +%F
done

or

#!/bin/bash
init=`date -d'2007-1-1' +%s`
fini=`date -d'2007-8-1' +%s`
for(( i=$init; i<$fini; i+=`expr 24 * 60 *60`));do
    date -d '1970-1-1 $i sec' +%F
done
 

 

众所周知，一般的命令输出是可以输出到两个管道里面的。一个管道名曰标准输出（stdout，文件描述符为1）。另一个管道名为标准错误（stderr，文件描述符为2）。

通常来讲，stdout主要用来输出命令执行的结果；而stderr主要用来显示一些命令执行过程中的出错信息等等。

linux/unix中，我们可以使用带文件描述符的重定向符号来分别重定向输出到stdout和stderr的内容，例如

date >file1 2>file2

其中'>‘与'1>'等价，都意味著将输出到stdout的内容进行重定向。

 关于这个重定向，另外一个典型的应用就是将 输出到stderr的内容屏蔽掉，也就是不显示错误信息。这个重定向的用法如下：

cmd >file1 2>/dev/null

/dev/null是一个特殊的设备，所有重定向到这里的内容都不会显示出来。

 

那么如何将输出到两个管道的内容写入同一个文件呢。这个其实很简单，这样写就可以。

cmd >file 2>&1

"2>&1"表示将stderr（2）重定向到stdout（1）。（但是，严格说来"2>&1"并不是这个意思，应该是将文件描述符2作为文件描述符1 的一个副本。）这样输出到两个管道的内容就合并到一起了。

 有意思的是，上面写法的顺序是不可颠倒的，如果写成了

cmd 2>&1 >file

效果是与前者有着微妙的区别的。

现在我们做一个实验。

分别执行这两个命令，看看有什么结果输出

(echo aaaa; echo bbbb >&2) >file1 2>&1|cat

(echo aaaa; echo bbbb >&2) 2>&1 >file1 |cat

我们可以看到第一条命令没有任何输出，因为所有的输出都已经重定向到文件file1中了。但是第二条命令却有输出，输出的内容是echo到stderr的内容。这是为啥呢？

这个其实可以如此解释。前面说过，"2>&1"并不表示将stderr重定向到stdout，而是将文件描述符2作为文件描述符1的一个副本。那么上面的第二条命令中，最开始的时候，文件描述符1和2 都没有被重定向，也就是都是输出到屏幕的。然后执行2>&1，这样文件描述符2成为了文件描述符1的副本，（注意，此时文件描述符1还是重定向到屏幕的）；然后文件描述符1被重定向到文件file1中（注意，只有文件描述符1被改变了，它的原来的副本，也就是文件描述符2所代表的stderr管道并没有别修改）。如此一来，输出到stderr的内容就通过管道符号“|”传入到cat命令，作为输入了。

 言归正传，本文的目的是提出一个解决如何处理输出到两个管道的内容。同时，输出的内容最终还要按照输出的顺序合并在一起。这个方法的一个应用场景就是log文件。比如，一个makefile的执行结果，输出的内容可能非常的多，因此想从里面找到编译错误信息就比较困难。如果我们能够自动的对输出到stderr的内容进行处理，那么我们就可以为这些内容做一些标记，方便其他程序对这个输出的log进行进一步的处理（比如做一个html的标签，使用特殊的字体或者颜色来显示stderr的信息）。

这个问题可以使用这个脚本来解决。

#!/bin/bash
LOGFILE=logfile
rm -rf $LOGFILE
(echo aaaa; echo bbbb 1>&2) 2>&1  >> $LOGFILE | 
while read l;do
    echo "<B>"$l"</B>";
done >>$LOGFILE

上面的脚本的作用就是将输出到stderr的内容使用<B>和</B>扩起来（即，使用粗体显示）。输出的结果如下

aaaa
<B>bbbb</B>

这样的一个脚本已经基本满足我们的需要了。

不过问题还是有的，例如我们要想分别同时处理输出到两个管道的内容，然后将处理的结果合并到一个文件里面。这该怎么办呢？在上面的方法中，只有一个管道的内容可以被一些命理处理，另外的一个管道的内容只能直接写入文件。因此上面的方法无法满足这个要求。

要解决这个问题，我们可以启动两个后台进程分别监听两个管道，如果管道内有内容写入，那么就读出内容，然后进行处理，然后写入到log文件中。示例脚本如下

#!/bin/bash
LOGFILE=logfile
mknod pipe1 p
mknod pipe2 p
exec 7<>pipe1
exec 8<>pipe2
while read l;do echo "<I>"$l"</I>";done <&7 >> $LOGFILE &
while read l;do echo "<B>"$l"</B>";done <&8 >> $LOGFILE &
cmd 1>&7 2>&8

上面脚本中，首先创建两个管道pipe1 和pipe2，然后将文件描述符7和8关联到这两个管道。然后启动两个异步的进程，分别监听7和8。如果发现有内容写入7或者8，就进行相应的处理。凡是输出要进行这样处理的命令，都可以将stdout重定向到7上，stderr重定向到8上。

这样就大功告成了

1. 如何grep一个段落
aix上面的grep有个参数-p可以用来grep一个段落。但是其他平台上面的grep似乎没有这个功能。不用不用着急，功能更加强大的sed可以完成这一任务。
如果段落是使用空行来分割的，这个命令可以如此写
sed -e '/./{H;$!d;}' -e 'x;/AAA/!d;' <filename>
关于sed的一些其他用途，可以参考这篇文章。

2.如何grep一个进程的时候，不显示grep进程本身。
这是一个经常遇到的问题，例如
ps -ef |grep <command>
在显示中经常出现这个grep进程自己。如果在执行脚本的时候出现这个问题，确实比较烦人。
一个方法如此
ps -ef | grep <command>|grep -v grep
但是这个方法写法臃肿，而且效率低下。这里有一个比较简洁的方法。比如要被grep的命令是cat，这样写就没有问题了。
ps -ef | grep [c]at

diff是一个不被重视的命令，不被重视是因为所有人都觉得它很简单，都觉得没有什么可以研究的，但是事实并非如此。 (More)

sed和awk是unix世界中的两个强大的工具。如果能够熟练的掌握这两个工具，工作会事半功倍。 (More)

在linux中，ls命令可以使用颜色来区别不同的文件、路径、权限等等。但是有时候，ls的颜色配置不是非常合适。例如在黑色的背景下显示蓝色的文字，看起来真是费劲啊。
要修改颜色配置非常简单，可以修改LS_COLORS环境变量。另外的一个更加方便的办法是使用dircolors命令。
配置的关键还是要懂得TERM中显示颜色的代码。使用dircolors -p可以在打印出的注释中看看各个代码的含义。    

AWK is a powerful tool to parse and process text in unix world. (More)