linux命令学习
允许非root用户使用“sudo”
root身份登录系统,执行“visudo”,根据示例添加新的一个规则(记住输入的密码是当前用户密码,而不是root密码)
#不需要密码执行sudo命令
hadoop ALL=(ALL) NOPASSWD: ALL
#不需要密码执行sudo命令
hadoop ALL=(ALL) NOPASSWD: ALL
日期
时间戳转日期
date -d '1970-01-01 UTC 1312438633.724 seconds' +"%Y-%m-%d %T"
#显示现在日期
echo `date -d now +%Y%m%d`
#显示昨天日期
echo `date -d yesterday +%Y%m%d`
#加减时间
date +%Y%m%d --date="-1 day"
date +%Y%m%d%H --date="-1 hour"
date -d '1970-01-01 UTC 1312438633.724 seconds' +"%Y-%m-%d %T"
#显示现在日期
echo `date -d now +%Y%m%d`
#显示昨天日期
echo `date -d yesterday +%Y%m%d`
#加减时间
date +%Y%m%d --date="-1 day"
date +%Y%m%d%H --date="-1 hour"
查看网站是什么服务器
curl -s --head "http://www.baidu.com"
查看redhat版本
cat /etc/redhat-release #我这里显示“CentOS release 5.5 (Final)”
查看linux最大可以打开文件数量 写道
ulimit -a
# 关注屏显其中一行,可以看出最大打开文件数量为1024
open files (-n) 1024
设置打开文件数量:
echo -ne "
* soft nofile 65536
* hard nofile 65536
" >>/etc/security/limits.conf
推出终端后,在执行ulimit -a,可以看出修改已经生效
# 关注屏显其中一行,可以看出最大打开文件数量为1024
open files (-n) 1024
设置打开文件数量:
echo -ne "
* soft nofile 65536
* hard nofile 65536
" >>/etc/security/limits.conf
推出终端后,在执行ulimit -a,可以看出修改已经生效
zip压缩文件
zip {dist} {src}
zip -P {password} {dist} {src}
zip -P {password} {dist} {src}
只允许root远程登录
cd /etc
touch nologin
touch nologin
锁定用户,查看机器64位还是32位
uname -m #会显示:“i686”、“x86_64”
无法远程登录(root only)
passwd -l hadoop
解锁用户(root only)
passwd -u hadoop
列出rpm安装程序的文件路径
rpm -ql hadoop-0.20
查看系统已经安装软件
rpm -qa | grep hadoop
查看当前服务器总的cpu core数量(有多少核)
more /proc/cpuinfo | grep 'processor' | wc -l
#查看每个CPU的核数
more /proc/cpuinfo | grep 'cpu cores'
more /proc/cpuinfo | grep 'cpu cores'
#计算当前服务cpu数量
总核数 / 每个CPU的核数
总核数 / 每个CPU的核数
#查看CPU位数
getconf LONG_BIT
getconf LONG_BIT
查看程序的安装路径
whereis java
查看执行程序的路径
which java
- # 修改DNS IP
- vi /etc/resolv.conf
- #查看内存
- free
#查看CPU是否支持64操作系统,如果结果大于0,说明支持64bit模式(long mode)
cat /proc/cpuinfo | grep flags | grep ' lm ' | wc -l
#查看某行内容
sed -n '100{p;q}' filename
#查看用户所属组
grep "用户名" /etc/group
#查看rpm包文件
rpm2cpio hadoop.rpm | cpio -idmv
#添加某个路径到运行时库,一行一个path
vi /etc/ld.so.conf
/usr/local/lib/
(或者使用环境变量的方式,这种方向不需要root权限)
export LD_LIBRARY_PATH=/xxxxx:$LD_LIBRARY_PATH
#centos下通过shell修改文件扩展名,rename <oldname> <newname> <*.files>
#将所有html扩展名改为htm扩展名
rename .html .htm *.html
具体参考:http://www.cyberciti.biz/tips/renaming-multiple-files-at-a-shell-prompt.html
#通过mv也可以实现修改扩展名这个功能
mv goodYear.{htm,html}
cat /proc/cpuinfo | grep flags | grep ' lm ' | wc -l
#查看某行内容
sed -n '100{p;q}' filename
#查看用户所属组
grep "用户名" /etc/group
#查看rpm包文件
rpm2cpio hadoop.rpm | cpio -idmv
#添加某个路径到运行时库,一行一个path
vi /etc/ld.so.conf
/usr/local/lib/
(或者使用环境变量的方式,这种方向不需要root权限)
export LD_LIBRARY_PATH=/xxxxx:$LD_LIBRARY_PATH
#centos下通过shell修改文件扩展名,rename <oldname> <newname> <*.files>
#将所有html扩展名改为htm扩展名
rename .html .htm *.html
具体参考:http://www.cyberciti.biz/tips/renaming-multiple-files-at-a-shell-prompt.html
#通过mv也可以实现修改扩展名这个功能
mv goodYear.{htm,html}
sort命令
# -u 去除重复行
# -r 降序(默认为升序)
# -o 输出排序后数据,他与重定向'>'最大的区别是输出数据到原文件
sort seq.txt -o > seq.txt
# -n 根据数值大小排序
# -k 指定根据某列排序
sort num.txt -k2 # 根据第二列排序(默认分隔符为空格、tab)
# -t 指定列分隔符,仅支持一个字符
# -m 归并排序
# -r 降序(默认为升序)
# -o 输出排序后数据,他与重定向'>'最大的区别是输出数据到原文件
sort seq.txt -o > seq.txt
# -n 根据数值大小排序
# -k 指定根据某列排序
sort num.txt -k2 # 根据第二列排序(默认分隔符为空格、tab)
# -t 指定列分隔符,仅支持一个字符
# -m 归并排序
linux 命令行参数引用
运行命令:
./test.sh 111 222 333 444
echo 运行文件名称:$0
#./test.sh
echo 第一个参数:$1
#111
echo 参数个数:$#
#4
echo 最后一个:$_
#444
echo 所有参数,参数被认为是多个字符串:$@
#111 222 333 444
echo 所有参数,参数被认为是一个字符串: $*
#111 222 333 444
echo 程序pid: $$
echo 退出code: $?
./test.sh 111 222 333 444
echo 运行文件名称:$0
#./test.sh
echo 第一个参数:$1
#111
echo 参数个数:$#
#4
echo 最后一个:$_
#444
echo 所有参数,参数被认为是多个字符串:$@
#111 222 333 444
echo 所有参数,参数被认为是一个字符串: $*
#111 222 333 444
echo 程序pid: $$
echo 退出code: $?
less命令
tip1:敲入50p,可以进入50%的文档位置,支持小数,如95.5p
脚本改密码 写道
#方法一
echo 123123 |passwd --stdin abc
#方法二
#echo "root:!@#$QW12qw"|chpasswd
#pwdadm -c root
http://www.aixchina.net/club/thread-69699-1-1.html
echo 123123 |passwd --stdin abc
#方法二
#echo "root:!@#$QW12qw"|chpasswd
#pwdadm -c root
http://www.aixchina.net/club/thread-69699-1-1.html
一行命令创建用户并设置密码
useradd -p `openssl passwd <pwd>` -g <group_name> <username>
创建用户并禁止远程登录
useradd -s /sbin/nologin ak47
查询用户crontab运行记录
cat /var/log/cron | grep <username>
修改linux用户目录
usermod -d /home/hdfs -U hdfs
磁盘速度测试
hdparm -t /dev/sda1
快速查找文件(根据文件名)
# locate命令负责查找,updatedb命令生成文件索引(daily)
locate *qq*.txt
locate *qq*.txt
chkconfig 写道
chkconfig --list | more # 列出所有系统服务
chkconfig <service_name> off|on # 关闭、打开系统服务
chkconfig <service_name> off|on # 关闭、打开系统服务
第一次SSH登录不提示
配置ssh conf文件中StrictHostKeyChecking no
top
c # 显示程序完整路径
m # 按照内存排序
P # 按照CPU排序
m # 按照内存排序
P # 按照CPU排序
bz2文件解压缩
bunzip2 yy.bz2
查看重复次数(shell 实现的group by + count)
# uniq前一定要先sort,uniq参数-c,将打印分组重复次数
cat xx.TXT | sort | uniq -c
cat xx.TXT | sort | uniq -c
tar命令使用
tar -zcf my.tgz my # 压缩打包
tar -cf my.tgz my # 不压缩打包
tar -zxf my.tgz my # 解压缩包
tar -xf my.tgz my # 解不压缩的包
tar -tf # 查看tar包结构
tar -cf my.tgz my # 不压缩打包
tar -zxf my.tgz my # 解压缩包
tar -xf my.tgz my # 解不压缩的包
tar -tf # 查看tar包结构
find
#-o: 或条件
# 查找当前目录下所有.htm和.html结尾的文件
find . \( -name "*.htm" -o -name "*.html" \)
# -a: and条件
# 查找当前目录下所有.htm和.html结尾的文件
find . \( -name "*.htm" -o -name "*.html" \)
# -a: and条件
grep 写道
#查找文本中包含boy和girl的行
cat my.txt | grep -E 'boy|girl'
# 根据文本内容查找文件名,"-H"用于输出文件名
find . -name '*city*' -ls -exec zgrep 'null' {} -H \;
# “or”查找
方法一:grep 'pattern1\|pattern2' filename
方法二:grep -E 'pattern1|pattern2' filename
方法三:egrep 'pattern1|pattern2' filename
方法四:grep -e pattern1 -e pattern2 filename
# "and"查找
方法一:grep -E 'pattern1.*pattern2' filename
方法二:grep -E 'pattern1' filename | grep -E 'pattern2'
cat my.txt | grep -E 'boy|girl'
# 根据文本内容查找文件名,"-H"用于输出文件名
find . -name '*city*' -ls -exec zgrep 'null' {} -H \;
# “or”查找
方法一:grep 'pattern1\|pattern2' filename
方法二:grep -E 'pattern1|pattern2' filename
方法三:egrep 'pattern1|pattern2' filename
方法四:grep -e pattern1 -e pattern2 filename
# "and"查找
方法一:grep -E 'pattern1.*pattern2' filename
方法二:grep -E 'pattern1' filename | grep -E 'pattern2'
修改hostname
方法一:hostname <new hostname>
方法二:vi /etc/sysconfig/network
方法二:vi /etc/sysconfig/network
查看打开文件数
lsof |wc -l
lsof -p pid |wc -l
lsof -p pid |wc -l
查看哪些程序在使用磁盘
iotop
转自 http://heipark.iteye.com/blog/1083805