摘要: a=1 a=$(($a+1)) a=$[$a+1] a=`expr $a + 1` let a++ let a+=1 以上都行。 阅读全文
posted @ 2019-12-03 15:55 singsong~ 阅读(1601) 评论(0) 推荐(0) 编辑
摘要: 方式一 使用原生的cp命令 /bin/cp -rf 方式二 取消cp命令别名 unalias cp 去掉 cp 命令的别名,这时你再用 cp -rf 复制文件时,就不会要求确认啦. 复制完成后恢复别名 alias cp='cp -i' 阅读全文
posted @ 2019-11-27 17:32 singsong~ 阅读(1401) 评论(0) 推荐(0) 编辑
摘要: 1.计算公式 CPU总核数 = 物理CPU个数 * 每颗物理CPU的核数总逻辑CPU数 = 物理CPU个数 * 每颗物理CPU的核数 * 超线程数 注意: 应用最大有效计算并行度即为所在机器的逻辑cpu个数,top然后输入1可显示所有逻辑cpu具体的消耗 2.查询命令 #查询CPU的型号 [root 阅读全文
posted @ 2019-11-27 17:05 singsong~ 阅读(237) 评论(0) 推荐(0) 编辑
摘要: crontab_test 脚本内容 echo "hello" >> /home/hadoop/shell/result 2>&1 查看/home/hadoop/shell/result文件有多少条数据 cat /home/hadoop/shell/result | wc -l cat /home/h 阅读全文
posted @ 2019-11-14 16:13 singsong~ 阅读(235) 评论(0) 推荐(0) 编辑
摘要: eg:安装numpy。需要安装其他的换掉numpy即可,用的豆瓣源 pip install numpy -i http://pypi.douban.com/simple --trusted-host pypi.douban.com 要求使用“–trusted host pypi.douban.com 阅读全文
posted @ 2019-11-14 15:40 singsong~ 阅读(547) 评论(0) 推荐(0) 编辑
摘要: python用栈实现进制转换 1 #-*- encoding: utf-8 -*- 2 ''' 3 stack.py.py 4 Created on 2019/11/7 9:05 5 Copyright (c) 2019/11/7, SingSong. 6 @author: SunSong 7 '' 阅读全文
posted @ 2019-11-07 14:49 singsong~ 阅读(531) 评论(0) 推荐(0) 编辑
摘要: 假设你要用repeat()从Internet上下载一个暂时不可用的文件,不过这个文件只需要等一会 就能下载。方法如下: 调用自定义函数repeat repeat wget -c http://www.example.com/software-0.1.tar.gz 自定义函数repeat 阅读全文
posted @ 2019-09-04 21:49 singsong~ 阅读(355) 评论(0) 推荐(0) 编辑
摘要: 需要创建大量hdfs目录的原因:配置canal拿取mysql的binlog日志上传到hdfs目录。每一张表都需要一个hdfs目录,因此我是新建数据中台,需要同步 100+的IP 的数据库,上1W的表。 正常创建目录都是使用 hadoop fs -mkdir -p /a1/b1/01 少数目录可以这么 阅读全文
posted @ 2019-08-30 18:05 singsong~ 阅读(1704) 评论(0) 推荐(0) 编辑
摘要: 使用的xtrabackup做的恢复数据,后面抽数到大数据平台的hdfs供hive创建外表用。 拿到 zichan.tar.gz(是目录)。里面就是一个压缩包。 #解压zichan.tar.gz tar zvxfi xxxxx.tar.gz #创建备份目录zichan,与zichan.tar.gz同级 阅读全文
posted @ 2019-06-06 17:41 singsong~ 阅读(182) 评论(0) 推荐(0) 编辑