夏天换上冬装

2021年11月

python import _ssl DLL load fail error 找不到该模块问题

摘要：解决方法在 Windows 环境变量中添加如下三项： C:\Users\username\Anaconda3 C:\Users\username\Anaconda3\Scripts C:\Users\username\Anaconda3\Library\bin 注意：如果 Anaconda 不是安阅读全文

posted @ 2021-11-04 17:20 夏天换上冬装阅读(228) 评论(0) 推荐(0) 编辑

Microsoft Visual C++ 14.0 is required问题及安装提示安装包丢失或毁坏

摘要：在安装python的ssal包时，报错“ Microsoft Visual C++ 14.0 is required”。网上几种办法 1.缺少microsoft root certificate authority 2010、microsoft root certificate authority 阅读全文

posted @ 2021-11-04 16:29 夏天换上冬装阅读(737) 评论(0) 推荐(0) 编辑

2021年10月

excel字段列转换datax 所需json小工具

摘要： 1 ''' 2 --*************************************************************** 3 --*脚本名称: excelToJson 4 --*功能: excel-》json 5 --*输入数据:excel 带列名俩列 6 --*输出数据：阅读全文

posted @ 2021-10-27 17:34 夏天换上冬装阅读(468) 评论(0) 推荐(0) 编辑

2021年2月

关于使用xtrapbackup迁移mysql遇到的问题

摘要：背景: 本次目标是跨服务器将mysql的全部数据迁移，从Ubuntu 18.04 mysql 5.7.33, for Linux (x86_64) -> CentOS Linux release 7.8.2003 (Core) mysql 5.7.24, for linux-glibc2.12 (x 阅读全文

posted @ 2021-02-24 17:30 夏天换上冬装阅读(162) 评论(0) 推荐(0) 编辑

修改.ssh/authorized_keys: Operation not permitted

摘要：在设置免密钥登陆时 ssh-copy-id -i ~/.ssh/id_rsa.pub yjy01 /usr/bin/ssh-copy-id: INFO: Source of key(s) to be installed: "/root/.ssh/id_rsa.pub" /usr/bin/ssh-co 阅读全文

posted @ 2021-02-23 10:44 夏天换上冬装阅读(2409) 评论(0) 推荐(0) 编辑

2020年6月

HDFS读写流程

摘要：写流程 1.HDFS Client调用DistributedFileSystem.create(filePath)方法，去和NN进行【RPC】通信！2.NN 会去check这个路径的文件是否已经存在，是否有权限能够创建这个文件！假如都ok，就去创建一个新的文件，但是这时还没写数据，是不关联任何的bl 阅读全文

posted @ 2020-06-25 11:21 夏天换上冬装阅读(134) 评论(0) 推荐(0) 编辑

大数据Linux常用命令4

摘要： 1.系统常用检查命令 1 磁盘 df -h 2 内存 free -m 3 负载 top 4 5 [hadoop@bigdata ~]$ free -m 6 total used free shared buff/cache available 7 Mem: 7823 222 6229 257 137 阅读全文

posted @ 2020-06-23 14:34 夏天换上冬装阅读(266) 评论(0) 推荐(0) 编辑

Linux系统中的Swap分区详解

摘要：转载：http://www.embeddedlinux.org.cn/html/xinshourumen/201211/25-2401.html 嵌入式Linux中文站消息，Linux系统的Swap分区，即交换区，Swap空间的作用可简单描述为：当系统的物理内存不够用的时候，就需要将物理内存中的一部阅读全文

posted @ 2020-06-23 11:50 夏天换上冬装阅读(1921) 评论(0) 推荐(0) 编辑

大数据Linux常用命令3

摘要： 1.用户用户组 1 [root@bigdata ~]# ll /usr/sbin/user* 2 -rwxr-x 1 root root 118192 Nov 6 2016 /usr/sbin/useradd 3 -rwxr-x 1 root root 80360 Nov 6 2016 /usr/ 阅读全文

posted @ 2020-06-23 11:25 夏天换上冬装阅读(225) 评论(0) 推荐(0) 编辑

大数据Linux常用命令2

摘要： 1.清除屏幕clear 2.mv移动 cp复制 1 mv是始终一份快 2 cp是两份慢 3 4 不标准写法: 5 mv dir1 bigdata 6 cp -r dir2 bigdata 7 8 标准写法: 9 mv dir1 bigdata/dir1 10 cp -r dir2 bigdata 阅读全文

posted @ 2020-06-22 13:38 夏天换上冬装阅读(203) 评论(0) 推荐(0) 编辑

公告