linux命令
摘要：学习参考：https://www.runoob.com/linux/linux-filesystem.html 1 #显示当前根目录空间使用情况df -h /#察看磁盘占用 df -h /etc #显示当前目录空间使用情况du -hs Linux目录结构和作用https://blog.csdn.ne
阅读全文
posted @ 2021-02-08 09:34
随笔分类 - LINUX
ec2 ubuntu 使用密码登录
摘要：1、重新设置root 密码命令： sudo passwd root 2、sudo chmod 777 /etc/ssh/sshd_config 用完再把权限改回来 3、vi /etc/ssh/sshd_config 找到 PasswordAuthentication no，将no改为yes； 去掉
阅读全文
posted @ 2021-02-08 00:04
linux unzip 中文乱码解决方法
摘要：引自；https://blog.csdn.net/abyjun/article/details/48344379 unzip -O CP936 xxx.zip (用GBK, GB18030也可以)
阅读全文
posted @ 2019-01-21 11:39
Hive官方使用手册——新Hive CLI(Beeline CLI)
摘要：Hive官方使用手册——新Hive CLI(Beeline CLI) https://blog.csdn.net/maizi1045/article/details/79481686
阅读全文
posted @ 2018-12-26 16:48
pyspark遇到报错：_PYSPARK_DRIVER_CONN_INFO_PATH
摘要：1. 环境 : centos，启动pyspark，执行如下python命令： 用root账号没问题: 用非root账号会有此问题如下：_PYSPARK_DRIVER_CONN_INFO_PATH，后台设置下/etc/profile 中环境变量可以了。 vi /etc/profile 加入：，sour
阅读全文
posted @ 2018-12-26 11:45
python操作文件
摘要：https://www.cnblogs.com/feeland/p/4463682.html
阅读全文
posted @ 2018-11-05 16:44
linux下升级python
摘要：服务linux器自带的是python2.6.无法安装 pip install paramiko。总是报错。 系统自带的Python2.6又不能动。无奈只好再安装一个版本。 自己尝试手动升级python2.7 最后还是放弃了，因为安装成功了，pip等组件也没法使用，尴尬。 最终， 还是改为用anaco
阅读全文
posted @ 2018-10-18 11:05
spark安装
摘要：参见：https://archive.apache.org/dist/spark/spark-2.3.2/spark-2.3.2-bin-hadoop2.7.tgz cd /root/lhc wget https://archive.apache.org/dist/spark/spark-2.3.2
阅读全文
posted @ 2018-10-15 16:34
使程序在Linux下后台运行
摘要：1. 在终端输入命令，使程序后台执行： nohup ./pso > pso.log 2>&1 & 解释：nohup就是不挂起的意思，将pso直接放在后台运行，并把终端输出存放在当前 目录下的pso.log文件中。当客户端关机后重新登陆服务器后，直接查看pso.log文件就可看执行结果（命令：#cat
阅读全文
posted @ 2018-09-29 04:09
hive常用语句
摘要：1. 删除分区 ALTER TABLE dms.tracklog_5min DROP PARTITION(DAY='${today}');ALTER TABLE table_name DROP IF EXISTS PARTITION(dt='2018-01-01', game_code='gcol'
阅读全文
posted @ 2018-09-26 09:51
linux服务器安装anaconda，然后远程使用jupyter
摘要：linux服务器安装anaconda: 1.1 下载安装脚本： wget https://repo.anaconda.com/archive/Anaconda3-5.2.0-Linux-x86_64.sh 1.2 运行安装向导： bash Anaconda3-5.2.0-Linux-x86_64.s
阅读全文
posted @ 2018-08-21 19:36
linux创建新用户
摘要：服务器只用root账号会有风险，最好是每个人使用一个账号。 1. 添加用户名 2. 给这个用户名设置新密码 3.授权 个人用户的权限只可以在本home下有完整权限，其他目录要看别人授权。而经常需要root用户的权限，这时候sudo可以化身为root来操作。我记得我曾经sudo创建了文件，然后发现自己
阅读全文
posted @ 2018-07-20 13:40
linux快速安装mysql教程
摘要：#安装mysql服务器:yum install mysql-server #设置开机启动chkconfig mysqld on#现在启动服务service mysqld start #设置root初始密码mysqladmin -u root password 'xxxxxxx'#登录mysql -u
阅读全文
posted @ 2018-07-20 11:45
python3实现socket通信
摘要：目的：实现两台机器之间的通信。也就是说一个作为服务端（时刻监听接收数据），另一个作为客户端（发送数据）。 Python实现的过程个人理解： 1.服务端开始监听。 2.客户端发起连接请求。 3.服务端收到连接请求信息。 3.客户端发送数据。 4.服务端收到客户端的数据，并返回给客户端自定义的数据。 5
阅读全文
posted @ 2018-07-20 10:35
linux安装ActiveMQ
摘要：linux： 准备工作：安装JDK7以上. https://www.cnblogs.com/Dylansuns/p/6974272.html 1. 下载cd /home/downloadwget https://archive.apache.org/dist/activemq/5.14.0/apac
阅读全文
posted @ 2018-07-19 18:37
linux安装python3（已有python2.x情况下）
摘要：参考：https://www.cnblogs.com/Guido-admirers/p/6259410.html 1.官网下载python3 cd /home/download wget https://www.python.org/ftp/python/3.6.0/Python-3.6.0.tgz
阅读全文
posted @ 2018-07-19 17:37
