摘要： 启动kafka时，kafka进程无法启动，查阅log发现存在如下问题： 2020-07-04 10:44:54,659] ERROR Fatal error during KafkaServer startup. Prepare to shutdown (kafka.server.KafkaServ 阅读全文

摘要： 安装VMware Tools是为了实现本机和虚拟机之间共享文件夹以及直接复制粘贴和拖拽等功能 （1）选中某个虚拟机，点击菜单栏的 虚拟机 --> 安装 VMware Tools 如果安装的是带有用户界面的虚拟机，则自动打开一个包含vmware安装包的位置 如果安装的是不带用户界面的虚拟机，则需要手动 阅读全文

摘要： 1.默认配置 根据默认配置给出中文注释 # Example config file /etc/vsftpd.conf## The default compiled in settings are fairly paranoid. This sample file# loosens things up 阅读全文

摘要： （1）安装vsftpd sudo apt-get install vsftpd （2）验证是否安装成功 sudo netstat -anp | grep vsftpd 如果和下图一致，即为安装成功。 （3）停止服务，修改配置文件 sudo service vsftpd stop cd /etc su 阅读全文

摘要： 在txt文件的另度存为窗口中可以设置文本文件的默认编码为UTF-8，具体操作请参照以问下步骤。 1、在电脑上打开或新建一个TXT文本文件，输入文本内容。 2、然后在界面的上方工具栏中找到“文件”选项，进行点击。 3、然后在出现的下拉框中，点击“另存为”选项。 4、然后在出现的窗口中，将编码选项设专置 阅读全文

摘要： 出现问题的原因是在执行python xxx.py 时系统找不到相关资源 Windows中： 由于我的Windows中没有装Spark，所以直接安装了Python的第三方包，pycharm中直接引用就行了 pip install pyspark Linux中： 我的是Ubuntu18.04，自己在里面 阅读全文

摘要： 在执行spark-submit xxxx.py时遇到这个错误，查阅官方文档（https://cwiki.apache.org/confluence/display/HADOOP2/ConnectionRefused）， 发现有可能是hadoop没有运行，果然是...... 阅读全文

摘要： export JAVA_HOME=/usr/lib/jvm/jdk1.8.0_162 export JRE_HOME=${JAVA_HOME}/jre export PYTHONPATH=/usr/bin/python3 export HADOOP_HOME=/usr/local/hadoop ex 阅读全文

摘要： 修改环境变量 cd ~ sudo vim ./.bashrc 增加PYSPARK_PYTHON环境变量 export PYSPARK_PYTHON=${PYTHONPATH} 环境变量根据自己的设置来，不知道可以使用 which python3 阅读全文

摘要： haddop fs -ls / (查询目录)hadoop fs -mkdir /test （在根目录下创建一个目录test）hadoop fs -put ./test.txt /test （将本地的test.txt文件上传到HDFS根目录下的test文件夹中去） hadoop fs -copyFro 阅读全文