摘要: 1.hdfs的文件操作 1.1创建maven项目 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/X 阅读全文
posted @ 2021-03-07 18:29 biglayman 阅读(32) 评论(0) 推荐(0) 编辑
摘要: 重新系统化学习hadoop 虽然官方对centos6已经停止维护,但还是硬着头皮沿用之前的centos6,并解决了一点小疑惑. 1.修改ip地址的文件 /etc/sysconfig/network-scripts/ifcfg-eth0 2.修改主机名的文件 /etc/sysconfig/networ 阅读全文
posted @ 2021-02-28 16:43 biglayman 阅读(52) 评论(0) 推荐(0) 编辑
摘要: 1.maven项目,添加依赖即可 <dependencies> <dependency> <groupId>junit</groupId> <artifactId>junit</artifactId> <version>4.12</version> <!-- 不设置scope就是全局 <scope> 阅读全文
posted @ 2020-09-16 09:31 biglayman 阅读(920) 评论(0) 推荐(0) 编辑
摘要: 1.本地安装hadoop(不安装本地hadoop会报错,虽然并不影响远程的环境,但会报错:Failed to locate the winutils binary in the hadoop binary path) 2.启动hadoop环境,dfs,yarn,然后测试代码(DataNode端口与l 阅读全文
posted @ 2020-08-29 19:42 biglayman 阅读(243) 评论(0) 推荐(0) 编辑
摘要: 1.环境:虚拟机Workstation 15 Pro,使用镜像CentOS-7-x86_64-Minimal-1908.iso 2.配置虚拟机,根据主机IP制定虚拟机网关以及IP,使用NAT模式连接,并测试. 3.配置静态ip,使用ip addr查看网卡位置,并修改vi /etc/sysconfig 阅读全文
posted @ 2020-08-26 14:27 biglayman 阅读(222) 评论(0) 推荐(0) 编辑
摘要: 1.卸载mysql5.6,先停止MySQL服务,再卸载MySQL以及相关软件,由于之前都是msi安装,有许多相关软件也要卸载,然后删除注册表信息; 2.下载MySQL5.7,我下载的是mysql-5.7.31-winx64.zip,解压配置即可使用 3.解压配置,为了方便配置,将解压之后的目录设置为 阅读全文
posted @ 2020-08-13 10:36 biglayman 阅读(357) 评论(1) 推荐(0) 编辑
摘要: 1.pip install nltk 2.import nltknltk.download()这里我出现了 ,点开默认网址raw.githubusercontent.com,发现打不开,按照网上的说法,我修改了hosts为199.232.68.133 raw.githubusercontent.co 阅读全文
posted @ 2020-08-04 12:50 biglayman 阅读(639) 评论(0) 推荐(0) 编辑
摘要: 1.更新pip python -m pip install --upgrade pip 2.安装numpy pip install numpy 3.安装scipy pip install scipy 4.安装matplotlib pip install matplotlib 5.安装scikit-l 阅读全文
posted @ 2020-07-23 22:13 biglayman 阅读(8622) 评论(2) 推荐(0) 编辑
摘要: 1.pip install graphviz 2.https://graphviz.gitlab.io/_pages/Download/Download_windows.html下载msi文件,并安装 3.配置环境变量 阅读全文
posted @ 2020-07-12 13:05 biglayman 阅读(186) 评论(0) 推荐(0) 编辑
摘要: 按照视频教程配置固定ip,为啥还是登不进去呢?在排除防火墙和端口之后,把ip地址的后一位改成了主机位,使NAT的连接情况下在同一节点。 128改成17,是所有的128,over 阅读全文
posted @ 2020-07-08 22:26 biglayman 阅读(154) 评论(0) 推荐(0) 编辑