Loading

摘要: HDFS shell操作 配置hadoop环境变量 vi /etc/profile export HADOOP_HOME=/usr/local/soft/hadoop-2.6.0 export PATH=.:\$JAVA_HOME/bin:\$HADOOP_HOME/bin:$PATH 然后执行 s 阅读全文
posted @ 2022-09-22 17:14 Christopher·阳 阅读(38) 评论(0) 推荐(0) 编辑
摘要: HADOOP 相关知识 Hadoop的优势 ⒈高可靠性。Hadoop按位存储和处理数据的能力值得人们信赖。 ⒉高扩展性。Hadoop是在可用的计算机集簇间分配数据并完成计算任务的,这些集簇可以方便地扩展到数以千计的节点中。 ⒊高效性。Hadoop能够在节点之间动态地移动数据,并保证各个节点的动态平衡 阅读全文
posted @ 2022-09-22 17:12 Christopher·阳 阅读(22) 评论(0) 推荐(0) 编辑
摘要: 一.选题 1.1 背景 从 1934 年到 1963 年,旧金山因将一些世界上最臭名昭著的罪犯关押在无法逃脱的岛而臭名昭著恶魔 。 今天,这座城市以其科技场景而闻名,而不是它的犯罪历史。但是,随着财富不平等的加剧、住房短缺以及乘坐 BART 上班的昂贵数字玩具的激增,海湾边的城市并不缺乏犯罪。 从 阅读全文
posted @ 2022-09-22 17:11 Christopher·阳 阅读(626) 评论(0) 推荐(0) 编辑
摘要: 首先需要安装一个新的jdk 然后修改环境变量里面的JAVA_HOME 然后复制新的jdk/bin里面的java.exe/javaw.exe/javaws.exe到C:\Windows\System32 注意修改regedit中的注册表的信息HKEY_LOCAL_MACHINE\Software\Ja 阅读全文
posted @ 2022-09-22 17:08 Christopher·阳 阅读(447) 评论(0) 推荐(0) 编辑
摘要: 安装CUDA 同样的在运行不同代码的时候,需要的环境不同,所以需要不同的GPU环境,Cuda的需要自然也就发生改变 特别是关于tensorflow的运行中。 首先我们需要在nvidia的官网上找到我们所需要的cuda版本,接下来可以根据各自的实际要求来选择 当前环境配置:Ubuntu20.04 gc 阅读全文
posted @ 2022-04-21 17:23 Christopher·阳 阅读(1455) 评论(0) 推荐(0) 编辑
摘要: TF-IDF(term frequency–inverse document frequency,词频-逆向文件频率)是一种用于信息检索(information retrieval)与文本挖掘(text mining)的常用加权技术。 TF-IDF是一种统计方法,用以评估一字词对于一个文件集或一个语 阅读全文
posted @ 2022-04-20 14:52 Christopher·阳 阅读(1575) 评论(0) 推荐(0) 编辑
摘要: #如何查看Linux版本 cat /proc/version`可以查看目录下"/proc"下version的信息,也可以得到当前系统的内核版本号及系统名称 。 显示linux standard base的基础配置 #如何解决暂不能解析域名 ##例如 apt-get 操作过程中提示无法解析域名“cn. 阅读全文
posted @ 2022-04-20 14:50 Christopher·阳 阅读(24) 评论(0) 推荐(0) 编辑
摘要: 有的时候,不同环境要求的gcc编译器版本不同,需要安装多个gcc来随时切换 所以一开始安装的时候,利用ubuntu软件源包含一个软件包组"build-essential",其中有GNU编辑器集合、GNU调试器、和其他编译软件所必需的开发库与工具 sudo apt update sudo apt in 阅读全文
posted @ 2022-04-20 14:47 Christopher·阳 阅读(1833) 评论(0) 推荐(0) 编辑
摘要: 01 公开的数据库 - 国家数据 - http://data.stats.gov.cn/index.htm 数据来源于中国国家统计局,包含了我国经济民生等多个方面的数据,并且在月度、季度、年度都有覆盖,较为全面和权威,对于社会科学的研究不要太有帮助。最关键的是,网站简洁美观,还有专门的可视化读物。 阅读全文
posted @ 2022-03-16 13:37 Christopher·阳 阅读(322) 评论(0) 推荐(0) 编辑
摘要: 删除无效文件\文件夹 有时候会发现自己电脑的文件夹 window找不到 改不动 删不了 创建一个txt 插入如下代码: DEL /F /A /Q \\?\%1 RD /S /Q \\?\%1 修改格式为bat 将删除不了的文件或文件夹拖动到这个bat上 即可删除 阅读全文
posted @ 2022-03-09 16:13 Christopher·阳 阅读(1054) 评论(0) 推荐(0) 编辑