摘要: hadoop配置问题:put: `.’: No such file or directory执行hdfs dfs -ls出现put: .': No such file or directory 出现这个问题的原因是当前登录用户在HDFS中没有HOME文件夹,... 阅读全文
posted @ 2018-01-23 22:30 xtfge0915 阅读(361) 评论(0) 推荐(0) 编辑
摘要: 配置依赖新建项目后,在Intellij左上方会有项目文件结构,双击以编辑pom.xml,这就是Maven的配置了。添加源pom.xml初始内容如下 XML 在project内尾部添加 在project内尾部添加 apache ... 阅读全文
posted @ 2018-01-23 22:19 xtfge0915 阅读(926) 评论(0) 推荐(0) 编辑
摘要: 修改yarn-site.xml,添加下面内容 yarn.resourcemanager.address master:8032 yarn.resourcemanag... 阅读全文
posted @ 2018-01-23 22:11 xtfge0915 阅读(5303) 评论(0) 推荐(0) 编辑
摘要: zip -d yourjar.jar 'META-INF/.SF' 'META-INF/.RSA' 'META-INF/*SF' 阅读全文
posted @ 2018-01-23 22:05 xtfge0915 阅读(268) 评论(0) 推荐(0) 编辑
摘要: 一极类型 二级类型 含义 代码 名称 代码 名称 1 耕地 —— —— 指种植农作物的土地,包括熟耕地、新... 阅读全文
posted @ 2017-09-20 17:03 xtfge0915 阅读(768) 评论(0) 推荐(0) 编辑
摘要: 原文地址:http://www.chinastor.org/gdcc/9103.html?ref=myreadCSS 于 2016 年发布的开源工具,其产量之大超出人们的预料,但纵观 CSS 在过去几年的巨大变化与快速发展,此结果的出现似乎又在情理之中。这些... 阅读全文
posted @ 2016-12-22 10:15 xtfge0915 阅读(206) 评论(0) 推荐(0) 编辑
摘要: 说实话conda确实很好用,今天用它安装geopandas后import时遇到一个错误:libgeos-3.5.0.so: cannot open shared object file: No such file or directory。其实这个错误归根结... 阅读全文
posted @ 2016-11-21 23:08 xtfge0915 阅读(485) 评论(0) 推荐(0) 编辑
摘要: 不得不说DataFrame现在很火,现在已经有很多库都是基于DataFrame写的,而且它用起来也很方便,读excel只需要一行代码,想当初xlrd可是让我头疼了好久,所以对于用python处理大数据的人来说,pandas是必须要了解的。对于一个数据处理工具... 阅读全文
posted @ 2016-10-26 22:53 xtfge0915 阅读(1175) 评论(0) 推荐(0) 编辑
摘要: 裁剪数据大概是我们最常用的功能之一了吧,geotrellis的Tile类有两个方法,一个是localMask,一个是mask,tile.localMask(r: Tile, readMask: Int, writeMask: Int) 的作用是把对数据ti... 阅读全文
posted @ 2016-10-17 17:51 xtfge0915 阅读(518) 评论(0) 推荐(0) 编辑
摘要: spark的机器学习库(MLlib)下有简单的回归分析方法,今天只说最简单的线性回归,spark提供有两个回归分析库(mllib和ml),我学习的时候在网上也查了不少资料,有一个奇怪的现象是网上关于spark回归分析的资料基本全是mllib,关于ml的基本没... 阅读全文
posted @ 2016-10-17 16:36 xtfge0915 阅读(338) 评论(0) 推荐(0) 编辑