摘要: • 教育数据(http://datainventory.ed.gov/InventoryList) • 选举结果(http://www.fec.gov/pubrec/electionresults.shtml) • 人口普查数据(http://census.ire.org/) • 环境数据(http 阅读全文
posted @ 2019-05-07 10:53 YEA大木南 阅读(479) 评论(0) 推荐(0) 编辑
摘要: 清洗PVUV项目: 1.清洗HDFS文件上的日志 操作RDD 2.将数据保存在集群上 saveAsTextFile 3.从集群读取数据保存到Mysql/MongoDb 1.连接数据库 2.删除旧数据,插入新数据 商品分类项目: 1.连接数据库 2.从数据库读取数据 3.分类设计 4.插入数据Mysq 阅读全文
posted @ 2019-05-07 10:52 YEA大木南 阅读(166) 评论(0) 推荐(0) 编辑