摘要: Spark学习中遇到的一些基本问题以及解决思路。(谢谢各位大佬的经验) 读取scv文件第一行做表头 rating = spark.read.option('header','true').csv('file:///home/twain/sparkTest/ml-latest-small/rating 阅读全文
posted @ 2020-06-08 09:53 秋夜花开 阅读(196) 评论(0) 推荐(0) 编辑
摘要: Linux系统的小技巧,不定期更新。 阅读全文
posted @ 2020-06-08 09:14 秋夜花开 阅读(111) 评论(0) 推荐(0) 编辑
摘要: 在用pip下载第三方包时,若没有更改pip源,或者仅下载一次时可以临时指定下载源 #-i参数加上源即可pip install xxx -i https://pypi.tuna.tsinghua.edu.cn/simple #清华大学镜像 附:常用的pip源 https://pypi.tuna.tsi 阅读全文
posted @ 2020-06-08 09:04 秋夜花开 阅读(3153) 评论(0) 推荐(0) 编辑