摘要: python2 的sorted 太难用了, 还要专门记正负对应的大小关系. Python3 的sorted 改版了, sorted(iterable, key=None, reverse=False) key 这个位置写一个lambda, 就是一个复杂的的结构里提取要比较大小的元素 的方法 比如, 阅读全文
posted @ 2019-11-08 16:25 温泉镇谢步东 阅读(224) 评论(0) 推荐(0) 编辑
摘要: pip 装 python-Levenshtein 报错 xcrun: error: invalid active developer path (/Library/Developer/CommandLineTools), missing xcrun at: /Library/Developer/Co 阅读全文
posted @ 2019-11-07 20:14 温泉镇谢步东 阅读(660) 评论(0) 推荐(0) 编辑
摘要: 1.1 Array、List互转Array转List String[] s = new String[]{"A", "B", "C", "D","E"}; List<String> list = Arrays.asList(s); 注意这里list里面的元素直接是s里面的元素( list backe 阅读全文
posted @ 2019-11-06 12:10 温泉镇谢步东 阅读(225) 评论(0) 推荐(0) 编辑
摘要: jedis 用完要释放啊!!!!!!!! 有一个函数, 用完没有释放, 导致把连接池里的链接用完, 就一直在等. 这个bug 过于隐蔽, 完全想不到在哪里有问题. 阅读全文
posted @ 2019-11-05 19:54 温泉镇谢步东 阅读(449) 评论(0) 推荐(0) 编辑
摘要: 磁盘快满了, df 查看是80% du -h --max-depth 只找到很少的文件 应该是有大文件删除了, 但是进程没有释放. lsof|grep deleted kill 这个进程没有用, 重启了该进程, 就好了 阅读全文
posted @ 2019-11-05 14:38 温泉镇谢步东 阅读(587) 评论(0) 推荐(0) 编辑
摘要: 写了一个spark streamming 程序 总是只运行一轮就停. 把逻辑简化到最简单: 把输入存到redis. 还是不行. 也没有报错, redis 里的数据也不增加. 华丽的分割线 加上了句 问题解决了 阅读全文
posted @ 2019-10-25 16:28 温泉镇谢步东 阅读(282) 评论(0) 推荐(0) 编辑
摘要: No output streams registered, so nothing to execute解决原因:没有触发DStream需要的aciton解决方法:使用以下方法之一触发: 阅读全文
posted @ 2019-10-25 15:48 温泉镇谢步东 阅读(832) 评论(0) 推荐(0) 编辑
摘要: spark streamming 程序提交到yarn 上运行 报错 SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:file:/mnt/disk3/hadoop/yarn/local/f 阅读全文
posted @ 2019-10-24 14:42 温泉镇谢步东 阅读(721) 评论(0) 推荐(0) 编辑
摘要: 特征准备 1. 基于业务/经验理解 2. 可用性评估 获取难度 覆盖率 准确率 特征处理 特征清洗 清洗异常样本 样本数量 过采样 欠采样 smote 非监督学习方法 预处理 阅读全文
posted @ 2019-04-23 16:23 温泉镇谢步东 阅读(155) 评论(0) 推荐(0) 编辑
摘要: 接上回, 这次做了一个多元回归 这里贴一下代码 阅读全文
posted @ 2019-03-14 14:46 温泉镇谢步东 阅读(660) 评论(0) 推荐(0) 编辑