摘要: 文件 /etc/sudoers (有sudo权限才行)编辑的话 visudo 或者 vi /etc/sudoers 默认有 user ALL=(ALL) ALL 添加sudo, 以用户lemon 为例 lemon ALL=(ALL) ALL 如果不想在sudo 的时候输密码, (谨慎)改成 lemo 阅读全文
posted @ 2019-11-09 15:09 温泉镇谢步东 阅读(134) 评论(0) 推荐(0)
摘要: python2 的sorted 太难用了, 还要专门记正负对应的大小关系. Python3 的sorted 改版了, sorted(iterable, key=None, reverse=False) key 这个位置写一个lambda, 就是一个复杂的的结构里提取要比较大小的元素 的方法 比如, 阅读全文
posted @ 2019-11-08 16:25 温泉镇谢步东 阅读(241) 评论(0) 推荐(0)
摘要: pip 装 python-Levenshtein 报错 xcrun: error: invalid active developer path (/Library/Developer/CommandLineTools), missing xcrun at: /Library/Developer/Co 阅读全文
posted @ 2019-11-07 20:14 温泉镇谢步东 阅读(679) 评论(0) 推荐(0)
摘要: 1.1 Array、List互转Array转List String[] s = new String[]{"A", "B", "C", "D","E"}; List<String> list = Arrays.asList(s); 注意这里list里面的元素直接是s里面的元素( list backe 阅读全文
posted @ 2019-11-06 12:10 温泉镇谢步东 阅读(242) 评论(0) 推荐(0)
摘要: jedis 用完要释放啊!!!!!!!! 有一个函数, 用完没有释放, 导致把连接池里的链接用完, 就一直在等. 这个bug 过于隐蔽, 完全想不到在哪里有问题. 阅读全文
posted @ 2019-11-05 19:54 温泉镇谢步东 阅读(460) 评论(0) 推荐(0)
摘要: 磁盘快满了, df 查看是80% du -h --max-depth 只找到很少的文件 应该是有大文件删除了, 但是进程没有释放. lsof|grep deleted kill 这个进程没有用, 重启了该进程, 就好了 阅读全文
posted @ 2019-11-05 14:38 温泉镇谢步东 阅读(610) 评论(0) 推荐(0)
摘要: 写了一个spark streamming 程序 总是只运行一轮就停. 把逻辑简化到最简单: 把输入存到redis. 还是不行. 也没有报错, redis 里的数据也不增加. 华丽的分割线 加上了句 问题解决了 阅读全文
posted @ 2019-10-25 16:28 温泉镇谢步东 阅读(290) 评论(0) 推荐(0)
摘要: No output streams registered, so nothing to execute解决原因:没有触发DStream需要的aciton解决方法:使用以下方法之一触发: 阅读全文
posted @ 2019-10-25 15:48 温泉镇谢步东 阅读(858) 评论(0) 推荐(0)
摘要: spark streamming 程序提交到yarn 上运行 报错 SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:file:/mnt/disk3/hadoop/yarn/local/f 阅读全文
posted @ 2019-10-24 14:42 温泉镇谢步东 阅读(733) 评论(0) 推荐(0)
摘要: 特征准备 1. 基于业务/经验理解 2. 可用性评估 获取难度 覆盖率 准确率 特征处理 特征清洗 清洗异常样本 样本数量 过采样 欠采样 smote 非监督学习方法 预处理 阅读全文
posted @ 2019-04-23 16:23 温泉镇谢步东 阅读(170) 评论(0) 推荐(0)