苏轶然

摘要： 综上试验，直接编写公式，速度相比调用breeze库，时间更短，开销更小。 本次试验，证明在有函数调用的情况下，开销有较大上升。 时间开销分别：handFomula 阅读全文

摘要： 首先AUC值是一个概率值，当你随机挑选一个正样本以及负样本，当前的分类算法根据计算得到的Score值将这个正样本排在负样本前面的概率就是AUC值，AUC值越大，当前分类算法越有可能将正样本排在负样本前面，从而能够更好地分类。 AUC计算 最直观的，根据AUC这个名称，我们知道，计算出ROC曲线下面的 阅读全文

摘要： "Shell编程中Shift的用法" 位置参数可以用shift命令左移。比如 表示原来的 现在变成 ，原来的 现在变成 等等，原来的 、`$2 $3 $0 shift 1`。 非常有用的 Unix 命令:shift。我们知道，对于位置变量或命令行参数，其个数必须是确定的，或者当 Shell 程序不知 阅读全文

摘要： 特殊变量列表 |变量|含义| | | | |$0|当前脚本的文件名| |$n|传递给脚本或函数的参数。n| 是一个数字，表示第几个参数。例如，第一个参数是$1，第二个参数是$2。| |$ |传递给脚本或函数的参数个数。| |$ |传递给脚本或函数的所有参数。有引号则引号内，作为一个参数传入。| |$ 阅读全文

摘要： direct memory size netty or oplog 5.5kw 20 60G worker/ 26G MaxDirectMemorySize 1/2 tasks per worker both error some tasks can work well because of mem 阅读全文

摘要： "原文链接" Git飞行规则(Flight Rules) 🌍 "English" ∙ "Español" ∙ "Русский" ∙ "简体中文" ∙ "한국어" 前言 英文原版 "README" 翻译可能存在错误或不标准的地方，欢迎大家指正和修改，谢谢！ 什么是"飞行规则"? 一个 "宇航员指南 阅读全文

摘要： 错误原因： 一个目录下的子目录数量达到限制，默认的上限是 1048576。 每次执行hive语句时，都会在 hive.exec.scratchdir 配置的目录下生成一个临时目录，执行结束后会自动删除，如果异常中断则有可能会保留目录。 提供两种解决办法： 提高目录的限制上限，通过 dfs.namen 阅读全文

摘要： 使用方法： git 帮助信息： git 变量KV命名： 3.两种patch的比较： 兼容性：很明显，git diff生成的Patch兼容性强。如果你在修改的代码的官方版本库不是Git管理的版本库，那么你必须使用git diff生成的patch才能让你的代码被项目的维护人接受。 除错功能：对于git 阅读全文

摘要： SPARK-18560 阅读全文

摘要： 大量推送本地文件到hdfs如下 hadoop fs -put ${local_path} ${hdfs_path}报错。 在hadoop命令下发现： 查找JAVA_HEAP_MAX 发现 继续查找HADOOP_HEAPSIZE 发现 以及 调整JVM堆的最大值： 阅读全文