摘要：
"原文：美团1万台 Hadoop 集群 YARN 的调优之路" 背景 架构 YARN架构 资源抽象 YARN调度架构 资源抽象 调度流程 作业的组织方式 核心调度流程 指标 业务指标：有效调度 系统性能指标：每秒调度Container数 关键优化点 优化排序比较函数 优化作业跳过时间 队列并行排序优 阅读全文
摘要：
mac一键获取最新datagrid 2017.3注册码到剪贴板 近期datagrid 校验激活码合法性的频率提高，导致需要频繁输入激活码 遂整理一脚本，自动获取最新注册码，并拷贝到剪贴板。 打开datagrid后，会被自动检测剪贴板，直接粘贴。 适用于idea全家桶 仅限mac 需要依赖wget/u 阅读全文
摘要：
背景 python 多进程任务，卡在某个地方没有继续执行也没有报出异常，进程被hang住 日志没有捕获到相关信息，需要知道进程阻塞在哪里，为什么阻塞 jvm提供了jstack、jmap类工具进行性能分析，python有没有类似于pystack的工具 python jstack pystack 调试工 阅读全文
摘要：
Phenomenon overlay2 not such file or directory. Job for docker.service failed init/merged: invalid argument. solution 停止docker 重装docker 卸载docker及关键依赖 阅读全文
摘要：
"ROC 曲线与 PR 曲线" "ROC 曲线与 PR 曲线" ROC 曲线和 PR 曲线是评估机器学习算法性能的两条重要曲线，两者概念比较容易混淆，但是两者的使用场景是不同的。本文主要讲述两种曲线的含义以及应用的场景。 定义 ROC 曲线和 PR 曲线都是用在二分类中，且涉及到下图的几个概念(摘自 阅读全文
摘要：
"NLP算法面试必备！史上最全！PTMs：NLP预训练模型的全面总结" 预训练模型(Pre trained Models,PTMs)的出现将NLP带入了一个全新时代。2020年3月18日，邱锡鹏老师发表了关于NLP预训练模型的综述《Pre trained Models for Natural Lan 阅读全文
摘要：
F1 Score相关概念 F1分数（F1 Score），是统计学中用来衡量二分类（或多任务二分类）模型精确度的一种指标。它同时兼顾了分类模型的准确率和召回率。 F1分数可以看作是模型准确率和召回率的一种加权平均，它的最大值是1，最小值是0，值越大意味着模型越好。 假如有100个样本，其中1个正样本， 阅读全文
摘要：
背景 有场景分别定义两组逻辑，随后有统一入口做基类属性的整合 其中两组逻辑的积累构造函数定义入参不同 设计类继承图如： 实际的使用方式抽象为[使用] 小节 实际开发过程中遇到问题 先说结论 python 多继承，需要使用super函数进行MRO的依次不重复初始化 python 多继承的情况下，构造函 阅读全文
摘要：
gitlab in docker 网上有很多现成的解决方案，本文仅作流程梳理，若不需要，可直接用gitlab官方提供的镜像 installation register running !/bin/bash LOG_DIR=$1 if [ z ${LOG_DIR} ] then export LOG_ 阅读全文
摘要：
遇到异常 发现异常： hostname 在shell中解析不完整 调整hostname后 增加hosts配置 屏蔽错误host配置 提交成功 阅读全文