奎德

摘要： 海量数据的特征工程中， 如果数据特征维度达到几千乃至上万 常规的lasso很容易失效 这里介绍几种泛义lasso，是在实际数据处理中常用的 迭代与分块思路/分组的使用（有兴趣的同学可自行实践一下） 1. 迭代lasso 2. 分组/聚类lasso 3. 分组与降维结合lasso 另外在<<高维数据统 阅读全文

摘要： 折腾半天，终于记得去查官方文档 😓 https://documents.westerndigital.com/content/dam/doc-library/en_us/assets/public/western-digital/product/data-center-drives/ultrast 阅读全文

摘要： t-SNE-CUDA Barnes-Hut t-SNE https://github.com/CannyLab/tsne-cuda/projects 做数据降维时常用到，但计算较慢，所以可用cuda加速 用源码编译时，常见错误处理： 1. 缺少MKL可到intel下载安装（略） 2. `CMake 阅读全文

摘要： xgboost 多gpu支持 编译Ubuntu 18.04.2Linux 4.15.0-46-genericgcc (Ubuntu 7.3.0-27ubuntu1~18.04) 7.3.0cuda 10.0 https://docs.nvidia.com/cuda/archive/10.0/cuda 阅读全文

摘要： 关于XMPP协议自定义消息类型扩展，其实是挺有意思的一个话题。基于一些商务的扩展，在客户端对这些扩展消息处理，可以做出很有意思的东西。简单的扩展比较容易，在IQ里面定义一些属性就可以做。如果自定义XSD去实现稍微正规一点的消息类型，就会变得复杂了。按照我之前做过一些消息交换的经验，区分一下消息头和消息体比较好，以后扩展起来也灵活。而且有很重要一点，消息头在会话中会比较有用，你可以定义一些消息类型做反馈用。当然，要看你的消息有多复杂，有没有对消息处理的反馈等。这是我希望继续琢磨的一个东西。做一个有趣的客户端，不仅仅是为了消息交互。 阅读全文

摘要： 早上起来，瞧见窗外保安模样的人拖着一只狗，平平的拖着...可能是一只被打牙祭的流浪狗。可能是前一段时间出去散步看到的到处找东西吃的小黑狗。杯具的流浪狗。如果你养狗，千万不要让它流浪。远离保安 阅读全文

摘要： Quartz全称是Quartz Enterprise Job Scheduler Spring是万能胶， 在企业级应用里面 Spring+Quartz是一个不错的集成的任务调度组合 看下面这个SchedulerFactory定义 三个Trigger定义： <bean id="scheduledSimpleTrigger1" class="org.springframework.sch... 阅读全文

摘要： 整理一下前段时间做的基于FTP操作的数据交换服务的经历，希望对大家有所帮助 1. 首先是FTP选型 首先有两个选项大名鼎鼎的 APACHE COMMON NET 和EDT FTP 因为EDT FTP是收费的，所以否决了，看来要看APACHE 基金下大名鼎鼎的APACHE COMMON NET的表现了 2. 用COMMON NET 1不亦乐乎的开发一段时间。 3. 把COMMON NET 1升... 阅读全文

摘要： 最近做一个数据库数据的导入导出的工具，在解决了数据导入的自动表排序问题后，客户要求对传输的数据加密和解密 1. 先测试了当前的数据大小变化和加密(RSA)耗费时间： 常规导出的业务数据 在不加密的情况下才采用二进制存储大概300K左右 加密后，采用二进制存储数据膨胀到了8M左右 加密的时间稍微长了一下，正常导出需要几秒钟，现在多了几十秒。勉强可接受 2. 测试解密 对8M的数据解密，解密进... 阅读全文