2019年7月18日
《七天数据埋点之旅》第一天：初识埋点
摘要： 关于作者：我是水大人，资深潜水员，一个基于开发、面向分析、走向全栈的饱经摧残的数据新手，爱折腾不爱玩，爱总结爱思考的老兵，错了改改了又错的惯犯。 0x00 前言 本篇为《七天数据埋点之旅》的第一篇，通过阅读本篇，你将获得以下三方面的知识： 什么是埋点？ 埋点的用途？ 埋点的分类？ 0x01 什么是埋 阅读全文
posted @ 2019-07-18 10:23 MRO物料采购服务 阅读(907) 评论(0) 推荐(1)
特征工程系列：特征筛选的原理与实现（上）
摘要： 本文为数据茶水间群友原创，经授权在本公众号发表。 关于作者：JunLiang，一个热爱挖掘的数据从业者，勤学好问、动手达人，期待与大家一起交流探讨机器学习相关内容~ 0x00 前言 数据和特征决定了机器学习的上限，而模型和算法只是逼近这个上限而已。由此可见，特征工程在机器学习中占有相当重要的地位。在 阅读全文
posted @ 2019-07-18 10:19 MRO物料采购服务 阅读(3427) 评论(0) 推荐(0)
2019年7月17日
R多线程并行计算
摘要： 先上代码案例： 主要的操作： library(parallel);#加载并行计算包 cl <- makeCluster(8);# 初始化cpu集群 clusterEvalQ(cl,library(RODBC));#添加并行计算中用到的包 clusterExport(cl,'variablename' 阅读全文
posted @ 2019-07-17 14:16 MRO物料采购服务 阅读(1595) 评论(0) 推荐(0)
进程和线程的区别
摘要： 一、进程 进程：指在系统中能独立运行并作为资源分配的基本单位，它是由一组机器指令、数据和堆栈等组成的，是一个能独立运行的活动实体。 注意，进程一般有三个状态：就绪状态、执行状态和等待状态【或称阻塞状态】；进程只能由父进程建立，系统中所有的进程形成一种进程树的层次体系；挂起命令可由进程自己和其他进程发 阅读全文
posted @ 2019-07-17 10:25 MRO物料采购服务 阅读(307) 评论(0) 推荐(0)
线程进程是怎样使用多核的
摘要： 最近由于有抢票的需求，对于一个用户而言，用一个死循环，一个刷票就好了，刷到了就break退出。但是现在我要考虑同时给很多人抢，那么必须要考虑并发。但是这是一个耗时的任务，很可能几天都不能结束这个任务，所以这个和普通的java web并发不同。我在思考如何设置这个线程模型时引出了一个问题，之前还一直都 阅读全文
posted @ 2019-07-17 10:17 MRO物料采购服务 阅读(1553) 评论(0) 推荐(0)
单核CPU与多核CPU工作原理
摘要： 单核CPU与多核CPU工作原理今天要介绍一下单核CPU和单核（超时间轴）CPU以及多核CPU的工作原理 一.单核CPU起源：CPU的起源是1971年英特尔公司推出，由此正式宣告计算机的诞生，可以说是世界级的改变，并且严格准守冯诺依曼体系结构，在英特尔推出CPU之前的计算机所使用的处理器工作是非常麻烦 阅读全文
posted @ 2019-07-17 09:52 MRO物料采购服务 阅读(2464) 评论(0) 推荐(0)
2019年7月16日
R语言多线程运算（解决R循环慢的问题）【转载】
摘要： 已经大半年没有更新博客了。。最近都跑去写分析报告半年没有R这次记录下关于R循环（百万级以上）死慢死慢的问题，这个问题去年就碰到过，当时也尝试过多线程，but failed......昨天试了下，终于跑通了，而且过程还挺顺利step1先查下自己电脑几核的，n核貌似应该选跑n个线程，线程不是越多越好，线 阅读全文
posted @ 2019-07-16 09:50 MRO物料采购服务 阅读(2023) 评论(0) 推荐(0)
2019年7月15日
提升R语言运算效率的11个实用方法
摘要： 提升R语言运算效率的11个实用方法 众所周知，当我们利用R语言处理大型数据集时，for循环语句的运算效率非常低。有许多种方法可以提升你的代码运算效率，但或许你更想了解运算效率能得到多大的提升。本文将介绍几种适用于大数据领域的方法，包括简单的逻辑调整设计、并行处理和Rcpp的运用，利用这些方法你可以轻 阅读全文
posted @ 2019-07-15 16:41 MRO物料采购服务 阅读(2710) 评论(0) 推荐(0)
2019年7月3日
R语言︱ 数据库SQL-R连接与SQL语句执行（RODBC、sqldf包）
摘要： 数据库是极其重要的R语言数据导入源数据之地，读入包有sqldf、RODBC等。跟SQL server相连有RODBC，跟mySQL链接的有RMySQL。但是在R里面，回传文本会出现截断的情况，这一情况可把我弄得有点手足无措。一、数据库读入——RODBC包CRAN 里面的包 RODBC 提供了 ODB 阅读全文
posted @ 2019-07-03 10:58 MRO物料采购服务 阅读(2258) 评论(0) 推荐(0)
2019年6月20日
Microsoft SQL Server 自定义函数整理大全 [转]
摘要： 转自 - 博客园 - 柏拉图的永恒 - Microsoft SQL Server 自定义函数整理大全 - 编辑 01、去除字符串中的html标记及标记中的内容 02、去除字符串中连续的分割符 03、求第一个字符串中第二个串的个数 04、综合模糊查询 05、将十进制转成十六进制 06、求两个字符串中相 阅读全文
posted @ 2019-06-20 15:07 MRO物料采购服务 阅读(1137) 评论(0) 推荐(0)