oDoraemon

摘要： 虽然大多数看起来稀里糊涂，不过先留档，实践过程中再回头整理总结。 * 系统设计与架构笔记:ETL工具开发和设计的建议 * 数据仓库原理<2>：数据仓库系统的体系结构 * 数据仓库开发之路之一--准备工作 阅读全文

摘要： 编码是真的是非常头疼的一个问题。 看到一份说的非常简洁清晰的文章，分享记录一下。 廖雪峰： 字符串和编码 阅读全文

摘要： 之前在一个数据库群里看到一个年轻人计划自己开发一个数据库中间件。 第一次看到中间件这个概念，感觉(事实上也)是个很高级的应用。 当时以为中间件会隐去对源数据库的访问，对外统一一个查询接口。这样就可以解决，对于异构数据库，每次索引都需要去对应数据库进行查询，然后再聚合的问题。 刚好今天看到数据仓库方面 阅读全文

摘要： 网上看到很多好的文章，上班或者懒，没有时间细看。留坑待清理。 掌握R语言中的apply函数族 为什么你应该（从现在开始就）写博客 虽然不做前端，但做网站的时候不可避免。个人对Javascript比较头疼，刚好可以了解下前段的新技术，React React 入门实例教程 关于数据轴标签图形化的探索： 阅读全文

摘要： 之前一直只是在写小程序脚本工具，几乎不会对异常和错误进行控制和处理。 随着脚本结构和逻辑更复杂，脚本输出结果的准确性验证困难，同时已发布脚本的维护也变得困难。所以也开始考虑引入异常处理和测试工具的事情。 不过好像R语言的异常处理似乎有些辣鸡？查了下资料和try的文档说明，感觉说的并不清楚。 在网上查 阅读全文

摘要： 从其他表里面导入数据，出现中文乱码错误。之前操作时并没有碰到类似问题，有些不得其解。 在网上搜了下，最后参考这篇文章，在执行insert前，先执行 set names gbk; 然后成功插入。 链接：http://www.cnblogs.com/pricks/archive/2010/01/10/1 阅读全文

摘要： 用R语言使用多线程对数据库进行批量插入操作。脚本在windows下运行正常，但是放到linux服务器上跑的时候，就出现了错误。 错误信息如下: 有点懵逼。 猜想可能是数据库连接数过大的原因。 但并不清楚windows和linux下什么差异会导致一个正常，一个不正常的情况。 如果是使用多线程造成的错误 阅读全文

摘要： 之前写了这么一条sql语句，目的是取出表中itemid最大的那一条数据。 但是返回来的数据有点出乎意料。 问题是： date的值并不对应max(itemid)所在行数的值。 比如2016-02-02取到最大的itemid，但是返回来的值确实表中的第一条数据的date值，即2016-01-01。 具体 阅读全文

摘要： 最近处理数据时，一直在纠结程序的结构该如何构建，以减少很多简单又很耗时的工作。 刚好把Rob J Hyndman的blog给浏览了一遍，发现一篇2009年的文章，很有启发。 原文： Workflow in R 下面简单翻译一下： 问题最初出现在StackOverflow上。我认为其中一个回答非常有启 阅读全文

摘要： 问题描述： 在本地使用as.Date()函数从POSIXct类型中提取date时，出现了日期不一致的错误。导致处理数据时，总是出问题。 还好被领导发现数据有误，不然这个bug不知道还要潜伏多久。尽管如此，找出这个问题还是花了我很长时间。 原因： 这里的问题在于，当我们用as.POSIXct将形如 " 阅读全文