摘要： sort -u 和 uniq都能起到删除重复信息的功能，那么他们的区别究竟在哪呢？$ cat test jasonjasonjasonfffffjason下面分别执行三个命令1：sort -u testsort -u testfffffjason2: uniq test$u... 阅读全文

摘要： 起因：之前用蓄水池抽样，算法精简，但直观性很差。 所以这次采用了简单的，为没一个行，赋值一个随机值，然后取 最大的K个作为，随机样本。基本思路：为每一个行（record，记录，实体） 赋一个random值。 每个map取一个Top K 值。 由于是求topk，可以设置一个reduce，再求 Top ... 阅读全文

摘要： 转载自：http://blog.csdn.net/yockie/article/details/8838686 所谓的原子操作，取的就是“原子是最小的、不可分割的最小个体”的意义，它表示在多个线程访问同一个全局资源的时候，能够确保所有其他的线程都不在同一时间内访问相同的资源。也就是他确保了在同一时刻... 阅读全文

摘要： 类型为uint64_t的变量，使用printf进行打印时，需要区分操作系统：６４位系统：使用%ld３２位系统：使用%llu#include#include int64_t a = 9102928374747474; int main(void) { std::cout << a << std::en... 阅读全文

摘要： class C{private: C();public: static C* get_instance();}待测 阅读全文

摘要： struct tm tm_time; strptime(time.c_str(), "%Y%m%d %H:%M:%S", &tm_time); time_t tt = mktime(&tm_time);mktime() python time模块也有这个函数。-------------------- 阅读全文

摘要： #include #include int main(void) { char url[1000] = {0}; int buff_len = 1000; std::ifstream read("./urls"); if (!read) { // 这跟python语法相似啊 ... 阅读全文

摘要： 1、时间转字符串函数size_t strftime( char *strDest, size_t maxsize, const char *format, const struct tm *timeptr );2、字符串转时间函数char *strptime(const char *s, const... 阅读全文

摘要： http://www.cnblogs.com/RealOnlyme/articles/2579628.html 阅读全文

摘要： select TRANSFORM(*, *, *)using 'python filter.py'as (*, *, *)from t_1HIVE支持pipe操作，将select出来的字段，用我们的脚本进行“操作”1， 分隔符为 \t 并没有采用hive原有的分隔符 \x01 之类的。 阅读全文