随笔档案「2016年8月」 - yuerspring

Scala 初级入门课程一

摘要：package cn.dowhatyouwant.codes/** * Created by DengNi on 2016/8/31. * Scala 是动态语言，静态类型，因为难，所以用起来方便 * spark 太优秀每个人都应该去学习，使用 * 学习spa... 阅读全文

posted @ 2016-08-31 21:34 yuerspring 阅读(110) 评论(0) 推荐(0)

摘要：sed用法实例1.替换命令 s ,不改变原来文件sed 's/book/bookall/' mysedsed -n 's/book/bookall/' mysed -n 单独使用不会输出任何内容sed 's/book/bookall/p' mysedp 单独使用，就是... 阅读全文

posted @ 2016-08-29 21:07 yuerspring 阅读(267) 评论(0) 推荐(0)

Spark word count 实例

摘要：利用中午休息时间配置了个环境，写个Word count 本地模式测试下环境，环境OkayScala 2.10.4Java 1.7.08Spark 1.6.0package com.ib.e3import org.apache.spark.{SparkConf,... 阅读全文

posted @ 2016-08-29 13:02 yuerspring 阅读(429) 评论(0) 推荐(0)

摘要：standalong 模式需要在spark master 节点上启动 spark/sbin/start-all.sh主从节点都可以runstandalong client./bin/spark-submit --class org.apache.spark.examp... 阅读全文

posted @ 2016-08-27 21:56 yuerspring 阅读(174) 评论(0) 推荐(0)

First Steps to Scala

摘要：Scala is a statically typed, object-oriented programming language that blends imperative and functional programming styles. Scala isde... 阅读全文

posted @ 2016-08-25 14:31 yuerspring 阅读(158) 评论(0) 推荐(0)

ELK 实时日志分析

摘要：http://www.cnblogs.com/yjf512/p/4199105.htmlhttp://www.tuicool.com/articles/QFvARfr缓存可以使用Kafka MQ 阅读全文

posted @ 2016-08-24 12:31 yuerspring 阅读(291) 评论(0) 推荐(0)

摘要：搭建各个组建版本 centos 6.5hadoop 2.5.1hive 1.2.1 注意 jline 问题 myaql 驱动mysql yum 安装的，版本基本不需要控制 hbase 1.1.3kylin 1.5.1--hbase 1.1.3 ... 阅读全文

posted @ 2016-08-19 16:37 yuerspring 阅读(346) 评论(0) 推荐(0)

摘要：cat /etc/profile 配置 /usr/local/zookeeper-3.4.6/bin/zkServer.sh start 阅读全文

posted @ 2016-08-16 20:37 yuerspring 阅读(456) 评论(0) 推荐(0)

摘要：mysql 在 centos 上安装，做成服务，且开机启动步骤查看系统中是否已经自带mysql数据库rpm -qa | grep mysql // 这个命令就会查看该操作系统上是否已经安装了mysql数据库卸载rpm -e mysql // 普通删除模式rpm... 阅读全文

posted @ 2016-08-16 09:37 yuerspring 阅读(248) 评论(0) 推荐(0)

摘要：请参考原作者，谢，http://m.blog.itpub.net/30089851/viewspace-2121221/1.版本Hadoop2.7.2+HBase1.1.5+Hive2.0.0kylin-1.5.1Kylin1.5 (apache-kylin-1.... 阅读全文

posted @ 2016-08-15 10:41 yuerspring 阅读(237) 评论(0) 推荐(0)

摘要：40:36 >>>>>>>>>>>> Extract Fact Table Distinct Columns <<<<<<<<<<<<<2016-08-14 22:47:17,911 INFO [pool-3-thread-2] manager.Exec... 阅读全文

posted @ 2016-08-14 23:01 yuerspring 阅读(341) 评论(0) 推荐(0)

摘要：Hive 1.2.1 HBase 0.98Kylin 1.5.1Hadoop 2.5.12016-08-14 15:24:22,893 INFO org.apache.hadoop.yarn.client.ConfiguredRMFailoverProxyProvid... 阅读全文

posted @ 2016-08-14 14:24 yuerspring 阅读(527) 评论(0) 推荐(0)

Kylin 环境搭建成功

摘要：Hive 1.2.1 HBase 0.98Kylin 1.5.1Hadoop 2.5.1http://bigdatacloud:7070/kylin/adminServer Configkylin.hbase.region.cut.large=50deploy.en... 阅读全文

posted @ 2016-08-14 12:42 yuerspring 阅读(623) 评论(0) 推荐(0)

Kylin 环境搭建报错

摘要：Hive 1.2.1 HBase 0.98Kylin 1.5.3Hadoop 2.5.1Error logs :usage: java org.apache.catalina.startup.Catalina [ -config {pathname} ] [ -no... 阅读全文

posted @ 2016-08-14 10:44 yuerspring 阅读(722) 评论(0) 推荐(0)

yuerspring