叮当小说网 找小说网 无限小说网 红尘小说网 幻想小说网 酷文学 深夜书屋

08 2015 档案

Linux 远程和本地的一些解决方案
摘要:有的小伙伴想Linux 远程登录 两台机器同时root登录,其实可以同时多个用户的。 Linux是多用户的多任务系统,可以同时多个用户登录到系统,也可以一个用户通过不同终端登录到一个系统执行不同的操作:root@Saiver:~# w 22:42:31 up 32 days, 6:03, ... 阅读全文

posted @ 2015-08-25 09:42 麦哲思科技 阅读(473) 评论(0) 推荐(0)

ActivityGroup中EditText无法删除的问题
摘要:坑,以前比较少用ActivityGroup,最近使用才发现ActivityGroup中多个Activity中如果都有Edittext是无法后退删除。 网上说有种方法监听dispatchKeyEvent return就可以,我只想说~然并卵啊!!! 后来发现只能重写EditText~以... 阅读全文

posted @ 2015-08-23 03:11 麦哲思科技 阅读(155) 评论(0) 推荐(0)

hue安装与部署
摘要:运行环境centOS 6.6hadoop 2.4.0hive 1.2.0spark 1.4.1HUE 3.9介绍:Hue是一个开源的Apache Hadoop UI系统,最早是由Cloudera Desktop演化而来,由Cloudera贡献给开源社区,它是基于Python Web... 阅读全文

posted @ 2015-08-22 22:45 麦哲思科技 阅读(184) 评论(0) 推荐(0)

centOS6.6升级gcc4.8
摘要:最近想升级mesos0.23.0,结果编译mesos0.23.0需要gcc4.8+,可是centOS6.6最高版本的gcc也只到4.4.7版本,只好手动升级一下了。下载4.8.2源码wget ftp://gcc.gnu.org/pub/gcc/releases/gcc-4.8.2/... 阅读全文

posted @ 2015-08-20 23:11 麦哲思科技 阅读(130) 评论(0) 推荐(0)

kafka 0.8.x producer Example(scala)
摘要:Producer最简配置 metadata.broker.list参数指定broker地址,这里不需要填上所有的broker地址,但是如果只写一个,这个broker挂掉后就无法往topic中写入信息,一般写入2-3个broker地址。 serializer.class指定序列化的方... 阅读全文

posted @ 2015-08-18 17:29 麦哲思科技 阅读(124) 评论(0) 推荐(0)

spark standalone zookeeper HA部署方式
摘要:虽然spark master挂掉的几率很低,不过还是被我遇到了一次。以前在spark standalone的文章中也介绍过standalone的ha,现在详细说下部署流程,其实也比较简单。一.机器zookeeper集群zk1:2181zk2:2181zk3:2181spark ma... 阅读全文

posted @ 2015-08-17 16:00 麦哲思科技 阅读(218) 评论(0) 推荐(0)

建索引的原则-以innodb为例
摘要:一、写在前面 随着开发、测试任务进入尾声,大家都在整理一些项目发布前的一些准备工作,其中一个重要的工作就是为之前写的一些sql语句建立索引,这高并发、高访问量的环境下是非常有必要的,建立一个好的索引能够极大地提高sql语句的查询效率,那么问题来了,到底什么是索引,怎样才能建立一个好的索... 阅读全文

posted @ 2015-08-16 12:01 麦哲思科技 阅读(225) 评论(0) 推荐(0)

数据可视化工具zeppelin安装
摘要:介绍zeppelin主要有以下功能数据提取数据发现数据分析数据可视化目前版本(0.5-0.6)之前支持的数据搜索引擎有如下安装环境 centOS 6.6编译准备工作 sudo yum updatesudo yum install openjdk-7-jdksudo yum ins... 阅读全文

posted @ 2015-08-14 22:11 麦哲思科技 阅读(271) 评论(0) 推荐(0)

kafka0.8.2以下版本删除topic
摘要:一些说明kafka0.8.2及以上版本已经支持delete命令删除topic,可是之前的版本要是想删除topic还是要费一番手脚,绝对是个体力活。。。该方法最好仅在线下开发环境中使用,毕竟要重启zookeeper和broker步骤1.在zk中删除topic信息(test)$KAFK... 阅读全文

posted @ 2015-08-14 21:47 麦哲思科技 阅读(119) 评论(0) 推荐(0)

kafka迁移数据目录
摘要:问题先前存储kafka日志的磁盘空间太小,zabbix警报不断,于是加了磁盘,将日志存到新磁盘上。解决方案依次在每台机器上操作,保证有机器能响应producer和consumer的操作。 加磁盘需要重启服务器。1. 拷贝日志服务器启动后,将以前的日志拷贝到新目录cp /data/k... 阅读全文

posted @ 2015-08-13 17:20 麦哲思科技 阅读(146) 评论(0) 推荐(0)

scala2.10.x case classes cannot have more than 22 parameters
摘要:问题这个错误出现在case class参数超出22个的时候。case classes cannot have more than 22 parameters在scala 2.11.x版本以下时case class 的参数最多为22个,如果超过这个参数又不能升级时(比如目前spark... 阅读全文

posted @ 2015-08-12 22:40 麦哲思科技 阅读(292) 评论(0) 推荐(0)

opscenter dashboard排错
摘要:系统环境opscenter 5.2 centOS 6.6 cassandra 2.0.x问题opscenter上的dashboard监控cassandra集群一段时间(大约1天)后总会停止显示。然而在cassandra节点上发现datastax-agent进程还是好好的在运行着。之... 阅读全文

posted @ 2015-08-10 10:03 麦哲思科技 阅读(124) 评论(0) 推荐(0)

kafka监控工具kafkaOffsetMoniter的使用
摘要:简介KafkaOffsetMonitor是由Kafka开源社区提供的一款Web管理界面,用来实时监控Kafka的Consumer以及Partition中的Offset,可以在web界面直观的看到每个Partition的Message的增长速度,是否消费,是否阻塞等。使用如果不想编译... 阅读全文

posted @ 2015-08-07 17:45 麦哲思科技 阅读(143) 评论(0) 推荐(0)

SparkSQL JSON数据操作(1.3->1.4)
摘要:1.用户自定义schemadatajson串格式如下:{ "partner_code": "demo", "app_name": "web", "person_info": { "name": "张三", "age": 18 },... 阅读全文

posted @ 2015-08-05 23:00 麦哲思科技 阅读(170) 评论(0) 推荐(0)

kafka管理器kafka-manager部署安装
摘要:运行的环境要求Kafka 0.8.1.1+sbt 0.13.xJava 7+功能为了简化开发者和服务工程师维护Kafka集群的工作,yahoo构建了一个叫做Kafka管理器的基于Web工具,叫做 Kafka Manager。这个管理工具可以很容易地发现分布在集群中的哪些topic分... 阅读全文

posted @ 2015-08-05 17:02 麦哲思科技 阅读(198) 评论(0) 推荐(0)

Kafka集群模式部署
摘要:环境:kafka 0.8.1.1基本概念Kafka维护按类区分的消息,称为主题(topic)生产者(producer)向kafka的主题发布消息消费者(consumer)向主题注册,并且接收发布到这些主题的消息kafka以一个拥有一台或多台服务器的集群运行着,每一台服务器称为bro... 阅读全文

posted @ 2015-08-05 10:39 麦哲思科技 阅读(568) 评论(0) 推荐(0)

导航