05 2018 档案

idea导入外部的jar包
摘要：方案一 方案二 阅读全文
posted @ 2018-05-30 11:41 努力中国
spark配置文件spark-env.sh
摘要：#!/usr/bin/env bash # # Licensed to the Apache Software Foundation (ASF) under one or more # contributor license agreements. See the NOTICE file distributed with # this work for additional informat... 阅读全文
posted @ 2018-05-30 09:33 努力中国
es---java操作API
摘要：1.maven文件及jar包 2.增删改查操作 3.查看添加的数据 4.按条件查询 年龄在30-40岁的 阅读全文
posted @ 2018-05-28 17:16 努力中国
spark连接数据源以及在spark集群上跑
摘要：1.spark连接mysql 2.spark连接oracle 下面是另一种连接oracale没有使用过 上面oracle连接需要oracle的驱动连接jar包，自己引入 maven文件 3.spark连接oracle简单的方法 下面是spark sql在集群上跑oracle的数据并创建数据表 代码1 阅读全文
posted @ 2018-05-24 11:00 努力中国
hbase shell 简单操作
摘要：进入hbase Shell 1.查看服务器状态 2.查看HBase版本 3.DDL操作 1).create命令 创建一个具有三个列族"member_id"和"address"即"info"的表"member"，其中表名、行和列都要用单引号括起来，并以逗号隔开。 2).list命令 查看当前HBase 阅读全文
posted @ 2018-05-22 18:08 努力中国
使用
摘要：Ⅰ）启动集群 1.启动1.3的mysql systemctl start mariadb Ⅱ）启动1.238 orcale的启动 1)首先登陆服务器，切换到oracle用户 su - oracle 2)接下来，检查oracle监听器运行状态，通过lsnrctl status命令查看。 lsnrctl 阅读全文
posted @ 2018-05-19 17:27 努力中国
es简单学习-----1
摘要：document 行 Type 表 Index 库 1.启动ES ES开启hadoop-1,hadoop-2,hadoop-3节点 cd /home/es/elasticsearch-5.6.3/bin/ ./elasticsearch -d 启动kibana cd kibana-5.6.3-lin 阅读全文
posted @ 2018-05-19 10:00 努力中国
es安装
摘要：1.下载解压即可5.6.3略 2.es配置说明 配置都在config目录中 1）elasticsearch.yml es的相关配置 2）jvm.options jvm的相关参数 3）log4j2.properties 日志相关配置 //这个日志文件很少修改 1.组件logstash 解压 logst 阅读全文
posted @ 2018-05-17 18:21 努力中国
sqoop将mysql导入到hbase中
摘要：1、安装MariaDB 安装命令 yum -y install mariadb mariadb-server 安装完成MariaDB，首先启动MariaDB systemctl start mariadb 设置开机启动 systemctl enable mariadb 接下来进行MariaDB的相关 阅读全文
posted @ 2018-05-15 09:34 努力中国
对照
摘要：1.jdk 2.注意 3.fenfa.sh脚本放到 /root/下执行脚本sh fenfa.sh （下面代码是这个脚本的内容） 4.修改 vim hadoop-env.sh 添加Java路径 5.hbase问题 上面这个backup-masters和regionservers自己写的文件在所有节点都 阅读全文
posted @ 2018-05-08 15:15 努力中国
遇到的一些问题
摘要：Ⅰ.CentOS 7 更改网卡名ens3到以前的eth0 1、 vim /etc/default/grub 在GRUB_CMDLINE_LINUX的最后，加上 net.ifnames=0 biosdevname=0 的参数 2、 grub2-mkconfig -o /boot/grub2/grub. 阅读全文
posted @ 2018-05-07 19:45 努力中国
linux 自己使用总结
摘要：Ⅰ）启动集群 virsh start hadoop-1 virsh start oracleSigle 1.启动1.3的mysql systemctl start mariadb Ⅱ）启动1.238 orcale的启动 1)首先登陆服务器，切换到oracle用户 su - oracle 2)接下来， 阅读全文
posted @ 2018-05-06 17:36 努力中国
Hbase常用命令
只有注册用户登录后才能阅读该文。
posted @ 2018-05-02 17:12 努力中国 阅读(17) 评论(0) 推荐(0)
spark简单文件配置
摘要：修改slaves和spark-env.sh文件slaves spark-env.sh 阅读全文
posted @ 2018-05-02 11:36 努力中国