o_0的园子 - 博客园

2019年1月2日

摘要： #解决海量数据的存储问题分布式文件系统（HDFS） 1、具有分布式的集群结构我们把这样实际存储数据的节点叫做 datanode 2、具有一个统一对外提供查询存储搜索机器节点对外跟客户端统一打交道对内跟实际存储数据的节点打交道 3、具有备份的机制解决了机器挂掉时候数据丢失的问题 4、具阅读全文

posted @ 2019-01-02 21:17 o_0的园子阅读(987) 评论(0) 推荐(0) 编辑

2018年12月28日

js获取当前时间的前一天/后一天

摘要： Date curDate = new Date(); var preDate = new Date(curDate.getTime() - 24*60*60*1000); //前一天 var nextDate = new Date(curDate.getTime() + 24*60*60*1000); //后一天阅读全文

posted @ 2018-12-28 17:16 o_0的园子阅读(4247) 评论(0) 推荐(0) 编辑

2018年12月26日

Windows下主机名和IP映射设置

摘要：如果需要添加域名和IP的对应关系可以在以下地方进行修改。打开系统目录：c:/windows/system32/drivers/etc找到hosts文件，打开hosts文件并在最后面添加一条记录例如： 127.0.0.1 www.163.com 附录： Windows2000操作中Hosts文件的作用很多用户都知道在Window系统中有个Hosts文件（没有后缀名），在Win... 阅读全文

posted @ 2018-12-26 20:33 o_0的园子阅读(8902) 评论(0) 推荐(0) 编辑

大数据学习——HDFS的shell

摘要： -help 功能：输出这个命令参数手册 -ls 功能：显示目录信息示例： hadoop fs -ls hdfs://hadoop-server01:9000/ 备注：这些参数中，所有的hdfs路径都可以简写 -->hadoop fs -ls / 等同于上一条命令的效果 -mkdir 功能：在hdfs... 阅读全文

posted @ 2018-12-26 20:18 o_0的园子阅读(194) 评论(0) 推荐(0) 编辑

Ext修改Confirm弹框按钮的默认值

摘要：阅读全文

posted @ 2018-12-26 15:08 o_0的园子阅读(512) 评论(0) 推荐(0) 编辑

ExtJS前端框架EXT弹出窗口事件

摘要： https://blog.csdn.net/alsyuan/article/details/73240841 Ext.MessageBox.alert()Ext.MessageBox.alert()提供一个OK按钮。对应JavaScript中的alert()。定义：alert( Stringtit 阅读全文

posted @ 2018-12-26 12:54 o_0的园子阅读(2566) 评论(0) 推荐(0) 编辑

2018年12月25日

大数据学习——securecrt同时向多个tab窗口发送相同的命令

摘要：右键选中然后在下面空白窗口写命令就可以了阅读全文

posted @ 2018-12-25 19:07 o_0的园子阅读(752) 评论(0) 推荐(0) 编辑

大数据学习——yarn集群启动

摘要：启动yarn命令: start-yarn.sh 验证是否启动成功 1 jps查看进程 2 http://192.168.74.100:8088页面关闭 stop-yarn.sh 阅读全文

posted @ 2018-12-25 18:32 o_0的园子阅读(489) 评论(0) 推荐(0) 编辑

2018年12月24日

如何取SQL结果集的第一条记录

摘要：在SQL Server数据库中，使用top关键字： SELECT TOP number|percent column_name(s) FROM table_name 在MySQL数据库中，使用LIMIT关键字： SELECT column_name(s) FROM table_name LIMIT number 例子:SELECT * FROM P... 阅读全文

posted @ 2018-12-24 17:27 o_0的园子阅读(28903) 评论(0) 推荐(1) 编辑

Java比较两个数组中的元素是否相同的最简单方法

摘要： import java.util.Arrays; public class Test { /** * Java比较两个数组中的元素是否相同 */ public static void main(String[] args) { ... 阅读全文

posted @ 2018-12-24 14:46 o_0的园子阅读(12221) 评论(0) 推荐(0) 编辑

大数据学习——hdfs集群启动

摘要：第一种方式： 1 格式化namecode（是对namecode进行格式化） hdfs namenode -format(或者是hadoop namenode -format) 进入 cd /root/apps/hadoop/tmp/dfs/name/current 启动namecode hadoop 阅读全文

posted @ 2018-12-24 13:53 o_0的园子阅读(708) 评论(0) 推荐(0) 编辑

2018年12月23日

大数据学习——hadoop安装

摘要：上传centOS6.7-hadoop-2.6.4.tar.gz 解压 tar -zxvf centOS6.7-hadoop-2.6.4.tar.gz hadoop相关修改配置 1 修改 /root/apps/hadoop/etc/hadoop 目录下的hadoop-env.sh vi hadoop- 阅读全文

posted @ 2018-12-23 19:10 o_0的园子阅读(181) 评论(0) 推荐(0) 编辑

大数据学习——软件安装

摘要： 1 jdk yum install lrzsz 比alt+p上传文件更方便 rz 回车就可以上传文件了，上传是上传到当前目录下解压上传的jdk tar -zxvf jdk-7u80-linux-x64.tar.gz 配置变量 vi /etc/profile #在文件最后添加 export JAVA_HOME=/root/apps/jdk1.7.0_80 export PATH=$... 阅读全文

posted @ 2018-12-23 18:49 o_0的园子阅读(330) 评论(0) 推荐(0) 编辑

大数据学习——免密登录配置

摘要： 1 在mini1上 ssh-keygen -t rsa 回车——回车——回车 ssh-copy-id root@mini2 yes 密码 hadoop 测试 ssh mini2可以从mini1切换到mini2 退出是exit,从mini2切换回mini1 注意也要给自给机器配置一个 ssh-copy-id root@mini1 阅读全文

posted @ 2018-12-23 18:12 o_0的园子阅读(415) 评论(0) 推荐(0) 编辑

大数据学习——修改主机名和ip的映射关系

摘要： vi /etc/hosts 192.168.1.101 itcast 阅读全文

posted @ 2018-12-23 17:53 o_0的园子阅读(494) 评论(0) 推荐(0) 编辑

大数据学习——hadoop集群搭建2.X

摘要： 1.准备Linux环境 1.0先将虚拟机的网络模式选为NAT 1.1修改主机名 vi /etc/sysconfig/network NETWORKING=yes HOSTNAME=itcast ### 1.2修改IP 两种方式：第一种：通过Linux图形界面进行修改（强烈推荐）进入Linux图形界面 -> 右键点击右上方的两个小电脑 -> 点击Edit connections -> 选... 阅读全文

posted @ 2018-12-23 17:41 o_0的园子阅读(217) 评论(0) 推荐(0) 编辑

大数据学习——克隆虚拟机

摘要： 1关闭要克隆的虚拟机在mini上右键——管理——克隆mini2——完整克隆——克隆完成 2修改MAC地址右键mini2——设置——网络适配器——高级——MAC地址——生成——确定——确定 3启动mini2 永久修改主机名 vi /etc/sysconfig/network 保存退出修改ip地址阅读全文

posted @ 2018-12-23 17:35 o_0的园子阅读(290) 评论(0) 推荐(0) 编辑

大数据学习——ip改成固定ip

摘要： vi /etc/sysconfig/network-scripts/ifcfg-eth0 修改BOOTPROTO为static 添加IPADDR=192.168.74.100 添加NETMASK=255.255.255.0 添加GATEWAY=192.168.74.2 添加DNS1=192.168. 阅读全文

posted @ 2018-12-23 17:06 o_0的园子阅读(384) 评论(0) 推荐(0) 编辑

大数据学习——HADOOP集群搭建

摘要： 4.1 HADOOP集群搭建 4.1.1集群简介 HADOOP集群具体来说包含两个集群：HDFS集群和YARN集群，两者逻辑上分离，但物理上常在一起 HDFS集群：负责海量数据的存储，集群中的角色主要有 NameNode / DataNode YARN集群：负责海量数据运算时的资源调度，集群中的角色主要有 ResourceManager /NodeManager (那mapredu... 阅读全文

posted @ 2018-12-23 10:57 o_0的园子阅读(278) 评论(0) 推荐(0) 编辑

2018年12月21日

大数据学习——Hadoop第一天

摘要： 1.1 什么是HADOOP 国内外HADOOP应用案例介绍 1、HADOOP应用于数据服务基础平台建设 2、/HADOOP用于用户画像 3、HADOOP用于网站点击流日志数据挖掘金融行业：个人征信分析证券行业：投资模型分析交通行业：车辆、路况监控分析电信行业：用户上网行为分析 ... 阅读全文

posted @ 2018-12-21 20:54 o_0的园子阅读(209) 评论(0) 推荐(0) 编辑

大数据学习——服务器定期上传nginx日志到hdfs

摘要：需求：按照所学知识完成如下：服务器定期上传nginx日志到hdfs 提示： Hdfs的创建文件夹命令： Hadoop fs -mkdir /文件夹名称 Hdfs的上传命令： Hadoop fs -put 目标文件 /目标目录 #日志文件存放的目录 log_src_dir=/home/hadoop/logs/log/ #待上传的日志存放目录 log_toupload_dir=/ho... 阅读全文

posted @ 2018-12-21 14:28 o_0的园子阅读(760) 评论(0) 推荐(0) 编辑

2018年12月19日

大数据学习——装私服nexus

摘要：（一）安装解压之后进入bin文件夹下复制路径 D:\software\nexus-2.12.0-01-bundle\nexus-2.12.0-01\bin 进入命令行窗口输入以下命令，安装成功（如果报错 'findstr' 不是内部或外部命令，也不是可运行的程序或批处理文件这是PATH环境阅读全文

posted @ 2018-12-19 19:07 o_0的园子阅读(297) 评论(0) 推荐(0) 编辑

2018年12月17日

window查看哪些端口被占用命令

摘要：管理员方式运行cmd netstat -n 阅读全文

posted @ 2018-12-17 19:30 o_0的园子阅读(418) 评论(0) 推荐(0) 编辑

2018年12月13日

大数据学习——redis安装

摘要：用源码工程来编译安装 1/ 到官网下载最新stable版 2/ 解压源码并进入目录 tar -zxvf redis-2.8.19.tar.gz -C ./redis-src/ 3/ make 如果报错提示缺少gcc，则安装gcc ： yum install -y gcc 如果报错提示：Newer version of jemalloc required 则在make时加参数... 阅读全文

posted @ 2018-12-13 19:55 o_0的园子阅读(243) 评论(0) 推荐(0) 编辑

2018年12月12日

Java条形码生成技术-Barcode4j

摘要： https://www.cnblogs.com/littleatp/p/4815921.html 背景目前二维码的应用场景已经遍布各类互联网平台，通常是将产品/商品的唯一编号存储于二维码中以做扫码识别。而用于生产环境的条形码技术仍然存在，如硬件设备制造、供应、物流运输等等。在常见的产品信息管理阅读全文

posted @ 2018-12-12 17:09 o_0的园子阅读(1102) 评论(0) 推荐(1) 编辑

2018年12月11日

Ext.js双击事件

摘要： /** * 联系人列表panel */ Ext.define('Op.OpBill.OpBillCustLinkGridPanel', { extend: 'Ext.grid.Panel', id: 'Op_OpBill_OpBillCustLinkGridPanel_ID', title: '联系人信息', frame: true, height: ... 阅读全文

posted @ 2018-12-11 11:47 o_0的园子阅读(1242) 评论(0) 推荐(0) 编辑

2018年12月10日

大数据学习——安装zooleeper

摘要： 1 alt+p，上传zookeeper-3.4.5.tar.gz 2 解压安装包 ,安装在apps目录下 tar -zxvf zookeeper-3.4.5.tar.gz -C apps 3 删除zookeeper-3.4.5安装后用不到的文件，只留下bin conf lib zookeeper-3 阅读全文

posted @ 2018-12-10 15:55 o_0的园子阅读(348) 评论(0) 推荐(0) 编辑

大数据学习——Linux-SSH报错：Could not resolve hostname centos02: Temporary failure in name resolution

摘要： https://blog.csdn.net/mcb520wf/article/details/83303792 随笔异常 ssh: Could not resolve hostname centos02: Temporary failure in name resolution 发现两台服务器如果进阅读全文

posted @ 2018-12-10 14:14 o_0的园子阅读(13013) 评论(1) 推荐(0) 编辑

2018年12月9日

大数据学习——虚拟机准备(改主机名)

摘要： 1 vi /etc/sysconfig/network 把HOSTNAME改为mini2 hostname mini2 exit 2 vi /etc/udev/rules.d/70-persistent-net.rules 删除eth0，把eth1改为eth0 3 vi /etc/sysconfig/network-scripts/ifcfg-eth0 删除uuid ... 阅读全文

posted @ 2018-12-09 21:44 o_0的园子阅读(487) 评论(0) 推荐(0) 编辑

2018年12月8日

大数据学习——shell编程

摘要： 03/ shell编程综合练习自动化软件部署脚本 3.1 需求 1、需求描述公司内有一个N个节点的集群，需要统一安装一些软件（jdk）需要开发一个脚本，实现对集群中的N台节点批量自动下载、安装jdk 2、思路 1/ 编写一个启动脚本，用来发送一个软件安装脚本到每一台机器 2/ 然后启动每台机器阅读全文

posted @ 2018-12-08 18:14 o_0的园子阅读(262) 评论(0) 推荐(0) 编辑

大数据学习——yum练习安装mysql

摘要： 1. 安装mysql 服务器端： 2. 安装mysql客户端： 3. 启动mysql服务：停止：重启： 4. 创建root管理员： 5.登陆 6.root权限设置mysql的开机启动阅读全文

posted @ 2018-12-08 17:59 o_0的园子阅读(188) 评论(0) 推荐(0) 编辑

大数据学习——yum安装tomcat

摘要： https://www.cnblogs.com/jtlgb/p/5726161.html 安装tomcat6 启动tomcat6 停止tomcat6 重启tomcat6 按照以上方法安装tomcat6默认目录在/usr/share/tomcat6/下配置文件默认目录在/etc/tomcat6/下阅读全文

posted @ 2018-12-08 17:55 o_0的园子阅读(183) 评论(0) 推荐(0) 编辑

大数据学习——yum练习安装jdk

摘要：安装jdk-1.8.0版本安装后，执行java -version 配置环境变量使用vim /etc/profile 编辑profile文件输入： vim /etc/profile 向文件里面追加以下内容： #set java environmentJAVA_HOME=/usr/java/jdk 阅读全文

posted @ 2018-12-08 17:15 o_0的园子阅读(162) 评论(0) 推荐(0) 编辑

2018年12月7日

大数据学习——shell编程

摘要： 2.1 基本格式代码写在普通文本文件中，通常以 .sh为后缀名 vi hello.sh #!/bin/bash ## 表示用哪一种shell解析器来解析执行我们的这个脚本程序 echo "hello world" ## 注释也可以写在这里 ## 这是一行注释执行脚本 sh hello.sh 或给阅读全文

posted @ 2018-12-07 19:10 o_0的园子阅读(363) 评论(0) 推荐(0) 编辑

2018年12月6日

wps左侧显示目录

摘要：单击视图文档结构图，在下拉选项中选择靠左即可，如图所示阅读全文

posted @ 2018-12-06 22:33 o_0的园子阅读(2964) 评论(0) 推荐(0) 编辑

大数据学习——Linux上常用软件安装

摘要： 4.1 Linux系统软件安装方式 Linux上的软件安装有以下几种常见方式： 1、二进制发布包软件已经针对具体平台编译打包发布，只要解压，修改配置即可 2、RPM发布包软件已经按照redhat的包管理工具规范RPM进行打包发布，需要获取到相应的软件RPM发布包，然后用RPM命令进行安装 3、Y 阅读全文

posted @ 2018-12-06 20:10 o_0的园子阅读(654) 评论(0) 推荐(0) 编辑

大数据学习

摘要： SSH免密登陆配置 1、相关概念 SSH 为 Secure Shell（安全外壳协议）的缩写。很多ftp、pop和telnet在本质上都是不安全的，因为它们在网络上用明文传送口令和数据，别有用心的人非常容易就可以截获这些口令和数据。而SSH就是专为远程登录会话和其他网络服务提供安全性的协议。 S 阅读全文

posted @ 2018-12-06 19:37 o_0的园子阅读(166) 评论(0) 推荐(0) 编辑

大数据学习——课后练习一

摘要：【代码题】 1 分步完成　useradd hadoop usermod -g hadoop hadoop passwd hadoop 一步完成 useradd -g hadoop hadoop passwd hadoop 2 useradd -g hadoop hive_manager 3 阅读全文

posted @ 2018-12-06 19:34 o_0的园子阅读(160) 评论(0) 推荐(0) 编辑

大数据学习——:wq不能退出vi编辑器

摘要：按esc再输入:wq! 阅读全文

posted @ 2018-12-06 19:13 o_0的园子阅读(1328) 评论(0) 推荐(0) 编辑

大数据学习——linux常用命令（五）

摘要：可以挂载光盘、硬盘、磁带、光盘镜像文件等 1/ 挂载光驱 mkdir /mnt/cdrom 创建一个目录，用来挂载 mount -t iso9660 -o ro /dev/cdrom /mnt/cdrom/ 将设备/dev/cdrom挂载到挂载点： /mnt/cdrom中 2/ 挂载光盘镜像文件阅读全文

posted @ 2018-12-06 10:38 o_0的园子阅读(219) 评论(0) 推荐(0) 编辑