吊车尾88

摘要： mysql shell连接脚本 本地连接及远程链接 -e 方式连接 阅读全文

摘要： 一、MySQL高效导入数据的方法load data infile load data infile语句从一个文本文件中以很高的速度读入一个表中。使用这个命令之前，mysqld进程（服务）必须已经在运行。由于安全原因，当读取位于服务器上的文件时，文件必须处于数据库目录或可被所有人读取。另外，为了对服务 阅读全文

摘要： 一、安装docker 1、Docker 要求 CentOS 系统的内核版本高于 3.10 ，查看本页面的前提条件来验证你的CentOS 版本是否支持 Docker 。 通过 uname -r 命令查看你当前的内核版本 2、使用 root 权限登录 Centos。确保 yum 包更新到最新。 3、卸载 阅读全文

摘要： 持续更新中。。。。。。。。。。。。。。。。 1. 设置目录配额 命令：hadoop dfsadmin -setSpaceQuota 样例：hadoop dfsadmin -setSpaceQuota 3000 /group/d_sdo_data/user/liuxiaowen 注意： 这里统计空间的 阅读全文

摘要： Spark中的多任务处理 Spark的一个非常常见的用例是并行运行许多作业。 构建作业DAG后，Spark将这些任务分配到多个Executor上并行处理。但这并不能帮助我们在同一个Spark应用程序中同时运行两个完全独立的作业，例如同时从多个数据源读取数据并将它们写到对应的存储，或同时处理多个文件等 阅读全文

摘要： 一、 概述 该文档主要记录大数据平台的搭建CDH版的部署过程，以供后续部署环境提供技术参考。 1.1 主流大数据部署方法 目前主流的hadoop平台部署方法主要有以下三种: Apache hadoop CDH (Cloudera’s Distribution Including Apache Had 阅读全文

摘要： 本篇记录经常使用到的命令(待补充) ping 命令 rpm 命令 rpm 安装 rpm 卸载 ps命令 netstat 命令 telnet 命令 阅读全文

摘要： libselinux.SO.1 这个文件对 CentOS 7很重要， 误删掉后，会导致很多命令无法使用（比如yum ,rpm 命令)，利用rsync这个工具来修复。 服务端执行如下配置：(选取正常的 一台机器做服务端） 注意： 1. 配置文件中auth users 写了哪个用户，哪个用户就可以访问， 阅读全文

摘要： 当我们定义一个协变类型List[A+]时，List[Child]可以是List[Parent]的子类型。 当我们定义一个逆变类型List[-A]时，List[Child]可以是List[Parent]的父类型。 Scala的协变 看下面的例子： c不能赋值给c2，因为Covariant定义成不变类型 阅读全文

摘要： log4j.properties的详细配置 log4j.properties的maven配置 log4j.properties详细大全 阅读全文