大浪不惊涛

摘要： 概述：Spark 程序开发，调试和运行，intellij idea开发Spark java程序。分两部分，第一部分基于intellij idea开发Spark实例程序并在intellij IDEA中运行Spark程序.第二部分，将开发程序提交到Spark local或者hadoop YARN集群运行 阅读全文

摘要： 由于Spark是用Scala来写的，所以Spark对Scala肯定是原生态支持的，因此这里以Scala为主来介绍Spark环境的搭建，主要包括四个步骤，分别是：JDK的安装，Scala的安装，Spark的安装，Hadoop的下载和配置。为了突出”From Scratch”的特点（都是标题没选好的缘故 阅读全文

摘要： 为了让大家更好地学习交流，过往记忆大数据花了一个周末的时间把 Awesome Big Data 里近 600 个大数据相关的调度、存储、计算、数据库以及可视化等介绍全部翻译了一遍，供大家学习交流。 关系型数据库管理系统 MySQL 世界上最流行的开源数据库。 PostgreSQL 世界上最先进的开源 阅读全文

摘要： https://www.javatang.com/archives/2017/10/19/33151873.html 阅读全文

摘要： 一、查看哪些IP连接本机 netstat -an 二、查看TCP连接数 1)统计80端口连接数netstat -nat|grep -i "80"|wc -l2）统计httpd协议连接数ps -ef|grep httpd|wc -l3）、统计已连接上的，状态为“establishednetstat - 阅读全文

摘要： 链接: https://pan.baidu.com/s/1mYAeS9hIhdMFh2rF3FDk0A 密码: p9rs 阅读全文

摘要： 前言 平时接触过多线程开发的童鞋应该都或多或少了解过线程池，之前发布的《阿里巴巴 Java 手册》里也有一条： 可见线程池的重要性。 简单来说使用线程池有以下几个目的： 线程是稀缺资源，不能频繁的创建。 解耦作用；线程的创建于执行完全分开，方便维护。 应当将其放入一个池子中，可以给其他任务进行复用。 阅读全文

摘要： . 一、概念知识 . 什么是消息中间件 . 什么是 Kafka . Kafka 特性 . 使用场景 . 基本概念 . 生产者 ACKS 机制 . 消费者更新 Offset 偏移量两种方式 . 二、SpringBoot 操作 Kafka 示例 . 1、Maven 引入 Kafka 相关组件 . 2、T 阅读全文

摘要： Table of Contents Kafka 的大名相信大家早有耳闻，就是《变形记》的作者……咳咳……是一个著名的分布式消息队列，据说是因为作者特别喜欢作家卡夫卡才取名 Kafka 的。开始接触 Kafka 时最头疼的就是它的概念，什么是 group，什么是 partition …… 这里咱们从头 阅读全文

摘要： 说明：教程使用4台服务器，1台用作zookeeper，3台用kafka 必备条件:jdk kafka自带zookeeper 也可以使用kafka内置的zookeeper 一、zookeeper下载安装 1、首先去官网下载zookeeper：https://downloads.apache.org/z 阅读全文