我的随笔

JAVA 中不错的开源FTP组件：commons-net

cctext 2018-07-19 21:28 阅读:2649 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十八）ES6.2.2 增删改查基本操作

cctext 2018-07-18 19:44 阅读:563 评论:0 推荐:0

centos：时间同步

cctext 2018-07-17 21:53 阅读:644 评论:0 推荐:0

centos：添加用户

cctext 2018-07-17 20:03 阅读:6175 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十七）Elasticsearch-6.2.2集群安装，组件安装

cctext 2018-07-15 23:34 阅读:632 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十六）Structured Streaming中ForeachSink的用法

cctext 2018-07-13 22:18 阅读:1154 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十五）Spark编写UDF、UDAF、Agg函数

cctext 2018-07-11 14:35 阅读:828 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十四）定义一个avro schema使用comsumer发送avro字符流，producer接受avro字符流并解析

cctext 2018-07-09 23:59 阅读:1785 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十三）kafka+spark streaming打包好的程序提交时提示虚拟内存不足（Container is running beyond virtual memory limits. Current usage: 119.5 MB of 1 GB physical memory used; 2.2 GB of 2.1 G）

cctext 2018-07-08 21:26 阅读:1575 评论:2 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十二）VMW安装四台CentOS，并实现本机与它们能交互，虚拟机内部实现可以上网。

cctext 2018-07-08 16:54 阅读:463 评论:0 推荐:0

Hadoop：安装ftp over hdfs

cctext 2018-07-05 00:06 阅读:992 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十一）定制一个arvo格式文件发送到kafka的topic，通过Structured Streaming读取kafka的数据

cctext 2018-07-03 23:32 阅读:1618 评论:0 推荐:1

Hadoop：开发机运行spark程序，抛出异常：ERROR Shell: Failed to locate the winutils binary in the hadoop binary path

cctext 2018-07-02 19:57 阅读:2631 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（十）安装hadoop2.9.0搭建HA

cctext 2018-07-01 17:19 阅读:1739 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（九）安装kafka_2.11-1.1.0

cctext 2018-06-30 22:22 阅读:4551 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（八）安装zookeeper-3.4.12

cctext 2018-06-30 20:51 阅读:1362 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（七）针对hadoop2.9.0启动DataManager失败问题

cctext 2018-06-30 16:31 阅读:980 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（六）针对spark2.2.1以yarn方式启动spark-shell抛出异常：ERROR cluster.YarnSchedulerBackend$YarnSchedulerEndpoint: Sending RequestExecutors(0,0,Map(),Set()) to AM was unsuccessful

cctext 2018-06-30 16:07 阅读:5302 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（五）针对hadoop2.9.0启动之后发现slave上正常启动了DataNode,DataManager，但是过了几秒后发现DataNode被关闭

cctext 2018-06-30 16:01 阅读:1127 评论:0 推荐:0

Kafka：ZK+Kafka+Spark Streaming集群环境搭建（四）针对hadoop2.9.0启动执行start-all.sh出现异常：failed to launch: nice -n 0 /bin/spark-class org.apache.spark.deploy.worker.Worker

cctext 2018-06-30 15:56 阅读:4605 评论:1 推荐:0