摘要：
问题描述 在dolphinscheduler创建调度任务，任务里边命令为 hadoop fs -mkdir -p /test/ 执行失败，报错信息如下： 问题分析 经排查该问题为dolphinscheduler配置的hadoop_home异常导致执行hadoop命令失败。 问题解决 配置dolphi 阅读全文
摘要：
水位线 Watermark 实时统计使用了flink sql程序,使用flink-TVF表值函数滚动窗口按分钟进行数据聚合操作,消费的kafka数据需要在规定的时间窗口内进行推送数据并消费计算， 为了解决处理乱序事件或延迟数据引入了Watermark，用来设置延迟计算时间等待迟到的数据，但不能无限期 阅读全文
摘要：
脚本内容如下 #!/bin/bash v_date=`date -d '+1 day' +%Y%m%d` delete_date=`date -d '-8 day' +%Y%m%d` end_date=`date -d '+3 day' +%Y%m%d` while [ $v_date != $en 阅读全文
摘要：
问题背景： 登录dolphinscheduler管理页面，打开监控中心大盘发现IP显示异常，不是自己主机的业务IP 问题分析： 显示的IP是主机的bond0的IP，不是业务ip所在bond，则需要修改bond配置 解决方案： 需要将network.interface修改成业务ip所在的bond1网卡 阅读全文
摘要：
问题背景： dolphinscheduler服务元数据库默认库名为dolphinscheduler，但是在一个数据库服务里边要创建安装部署两套dolphinscheduler服务那肯定得要两个不同的数据库名称进行区分，dolphinscheduler配置文件该怎么修改数据库名称？ 页面配置： dol 阅读全文
摘要：
1.添加服务选择dolphinscheduler 2.dolphinscheduler服务配置 这个选择使用mysql数据作为dolphinscheduler服务的元数据库 3.服务选择进行安装 选择两个DS-master，至少两个DS-ALTERS,DS-APIS,其余节点都部署DS-worker 阅读全文
摘要：
1.问题描述 部署完hbase之后启动服务发现报错，报错信息为hbase-ams-master.pid doesn‘t exist 2.问题排查 查看错误日志/var/log/hbase/hbase-hbase-master-khd-sd-b2k-hbase--ca83.out 和 hbase-hb 阅读全文
摘要：
部署完hadoop服务组件之后，需要进行服务自动启动配置，在服务异常挂掉之后可自动启动避免人为干预。 阅读全文
摘要：
1.第一步 2.第二部输入namenodeservice-id 3.第三部添加服务 4.第四步 5.第五步在对应机器节点输入以下命令 sudo su hdfs -l -c 'hdfs dfsadmin -safemode enter' sudo su hdfs -l -c 'hdfs dfsadmi 阅读全文
摘要：
代码demo package com.spark.wordcount import org.apache.spark.SparkContext import org.apache.spark.SparkContext._ import org.apache.spark.SparkConf objec 阅读全文