Robots2

2023年11月27日

摘要： 1、验证电脑是否存在，一般都有 which script /usr/bin/script 2、配置profile文件，在末尾添加如下内容： vim /etc/profile if [ $UID -ge 0 ]; then exec /usr/bin/script -t 2>/var/log/scri 阅读全文

posted @ 2023-11-27 14:38 Robots2 阅读(57) 评论(0) 推荐(0)

linux下创建idea的桌面快捷方式

摘要：！！！使用linux系统安装idea才会用到：在桌面上，新建文件，命名为：idea.desktop ，（或者在别的地方创建后再放到桌面）使用 vim 编辑该文件(或者不新建，直接vi idea.desktop 就会创建这个文件) 输入内容如下： [Desktop Entry] Name=Ide 阅读全文

posted @ 2023-11-27 14:30 Robots2 阅读(443) 评论(0) 推荐(0)

重置root密码

摘要： linux系统重启后在引导选择界面按【E】有好几行内容，找到 linux /boot/vmlinuz-3.2.0-23-generic root=UUID=[长串数字] ro quiet splash $vt_handoff 将最后的ro quiet splash $vt_handoff替换为 r 阅读全文

posted @ 2023-11-27 14:25 Robots2 阅读(49) 评论(0) 推荐(0)

LINUX安全加固手册

摘要： LINUX安全加固手册目录 1概述 3 2 安装 3 3 用户帐号安全Password and account security 4 3.1 密码安全策略 4 3.2 检查密码是否安全 4 3.3 Password Shadowing 4 3.4 管理密码 4 3.5 其它 5 4 网络服务安全阅读全文

posted @ 2023-11-27 14:24 Robots2 阅读(404) 评论(0) 推荐(0)

Linux重要的日志文件

摘要： 1、/var/log/boot.log 该文件记录了系统在引导过程中发生的事件，就是Linux系统开机自检过程显示的信息 2、/var/log/syslog 只记录警告信息，常常是系统出问题的信息，所以更应该关注该文件 3、/var/log/wtmp 该日志文件永久记录每个用户登录、注销及系统的启动阅读全文

posted @ 2023-11-27 14:02 Robots2 阅读(125) 评论(0) 推荐(0)

2023年11月15日

Iceberg参数调整

摘要： 1、读取参数介绍属性默认值描述 read.split.target-size 134217728 (128 MB) 组合数据输入分割时的目标大小 read.split.metadata-target-size 33554432 (32 MB) 组合元数据输入分割时的目标大小 read.spli 阅读全文

posted @ 2023-11-15 13:50 Robots2 阅读(1109) 评论(0) 推荐(0)

2023年10月30日

Flink客户端操作

摘要：一、mysql数据准备 mysql -hip -uroot -p密码 CREATE DATABASE flink; USE flink; CREATE TABLE user ( id INTEGER NOT NULL PRIMARY KEY, name VARCHAR(255) NOT NULL D 阅读全文

posted @ 2023-10-30 10:16 Robots2 阅读(91) 评论(0) 推荐(0)

2023年10月25日

Kerberos

摘要：一、Kerberos简介 Kerberos是一种基于对称密钥的身份认证协议，它作为一个独立的第三方的身份认证服务，可以为其它服务提供身份认证功能，且支持SSO(即客户端身份认证后，可以访问多个服务如HBase/HDFS等)。Kerberos协议主要用于计算机网络的身份鉴别(Authenticatio 阅读全文

posted @ 2023-10-25 11:18 Robots2 阅读(1029) 评论(0) 推荐(0)

2023年10月24日

大数据HDFS集群相关概念

摘要：一、Zookeeper服务端口描述配置路径 2181 主要使用端口，对cline端提供服务。连接方式jdbc:hive2://ip:2181 conf/zoo.cfg中clientPort 2183 选举leader使用 conf/zoo.cfg中server.x=2182:2183 2182 阅读全文

posted @ 2023-10-24 11:45 Robots2 阅读(49) 评论(0) 推荐(0)

2023年10月17日

什么是Kappa架构？

摘要：一、简介相当于在Lambda架构上去掉了批处理层（Batch Layer），只留下单独的流处理层（Speed Layer）。通过消息队列的数据保留功能，来实现上游重放（回溯）能力。当流任务发生代码变动时，或者需要回溯计算时，原先的Job N保持不动，先新启动一个作业Job N+1，从消息队列中获阅读全文

posted @ 2023-10-17 11:54 Robots2 阅读(483) 评论(0) 推荐(0)

公告