摘要：https://www.jianshu.com/p/444c3ae23035 jupyter notebook --generate-config 阅读全文

摘要：1. 集群部署方式 standalone Mesos Yarn K8s 2. 基本概念 Application：指的是用户编写的Spark应用程序，包含了含有一个Driver功能的代码和分布在集群中多个节点上运行的Executor代码。 Driver:运行Application的main函数并创建S 阅读全文

摘要：原因 生产机器默认禁用了ssh密码登录权限。 解决方案一，sshkey 主机一： ssh-keygen -t rsa 将生产的pub文件拷贝到主机二上 主机二： root@spark3:~# cat 1.pub >> .ssh/authorized_keys root@spark3:~# chmod 阅读全文