下士闻道

摘要： 1. work_dir错误导致启动异常 /etc/mesos-slave/work_dir设置的目录不存在或者权限不够将会导致启动异常。 2. 根据日志信息以及status信息来判断问题 通过service mesos-slave status -l跟踪，将会看到大段的option参数说明，这就说明 阅读全文

摘要： 就以zookeeper的脚本启动作为例。 1.在/etc/init.d文件夹下面创建zookeeper文件 2.在文件中附加如下内容 此时就可以通过 service zookeeper restart 来进行重启等操作；3.实现开机启动 阅读全文

摘要： 1. 在settings.xml中的Servers节点中增加Server的登录信息： 2. 在pom中的build节点增加extensions内容： 3. 在plugin中增加plug 4. 在命令行执行： mvn clean package wagon:sshexec wagon:upload-s 阅读全文

摘要： 1. HUE需要安装SASL 发现异常： Could not install table: Error creating table sample_07: Could not start SASL: Error in sasl_client_start (-4) SASL(-4): no mecha 阅读全文

摘要： spark一个应用，算上依赖一百多兆。每一次都如此，坑。 首先是<packing>jar</packing>这只为打包为jar，在plugin中增加一个assembly插件，这个插件将会生成一个全包（包括用户代码以及全部依赖）细节见文末，配置的打包将会生成一个只有用户代码的jar包。 将全包以及用户 阅读全文

摘要： 1. 两个地方需要配置首先是要定义配置源，dev/test/prod对应的配置源需要指定；这是灵活的，可变的；其次要定义配置文件，该配置文件里面的内容采用占位符的方式来编制，在编译打包的过程中要动态根据配置源来进行填充。2. 定义配置分类对于第一个地方，配置分类，是要在maven的pom文件中的<p 阅读全文

摘要： 本文描述的是kudu在cloudera的安装。 首先cloudera 5.11.1版本尽管可以直接在add Services中看到kudu，但是其实并没有集成parcels，而且也不想kafka提示需要安装parcel；我是问了磊子小哥才知道需要手动安装parcels； 其实手动安装parcels很 阅读全文

摘要： 数据分析的最终目的是什么，是预测未来，预测的基准是什么模型，历史数据的用途就是形成模型，形成的过程就是数据建模 阅读全文

摘要： . group 'docker' does not exist 需要手工创建docker组，这一步本来应该是在安装docker的时候来完成的，但是采用yum install的方式不行，需要添加一个docker的repo然后才能够安装。 2. ssh: connect to host 10.1.108 阅读全文

摘要： 再次安装，已经是隔了两天，我打算换一台机器作为boot机器，但是发现报错，告知部署设备已经安装了dcos；看来需要卸载：uninstall-master.sh uninstall-agent.sh 这里记录一下，因为rm -rf 后面没有加绝对路径（直接写的文件名字），而导致dcos.target以 阅读全文