摘要: ## 修改容器配置使其永久生效 ### 1、介绍 docker命令中给出修改容器的配置内容很有限,只能改cpu、内存等配置信息。大部分属性都是在创建容器时指定的,如果后期需要重新指定或增加新设置会很麻烦。这里给出直接修改配置文件方式来进行修改。**注意:**修改容器配置时需要停止docker 服务,否则配置会自动还原。 ### 2、修改容器配置文件 #### 2.1 停止docker服务 ... 阅读全文
posted @ 2018-10-23 19:35 大道至简(老徐) 阅读(4081) 评论(1) 推荐(0) 编辑
摘要: # [徐培成系列实战课程]docker篇 ## 如何利用docker快速构建Spark独立模式的集群 ### 1、介绍 利用docker容器技术快速构建跨节点的独立模型的Spark大数据集群。Spark是时... 阅读全文
posted @ 2018-10-23 19:34 大道至简(老徐) 阅读(550) 评论(0) 推荐(0) 编辑
摘要: ###### v1.0.2-2017.04.26 1. 增加支付宝、微信查询接口 2. 增加订单轮询工程 3. 增加网关下单后发起订单轮询业务流程 ---------------------------------------------------------------------------------- ###### v1.0.1-2017.04.05 1. 修复分页乱码bug 2. 增... 阅读全文
posted @ 2018-10-23 19:33 大道至简(老徐) 阅读(179) 评论(0) 推荐(0) 编辑
摘要: ## 修改容器的hosts文件 ### 1、介绍 docker容器中的hosts文件虽然在宿主机磁盘上/var/lib/docker/containers/xxx/hosts中,但是修改该文件是无效的,需要通过其他手段进行修改。 本文通过在容器器中内建一个脚本,登录容器时,调用该脚本实现修改。 ### 2、操作过程 1. 登录docker容器 2. 创建/root/init.sh脚本文... 阅读全文
posted @ 2018-10-23 19:32 大道至简(老徐) 阅读(1689) 评论(0) 推荐(0) 编辑
摘要: ## 配置spark集群 ### 1、配置spark-env.sh [/soft/spark/conf/spark-env.sh] ```shell ... export JAVA_HOME=/soft/jdk ``` ### 2、配置slaves文件 [/soft/spark/slaves] ```shell 192.168.231.31 192.168.231.40 192.168... 阅读全文
posted @ 2018-10-23 19:31 大道至简(老徐) 阅读(448) 评论(0) 推荐(0) 编辑
摘要: ## 配置docker容器上ssh无密登录 ### 1、修改所有容器中root账户密码 ssh到远程主机时,首次需要密码访问,因此需要修改root账号密码。 密码必须要8位以上字母数字混合。 ```shell $>passwd ``` ### 2、在spark30容器生成公私秘钥对 ```shell $>ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa `... 阅读全文
posted @ 2018-10-23 19:30 大道至简(老徐) 阅读(4951) 评论(0) 推荐(0) 编辑
摘要: ## Docker网络管理 ### 1、介绍 网络管理是docker中重要的部分,由于需要构建集群,容器之间需要进行通信,尤其是跨主机之间的容器间进行通信。 ### 2、网络管理 docker有三种网络类型,bridge、host和none。 1. 查看docker的网络帮助 ```shell # 查看network命令帮助 $>docker network --he... 阅读全文
posted @ 2018-10-23 19:29 大道至简(老徐) 阅读(733) 评论(0) 推荐(0) 编辑
摘要: ## 创建Spark镜像文件 ### 1、将spark容器提交到新的镜像中 ```shell $>docker commit 01a25bdf1499 myrepos:centos-spark ``` ### 2、将centos-spark镜像保存出tar文件 ```shell $>docker image save -o centos-spark.tar myrepos:centos-s... 阅读全文
posted @ 2018-10-23 19:28 大道至简(老徐) 阅读(648) 评论(0) 推荐(0) 编辑
摘要: ## 在Docker容器中安装jdk和spark ### 1、下载jdk和spark 可以使用迅雷等专业下载软件下载jdk和spark软件包,注意是linux版,这里直接给出下载地址: - JDK下载地址 JDK进入后,需要选择同意之后,才能下载。 ```shell https://www.oracle.com/technetwork/java/javase/download... 阅读全文
posted @ 2018-10-23 19:28 大道至简(老徐) 阅读(573) 评论(0) 推荐(0) 编辑
摘要: ## Docker 容器中相关软件安装 ### 1、介绍 我们从docker hub下载的centos镜像是只有很少的命令,需要单独安装我们所需的相关软件。 ### 2、安装软件 1. 安装yum-utils软件包 该软件包是辅助下载yum软件包的工具。 ```shell $>yum install -y yum-utils ``` 2. 安装yum ... 阅读全文
posted @ 2018-10-23 19:27 大道至简(老徐) 阅读(442) 评论(0) 推荐(0) 编辑
摘要: ## Docker常用命令 ### 2 、Docker常用命令 #### 2.1 镜像管理 1. 搜索docker hub上的指定镜像 ```shell $>docker search centos ``` 操作结果如下图所示: ![1539500273902](http://pfdxgd2ao.bkt.clouddn.com/xpc_docker_005... 阅读全文
posted @ 2018-10-23 19:26 大道至简(老徐) 阅读(182) 评论(0) 推荐(0) 编辑
摘要: ## 在Centos 7上安装Docker ### 1、docker介绍 docker是类似于vmware的虚拟化软件,可以开发、容纳、运行应用程序的平台,在容器中安全的隔离运行应用程序。 ### 2、Docker引擎 Docker引擎是cs结构的软件架构,server端以服务方式运行在后台,RestAPI和CLI方式在客户端进行访问。 ### 3、安装docker 安装docker时... 阅读全文
posted @ 2018-10-23 19:26 大道至简(老徐) 阅读(111) 评论(0) 推荐(0) 编辑
摘要: ## Docker简介 ### 1、介绍 容器技术和 Docker 已经成为了 IT 圈里最火爆的话题。时至今日,还是有人会心存困惑:Docker 究竟是什么?使用 Docker 的最大好处是什么?为什么它会受到这么多用户的热烈追捧?有什么相关数据作为参考?在这篇文章中,作者将悉数回答所有这些问题。 ![1539749606742](http://pfdxgd2ao.bkt.clouddn.... 阅读全文
posted @ 2018-10-23 19:25 大道至简(老徐) 阅读(175) 评论(0) 推荐(0) 编辑
摘要: ## 分类技术 ### 1、概述 互联网使得信息的传播速度以及规模达到了空前的水平。“信息爆炸”已成为人们必须面对的问题。从数据海洋中迅速准确的获取所需要的信息变得非常困难。 当前的知识信息主要以文本作为载体,大部分文本信息以非结构化或半结构化的形式存在,如电子邮件,电子文档以及电子文案等,他们不易被机器理解也不可能完全依赖人工进行管理。因此采用信息化手段通过机器学习方法对这些文本信息进行了... 阅读全文
posted @ 2018-10-23 19:24 大道至简(老徐) 阅读(669) 评论(0) 推荐(0) 编辑
摘要: # 龙果支付系统 龙果支付系统是国内首款开源的互联网支付系统,其核心目标是汇聚所有主流支付渠道,打造一款轻量、便捷、易用,且集支付、资金对账、资金清结算于一体的支付系统,满足互联网业务系统的收款和业务资金管理需求。 ######主要特点: 1. 具备支付系统通用的支付、对账、清算、资金账户管理、支付订单管理等功能; 2. 目前已接通“支付宝即时到账”和“微信扫码支付”通道; 3. 支持直... 阅读全文
posted @ 2018-10-23 19:19 大道至简(老徐) 阅读(151) 评论(0) 推荐(0) 编辑