摘要: 基本概念:程序、进程、线程 程序(program)是为完成特定任务、用某种语言编写的一组指令的集合。即指一段静态的代码,静态对象。 进程(process)是程序的一次执行过程,或是正在运行的一个程序。是一个动态的过程:有它自身的产生、存在和消亡的过程。——生命周期 如:运行中的QQ,运行中的MP3播 阅读全文
posted @ 2022-01-16 12:08 15python 阅读(3) 评论(0) 推荐(0) 编辑
摘要: 21/12/19 16:38:54 INFO scheduler.TaskSetManager: Starting task 3.0 in stage 1.0 (TID 6, slave1, executor 3, partition 3, NODE_LOCAL, 8011 bytes) 21/12 阅读全文
posted @ 2021-12-19 17:19 15python 阅读(57) 评论(0) 推荐(0) 编辑
摘要: 测试tensorflowonspark的例子的时候,提交的命令如下: /opt/cloudera/parcels/CDH-6.2.1-1.cdh6.2.1.p0.1580995/bin/spark-submit \--master yarn \--deploy-mode cluster \--que 阅读全文
posted @ 2021-12-15 21:13 15python 阅读(293) 评论(0) 推荐(0) 编辑
摘要: 在安装CHD的时候,输入yum install cloudera-manager-agent-6.2.1-1426065.el7.x86_64.rpm -y报错 [root@master x86_64]# yum install cloudera-manager-agent-6.2.1-142606 阅读全文
posted @ 2021-12-14 21:44 15python 阅读(206) 评论(0) 推荐(0) 编辑
摘要: 在centos7 安装CDH的时候,打yum install cloudera-manager-agent-6.2.1-1426065.el7.x86_64.rpm -y想安装agent的时候,出现以下错误,agent并没有安装上 [root@slave1 x86_64]# yum install 阅读全文
posted @ 2021-12-12 21:58 15python 阅读(775) 评论(0) 推荐(0) 编辑
摘要: 搭建tensorflowonspark请参考:https://www.cnblogs.com/yangyuxia/p/15634030.html 步骤一:下载mnist数据集 cd /home/jianyuan curl -O "http://yann.lecun.com/exdb/mnist/tr 阅读全文
posted @ 2021-12-02 17:20 15python 阅读(251) 评论(0) 推荐(0) 编辑
摘要: 该博客为了记录一下部署雅虎的tensorflowonspark分布式集群的经验,部署的是yarn模式,官网地址为:https://github.com/yahoo/TensorFlowOnSpark/wiki/GetStarted_YARN 简单介绍一下CDH是什么 CDH(Cloudra's Di 阅读全文
posted @ 2021-12-02 16:46 15python 阅读(82) 评论(0) 推荐(0) 编辑
摘要: 目录 本地源yum 基础配置-防火墙等 远程登陆-ssh 语言环境-java 协调系统-ZK 集群安装-Hadoop 1本地源 Centos自带的YUM源更新太慢,可以使用更改本地源的方法来安装软件。我们通常使用 yum install 命令来在线安装 linux系统的软件, 这种方式可以自动处理依 阅读全文
posted @ 2021-12-02 10:30 15python 阅读(158) 评论(0) 推荐(0) 编辑
摘要: 一.学习前准备条件: 需要一点python基础。 为了可以做照着例子做,需要安装matplotlib 二、基础 NumPy的主要对象是同构多维数组,它是一个元素表(通常是数字),所有类型都相同,由非负整数元组索引。在numpy中纬度称为轴。 例如,三维空间中一个点的坐标【1,2,3】有一个轴,这个轴 阅读全文
posted @ 2021-05-21 16:34 15python 阅读(749) 评论(0) 推荐(0) 编辑
摘要: 下载anaconda3https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/ 1.安装anaconda3 a.执行命令bash Anaconda3-4.4.0-Linux-x86_64.sh ,开始安装过程,这里提示接下来是许可协议,不用任何输入 阅读全文
posted @ 2021-04-29 10:38 15python 阅读(397) 评论(0) 推荐(0) 编辑