2022年1月16日
java多线程
摘要： 基本概念：程序、进程、线程 程序(program)是为完成特定任务、用某种语言编写的一组指令的集合。即指一段静态的代码，静态对象。 进程(process)是程序的一次执行过程，或是正在运行的一个程序。是一个动态的过程：有它自身的产生、存在和消亡的过程。——生命周期 如：运行中的QQ，运行中的MP3播 阅读全文
posted @ 2022-01-16 12:08 15python 阅读(14) 评论(0) 推荐(0)
2021年12月19日
Exception: Timeout while feeding partition
摘要： 21/12/19 16:38:54 INFO scheduler.TaskSetManager: Starting task 3.0 in stage 1.0 (TID 6, slave1, executor 3, partition 3, NODE_LOCAL, 8011 bytes) 21/12 阅读全文
posted @ 2021-12-19 17:19 15python 阅读(83) 评论(0) 推荐(0)
2021年12月15日
tensorflow.python.framework.errors_impl.PermissionDeniedError: /home/tensorflow_datasets; Permission denied
摘要： 测试tensorflowonspark的例子的时候，提交的命令如下： /opt/cloudera/parcels/CDH-6.2.1-1.cdh6.2.1.p0.1580995/bin/spark-submit \--master yarn \--deploy-mode cluster \--que 阅读全文
posted @ 2021-12-15 21:13 15python 阅读(340) 评论(0) 推荐(0)
2021年12月14日
failure: repodata/filelists.sqlite.bz2 from teamviewer: [Errno 256] No more mirrors to try
摘要： 在安装CHD的时候，输入yum install cloudera-manager-agent-6.2.1-1426065.el7.x86_64.rpm -y报错 [root@master x86_64]# yum install cloudera-manager-agent-6.2.1-142606 阅读全文
posted @ 2021-12-14 21:44 15python 阅读(225) 评论(0) 推荐(0)
2021年12月12日
错误：软件包：cloudera-manager-agent-6.2.1-1426065.el7.x86_64 (/cloudera-manager-agent-6.2.1-1426065.el7.x86_64) 需要：httpd
摘要： 在centos7 安装CDH的时候，打yum install cloudera-manager-agent-6.2.1-1426065.el7.x86_64.rpm -y想安装agent的时候，出现以下错误，agent并没有安装上 [root@slave1 x86_64]# yum install 阅读全文
posted @ 2021-12-12 21:58 15python 阅读(1067) 评论(0) 推荐(0)
2021年12月2日
tensorflowonspark运行官方mnist例子
摘要： 搭建tensorflowonspark请参考：https://www.cnblogs.com/yangyuxia/p/15634030.html 步骤一:下载mnist数据集 cd /home/jianyuan curl -O "http://yann.lecun.com/exdb/mnist/tr 阅读全文
posted @ 2021-12-02 17:20 15python 阅读(296) 评论(0) 推荐(0)
在centos7上用CDH搭建tensorflowonspark
摘要： 该博客为了记录一下部署雅虎的tensorflowonspark分布式集群的经验，部署的是yarn模式，官网地址为：https://github.com/yahoo/TensorFlowOnSpark/wiki/GetStarted_YARN 简单介绍一下CDH是什么 CDH（Cloudra's Di 阅读全文
posted @ 2021-12-02 16:46 15python 阅读(120) 评论(0) 推荐(0)
大数据——集群搭建
摘要： 目录 本地源yum 基础配置-防火墙等 远程登陆-ssh 语言环境-java 协调系统-ZK 集群安装-Hadoop 1本地源 Centos自带的YUM源更新太慢，可以使用更改本地源的方法来安装软件。我们通常使用 yum install 命令来在线安装 linux系统的软件， 这种方式可以自动处理依 阅读全文
posted @ 2021-12-02 10:30 15python 阅读(189) 评论(0) 推荐(0)
2021年5月21日
python之numpy快速上手（一）
摘要： 一.学习前准备条件： 需要一点python基础。 为了可以做照着例子做，需要安装matplotlib 二、基础 NumPy的主要对象是同构多维数组，它是一个元素表(通常是数字)，所有类型都相同，由非负整数元组索引。在numpy中纬度称为轴。 例如，三维空间中一个点的坐标【1，2，3】有一个轴，这个轴 阅读全文
posted @ 2021-05-21 16:34 15python 阅读(803) 评论(0) 推荐(0)
2021年4月29日
在centos7通过docker安装tensorflow
摘要： 下载anaconda3https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/ 1.安装anaconda3 a.执行命令bash Anaconda3-4.4.0-Linux-x86_64.sh ，开始安装过程，这里提示接下来是许可协议，不用任何输入 阅读全文
posted @ 2021-04-29 10:38 15python 阅读(466) 评论(0) 推荐(0)