随笔分类 -  系统运维

1
windows10，redhat6.5下python3.5.2使用cx_Oracle链接oracle
摘要：0.序言项目主要使用oracle但是我不太喜欢其他编程语言，加上可能需要用python部署算法包，从oracle表中读出数据，处理完成后在放回oracle中去，所以在windows上就想到先用python试一下，自然搜到了cx_oracle（一个按照Python DB API的ora... 阅读全文
posted @ 2017-11-17 22:26 wangyaning 阅读(232) 评论(0) 推荐(0)
Docker -- 系统整洁之道 -- 0
摘要：在我的小 rmbp 256G的硬盘里，实在是装不下100多个G的虚拟机了，所以想把一些东西迁移到这两年很火的Docker下，Docker以前也有过一两次，只是按着别人给的用法用的，具体的一些细节并没有深入，和git一样，这么牛掰的东西怎么能不好好学一些呢？Docker和虚拟机的区别D... 阅读全文
posted @ 2017-11-17 22:26 wangyaning 阅读(174) 评论(0) 推荐(0)
windows下python3.5使用pip离线安装whl包
摘要：0. 绪论Windows离线断网环境下安装Python包，配置环境，准备用来生成word模版。姑且记录一下 生产环境 ： windows 7 windows10 python 3.5.2 pip 1.5.2友情提示：出现问题时候，看日志是王道！计算机不会犯错！机器上py... 阅读全文
posted @ 2017-11-17 22:26 wangyaning 阅读(3644) 评论(0) 推荐(0)
使用python fabric搭建RHEL 7.2大数据基础环境以及部分优化
摘要：1.使用python fabric进行Linux基础配置使用python，可以让任何事情高效起来，包括运维工作，fabric正式这样一套基于python2的类库，它执行本地或远程shell命令提供了操作的基本套件（正常或通过sudo）和上传/下载文件，如提示用户输入运行辅助功能，或中... 阅读全文
posted @ 2017-11-17 22:26 wangyaning 阅读(219) 评论(0) 推荐(0)
Sqoop 数据导入导出实践
摘要：Sqoop是一个用来将hadoop和关系型数据库中的数据相互转移的工具，可以将一个关系型数据库(例如：mysql,oracle,等)中的数据导入到hadoop的HDFS中，也可以将HDFS的数据导入到关系型数据库中。1.简介首先切换到到hadoop用户：su - hadoop温馨提示... 阅读全文
posted @ 2017-11-17 22:26 wangyaning 阅读(1548) 评论(0) 推荐(0)
Docker -- 2 -- 利用docker部署网站和数据库
摘要：在Docker – 系统整洁之道 – 1中已经对Docker的一些命令和Docker镜像的使用及操作做了记录。 这次就利用docker进行一次真正的实例使用，使用docker搭建一个简单的答题系统，这个系统是当时做来给网络安全周做手机答题的系统，很简单，代码风格很差。这篇主要记录了三... 阅读全文
posted @ 2017-11-17 22:26 wangyaning 阅读(594) 评论(0) 推荐(0)
Docker -- 系统整洁之道 -- 1
摘要：在上文Docker – 系统整洁之道 – 0中已经对Docker是什么，安装Docker以及怎么运行一个简单的容器有了初步了解，这篇文章介绍Docker的一些命令和Docker镜像的使用及操作。一些Docker命令Docker的命令按照使用一个容器的顺序进行。docker info ... 阅读全文
posted @ 2017-11-17 22:26 wangyaning 阅读(148) 评论(0) 推荐(0)
CDH 5.x 集群安装及卸载
摘要：上次写了CDH安装测试总结，由于那个博客篇幅略长， 但是主要集中在第二章，所以单独把CDH安装、卸载这块的内容拉出来在一篇记录一下。一．搭建远程yum源1.启动http服务： service httpd start2.挂载镜像文件rhel6.6.iso到/var/www/html... 阅读全文
posted @ 2016-11-12 19:28 wangyaning 阅读(1349) 评论(0) 推荐(0)
CDH集群安装&测试总结
摘要：0.绪论之前完全没有接触过大数据相关的东西，都是书上啊，媒体上各种吹嘘啊，我对大数据，集群啊，分布式计算等等概念真是高山仰止，充满了仰望之情，觉得这些东西是这样的：当我搭建的过程中，发现这些东西是这样的：对于初学者来说，我认为缺点如下：1.需要控制，配置的东西太多，并且配置对应并不... 阅读全文
posted @ 2016-10-07 01:44 wangyaning 阅读(2877) 评论(0) 推荐(0)
pxe无人值守安装linux机器笔记
摘要：最近做一些集群的测试的工作，做服务器测试最根本就是要安装系统，曾经我们用十几个光驱并行安装光驱的日子过去了，自从有了pxe一两天搭建好一个集群不是梦！当然做多了集群的搭建工作最多的感受就是，其实运维工作谁都能做，关键是效率高不高的问题，pxe装机这个东西就是能极高提升我们效率的工具... 阅读全文
posted @ 2016-09-23 00:05 wangyaning 阅读(237) 评论(0) 推荐(0)

1