吃土吃上瘾的博客

摘要： python升级到3.6发现想 因为yum是基于2.7想继续给yum升级 结果弄坏了 yum也用不了，没有yum就像是断了腿的人。。。。 于是只能python和yum重装了 1、删除现有Python [root@master~]# rpm -qa|grep python|xargs rpm -ev 阅读全文

摘要： 最近在听书，但是每个章节都需要重新点开感觉很麻烦 于是找了个python的脚本把音频下载 于是省去了这个麻烦 听书的网站： 每一个章节的页面： 几段代码搞定 import re import requests def getsave(urls,filename): result=requests.g 阅读全文

摘要： 闲来无事看了下hbase方面的东西，发现还好理解不过不大习惯 于是找到个phoenix 感觉不错 性能指标如下 好像还不错了 准备工作： 启动hadoop集群 启动zookkeeper 启动hbase 下载地址 http://apache.claz.org/phoenix/ centos服务器上下载 阅读全文

摘要： 最近有用SSM写一些API 感觉大多是重复性的劳动 应该可以抽象出来配置化开发就好了 主要实现2个部分： 1.自动生成对模型（单表）的增删改查接口功能 2.配置化多表多参数功能 目前已经实现了第一步 github地址：https://github.com/dickwin/ICS/ 在属性文件里： a 阅读全文

摘要： 分别下载了spark 和hive 配置好 发现在元数据库里面 这2个是不通的 是需要编译spark的源码以支持hive的 在这里我用的是一台centos7的虚拟机 准备工作： jdk的安装配置 我用的版本是1.8 hadoop的安装配置 我这里用的版本是2.7.5 maven的配置 我这用的是apa 阅读全文

摘要： 平时还要打开一个IDE感觉好麻烦。。。于是在VPS上安装一个Jupyter Notebook 很简单用pip安装 pip install jupyter 即可 写一个默认的配置文件： jupyter notebook --generate-config 然后启动：jupyter-notebook 因 阅读全文

摘要： 版本Centos6比较老的版本了 cron是一个linux下 的定时执行工具，可以在无需人工干预的情况下运行作业。 yum install crontabs会显示几个需要安装的包 几个状态 service crond start //启动服务 service crond stop //关闭服务 se 阅读全文