摘要：
一般情况下硬盘容量主要受三部分影响： 1.主板（支持BIOS 还是 UEFI，以及硬盘接口数量--SATA） 2.操作系统 (支持MBR 还是 GPT 分区格式，以及分区的数量限制) 3.文件系统（支持多大的量，比如 NTFS限制在256TB,EXT4限制在1EB,单个文件限制在16TB） 阅读全文
摘要：
需要社区工具：parquet-tools-1.6.0rc3-SNAPSHOT.jar git project: https://github.com/apache/parquet-mr/tree/master/parquet-tools?spm=5176.doc52798.2.6.H3s2kL 查看 阅读全文
摘要：
1.集群的 hadoop-current hive-current spark-current copy 到 gateway 机器 2.集群的 hadoop-conf hive-conf spark-conf copy 到 gateway 机器 3.集群的 yarn.sh hdfs.sh hive. 阅读全文
摘要：
java -Djava.ext.dirs=/tmp/spark-sample/lib/ -cp ./spark-sample-1.0.jar com.sample.StartLauncher 阅读全文
摘要：
首先列下秒以内的时间单位换算 1 秒 = 1000 毫秒(ms) 1 毫秒 = 1000 微妙(μs) 1 微妙 = 1000 纳秒(ns) 1 纳秒 = 1000 皮秒(ps) 华丽分割线 SATA磁盘寻道时间 10 ms 和磁盘转速相关 从SATA磁盘顺序读取1M数据 10 ms 如果加寻道时间 阅读全文
摘要：
脚本如下： 再加上crontab 就搞定了 crontab -e 阅读全文
摘要：
centos 下 没有找到 pip.conf 操作如下： 进入主目录：cd ~ 创建 .pip 目录： mkdir .pip 进入.pip 创建 pip.conf 文件：cd .pip/ touch pip.conf 编辑 pip.conf 写入新的源配置，写入 douban源,保存即可，文件内容如 阅读全文
摘要：
闭包： http://www.runoob.com/js/js-function-closures.html 立即执行函数： IIFE(Immediately Invoked Function Expression) http://benalman.com/news/2010/11/immediat 阅读全文
摘要：
1.起源：从后台管理添加中文对象，正常，但是再次点击编辑的时候，抛出异常，显示编码问题。 解决：在项目的manage.py 的文件头部添加 import sys reload(sys) sys.setdefaultencoding('utf8') 确认有效。 2.正常富文本连着标签内容一起显示出来， 阅读全文