摘要：Hive开窗函数整理 https://www.cnblogs.com/zz-ksw/p/12917693.html Hadoop基础-HDFS的API常见操作 https://www.cnblogs.com/yinzhengjie/p/9906192.html Yarn 的三种资源调度器详解 htt 阅读全文
为什么export PYTHONPATH=$PYTHONPATH 将当前工作目录放在系统路径？
2021-11-05 14:27 by DataBases, 4254 阅读, 0 推荐, 收藏,
摘要：在修改以冒号分隔的环境变量时，例如 PYTHONPATH、PATH、CPATH、MANPATH、LD_LIBRARY_PATH、PKG_CONFIG_PATH 等......其中一些变量对尾随冒号具有特殊意义，而其他变量则没有。对于 PYTHONPATH 和 PATH，如果变量之前未设置，可以以不会 阅读全文
关于HDFS的NameNode和SecondaryNameNode的一些疑问解答
2021-10-09 14:47 by DataBases, 880 阅读, 0 推荐, 收藏,
摘要：https://mp.weixin.qq.com/s/xAvsxEGaCfLCPdVFuJZWPA https://mp.weixin.qq.com/s/dOuRVOlI3CJABpbrTx3Aqg https://mp.weixin.qq.com/s/caCk3mM5iXy0FaXCLkDwYQ 阅读全文
How to sort directories (folders) by size in Linux
2021-09-22 18:10 by DataBases, 26 阅读, 0 推荐, 收藏,
摘要：du --si --max-depth=1 /home/ | sort -n -r |more Breakdown:du = show disk usage-si = in human readable (aka "nice") numbers--max-depth=1 only show this 阅读全文
pip install安装python依赖包时报错：command 'gcc' failed with exit status 1的解决方案
2021-09-18 16:13 by DataBases, 985 阅读, 0 推荐, 收藏,
摘要：环境：Centos 7 Python 2.7 在安装python依赖包时报错：command 'gcc' failed with exit status 1; 解决方案是： sudo yum install python-dev sudo yum install gcc 如果问题还没解决，可以尝试安 阅读全文
启动hadoop进程提示ssh localhost port 22 Connection refused
2021-09-17 17:29 by DataBases, 2212 阅读, 1 推荐, 收藏,
摘要：hadoop配置完成，用start-all.sh启动时提示错误：localhost: ssh: connect to host localhost port 22: Connection refused 【错误原因】分析：由于在生产环境下，ssh的端口被修改成9092，不是使用的默认端口，但是had 阅读全文
基于 Docker 的几种常用 CentOS7 镜像
2021-09-10 16:07 by DataBases, 3044 阅读, 0 推荐, 收藏,
摘要：https://blog.csdn.net/github_39577257/article/details/107180891 # 1 查看系统中是否已经安装了 Dockersystemctl status dockerrpm -qa | grep -E "docker"## 1.1 如果重新安装可 阅读全文
fizzbuzz And DeepLearning
2021-07-15 12:27 by DataBases, 44 阅读, 0 推荐, 收藏,
摘要：# One-hot encode the desired outputs: [number, "fizz", "buzz", "fizzbuzz"]def fizz_buzz_encode(i): if i % 15 == 0: return 3 elif i % 5 == 0: return 2 阅读全文
NLTK
2021-07-03 09:47 by DataBases, 109 阅读, 0 推荐, 收藏,
摘要：python -m pip install nltk==3.5python -m pip install numpy matplotlibpythonimport nltknltk.download() TokenizingTokenizing by word: Tokenizing by sent 阅读全文
Pytorch tutorials and conda
2021-07-02 12:52 by DataBases, 47 阅读, 0 推荐, 收藏,
摘要：先安装anaconda； https://www.anaconda.com/ conda配置镜像源，防止下载的时候出现络问题conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/cond 阅读全文
浙公网安备 33010602011771号