leexiao

摘要： 8.1安装Anaconda 下载：wget https://mirrors.pku.edu.cn/anaconda/archive/Anaconda3-2021.05-Linux-x86_64.sh 安装：bash Anaconda3-2021.05-Linux-x86_64.sh -b 编辑~/. 阅读全文

摘要： 7.1Scla安装 下载：wget https://scala-lang.org/files/archive/scala-2.13.0.tgz 解压：tar xvf scala-2.13.0.tgz 移动到/usr/local 目录 ：sudo mv scala-2.13.0 /usr/local/ 阅读全文

摘要： 6.1编辑WordCount.java 创建wordcount测试目录 编辑WordCount.java 输入下面代码： 可以访问https://hadoop.apache.org/docs/current/hadoop-mapreduce-client/hadoop-mapreduce-clien 阅读全文

摘要： 5.1 启动Hadoop Muti-Node Cluster start-all.sh 5.2创建与查看HDFS目录 创建user目录：hadoop fs -mkdir /user 创建user下hduser子目录：hadoop fs -mkdir /user/hduser 创建hduser下tes 阅读全文

摘要： 3.1安装JDK java --version 查看java版本，出现下面信息代表未安装。 输入命令 sudo apt-get update 更新软件包信息。 sudo apt-get install defult-jdk 下载jdk，出现提示按y。 再次查看jdk版本。 输入update-alte 阅读全文

摘要： 2.1 下载Ubuntu iso文件（可以选择镜像源），版本 24.04.4。 2.2 设置虚拟光盘文件。 2.3 安装Ubuntu. 启动虚拟机。 选择语言中文简体，安装Ubuntu 键盘布局选择English(US) 点击继续，清理整个磁盘并安装Ubuntun，时间选择pei-ching 设置计 阅读全文

摘要： 1.1 下载安装VirtualBox 进入VirtualBox官网下载安装(www.virtualbox.org/wiki/Downloads) 1.2 设置VirtualBox默认存储文件夹。 点击 管理 >> 全局设定 >> 默认虚拟电脑位置，把默认位置修改为你想要放的位置。 1.3 在Virt 阅读全文

摘要： 记录Python+Spark+Hadoop 机器学习与大数据技术实战 环境配置与学习过程。参考书目：《Python+Spark 2.0+Hadoop机器学习与大数据实战》 阅读全文

摘要： intRDD = sc.parallelize([3, 1, 2, 5, 5]) intRDD.collect() [3, 1, 2, 5, 5] stringRDD = sc.parallelize(["Apple", "Orange", "Banana", "Grape", "Apple"]) 阅读全文

摘要： 组合数 ll inv[N],inc[N]; void init(){ inc[0]=1; for(int i=1;i<=N;i++){ inc[i]=inc[i-1]*i % mod; } inv[0]=1; for(int i=1;i<=N;i++){ inv[i]=powmod(inc[i],m 阅读全文