清泉白石

摘要： 一、基础 REPL 什么叫REPL? REPL是Read（读取） Evaluate（求值） Print（打印） Loop（循环）。 是Scala解释器的一个过程。 输出 声明值与变量、常量 1、变量用 表示，常量使用 表示 2、变量类型声明 3、多个变量声明 4、元组 常用类型 scala不对 和` 阅读全文

摘要： IF(expr1,expr2,expr3) 如果 expr1 是TRUE (expr1 0 and expr1 NULL)，则 IF()的返回值为expr2; 否则返回值则为 expr3。IF() 的返回值为数字值或字符串值 阅读全文

摘要： https://github.com/alibaba/p3c 阅读全文

摘要： dir 阅读全文

摘要： 更新表中的字段 UPDATE 表名称 SET 列名称 = 新值 WHERE 列名称 = 某值 清空表 DELETE FROM 表名称 WHERE 列名称 = 值 truncate table 表名; 不带where参数的delete语句可以删除mysql表中所有内容，使用truncate table 阅读全文

摘要： 磁盘IO 磁盘读取，分为 寻道时间、旋转延迟、传输时间三个部分，三个部分加起来的耗时，就是一场磁盘IO的时间。 计算机优化，预读，每次IO时，把当前磁盘地址的数据加载到内存，同时把相邻数据加载到内存缓冲区。 磁盘IO，也就是磁盘的输入输出，输入，向磁盘写入数据，输出，从磁盘读取数据。 物理结构 扇区 阅读全文

摘要： 一、内存分配 1.1 JVM 内存结构 Java 虚拟机的内存空间分为 5 个部分： 程序计数器 Java 虚拟机栈 本地方法栈 堆 方法区 程序计数器（PC） 为什么需要程序计数器 因为Java虚拟机的多线程是通过 并``分配处理器执行时间``的方式来实现的。任意时刻，一个处理器只执行一条指令，为 阅读全文

摘要： 目录 一、爬一个简单的网站 二、模拟登录与使用selenium 三、多线程爬取与反爬策略 四、加密与解密 五、APP数据抓取 六、分布式爬虫 一、爬取一个简单的网站 本章教程，我们使用python爬取博客园的文章，并解析获取到的数据，重点会介绍 几种不同python库的使用方法 来获取数据。爬取一个 阅读全文

摘要： 一、TCP连接建立（三次握手） 过程 客户端A，服务器B，初始序号seq，确认号ack 初始状态：B处于监听状态，A处于打开状态 A B : seq = x （A向B发送连接请求报文段，A进入同步发送状态SYN SENT） B A : ack = x + 1,seq = y （B收到报文段，向A发送 阅读全文

摘要： Hadoop目录下的配置文件 1、core site.xml （老版本是fs.default.name）描述集群中NameNode节点的URI 2、hdfs site.xml 决定系统中文件块的数据备份个数 3、mapred site.xml 4、yarn site.xml 配置ResourceMa 阅读全文