• 博客园logo
  • 会员
  • 众包
  • 新闻
  • 博问
  • 闪存
  • 赞助商
  • HarmonyOS
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
珍珠奶茶不加糖
博客园    首页    新随笔    联系   管理    订阅  订阅
2020年11月13日
Hadoop基础之MapReduce中Shuffle
摘要: Hadoop基础之MapReduce中Shuffle Hadoop基础之MapReduce中Shuffle shuffle maptask:map端可以执行的一个进程 reducetask:reduce端可以执行的一个进程 shuffle是介于maptask和reducetask之间的一个过程 sh 阅读全文
posted @ 2020-11-13 15:02 珍珠奶茶不加糖 阅读(285) 评论(0) 推荐(0)
Hadoop基础之MapReduce词频分析
摘要: Hadoop基础之MapReduce词频分析 Hadoop基础之MapReduce词频分析 需求 把需要的数据分离出来 确定key和value 确定泛型 代码 App类 package mapReduce.phoneTraffic.testOne.app; import mapReduce.comm 阅读全文
posted @ 2020-11-13 14:54 珍珠奶茶不加糖 阅读(190) 评论(0) 推荐(0)
Hadoop基础之MapReduce
摘要: Hadoop基础之MapReduce Hadoop基础之MapReduce MapReduce MapReduce是hadoop中的一个非常重要的组件,用来处理海量数据计算的组件 由来:谷歌论文"MapReduce" 从论文的角度分析:MapReduce是一种思想 从技术的角度分析:MapReduc 阅读全文
posted @ 2020-11-13 14:52 珍珠奶茶不加糖 阅读(141) 评论(0) 推荐(0)
Hadoop基础之新节点的服役与旧节点的退役
摘要: Hadoop基础之新节点的服役与旧节点的退役 Hadoop基础之新节点的服役与旧节点的退役 修改节点之停止服务修改 停止服务 配制ssh免密登录 修改同步脚本 修改hosts文件 修改slaves文件 格式化 重新启动服务 修改节点之热部署修改 服役新节点 创建一个新节点、修改IP、主机名 配制ss 阅读全文
posted @ 2020-11-13 14:50 珍珠奶茶不加糖 阅读(160) 评论(0) 推荐(0)
Hadoop基础之机架感知
摘要: Hadoop基础之机架感知 Hadoop基础之机架感知 什么是机架感知 机架:存放服务器的架子,也叫机柜。一般来说一个机房有很多机柜,每个机柜有很多服务器 感知策略 Hadoop1版本 客户端依据最近空闲原则选择一个节点,在不同机架上选择第二个节点,在第二个节点的同机架下选择第三个节点 Hadoop 阅读全文
posted @ 2020-11-13 14:49 珍珠奶茶不加糖 阅读(661) 评论(0) 推荐(0)
2020年10月25日
分布式微服务架构设计原理
摘要: 分布式微服务架构设计原理 分布式微服务架构设计原理 应用架构演进 传统垂直架构 垂直应用架构介绍 MVC架构 MVC全名是Model View Controller,是模型-视图-控制器的缩写,是一种软件设计典范。 他是用一种业务逻辑、数据域界面显示分离的方法来组织代码,将众多的业务逻辑聚集到一个部 阅读全文
posted @ 2020-10-25 15:27 珍珠奶茶不加糖 阅读(517) 评论(0) 推荐(0)
Hadoop基础之HDFS
摘要: HDFS Hadoop基础之HDFS 什么是HDFS Hadoop Distributed File System hadoop的分布式文件系统 文件系统: 个人理解:在磁盘(只能做存储)的基础上,使用软件对所存储的内容进行管理的,这个软件就叫做文件系统 百度百科:文件系统是操作系统用于明确存储设备 阅读全文
posted @ 2020-10-25 15:25 珍珠奶茶不加糖 阅读(262) 评论(0) 推荐(0)
Hadoop基础之环境搭建
摘要: Hadoop基础之环境搭建 环境搭建 本地环境 可以用于开发的单节点模式,没有分布式的概念 伪分布式环境 一个节点表示一整个集群,但是分布式的概念,一个节点充当分布式里的所有角色 完全分布式 一个集群中有N个节点,他们分别充当分布式中不同的角色,完成不同的任务 伪分布式环境搭建 下载安装包 Hado 阅读全文
posted @ 2020-10-25 15:23 珍珠奶茶不加糖 阅读(143) 评论(0) 推荐(0)
Hadoop基础之Hadoop概述
摘要: Hadoop基础之Hadoop概述 Hadoop基础之Hadoop概述 什么是Hadoop Hadoop是一个可靠的、可扩展的,可以分布式计算的开源软件(计算框架) 使用简单模型在集群中分布式处理海量数据 集群:从硬件的角度分析 分布式:从软件的角度分析 节点的数量可以从单一一个服务到成千上万个服务 阅读全文
posted @ 2020-10-25 15:20 珍珠奶茶不加糖 阅读(121) 评论(0) 推荐(0)
Maven基础之Maven的配置和使用
摘要: Maven基础 Maven基础 什么是Maven 内行,专家 项目构建工具 能帮助我们做哪些事情 标准化项目结构 管理依赖 打成jar包 标准化项目结构 src -- 写源代码的位置 main -- 正常的代码和资源目录 java(Source Root) -- 代码 resource(Resour 阅读全文
posted @ 2020-10-25 15:18 珍珠奶茶不加糖 阅读(152) 评论(0) 推荐(0)
大数据之大数据基础
摘要: 大数据基础 大数据基础 什么是大数据 数据 字母、数字、声音、影像等都是数据,数据本身没有任何意义 数据是信息的载体 信息 信息是在数据的基础上,经过解释加工,得到了一定的价值,叫做信息 信息量 消除人们对不确定因素的大小 大 数据量大,如果想取得更大的价值,数据量要大,量变引起质变。数据量越多,可 阅读全文
posted @ 2020-10-25 15:17 珍珠奶茶不加糖 阅读(274) 评论(0) 推荐(0)
linux基础之Shell脚本
摘要: linux基础之Shell脚本 linux基础之Shell脚本 什么是shell shell充当计算机软件与硬件之间的翻译官 执行 bash 文件名 ./文件名 ./需要用户有对文件的执行权限 输出 echo 字符串/'字符串'/"字符串" 都可正常执行 shell变量 声明变量的方式 变量名=变量 阅读全文
posted @ 2020-10-25 15:15 珍珠奶茶不加糖 阅读(117) 评论(0) 推荐(0)
Linux基础之文件权限
摘要: linux基础之文件权限 linux基础之文件权限 用户和权限 权限 对于不同的人或角色有/给予不同的控制方式 最高权限 root 普通权限 user 用户组权限 group 其他权限 other - rw- rw- r-- 第一位表示文件类型 第一个三位表示当前文件所属用户权限 第二个三位表示与用 阅读全文
posted @ 2020-10-25 15:08 珍珠奶茶不加糖 阅读(105) 评论(0) 推荐(0)
Linux基础之Linux常用的命令
摘要: linux基础之linux命令 常用的命令 基本公式:命令[选项][参数] 查看帮助文档 man command info command commond --help https://man.linuxde.net 常用命令 别名 查看别名:alias 添加别名:alias 别名='命令' 删除别 阅读全文
posted @ 2020-10-25 15:07 珍珠奶茶不加糖 阅读(90) 评论(0) 推荐(0)
Linux基础之网络配置
摘要: linux基础之网络配置 linux基础之网络配置 关闭防火墙 root用户下 当次关闭:service iptables stop 永久关闭:chkconfig iptables off 修改当前节点的映射关系 /etc/hosts 关于网络配置的三个文件 /etc/sysconfig/netwo 阅读全文
posted @ 2020-10-25 15:06 珍珠奶茶不加糖 阅读(100) 评论(0) 推荐(0)
Linux基础之什么是Linux
摘要: linux基础之什么是linux linux基础之什么是linux 什么是linux linux是一个多用户多任务的操作系统 任何一个应用软件必须运行在操作系统上 操作系统 Operation System(OS)是管理计算机软件资源和硬件资源的计算机程序。是运行在裸机上的最基本的软件 多用户:在一 阅读全文
posted @ 2020-10-25 14:58 珍珠奶茶不加糖 阅读(125) 评论(0) 推荐(0)
2020年9月25日
JavaWeb之AJAX
摘要: AJAX JavaWeb之AJAX 什么是Ajax AsynchronousJavaScriptAndXML 它不是新的编程语言,是一种使用现有标准的新方法 它就是一个页面局部刷新的技术(在页面不进行刷新的情况下页面的部分地方与后台交互) 把先用成熟的技术组合在一起,形成一种新的操作方式 HTML 阅读全文
posted @ 2020-09-25 16:47 珍珠奶茶不加糖 阅读(191) 评论(0) 推荐(0)
JavaWeb之XML
摘要: XML JavaWeb之XML 什么是XML XML是可扩展标记语言 主要作用 存储数据 文本流 数据流 配置文件 数据交换 XML与HTML区别 语法不通 HTML不区分大小写 XML严格区分大小写 标记不同 HTML标记是固有的 、 XML标记是可扩展的 作用不同 HTML主要作用:在浏览器显示 阅读全文
posted @ 2020-09-25 16:46 珍珠奶茶不加糖 阅读(117) 评论(0) 推荐(0)
JavaWeb之Servlet组件
摘要: JavaWeb之Servlet组件 JavaWeb之Servlet组件 设计模式 设计模式分类 单例模式 工厂模式 装饰模式 策略模式 观察者模式 代理模式 按类型分类 创建型 结构型 行为型 JavaWeb设计模式 MVC设计模式 M:model。模型,处理业务逻辑 V:View。视图,展示数据 阅读全文
posted @ 2020-09-25 16:43 珍珠奶茶不加糖 阅读(147) 评论(0) 推荐(0)
JavaWeb之JSP
摘要: JSP基础 JSP基础 什么是JSP JavaServerPage Java服务页 本质上JSP是一个Servlet,但在使用中,更像是HTML 作用: 可以在页面中添加Java代码 所以,JSP更适合编写服务器端运行的界面 JSP基础 在JSP页中,可以有两种方式对代码的注释 html注释 通过浏 阅读全文
posted @ 2020-09-25 16:41 珍珠奶茶不加糖 阅读(204) 评论(0) 推荐(0)
JavaWeb之Servlet
摘要: Servlet Servlet 什么是Servlet Servlet是一组规范,包含了与服务端小程序相关的API Servlet是运行在服务器(Tomcat)的小程序 作用/功能 用来接收客户端的请求,并对客户端进行响应 通常使用的是HTTP协议 如何开发/使用一个Servlet Servlet 接 阅读全文
posted @ 2020-09-25 16:38 珍珠奶茶不加糖 阅读(192) 评论(0) 推荐(0)
JavaWeb之HTTP概述
摘要: JavaWeb基础 JavaWeb基础 什么是HTTP协议 超文本传输协议 是一种客户端浏览器与服务端数据传输的一种规范 无论是发送还是接收数据都要按照规范进行操作 特点: 它是以TCP/IP协议为基础的一个应用层协议 它是基于请求/响应的处理方式协议 它是一个无状态无连接的协议 HTTP协议版本 阅读全文
posted @ 2020-09-25 15:52 珍珠奶茶不加糖 阅读(142) 评论(0) 推荐(0)
JavaWeb之开发环境搭建
摘要: JavaWeb开发环境搭建 JavaWeb开发环境搭建 JavaWeb服务器(容器):Tomcat JavaWeb除了需要有JDK之外,还需要有解析Java的工具 因为JavaWeb项目需要在网络中运行,对于浏览器来讲,并不能解析Java代码 需要有一个特殊的工具来对Java进行解析,然后将解析后的 阅读全文
posted @ 2020-09-25 15:49 珍珠奶茶不加糖 阅读(143) 评论(0) 推荐(0)
JavaWeb之JQuery
摘要: JQuery JQuery简介 JQuery是一个快速,简洁的JavaScript的库 JQuery是对JavaScript的封装 常用的代码 常用的方法 ...等 它提供了一个更简洁的操作js方式 优化了HTML文档 优化了对事件的处理 提供动画效果操作 优化了与Ajax交互的方式 特性 轻量级 阅读全文
posted @ 2020-09-25 15:45 珍珠奶茶不加糖 阅读(186) 评论(0) 推荐(0)
JavaWeb之javaScript
摘要: JavaScript JavaScript js简介 js是基于对象和事件驱动语言(脚本) 基于对象,提供了很多对象,可以直接使用 事件驱动,动作触发时,要执行的功能,可以理解为“监听器” js特性 交互性,数据信息的交互 安全性,js本身是不能访问客户端本地磁盘的 跨平台,通过浏览器实现跨平台 J 阅读全文
posted @ 2020-09-25 15:41 珍珠奶茶不加糖 阅读(155) 评论(0) 推荐(0)
下一页
博客园  ©  2004-2025
浙公网安备 33010602011771号 浙ICP备2021040463号-3