02 2020 档案

以”淘宝网“为例描绘质量属性的六个常见属性
摘要：以《淘宝网》为例，描绘质量属性的六个常见属性场景 可用性：与系统故障及其后果相关。（可用性是指系统正常运行时间的比例 稳定性的指标 出现故障恢复的时间） 场景：双十一购物节 刺激源：大量用户 刺激：短时间内大量用户迅速进入淘宝，系统崩溃 制品：系统崩溃的处理器 环境：正常模式 响应：记录故障，通知系 阅读全文
posted @ 2020-02-25 09:35 ZQL2017 阅读(142) 评论(0) 推荐(0)
200.02.16
摘要：用SSH Secure File Transfer Client连接虚拟机报一下错误： The host '192.168.1.12' is unreachable. the host may be down..... 解决方式： 1.查看虚拟机ssh是否开启； 2.检查虚拟机防火墙是否关闭； 3. 阅读全文
posted @ 2020-02-16 13:38 ZQL2017 阅读(159) 评论(0) 推荐(0)
2020.02.15
摘要：1.数据导入 从文件中导入数据，并转化为 DataFrame。 ? 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 import org.apache.spark.ml.feature.PCA import org.apache.spark.sql.Row import or 阅读全文
posted @ 2020-02-15 12:39 ZQL2017 阅读(481) 评论(0) 推荐(0)
2020.02.14
摘要：1.安装 Flume Flume 是 Cloudera 提供的一个分布式、可靠、可用的系统，它能够将不同数据源的海量 日志数据进行高效收集、聚合、移动，最后存储到一个中心化数据存储系统中。Flume 的 核心是把数据从数据源收集过来，再送到目的地。请到 Flume 官网下载 Flume1.7.0 安 阅读全文
posted @ 2020-02-14 12:14 ZQL2017 阅读(218) 评论(0) 推荐(0)
2020.02.13
摘要：13 阅读全文
posted @ 2020-02-13 13:41 ZQL2017 阅读(69) 评论(0) 推荐(0)
2020.02.12
摘要：1．Spark SQL 基本操作 将下列 JSON 格式数据复制到 Linux 系统中，并保存命名为 employee.json。 为 employee.json 创建 DataFrame， ? 1 2 3 4 scala> import org.apache.spark.sql.SparkSess 阅读全文
posted @ 2020-02-12 21:46 ZQL2017 阅读(176) 评论(0) 推荐(0)
2020.02.11
摘要：11 阅读全文
posted @ 2020-02-12 21:43 ZQL2017 阅读(77) 评论(0) 推荐(0)
2020.02.10
摘要：1．spark-shell 交互式编程 请到本教程官网的“下载专区”的“数据集”中下载 chapter5-data1.txt，该数据集包含 了某大学计算机系的成绩，数据格式如下所示： 请根据给定的实验数据，在 spark-shell 中通过编程来计算以下内容： （1）该系总共有多少学生； （2）该系 阅读全文
posted @ 2020-02-12 12:10 ZQL2017 阅读(376) 评论(0) 推荐(0)
《软件架构设计》-阅读笔记1
摘要：《软件架构设计》紧紧围绕“软件架构设计”这一主题，非常系统地解析了软件架构的概念，阐述了切实可行的软件架构设计方法，给出了可实施性很强的完整的架构设计过程。阅读此书过程中，常常会发现让人眼前一亮的引文或观点。此读书笔记将《软件架构设计》中重要的观点提取出来，进行再一次的归纳和整理。写这篇笔记的目的一 阅读全文
posted @ 2020-02-10 21:44 ZQL2017 阅读(117) 评论(0) 推荐(0)
2020.02.09
摘要：HDFS 常用操作 使用 hadoop 用户名登录进入 Linux 系统，启动 Hadoop，参照相关 Hadoop 书籍或网络 资料，或者也可以参考本教程官网的“实验指南”栏目的“HDFS 操作常用 Shell 命令”， 使用 Hadoop 提供的 Shell 命令完成如下操作： （1）启动 Ha 阅读全文
posted @ 2020-02-09 18:15 ZQL2017 阅读(237) 评论(0) 推荐(0)
2020.02.08
摘要：模拟图形绘制 对于一个图形绘制程序，用下面的层次对各种实体进行抽象。定义一个 Drawable 的特 质，其包括一个 draw 方法，默认实现为输出对象的字符串表示。定义一个 Point 类表示点， 其混入了 Drawable 特质，并包含一个 shift 方法，用于移动点。所有图形实体的抽象类为 阅读全文
posted @ 2020-02-08 16:17 ZQL2017 阅读(133) 评论(0) 推荐(0)
2020.02.07
摘要：学习任务： 1.python基础：函数 调用abs函数求绝对值： 数据类型转换函数： 定义函数：定义一个函数要使用def语句，依次写出函数名、括号、括号中的参数和冒号:，然后，在缩进块中编写函数体，函数的返回值用return语句返回。 如果想定义一个什么事也不做的空函数，可以用pass语句： 阅读全文
posted @ 2020-02-08 16:16 ZQL2017 阅读(90) 评论(0) 推荐(0)
2020.02.06
摘要：1.python基础 （1）dict Python内置了字典：dict的支持，dict全称dictionary，在其他语言中也称为map，使用键-值（key-value）存储，具有极快的查找速度。 把数据放入dict的方法，除了初始化时指定外，还可以通过key放入，由于一个key只能对应一个valu 阅读全文
posted @ 2020-02-06 21:05 ZQL2017 阅读(117) 评论(0) 推荐(0)
2020.02.05
摘要：5 阅读全文
posted @ 2020-02-06 13:16 ZQL2017 阅读(64) 评论(0) 推荐(0)
2020.02.04
摘要：4 阅读全文
posted @ 2020-02-04 21:21 ZQL2017 阅读(80) 评论(0) 推荐(0)
2020.02.03
摘要：扒取代码的优化结果； 阅读全文
posted @ 2020-02-03 22:35 ZQL2017 阅读(65) 评论(0) 推荐(0)
2020.02.02
摘要：#coding:utf-8 import requests from lxml import etree import time import pymysql import datetime import urllib import json from IPython.core.page impor 阅读全文
posted @ 2020-02-02 21:32 ZQL2017 阅读(202) 评论(0) 推荐(0)
2020.02.01
摘要：统计学生成绩学生的成绩清单格式如下所示，第一行为表头，各字段意思分别为学号、性别、课程名1、课程名 2 等，后面每一行代表一个学生的信息，各字段之间用空白符隔开 Id gender Math English Physics301610 male 80 64 78301611 female 65 87 阅读全文
posted @ 2020-02-01 20:21 ZQL2017 阅读(219) 评论(0) 推荐(0)