02 2020 档案

淘宝网的六个质量属性
摘要：质量属性 以《淘宝网》为例，描绘质量属性的六个常见属性场景，将上述整理为一篇博客发表。 可用性 可用性分析所关注的方面包括：如何检测系统故障，系统故障发生的频度，出现故障时会发生什么情况，允许系统有多长时间非正常运行，什么时候可以安全地出现故障，如何防止故障的发生以及发生故障时要求进行哪种通知。 例 阅读全文
posted @ 2020-02-23 09:45 张利杰j 阅读(140) 评论(0) 推荐(0)
在python中安装包出现Retrying (Retry(total=4, connect=None, read=None, redirect=None, status=None)) 安装wordcloud
摘要：用pip安装wordcloud 第三方库 一直失败 给我提示Retrying (Retry(total=4, connect=None, read=None, redirect=None, status=None)) https://blog.csdn.net/lsf_007/article/det 阅读全文
posted @ 2020-02-23 00:50 张利杰j 阅读(664) 评论(0) 推荐(0)
第一周学习总结
摘要：这一周我学习了python的一些基本语法和函数 以及如何从不同类型的网站爬虫 爬取了丁香园-的疫情数据还有拉勾网，猫眼的一些信息 学到两种方法，一种是xpath方法，一种是正则表达式 xpath import requests from lxml import etree import xlwt u 阅读全文
posted @ 2020-02-22 14:14 张利杰j 阅读(144) 评论(0) 推荐(0)
构建北京市政百姓信件分析实战案例
摘要：开发 JavaWeb+ECharts 完成信件数据图表展示过程。 阅读全文
posted @ 2020-02-22 13:58 张利杰j 阅读(254) 评论(0) 推荐(0)
全国疫情数据可视化
摘要：采用的是 JavaWeb+ECharts 点击河北省出现河北省的市的情况 阅读全文
posted @ 2020-02-22 13:34 张利杰j 阅读(677) 评论(1) 推荐(0)
软件架构师是如何工作的
摘要：最近看完了王概凯写的九篇架构漫谈后，对于软件架构师是如何工作的，首先我们的先知道什么是架构，架构就是根据要解决的问题，对目标系统的边界进行界定，并对目标系统按某个原则的进行切分。切分的原则，要便于不同的角色，对切分出来的部分，并行或串行开展工作，一般并行才能减少时间，并且并对这些切分出来的部分，设立 阅读全文
posted @ 2020-02-19 17:06 张利杰j 阅读(152) 评论(0) 推荐(0)
寒假第二十一天
摘要：python的正则表达式是一个特殊的字符序列，它能帮助你方便的检查一个字符串是否与某种模式匹配。 用前得先引用re模块 import re re.match函数 re.match 尝试从字符串的起始位置匹配一个模式，如果不是起始位置匹配成功的话，match()就返回none。 re.match(pa 阅读全文
posted @ 2020-02-16 16:56 张利杰j 阅读(97) 评论(0) 推荐(0)
寒假第二十天
摘要：异常处理常用的是这种结构，一般去掉finally 可以在else里嵌套 比如说之前连接mysql查询就用到了异常处理 #!/usr/bin/python # -*- coding: UTF-8 -*- import pymysql # 打开数据库连接 db = pymysql.connect(hos 阅读全文
posted @ 2020-02-15 20:39 张利杰j 阅读(82) 评论(0) 推荐(0)
寒假第十九天
摘要：python的输出是 print（1）跟Java的类似print（1）； python的输出是input（） #!/usr/bin/python # -*- coding: UTF-8 -*- str =input("请输入：") print("你输入的内容是: ", str) 读和写文件 open 阅读全文
posted @ 2020-02-14 20:49 张利杰j 阅读(70) 评论(0) 推荐(0)
寒假第十八天
摘要：今天学了python函数调用 跟Java的差不多 def printme(str): "打印任何传入的字符串" print(str) return # 调用函数 printme("我要调用用户自定义函数!") printme("再次调用同一函数") 首先先定义一个函数 def 函数名(变量)： re 阅读全文
posted @ 2020-02-13 19:14 张利杰j 阅读(98) 评论(0) 推荐(0)
寒假第十七天
摘要：python连接数据库 今天学习了一下python如何连接数据库以及增删改查 首先我用的是pymysql，是python连接mysql的一个库 首先先得安装pymysql 命令pip install PyMySQL 具体代码 import pymysql #引用pymysql模块 # 打开数据库连接 阅读全文
posted @ 2020-02-12 20:07 张利杰j 阅读(103) 评论(0) 推荐(0)
寒假第十六天
摘要：Python数学函数 abs(x) 返回数字的绝对值，如abs(-10) 返回 10 ceil(x) 返回数字的上入整数，如math.ceil(4.1) 返回 5 cmp(x, y) 如果 x < y 返回 -1, 如果 x == y 返回 0, 如果 x > y 返回 1 exp(x) 返回e的x 阅读全文
posted @ 2020-02-11 14:05 张利杰j 阅读(130) 评论(0) 推荐(0)
寒假第十五天
摘要：python的变量复赋值 counter = 100 # 赋值整型变量 miles = 1000.0 # 浮点型 name = "John" # 字符串 同时python和其他编程语言一样可以为多个变量赋值a = b = c = 1 但也可以为多个对象指定多个变量a, b, c = 1, 2, "j 阅读全文
posted @ 2020-02-10 21:20 张利杰j 阅读(86) 评论(0) 推荐(0)
寒假第十四天
摘要：今天学习了python，下学期要学习python语言 Python 简介Python 是一个高层次的结合了解释性、编译性、互动性和面向对象的脚本语言。 Python 的设计具有很强的可读性，相比其他语言经常使用英文关键字，其他语言的一些标点符号，它具有比其他语言更有特色语法结构。 Python 是一 阅读全文
posted @ 2020-02-09 19:44 张利杰j 阅读(108) 评论(0) 推荐(0)
寒假第十三天
摘要：今天sbteclipse全局安装一直失败，网上查询没有解决 阅读全文
posted @ 2020-02-08 23:12 张利杰j 阅读(84) 评论(0) 推荐(0)
寒假第十二天
摘要：今天有安装了一下教程上Spark的Kafka作为Spark的数据源，看教程看不懂是干什么的，但是在教程的帮助下安装上了Kafka 然后我有下载了Eclipse可以编写Spark应用程序，安装插件安装了很久，然后测试了一下可以使用 然后我有解决了之前实验四的一些问题，2和3独立编程中sbt打包一直失败 阅读全文
posted @ 2020-02-07 14:33 张利杰j 阅读(146) 评论(0) 推荐(0)
寒假第十一天
摘要：今天写实验七，遇到了很多问题，没有完成~ 补充 阅读全文
posted @ 2020-02-06 23:38 张利杰j 阅读(77) 评论(0) 推荐(0)
寒假第十一天
摘要：今天完成了实验六 安装了Flume，Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力。 2. 使用 Avro 数据 阅读全文
posted @ 2020-02-05 22:05 张利杰j 阅读(169) 评论(0) 推荐(0)
寒假第十天
摘要：我今天学习了spark sql Spark SQL可以很好地支持SQL查询，一方面，可以编写Spark应用程序使用SQL语句进行数据查询，另一方面，也可以使用标准的数据库连接器（比如JDBC或ODBC）连接Spark进行SQL查询，这样，一些市场上现有的商业智能工具（比如Tableau）就可以很好地 阅读全文
posted @ 2020-02-04 22:16 张利杰j 阅读(176) 评论(0) 推荐(0)
寒假第九天
摘要：今天完成了实验四，对于spark-shell交互式编程更加了解和RDD以及对于编写独立应用程序sbt的打包编程去重也有了了解 之前安装完sbt后对于后面的打包需要下载一些文件一直失败，后来我把 在网上查询解决方案，找了很久终于 教程里spark-core 换成了spark-sql 然后就下载成功了 阅读全文
posted @ 2020-02-03 12:51 张利杰j 阅读(129) 评论(0) 推荐(0)
寒假第八天
摘要：今天写的实验三 1.i京安装完成spark和hadoop （1） 启动 Hadoop，在 HDFS 中创建用户目录“/user/hadoop”； cd /usr/local/hadoop ./bin/hdfs dfs –mkdir –p /user/hadoop （2） 在 Linux 系统的本地文 阅读全文
posted @ 2020-02-02 21:40 张利杰j 阅读(156) 评论(0) 推荐(0)
寒假第七天-sbt安装失败解决
摘要：前几天安装的sbt一直没有安装成功，只是把剩下的安装了很完成了实验一二，然后今天安装sbt安装了很久，一直下载失败，试了各种办法，后来发现是我spark的版本2.1.0查找不到，后来把spark版本换成了2.1.0的版本后在安装sbt就安装成功了，然后试了一下教程下面的例子，成功了，心态差点爆炸 c 阅读全文
posted @ 2020-02-01 19:56 张利杰j 阅读(492) 评论(0) 推荐(0)