10 2021 档案

十月读书笔记3
摘要：第四章：注重实效的偏执 按合约设计：没有什么比常识和坦率更让人感到惊讶。按合约设计： 一种简单而强大的技术，他关注的是用文档记载（并约定）软件模块的权利与责任，以确保程序正确性< 通过合约进行设计 >出错时要偏向消费者，这是我们对行为的保证 断言式编程：在自责中有一种满足感。当我们责备自己时，会觉得 阅读全文
posted @ 2021-10-29 15:33 韩佳龙 阅读(70) 评论(0) 推荐(0)
十月读书笔记2
摘要：第三章：函数的增长 本章介绍了算法分析中的渐进分析符号，几个重要渐进记号的定义如下： Θ(g(n))={ f(n): 存在正常数c1,c2和n0，使对所有的n>=n0，有0<=c1g(n)<=f(n)<=c2g(n) } O(g(n))={ f(n): 存在正常数c和n0，使对所有n>=n0，有0< 阅读全文
posted @ 2021-10-27 18:51 韩佳龙 阅读(76) 评论(0) 推荐(0)
10月读书笔记1
摘要：算法导论阅读笔记 第二章：算法入门 本章通过介绍插入排序和归并排序两种常见的排序算法来说明算法的过程及算法分析，在介绍归并排序算法过程中引入了分治（divide-and-conquer）算法策略。 1、插入排序 输入：n个数（a1,a2,a3,...,an） 输出：输入序列的一个排列（a1',a2' 阅读全文
posted @ 2021-10-25 11:08 韩佳龙 阅读(70) 评论(0) 推荐(0)
10.24
摘要：实验4：NoSQL和关系数据库的操作比较 MongoDB数据库操作 Student文档如下: { “name”: “zhangsan”, “score”: { “English”: 69, “Math”: 86, “Computer”: 77 } } { “name”: “lisi”, “score 阅读全文
posted @ 2021-10-24 16:14 韩佳龙 阅读(171) 评论(0) 推荐(0)
10.23
摘要：今天我们完成了以下问卷的调研： 软件需求分析调研活动 石家庄铁道大学信息学院 关于大学生熬夜情况的调查 本次问卷仅用于教学活动，个人信息绝对保密 1、此次问卷由信息学院软件工程专业学生开展 2、问卷面向其他学院学生 姓名：________________ 专 业：________________ 班 阅读全文
posted @ 2021-10-23 20:00 韩佳龙 阅读(96) 评论(0) 推荐(0)
10.22
摘要：将表存入mysql //sqoop语句 bin/sqoop export \ --connect jdbc:mysql://192.168.51.100:3306/myhive \ --username root \ --password root \ --table data \ --num-ma 阅读全文
posted @ 2021-10-22 20:03 韩佳龙 阅读(50) 评论(0) 推荐(0)
10.21
摘要：发票数据分析2 1、将数据导入hive在hive进行数据的处理，对数据进行清洗将括号去掉； 导入表并删除括号； 2、创建test1和test2来分别存储只出不进和只进不出的企业； Test1建表 create table test1(nsr_id String) ROW format delimit 阅读全文
posted @ 2021-10-21 18:16 韩佳龙 阅读(191) 评论(0) 推荐(0)
10.20
摘要：发票数据分析1 题目： 1、数据组成 （1）增值税发票数据，文件名zzsfp （2）发票对应货物明细数据，文件名zzsfp_hwmx （3）企业信息，文件名nsrxx 2、数据字段说明 （1）zzsfp表字典 字段名称 字段含义 数据类型 备注 fp_nid 发票id String 发票唯一标识 x 阅读全文
posted @ 2021-10-20 21:16 韩佳龙 阅读(144) 评论(0) 推荐(0)
10.17
摘要：大数据测试之日志分析3 2、数据处理： ·统计最受欢迎的视频/文章的Top10访问次数 （video/article） ·按照地市统计最受欢迎的Top10课程 （ip） ·按照流量统计最受欢迎的Top10课程 （traffic） 2.1 统计最受欢迎的视频/文章的Top10访问次数 （video/a 阅读全文
posted @ 2021-10-17 16:19 韩佳龙 阅读(122) 评论(0) 推荐(0)
10.16
摘要：大数据测试之日志分析2 将清洗后的数据导入hive: 建表 将本地文件上传 查看 将hive中表结构导出至mysql 数据库中建表 建表语句: create table result1(ip VARCHAR(255), date1 VARCHAR(255), day VARCHAR(255), tr 阅读全文
posted @ 2021-10-16 19:28 韩佳龙 阅读(72) 评论(0) 推荐(0)
10.15
摘要：大数据测试之日志分析1 Result文件数据说明： Ip：106.39.41.166,（城市） Date：10/Nov/2016:00:01:02 +0800,（日期） Day：10,（天数） Traffic: 54 ,（流量） Type: video,（类型：视频video或文章article） 阅读全文
posted @ 2021-10-15 19:22 韩佳龙 阅读(193) 评论(0) 推荐(0)
10.12
摘要：多人共用HDFS的环境下，配置设置非常重要。特别是在Hadoop处理大量资料的环境，如果没有配额管理，很容易把所有的空间用完造成别人无法存取。Hdfs的配额设定是针对目录而不是针对账号，可以 让每个账号仅操作某一个目录，然后对目录设置配置。 hdfs文件的限额配置允许我们以文件个数，或者文件大小来限 阅读全文
posted @ 2021-10-12 16:47 韩佳龙 阅读(160) 评论(0) 推荐(0)
10.10
摘要：XHTML 元素 - 语法规则 XHTML 元素必须正确嵌套 XHTML 元素必须始终关闭 XHTML 元素必须小写 XHTML 文档必须有一个根元素 XHTML 元素必须正确嵌套 在 HTML 中，某些元素可以不正确地彼此嵌套在一起，就像这样： <b><i>This text is bold an 阅读全文
posted @ 2021-10-10 20:00 韩佳龙 阅读(155) 评论(0) 推荐(0)
10.9
摘要：echarts调色盘 调色盘可以在 option 中设置。 调色盘给定了一组颜色，图形、系列会自动从其中选择颜色。 可以设置全局的调色盘，也可以设置系列自己专属的调色盘。 option = { // 全局调色盘。 color: ['#c23531','#2f4554', '#61a0a8', '#d 阅读全文
posted @ 2021-10-09 16:19 韩佳龙 阅读(155) 评论(0) 推荐(0)
10.8
摘要：一起学习，一起进步呀 2021.10.15 MongoDB 概念解析 不管我们学习什么数据库都应该学习其中的基础概念，在mongodb中基本的概念是文档、集合、数据库，下面我们挨个介绍。 下表将帮助您更容易理解Mongo中的一些概念： SQL术语/概念MongoDB术语/概念解释/说明 databa 阅读全文
posted @ 2021-10-08 16:19 韩佳龙 阅读(274) 评论(0) 推荐(0)
10.7
摘要：备忘录模式： 定义： 在不破坏封装性的前提下，捕获一个对象的内部状态，并在该对象之外保存这个状态，以便以后当需要时能将该对象恢复到原先保存的状态。 备忘录模式是一种对象行为型模式，其主要优点如下。 提供了一种可以恢复状态的机制。当用户需要时能够比较方便地将数据恢复到某个历史的状态。 实现了内部状态的 阅读全文
posted @ 2021-10-07 18:39 韩佳龙 阅读(266) 评论(0) 推荐(0)
10.6
摘要：要求将样表文件中的（AA_GXJSQYDC2019）数据导入HIVE数据仓库中。分别将地域维度表导入数据仓库中。 （1）将改名且设置字符集为UTF-8后的文件上传到本地 （2）在hive中创建表aa_2019 create table aa_2019( ID String, QA04 String, 阅读全文
posted @ 2021-10-06 20:00 韩佳龙 阅读(208) 评论(0) 推荐(0)
10.5
摘要：全量导入 mysql 表数据到 HDFS 下面的命令用于从 MySQL 数据库服务器中的 emp 表导入 HDFS。 bin/sqoop import\ --connect jdbc:mysql://node-1:3306/userdb \ --username root \ --password 阅读全文
posted @ 2021-10-05 16:49 韩佳龙 阅读(261) 评论(0) 推荐(0)
10.4
摘要：饼图主要是通过扇形的弧度表现不同类目的数据在总和中的占比，它的数据格式比柱状图更简单，只有一维的数值，不需要给类目。因为不在直角坐标系上，所以也不需要 xAxis，yAxis。 实例 myChart.setOption({ series : [ { name: '访问来源', type: 'pie' 阅读全文
posted @ 2021-10-04 16:19 韩佳龙 阅读(63) 评论(0) 推荐(0)
10.3
摘要：echarts的一个小测试： <!DOCTYPE html> <html> <head> <meta charset="utf-8"> <title>第一个 ECharts 实例</title> <!-- 引入 echarts.js --> <script src="https://cdn.stat 阅读全文
posted @ 2021-10-03 19:21 韩佳龙 阅读(364) 评论(0) 推荐(0)
10.2
摘要：csv文件的字段说明： 1.将csv文件上传到虚拟机中 在SeureCRT中点击，创建目录，直接把文件从本地拖进去 2.在hive命令行中建表，表名要与csv文件中的对应字段类型都选择varchar hive create table sales_sample_20170310(day_id var 阅读全文
posted @ 2021-10-03 10:30 韩佳龙 阅读(286) 评论(0) 推荐(0)
10.1
摘要：今天国庆节，真是普天同庆，迎来了大三的一次极限测试 从下午两点半到晚上九点半，历时七个小时艰辛历程终于完成了 这次对我触动很大，明明昨天测试数据好还好着，结果一到考试就 出问题，以后也免不了这些，我会在今后更加注意的 阅读全文
posted @ 2021-10-01 14:12 韩佳龙 阅读(417) 评论(0) 推荐(0)