韩佳龙

摘要： 算法导论阅读笔记 第二章：算法入门 本章通过介绍插入排序和归并排序两种常见的排序算法来说明算法的过程及算法分析，在介绍归并排序算法过程中引入了分治（divide-and-conquer）算法策略。 1、插入排序 输入：n个数（a1,a2,a3,...,an） 输出：输入序列的一个排列（a1',a2' 阅读全文

摘要： 实验4：NoSQL和关系数据库的操作比较 MongoDB数据库操作 Student文档如下: { “name”: “zhangsan”, “score”: { “English”: 69, “Math”: 86, “Computer”: 77 } } { “name”: “lisi”, “score 阅读全文

摘要： 今天我们完成了以下问卷的调研： 软件需求分析调研活动 石家庄铁道大学信息学院 关于大学生熬夜情况的调查 本次问卷仅用于教学活动，个人信息绝对保密 1、此次问卷由信息学院软件工程专业学生开展 2、问卷面向其他学院学生 姓名：________________ 专 业：________________ 班 阅读全文

摘要： 将表存入mysql //sqoop语句 bin/sqoop export \ --connect jdbc:mysql://192.168.51.100:3306/myhive \ --username root \ --password root \ --table data \ --num-ma 阅读全文

摘要： 发票数据分析2 1、将数据导入hive在hive进行数据的处理，对数据进行清洗将括号去掉； 导入表并删除括号； 2、创建test1和test2来分别存储只出不进和只进不出的企业； Test1建表 create table test1(nsr_id String) ROW format delimit 阅读全文

摘要： 发票数据分析1 题目： 1、数据组成 （1）增值税发票数据，文件名zzsfp （2）发票对应货物明细数据，文件名zzsfp_hwmx （3）企业信息，文件名nsrxx 2、数据字段说明 （1）zzsfp表字典 字段名称 字段含义 数据类型 备注 fp_nid 发票id String 发票唯一标识 x 阅读全文

摘要： 大数据测试之日志分析3 2、数据处理： ·统计最受欢迎的视频/文章的Top10访问次数 （video/article） ·按照地市统计最受欢迎的Top10课程 （ip） ·按照流量统计最受欢迎的Top10课程 （traffic） 2.1 统计最受欢迎的视频/文章的Top10访问次数 （video/a 阅读全文

摘要： 大数据测试之日志分析2 将清洗后的数据导入hive: 建表 将本地文件上传 查看 将hive中表结构导出至mysql 数据库中建表 建表语句: create table result1(ip VARCHAR(255), date1 VARCHAR(255), day VARCHAR(255), tr 阅读全文

摘要： 大数据测试之日志分析1 Result文件数据说明： Ip：106.39.41.166,（城市） Date：10/Nov/2016:00:01:02 +0800,（日期） Day：10,（天数） Traffic: 54 ,（流量） Type: video,（类型：视频video或文章article） 阅读全文

摘要： 多人共用HDFS的环境下，配置设置非常重要。特别是在Hadoop处理大量资料的环境，如果没有配额管理，很容易把所有的空间用完造成别人无法存取。Hdfs的配额设定是针对目录而不是针对账号，可以 让每个账号仅操作某一个目录，然后对目录设置配置。 hdfs文件的限额配置允许我们以文件个数，或者文件大小来限 阅读全文