2021年1月12日
code-server scala error: object apache is not a member of package org
摘要： 原因是scala缺少包，需要把spark或对应的包放入scala目录下的lib，然后重启主机，在terminal输入reboot即可。 如果不重启主机，则在交互式编程中可以成功import。但是直接在控制台输入scala *.scala则会显示 not found或者形如标题的错误。 阅读全文
posted @ 2021-01-12 17:18 Miraculous_B 阅读(1827) 评论(0) 推荐(0)
2020年12月9日
下面给出一个child-parent的表格，要求挖掘其中的父子辈关系，给出祖孙辈关系的表格。
摘要： package org.apache.hadoop.examples; import java.util.HashMap; import java.io.IOException; import java.util.ArrayList; import java.util.Iterator; impor 阅读全文
posted @ 2020-12-09 09:22 Miraculous_B 阅读(1664) 评论(0) 推荐(0)
现在有多个输入文件，每个文件中的每行内容均为一个整数。要求读取所有文件中的整数，进行升序排序后，输出到一个新的文件中，输出的数据格式为每行两个整数，第一个整数为第二个整数的排序位次，第二个整数为原待排列的整数。
摘要： package org.apache.hadoop.examples; import java.util.HashMap; import java.io.IOException; import java.util.Iterator; import java.util.Map; import java 阅读全文
posted @ 2020-12-09 09:21 Miraculous_B 阅读(1901) 评论(0) 推荐(0)
对于两个输入文件，即文件A 和文件B ,请编写MapReduce程序，对两个文件进行合并排除其中重复的内容，得到一个新的输出文件C。
摘要： package org.apache.hadoop.examples; import java.util.HashMap; import java.io.IOException; import java.util.Iterator; import java.util.Map; import java 阅读全文
posted @ 2020-12-09 09:20 Miraculous_B 阅读(2399) 评论(0) 推荐(0)
2020年11月11日
现有以下关系型数据库中的表(见表4-20表4-21和表4-22),要求将具转换为适合Hbase存储的表并插入数据。
摘要： ① createTable(String tableName, String[] fields) 创建表，参数tableName为表的名称，字符串数组fields为存储记录各个域名称的数组。要 求当HBase已经存在名为tableName的表的时候，先删除原有的表，再创建新的表。 import ja 阅读全文
posted @ 2020-11-11 12:47 Miraculous_B 阅读(2542) 评论(0) 推荐(0)
统计表的行数。
摘要： import java.io.IOException; public class E_getTableRowSum { public static Configuration configuration; public static Connection connection; public sta 阅读全文
posted @ 2020-11-11 12:44 Miraculous_B 阅读(192) 评论(0) 推荐(0)
清空指定表的所有记录数据。
摘要： import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.Cell; import org.apache.hadoop.hbase.CellUtil; 阅读全文
posted @ 2020-11-11 12:42 Miraculous_B 阅读(422) 评论(0) 推荐(0)
向已经创建好的表添加和删除指定的列族或列。
摘要： import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; import org.apache.hadoop.h 阅读全文
posted @ 2020-11-11 12:40 Miraculous_B 阅读(520) 评论(0) 推荐(0)
在终端打印出指定表的所有记录数据。
摘要： import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.Cell; import org.apache.hadoop.hbase.CellUtil; 阅读全文
posted @ 2020-11-11 12:39 Miraculous_B 阅读(463) 评论(0) 推荐(0)
列出HBASE所有表的相关信息，如表名、创建时间等。
摘要： import java.io.IOException; import java.util.Collection; import java.util.Iterator; import org.apache.hadoop.conf.Configuration; import org.apache.had 阅读全文
posted @ 2020-11-11 12:37 Miraculous_B 阅读(1891) 评论(0) 推荐(0)