星朝 - 博客园

2017年11月24日

摘要：欢迎转载，请注明来源： http://blog.csdn.net/u010967382/article/details/37878701 概述对于建表，和RDBMS类似，HBase也有namespace的概念，可以指定表空间创建表，也可以直接创建表，进入default表空间。对于数据操作，HBa 阅读全文

posted @ 2017-11-24 16:54 星朝阅读(1533) 评论(0) 推荐(1)

nutch 2.1安装问题集锦

摘要：参照官方文档http://nlp.solutions.asia/?p=180 中间碰到的问题，解决方法参考 http://blog.javachen.com/2014/05/20/nutch intro/ 问题1： compile core: [javac] C 阅读全文

posted @ 2017-11-24 14:47 星朝阅读(310) 评论(0) 推荐(0)

【Apache Nutch系列】Nutch2.0配置安装异常集锦

摘要： 1、java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/HBaseConfiguration [plain] view plain copy print?Exception in thread&nb 阅读全文

posted @ 2017-11-24 14:25 星朝阅读(428) 评论(0) 推荐(0)

2017年11月23日

nutch2.3.1源码分析——InjectorJob

摘要： InjectorJob实现的功能是：从种子站点文件当中读取站点信息并且将这些站点的个数、url（url以域名：协议/端口号/路径名设为形式存储在数据库当中，为了提高读写速度）回写到Context类的实例context当中。 InjectorJob类的运行流程如下： public static v 阅读全文

posted @ 2017-11-23 18:25 星朝阅读(417) 评论(0) 推荐(0)

Nutch配置：nutch-default.xml详解

摘要： /×××××××××××××××××××××××××××××××××××××××××/ Author：xxx0624 HomePage：http://www.cnblogs.com/xxx0624/ /×××××××××××××××××××××××××××××××××××××××××/ 阅读全文

posted @ 2017-11-23 17:24 星朝阅读(317) 评论(0) 推荐(0)

在Eclipse中运行Nutch2.3

摘要：参考http://wiki.apache.org/nutch/RunNutchInEclipse 一、环境准备 1、下载nutch2.3源代码 [plain] view plain copy print?wget http://mirror.bit.edu.cn/apache/nutch/ 阅读全文

posted @ 2017-11-23 17:11 星朝阅读(359) 评论(0) 推荐(0)

强大的Mockito测试框架

摘要： 1自动生成Mock类在需要Mock的属性上标记@Mock注解，然后@RunWith(MockitoJUnitRunner.class)或者在setUp()方法中显示调用MockitoAnnotations.initMocks(this);生成Mock类即可。 2自动注入阅读全文

posted @ 2017-11-23 16:57 星朝阅读(273) 评论(0) 推荐(0)

搭建eclipse环境下 Nutch+Mysql 二次开发环境

摘要：最近看了下Nutch，目前Nutch最新版本2.3.1，支持Hbase、MongoDB等存储，但在搭建和测试过程中发现对Mysql 的支持好像有点问题。后来将Nutch版本改为2.2.1。基于Nutch2.2.1+Mysql 的环境配置过程如下： 1.下载Nutch2.2.1 源码：SVN：htt 阅读全文

posted @ 2017-11-23 14:39 星朝阅读(269) 评论(0) 推荐(0)

mysql操作查询结果case when then else end用法举例

摘要： Case具有两种格式。简单Case函数和Case搜索函数。简单Case函数 CASE sex WHEN '1' THEN '男' &n 阅读全文

posted @ 2017-11-23 11:04 星朝阅读(3312) 评论(0) 推荐(0)

2017年11月22日

查看mysql数据库及表编码格式

摘要： 1.查看数据库编码格式 ?1mysql> show variables like 'character_set_database'; 2.查看数据表的编码格式 ?1mysql> show create table <表名>; 3.创建数据库时指定数据库阅读全文

posted @ 2017-11-22 23:07 星朝阅读(6208) 评论(1) 推荐(0)

星朝

公告