03 2015 档案

采集自定义表结构备份
摘要：CREATE TABLE `webpage` ( `id` varchar(190) NOT NULL, `headers` blob, `商品名称` varchar(500) DEFAULT NULL, `status` int(11) DEFAULT NULL, `markers` b... 阅读全文
posted @ 2015-03-31 10:51 一颗大柠檬 阅读(155) 评论(0) 推荐(0)
nutch2.2+mysql部署
摘要：安装MySQL（ 在此不做陈述，MySQL数据库可能是在windows，可能是在linux下，以下配置以linux为例）配置MySQL默认值（/etc/mysql/my.cnf [mysqld] ）innodb_file_format=barracudainnodb_file_per_table=t... 阅读全文
posted @ 2015-03-24 09:58 一颗大柠檬 阅读(410) 评论(0) 推荐(0)
SSH无密码登陆
摘要：$ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa$ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys只需讲公钥信息追加到authorized_keys 文件內。想无密码登陆哪台 就把自身的公钥信息追加到目标机器的aut... 阅读全文
posted @ 2015-03-11 09:09 一颗大柠檬 阅读(141) 评论(0) 推荐(0)
Nutch 提交索引的时候solr报错（solrj.SolrServerException: Error executing query）
摘要：使用版本 solr4.2报错原因是 书写不正确：http://192.168.202.61:8983 正确的写法是：http://192.168.202.61:8983/solr/collection1 阅读全文
posted @ 2015-03-10 14:47 一颗大柠檬 阅读(1025) 评论(0) 推荐(0)
第一个nuthc采集Nutch-site.xml文件配置（记录用）
摘要：http.robots.agents My Nutch Spider The agent strings we'll look for in robots.txt files, comma-separated, in decreasing order of precedence. You... 阅读全文
posted @ 2015-03-09 16:20 一颗大柠檬 阅读(148) 评论(0) 推荐(0)
Linux 新增硬盘-挂载
摘要：虚拟机新增硬盘挂载到文件下笔记：df -h --查看当前文件系统信息fdisk -l --查看当前磁盘设备（分区）信信息fdisk /dev/vdb --使用fdisk管理新设备=================创建分区====... 阅读全文
posted @ 2015-03-06 12:01 一颗大柠檬 阅读(248) 评论(0) 推荐(0)