lkoooox

摘要： 转载鑫语大数据的 微信存不了收藏夹 复制过来的 侵权立删 CREATE TABLE `test1` ( `id` int(11) NOT NULL AUTO_INCREMENT, `name` varchar(20) DEFAULT NULL, `course` varchar(20) DEFAUL 阅读全文

摘要： Python的文件操作 1、文件的打开与关闭 想一想：如果想用word编写一份简历，应该有哪些流程呢？ 1、打开word软件，新建一个word文件 2、写入个人简历信息 3、保存文件 4、关闭word软件 同样，在操作文件的整体过程与使用word编写一份简历的过程是很相似的 （io操作） 1、打开文 阅读全文

摘要： python学习笔记 1、Python的下载 1、python网址：https://www.python.org/ 2、anaconda网址：https://www.anaconda.com/ 注意：Anaconda指的是一个开源的Python发行版本，其包含了conda、Python等180多个科 阅读全文

摘要： hbase优化 1. 表的设计1.1 Pre-Creating Regions默认情况下，在创建HBase表的时候会自动创建一个region分区，当导入数据的时候，所有的HBase客户端都向这一个region写数据，直到这个region足够大了才进行切分。一种可以加快批量写入速度的方法是通过预先创建 阅读全文

摘要： 伪分布式1.hbase-env.sh中配置JAVA_HOME2.配置hbase-site.xml如下<property><name>hbase.rootdir</name><value>file:///home/testuser/hbase</value></property><property>< 阅读全文

摘要： DDL语句desc formatted psn; create table psn(id int,name string,likes array<string>,address map<string,string>)row format delimitedfields terminated by ' 阅读全文

摘要： hive三种方式区别和搭建Hive中metastore（元数据存储）的三种方式：a)内嵌Derby方式b)Local方式c)Remote方式1.本地模式（derby）这种方式是最简单的存储方式，只需要在hive-site.xml做如下配置便可<?xml version="1.0"?> <?xml-s 阅读全文

摘要： storm通讯机制初解 Worker间的通信经常需要通过网络跨节点进行，Storm使用ZeroMQ或Netty(0.9以后默认使用)作为进程间通信的消息框架。 Worker进程内部通信：不同worker的thread通信使用LMAX Disruptor来完成。 不同topologey之间的通信，St 阅读全文

摘要： 1. storm如何保障消息的完全处理？每当spout生成一个tuple元组时,将一个字符串作为锚点传入ack方法并调用ack方法,将该tupleid与ack方法中的64位二进制码进行异或运算,ack方法会在每个bolt处理完tuple元组和生成新的tuple元组时调用ack方法,进行异或运算,当该 阅读全文

摘要： 单节点搭建环境准备：Java 6+Python 2.6.6+上传、解压安装包在storm目录中创建logs目录mkdir logs./storm help启动Zookeeper./bin/storm dev-zookeeper >> ./logs/zk.out 2>&1 &启动Nimbus./bin 阅读全文