摘要：Python 自带的 HTTP Server 模块的最大优势在于不需要任何额外的配置工作。如何使用 Python HTTP Server？在命令行中，进入到需要通过浏览器访问的目录中，然后输入：python -m SimpleHTTPServer [port]默认的端口是 8000，成功之后，会看到... 阅读全文

摘要：hive 中的复杂类型包括 array（数组）、map（字典）、struct（结构体）等，下面分别介绍。array1. 创建临时表hive -e "use dataalgo; create table cb_array_test(citeid int, order_id_list array) ro... 阅读全文

摘要：hive 提供了通过脚本定制 mapper 和 reducer 的功能，这一功能需要用到 transform 函数。默认情况下， transform 函数中带入的参数会被用 '\t 分隔开，并且以字符串对方式传入到用户脚本中。输入中 NULL 值会被转换成字符串 '\N'。脚本的输出使用的分隔符也是... 阅读全文

摘要：公司内部，为了安全起见，经常会把开发机和线上机从网络上面分离开，有时候出于排查问题，需要通过跳板机连接到线上数据库。这里提供一种通过ssh连接的方法。在本地开发机上面执行：ssh -v -N user@proxyhost -L 12345/targethost/3308这条命令的目的在于，在本地 ... 阅读全文