后山前堂客

摘要： mysql> select table_name, table_rows from information_schema.tables where TABLE_SCHEMA = 'xcdqm'; 阅读全文

摘要： mysql> select count(1) from xcdqm_store_purchase_total_amount_streaming into outfile '/tmp/xcdqm_store_purchase_total_amount_streaming.count'ERROR 129 阅读全文

摘要： set是无序、无重复元素的集合。 set和dict类似，也是一组key的集合，但不存储value。由于key不能重复，所以，在set中，没有重复的key。 1 通过list创建set，list中重复元素被过滤 2 通过remove(key)方法可以删除元素： 3 通过add(key)方法可以添加元素 阅读全文

摘要： Anaconda发行版默认带了Jupyter Notebook，默认的base环境中可直接使用，但是新创建的环境中，需要安装jupyter notebook。 在python36环境中安装并使用jupyter notebook： (python36) [@****:~]$ conda install 阅读全文

摘要： Anaconda 是一个用于科学计算的Python发行版，支持Linux、Mac和Windows系统，提供了包管理和环境管理的功能，便于解决多版本Python并存、切换以及各种第三方包安装问题。 Anaconda利用工具/命令conda来进行package和environment的管理，并且已经包含 阅读全文

摘要： 条件： 1 本机和腾讯云联通 2 本机和阿里云联通 步骤： 1 通过腾讯云的跳板机，将mysql中某个指定表的数据导出，并下载到本机（~/download），导出脚本如下： mysqldump -uroot -proot db_name table_name > /tmp/table_name.sq 阅读全文

摘要： 1 便于及时相应业务db的变化，ODS层应该使用外部表，业务DB变化，可以将ODS层表drop表，然后重建表，新增加字段，原始数据中没有的字段在新的外部表中为null 2 便于及时相应业务应用的变化，ADM也应该使用外部表，道理同上 3 为了便于数据的测试、数据代码逻辑的可维护性，应该避免写出很长、 阅读全文

摘要： 前期已经通过msyql客户端（黑窗口）修改了mysql的编码和字符集， mysql中已经可以插入emoji表情，但是通过数据同步（datax），从hive同步emoji表情到mysql报错： 解决方案： -- 修改mysql配置文件 vim /etc/my.cnf -- 添加如下内容 [client 阅读全文

摘要： 基于上一步的代码和POM，flink1.8.0， scala 2.11.12 本地运行代码一直可以（pom中flink相关依赖的scope修改为compile） 打成jar包提交到本地local模式集群上运行一直报错，如下： org.apache.flink.client.program.Progr 阅读全文

摘要： POM文件 <!-- Licensed to the Apache Software Foundation (ASF) under one or more contributor license agreements. See the NOTICE file distributed with thi 阅读全文