摘要： 在yarn的web端，可见其单容器最大可分配的内存大小和核心大小。在部署时，默认其为4096MB内存和2个虚拟核心。 在实际生产环境中，会有服务器配备的核心数量远远大于日常任务调度中实际使用到的核心数量，为了提供任务的运行效率，可以适当提高容器的最大可分配虚拟核心数量，以提高任务的运行效率。 具体操 阅读全文

摘要： 两种数仓建模方式： https://zhuanlan.zhihu.com/p/362991213 Kimball维度建模详解： https://cloud.tencent.com/developer/article/1772027 数仓建模： https://zhuanlan.zhihu.com/p 阅读全文

摘要： 本次四个案例包括 import asyncio import time Example 1: sample async def task_print(): print('Hello...') await asyncio.sleep(1) print('...World!') Example 2: a 阅读全文

摘要： ubuntu: 一、基本操作 1、切换源： /etc/apt/sources.list 使用echo "{index of /ubuntu/}"> sources.list在此处添加源 添加指定源 { "registry-mirrors": [ "docker.m.daocloud.io/" ] } 阅读全文

摘要： 在VUE框架下使用vue-router来进行局部页面跳转 1、创建并绑定路由文件 2、在Vue文件下，使用路由来进行跳转 步骤如下： 1、创建并绑定路由文件 ①创建路由文件 在路径"./{prjName}/src/router"下创建router.ts文件 import { createRouter 阅读全文

摘要： 记录一下在使用蓝牙通信的时候遇到的关于client.DiscoverDevices()及解决办法。 在创建好BluetoothClient，使用DiscoverDevices()来获取周围的蓝牙设备的时候，出现了关于了类型转化的错误。 在查询官方的案例代码后，发现官方代码的使用方法和当前使用方法一致 阅读全文

摘要： C#练习：局域网内使用套接字进行信息传输 一、在C#创建套接字socketserver和cilent。 实现步骤: 1、创建SocketServer对象。 用于监听和返回信息。 ①创建socket对象用于SocketSever： socket的参数 地址族：AddressFamily.InterNe 阅读全文

摘要： 在数据处理方面，spark sql的处理速度优于hive sql 场景1：在数据条数为491条时，使用spark sql 和hive sql在中台处理的时间，分别用时9s和55s //使用的SQL语句 SELECT YEAR(update_time) AS year, month(update_ti 阅读全文

摘要： // 安装 mosquito mosquito-clients ubuntu： sudo apt install mosquitto mosquitto-clients centos yum install mosquitto mosquitto-clients 查看服务状态 sudo system 阅读全文

摘要： 因为requests模块中会调用utils.py中的websocket对指定地址进行连接，但是会优先使用IPV6，若指定的网站不支持IPV6，或自身电脑配置出错无法连接IPV6，则会造成连接超时，并再尝试连接IPV4。 通过再网络配置中将IPV6关闭，或是降低IPV6的优先级的方式，可以避免这个问题 阅读全文