smiecj

摘要： 本文公众号地址 背景 公司目前在线上环境使用的是基于 HDP 2.6.3 搭建的大数据集群，在持续使用4年之后，是否要给集群做个升级成为了一个值得思考的问题 现在集群的 Hadoop 版本是 2.7.3，继续使用倒也没什么问题，但一些使用痛点还是着实存在的，并且每一点都扎根于这套架构，不做大的升级也 阅读全文

摘要： 背景 Jupyter 是兼备优秀的编程体验和交互体验的在线 IDE，它能让你的代码不再受限于自己的电脑环境，也不只是编程语言本身，而是可以结合数学公式、Markdown、命令行等各种语法和指令，在更高性能的服务器以更灵活的交互方式，随处运行，随时可见结果。也正因为这些特性，它在教学、大数据分析、机器 阅读全文

摘要： 场景 日语 意思 打招呼/询问 おはようございます 早上好 こんにちは 午安/你好 こんばんは 晚上好 おやすみなさい 晚安 どうぞ 请 ありがとうございます/どうも 谢谢 ごめんなさい 对不起 すみません 不好意思 どういたしまして 不客气 近くにおすすめのレストランはありますか 附近有推荐的饭店 阅读全文

摘要： v2ex 今日热榜 - rebang 下班倒计时 香港电台 你画我猜 阅读全文

摘要： 在互联网降本增效的氛围背景之下，我也接手了一个降本增效的大活: 对大数据集群进行“瘦身”，并把公有云上部署的集群迁移到公司机房，即从云上迁移到云下 从最终效果来看确实很明显，大数据集群基本迁移到云下，成本一年节省了40多万 好像又可以写一篇爽文了（我为什么要说又），但是不管是对我还是对一些用户来说， 阅读全文

摘要： @目录一、前言二、安装 docker desktop2.1 环境准备2.1.1 配置wsl2.1.2 注册一个 dockerhub 账号 和 国内云厂商 容器服务2.2 安装 Desktop2.3 Docker Desktop 的配置2.3.1 wsl 数据存储路径2.3.2 配置代理2.3.3 测 阅读全文

摘要： 背景 发现公司的项目部署上，经常出现数据库占用内存很高（接近6G）的情况，而且还出现了SWAP使用到90%左右的水平。所以需要排查数据库使用内存的情况，看数据库为什么使用了这么多内存，而且会不会频繁使用交换空间。 要解决的问题： 数据库使用高内存 数据库使用SWAP 解决 SWAP空间 在内存不够的 阅读全文

摘要： 背景介绍：探索golang 的单元测试框架，看一下哪种框架是结合业务体验更好的。 推荐 和 不推荐 使用的框架，我都会在标题中 标注出来，没有标注的表示体验一般，但也没有特别的缺点，观望态度 单元测试框架介绍 原生testing 示例 func TestModifyArr(t *testing.T) 阅读全文

摘要： 背景介绍 经过上一节 对单元测试框架的基本学习，我们已经掌握了 单元测试的基本写法 但是 对一个web 后台项目来说，往往需要依赖一些基础服务（数据库、缓存等），实际生产环境当然是要连接这些基础服务的，但是测试环境不一定能连通这些服务（测试环境最好是要能），因此编写mock 也是一个比较必要的过程。 阅读全文

摘要： 移动web最后的大作业我们组做的是实现类似新浪微博的功能。基本功能包括修改个人信息、发微博、看微博和回复数据库设计微博。我认为整个工程可以分为数据库设计、前台HTML、JSP和CSS开发、后台JavaScript设计。下面就依次看这几个部分 数据库设计 用户类：登录不看微博的用户，个人属性包括用户i 阅读全文