摘要: 1. 目标 使用Flink读取Kafka数据并实时写入Hive表。 2. 环境配置 EMR环境:Hadoop 3.3.3, Hive 3.1.3, Flink 1.16.0 根据官网描述: https://nightlies.apache.org/flink/flink-docs-release-1 阅读全文
posted @ 2023-08-29 21:03 ZacksTang 阅读(570) 评论(0) 推荐(0) 编辑
摘要: 1. Dreambooth Dreambooth可以把你任何喜欢的东西放入Stable Diffusion模型。 1.1. 什么是Dreambooth 最初由谷歌在2022年发布,是对SD模型的fine-tune技术。可以把自己喜欢的东西注入到SD模型中。 为什么称为Dreambooth?根据谷歌团 阅读全文
posted @ 2023-04-16 22:52 ZacksTang 阅读(2998) 评论(2) 推荐(0) 编辑
摘要: 1. 前言 基于 https://stable-diffusion-art.com/ 内的教程进行翻译与整理,帮助快速上手 stable-diffusion 的使用。 2. 环境 AWS DeepLearning AMI 3. 部署Stable Diffusion web UI Web UI git 阅读全文
posted @ 2023-04-16 22:52 ZacksTang 阅读(10436) 评论(0) 推荐(0) 编辑
摘要: Stable Diffusion原理 此文为译文,原文见: https://stable-diffusion-art.com/how-stable-diffusion-work/ Stable Diffusion是一个深度学习模型,我们会深入解析SD的工作原理。 1. Stable Diffusio 阅读全文
posted @ 2023-04-16 22:12 ZacksTang 阅读(4738) 评论(1) 推荐(0) 编辑
摘要: AWS平台搭建 DolphinScheduler DolphinScheduler 是当前热门的调度器,提供了完善的可视化、拖拉拽式的调度。在 AWS 平台上提供了 airflow 与 step function 这两种调度工具,但两者在可视化操作上的支持较为有限,无法满足所有AWS用户场景。有部分 阅读全文
posted @ 2022-06-15 23:29 ZacksTang 阅读(742) 评论(0) 推荐(0) 编辑
摘要: 从头开始训练一个BERT模型是一个成本非常高的工作,所以现在一般是直接去下载已经预训练好的BERT模型。结合迁移学习,实现所要完成的NLP任务。谷歌在github上已经开放了预训练好的不同大小的BERT模型,可以在谷歌官方的github repo中下载[1]。 以下是官方提供的可下载版本: 其中L表 阅读全文
posted @ 2021-10-09 23:13 ZacksTang 阅读(19836) 评论(2) 推荐(8) 编辑
摘要: 1. BERT简介 Transformer架构的出现,是NLP界的一个重要的里程碑。它激发了很多基于此架构的模型,其中一个非常重要的模型就是BERT。 BERT的全称是Bidirectional Encoder Representation from Transformer,如名称所示,BERT仅使 阅读全文
posted @ 2021-09-30 20:35 ZacksTang 阅读(11099) 评论(0) 推荐(1) 编辑
摘要: 1. Prometheus和Grafana集成 Grafana是一款采用Go语言编写的开源应用,主要用于大规模指标数据的可视化展现,是网络架构和应用分析中最流行的时序数据展示工具。目前已支持绝大部分常用的时序数据库。 下载地址为:https://grafana.com/grafana/downloa 阅读全文
posted @ 2021-09-24 22:45 ZacksTang 阅读(340) 评论(0) 推荐(0) 编辑
摘要: 1. Prometheus安装 官网:https://prometheus.io/ 下载地址:https://prometheus.io/download/ Prometheus基于Golang编写,编译后的软件包不依赖于任何第三方依赖。只需要下载对应平台的二进制包,解压并添加基本的配置即可正常启动 阅读全文
posted @ 2021-09-24 22:42 ZacksTang 阅读(2105) 评论(0) 推荐(0) 编辑
摘要: 1. Prometheus简介 Prometheus受启发于Google的Brogmon监控系统(类似kubernetes是从Google的Brog系统演变而来)。于2012年以开源形式发布,在2015年对外发布早期版本。2016年发布1.0版本,2017年发布基于全新存储层的2.0版本,能更好地与 阅读全文
posted @ 2021-09-24 18:54 ZacksTang 阅读(1185) 评论(0) 推荐(0) 编辑