Fork me on GitHub
上一页 1 2 3 4 5 6 7 8 9 10 ··· 17 下一页
摘要: 优秀可靠的数仓体系,需要良好的数据分层结构。合理的分层,能够使数据体系更加清晰,使复杂问题得以简化。以下是该项目的分层规划。 1 设计要点 (1)ODS层的表结构设计依托于从业务系统同步过来的数据结构 (2)ODS层要保存全部历史数据,故其压缩格式应选择压缩比较高的,此处选择gzip (3)ODS层 阅读全文
posted @ 2024-03-15 14:32 公众号-JavaEdge 阅读(65) 评论(0) 推荐(0) 编辑
摘要: 2024年3月4日,官方宣布推出 Claude 3 模型系列,它在广泛的认知任务中树立了新的行业基准。该系列包括三个按能力递增排序的最先进模型:Claude 3 Haiku、Claude 3 Sonnet 和 Claude 3 Opus。每个后续模型都提供越来越强大的性能,允许用户为其特定应用选择智 阅读全文
posted @ 2024-03-12 14:19 公众号-JavaEdge 阅读(170) 评论(0) 推荐(0) 编辑
摘要: 是的,\t 是指制表符(tab),它通常用作字段分隔符在 TSV(Tab-Separated Values)格式的文件中。TSV是一种简单的文本格式,它使用制表符来分隔每一列中的值,而每一行则代表一个数据记录。 TSV文件例: ID\tName\tAge\tCity 1\tJohn Doe\t28\ 阅读全文
posted @ 2024-03-11 22:15 公众号-JavaEdge 阅读(52) 评论(0) 推荐(0) 编辑
摘要: 两种用于优化查询性能的数据组织策略,数仓设计的关键概念,可提升Hive在读取大量数据时的性能。 1 分区(Partitioning) 根据表的某列的值来组织数据。每个分区对应一个特定值,并映射到HDFS的不同目录。 常用于经常查询的列,如日期、区域等。这样可以在查询时仅扫描相关的分区,而不是整个数据 阅读全文
posted @ 2024-03-10 20:26 公众号-JavaEdge 阅读(54) 评论(0) 推荐(0) 编辑
摘要: 1 LucidChart 一个基于HTML5的在线流程图绘制和协作应用平台,用户可以通过它方便快速的实现流程图表的绘制,同时还可以实现与他人进行实时的流程图绘制和修改功能,对需要群组协作功能的团队来说,这点非常方便。 由于LucidChart是基于HTML5开发,因此用户不需要下载本地应用程序,通过 阅读全文
posted @ 2024-03-07 22:54 公众号-JavaEdge 阅读(149) 评论(0) 推荐(0) 编辑
摘要: 关注我,紧跟本系列专栏文章,咱们下篇再续! 作者简介:魔都技术专家兼架构,多家大厂后端一线研发经验,各大技术社区头部专家博主。具有丰富的引领团队经验,深厚业务架构和解决方案的积累。 负责: 中央/分销预订系统性能优化 活动&优惠券等营销中台建设 交易平台及数据中台等架构和开发设计 目前主攻降低软件复 阅读全文
posted @ 2024-03-07 11:04 公众号-JavaEdge 阅读(40) 评论(0) 推荐(0) 编辑
摘要: 1 容器生命周期管理 1.1 docker start 启动一或多个已被停止的容器。 # 启动已被停止的容器myrunoob docker start myrunoob 1.2 docker stop 停止一个运行中的容器 docker stop myrunoob 1.3 docker restar 阅读全文
posted @ 2024-03-05 10:23 公众号-JavaEdge 阅读(101) 评论(0) 推荐(0) 编辑
摘要: 0 前言 机票查询系统,日均亿级流量,要求高吞吐,低延迟架构设计。提升缓存的效率以及实时计算模块长尾延迟,成为制约机票查询系统性能关键。本文介绍机票查询系统在缓存和实时计算两个领域的架构提升。 1 机票搜索服务概述 1.1 机票搜索的业务特点 机票搜索业务:输入目的地,然后点击搜索,后台就开始卷了。 阅读全文
posted @ 2024-03-04 23:34 公众号-JavaEdge 阅读(60) 评论(0) 推荐(0) 编辑
摘要: 1 服务发现的意义 为高可用,生产环境中服务提供方都以集群对外提供服务,集群里这些IP随时可能变化,也需要用一本“通信录”及时获取对应服务节点,这获取过程即“服务发现”。 对服务调用方和服务提供方,其契约就是接口,相当于“通信录”中的姓名,服务节点就是提供该契约的一个具体实例。服务IP集合作为“通信 阅读全文
posted @ 2024-03-03 19:34 公众号-JavaEdge 阅读(34) 评论(0) 推荐(0) 编辑
摘要: 0 背景 重运营的应用。对于App里的顶导航、我的页面、弹窗等,需要根据模式、版本、平台、语言、渠道等不同的维度进行运营管理。随着业务快速发展,版本快速迭代,如何: 保持运营资源能够被高效、稳定和灵活地配置 高效稳定的为新的运营需求提供支持 通过打造一个稳定、灵活、高效的运营配置平台来解决前面遇到的 阅读全文
posted @ 2024-02-25 22:12 公众号-JavaEdge 阅读(185) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 7 8 9 10 ··· 17 下一页