02 2021 档案

金融系统专题《二》——交易系统架构
摘要：事先申明，这篇文章想到哪就写到哪，最近两年没怎么碰金融口的东西了，生疏了。。。。 交易平台可是个大学问啊，例如电商平台就属于交易平台的一种，证券市场交易所系统也属于交易平台的一种，支付宝上面买理财也属于交易平台的一种，总之，有买卖的事件系统，都可以称之为一种交易平台。几年前，我就做过一个电商项目，面 阅读全文
posted @ 2021-02-17 16:16 杨兮臣 阅读(1074) 评论(0) 推荐(0)
权限管理——Shiro框架
摘要：一、权限管理 1.1 什么是权限管理 基本上涉及到用户参与的系统都要进行权限管理，权限管理属于系统安全的范畴，权限管理实现对用户访问系统的控制，按照安全规则或者安全策略控制用户可以访问而且只能访问自己被授权的资源。 权限管理包括用户身份认证和授权两部分，简称认证授权。对于需要访问控制的资源用户首先经 阅读全文
posted @ 2021-02-16 12:59 杨兮臣 阅读(428) 评论(0) 推荐(0)
架构专题《五》——异地多活【灾备1】
摘要：导读：作为大型运营商，结合身边的外包商（华为、亚信）等，平时和互联网朋友撸串拉呱的话题，灾备是必须的。灾备是个很大的话题，划分的维度也不同。异地多活，作为一种高可用部署架构，成为大中型互联网公司的选择。像大家熟知的大型互联网公司，如阿里、腾讯、百度、网易、新浪等等都已经完成了异地多活的技术重构。 可 阅读全文
posted @ 2021-02-15 17:59 杨兮臣 阅读(920) 评论(0) 推荐(0)
大数据专题《三》——回忆Spark
摘要：一、spark原理及知识体系 想必大家学习大数据的第一件工具就是Hadoop吧，无论是MR1，还是MR2，其实都是存在一些缺陷的，技术发展复合螺旋上升的趋势的，人类社会的发展也是如此。 基于磁盘，无论是MapReduce还是YARN都是将数据从磁盘中加载出来，经过DAG，然后重新写回到磁盘中。计算过 阅读全文
posted @ 2021-02-09 19:17 杨兮臣 阅读(143) 评论(0) 推荐(0)
大数据专题《二》——回忆Hive
摘要：一、Hive的知识体系 1.1、概念 Hive是由Facebook开源用于解决海量结构化日志的数据统计；Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射 成一张表，并提供类SQL查询功能，底层计算引擎默认为Hadoop的MapReduce（本质是将sql转化成mapreduc 阅读全文
posted @ 2021-02-09 16:40 杨兮臣 阅读(122) 评论(0) 推荐(0)
技术规范与开发规范
摘要：但凡管理过团队的人，都知道技术规范与开发规范的重要性，有些团队是leader会同架构人员制定，有些团队是由经验丰富的项目经理主导实施，有些团队是技术架构师自觉发起....总之，技术规范与开发规范是个非常重要的东西，做好了事半功倍，做不好的话，团队协作的话，就很卡顿了，例如，系统集成的时候，模块调用不 阅读全文
posted @ 2021-02-08 20:04 杨兮臣 阅读(568) 评论(0) 推荐(0)
大数据专题《一》——回忆Hadoop
摘要：Hadoop最重要的就是三大件了，能把三大件说明白就可以了，然后再说说生态圈即可。 Hadoop的三大核心组件分别是： HDFS（Hadoop Distribute File System）：hadoop的数据存储工具。 Hadoop MapReduce:分布式计算框架，记住是离线的计算框架 YAR 阅读全文
posted @ 2021-02-05 23:09 杨兮臣 阅读(123) 评论(0) 推荐(0)