会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
AllenService
博客园
首页
新随笔
联系
订阅
管理
2019年12月27日
Spark任务执行流程
摘要: spark submit启动到Application执行过程大致分为两个阶段,一个是注册阶段:Driver、Application、worker的注册;另一个是任务的调度、分配、执行阶段:DagScheduler对stage的划分、TaskScheduler对TaskSets的分配以及Executo
阅读全文
posted @ 2019-12-27 13:14 AllenService
阅读(1339)
评论(0)
推荐(0)
2019年12月26日
Flink实时风控
摘要: 典型的风控场景包括:注册风控、登陆风控、交易风控、活动风控等,而风控的最佳效果是防患于未然,所以事前事中和事后三种实现方案中,又以事前预警和事中控制最好。 系统架构 业务系统 风控系统,为业务系统提供支持,根据业务系统传来的数据或埋点信息来判断当前用户或事件有无风险; 惩罚系统,业务系统根据风控系统
阅读全文
posted @ 2019-12-26 20:49 AllenService
阅读(2404)
评论(0)
推荐(0)
公告