会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
BI, AI, 大数据学习
心若有所向往,何惧道阻且长; 但愿每一个人都像星星一样安详而从容的,不断沿着既定的目标走完自己的路程.
博客园
首页
新随笔
联系
订阅
管理
2024年12月10日
为什么IT部门感觉没有10年前受重视?
摘要: IT部门地位感觉为什么没有10年前受重视?大部分摘自: 企业IT部门信任危机及CIO应对策略 各种必须的软件已经上线,并且基本稳定运行: ERP,MES, HRM etc 技术快速发展,IT团队适应性不足, 技能老化,人才短缺 : IT主要精力是负责系统维护,在应对新技术如云计算,大数据,人工智能时
阅读全文
posted @ 2024-12-10 14:49 ZH谢工
阅读(61)
评论(0)
推荐(0)
2024年10月22日
3. 从0到1搭建DeltaLake大数据平台 - 安装配置Hadoop
摘要: 要在已经安装好Spark的集群上配置YARN(Yet Another Resource Negotiator),你可以按照以下步骤进行: 1. 安装 Hadoop 1.1 下载 Hadoop YARN是Hadoop的一部分,因此首先需要安装Hadoop。你可以从Apache Hadoop的官方网站下
阅读全文
posted @ 2024-10-22 11:14 ZH谢工
阅读(118)
评论(0)
推荐(0)
2024年10月18日
2. 从0到1搭建DeltaLake大数据平台 - 配置Spark集群
摘要: 1. 配置Master vi $SPARK_HOME/conf/spark-env.sh export SPARK_MASTER_HOST=192.168.130.126 export SPARK_MASTER_PORT=7077 export SPARK_WORKER_CORES=2 export
阅读全文
posted @ 2024-10-18 08:50 ZH谢工
阅读(75)
评论(0)
推荐(0)
2024年10月16日
1. 从0到1搭建DeltaLake大数据平台 - Spark安装
摘要: 1. 下载VMWare, 安装CentOS9虚拟机 2. 配置用户,创建目录 2.1. 以管理员身份登录,创建Spark用户给Spark使用 sudo adduser sparkuser 2.2. 修改新用户密码 (123456) sudo passwd sparkuser 2.3. 给新用户Spa
阅读全文
posted @ 2024-10-16 19:00 ZH谢工
阅读(119)
评论(0)
推荐(0)
2023年12月25日
提高自己方法
摘要: 摘自 - 左耳听风 特长。首先你要找得到自己特长。你要认识自己的特长,找到自己的天赋,找到你在DNA里比别人强的东西,就拿你的DNA跟别人竞争就好了。所以你要找到自己可以干成的事,找到别人找你请教的事,你身边人找你请教就是说明你有特长。这是找到自己特长非常非常重要,扬长避短。 兴趣。如果你没有找到自
阅读全文
posted @ 2023-12-25 13:46 ZH谢工
阅读(46)
评论(0)
推荐(0)
2023年8月22日
数据分析类型
摘要:
阅读全文
posted @ 2023-08-22 13:49 ZH谢工
阅读(46)
评论(0)
推荐(0)
2023年3月9日
大数据平台建设实践
摘要: 一 大数据平台建设背景 笔者所在公司,经过多年的信息化建设,关键的业务都已经实施了IT系统,例如MES, EAP, ERP等。 但是数据的使用还停留在初级阶段,几乎所有生产相关的KP报表都是手工创建。管理层认为,大量的历史数据存储需要付出成本,但是没有去挖掘数据背后的价值,对于公司来说,数据分析是个
阅读全文
posted @ 2023-03-09 14:19 ZH谢工
阅读(81)
评论(0)
推荐(0)
BI需求分析
摘要: 1. 需求项 分析维度:时间维度(粒度:年,月,周,日,时 等),产品维度,机器维度 分析值KPI: 数据来源: 公式计算: 展示形式: 穿透分析:横向穿透,纵向穿透 2. 需求格式 可以考虑标准化报表编号,便于以后的管理。例如 BE 的标准报表可以按照一下规则编号: R101, R102 本地报表
阅读全文
posted @ 2023-03-09 14:17 ZH谢工
阅读(122)
评论(0)
推荐(0)
2023年2月27日
制造业常用KPI
摘要: 1. 质量KPI CA (Capability of Accuracy): 平均值距离期望中心值的距离,值越大,说明平均值越接近期望中心值。 Ca=(X-U)/(T/2) CP (Capability of precision):衡量参数值分散还是集中,值越大,说明测量得到的参数值越集中。 CPK
阅读全文
posted @ 2023-02-27 17:28 ZH谢工
阅读(163)
评论(0)
推荐(0)
2023年2月22日
大数据成熟度模型
摘要: 1. 数据自动化 虽然现在信息化都已经实现了大部分数据都有应用系统,但是仍旧有大量的外部数据,例如维护在Excel里,这些数据都是手工维护,缺乏校验,没有按时定期更新。这些数据需要花费大量时间进行处理。 2. 报表和数据可视化 3. 数据和业务融合 数据分析结果反馈回业务系统,作为业务系统关键输入。
阅读全文
posted @ 2023-02-22 15:48 ZH谢工
阅读(78)
评论(0)
推荐(0)
下一页
公告