随笔分类 -  阿里云

阿里云自动化
摘要:命令和api添加安全组规则: https://help.aliyun.com/document_detail/25485.html?spm=a2c4g.11174283.6.1184.250c52feWPzTUz#title-dpl-8fy-mjt https://help.aliyun.com/d 阅读全文

posted @ 2020-02-15 15:54 锋锋2019 阅读(123) 评论(0) 推荐(0)

EMR默认ldap配置
摘要:官网: https://help.aliyun.com/document_detail/62675.html?spm=5176.11065259.1996646101.searchclickresult.3f03c8e7LDHk9O&aly_as=WO9lToO- 新建emr集群,集群默认是 Apa 阅读全文

posted @ 2020-02-05 21:12 锋锋2019 阅读(784) 评论(0) 推荐(0)

阿里云日常管理和链接
摘要:阿里云帐号里:企业 >有个资源管理,财务管理 https://resourcemanager.console.aliyun.com/resource-directory 命令和api添加安全组规则: https://help.aliyun.com/document_detail/25485.html 阅读全文

posted @ 2020-01-19 10:36 锋锋2019 阅读(174) 评论(0) 推荐(0)

智能网关
摘要:参考: https://help.aliyun.com/document_detail/93671.html?spm=a2c4g.11186623.6.663.6b8c5c55IO9cPK 配置步骤: 1、SAG加入CCN,并且配置线下路由同步方式; 2、CCN加入CEN; 我看现在CCN没有加上, 阅读全文

posted @ 2020-01-17 20:47 锋锋2019 阅读(236) 评论(0) 推荐(0)

云企业网
摘要:参考: https://help.aliyun.com/document_detail/59870.html?spm=5176.10692594.0.0.4f0f4476Ynd0jg 把阿里的各个vpc连接起来的VPC间,VPC与本地数据中心间搭建私网通信通道 阅读全文

posted @ 2020-01-17 20:43 锋锋2019 阅读(130) 评论(0) 推荐(0)

EMR的hive包升级和gateway启动hs2
摘要:升级: mkdir /opt/apps/hivecd /opt/apps/hivewget http://emr.oss-cn-hangzhou.aliyuncs.com/ecm-repo/hive/opay/apache-hive-2.3.5-bin.tar.gzmd5sum apache-hiv 阅读全文

posted @ 2019-12-30 16:55 锋锋2019 阅读(478) 评论(0) 推荐(0)

EMR目录
摘要:EMR链接: 手动重启服务: E-MapReduce 集群运维指南 https://help.aliyun.com/document_detail/54465.html?spm=5176.11065259.1996646101.searchclickresult.67745bbe5lSLPA 例:批 阅读全文

posted @ 2019-12-21 18:34 锋锋2019 阅读(589) 评论(0) 推荐(0)

EMR问题
摘要:参考: https://dbaplus.cn/news-11-1983-1.html 解题思路: 查看服务状态, 运行测试用例,查看报错信息和服务日志. /mnt/disk1/log/xxx 搜索网上资料和官网,无果提交阿里后台。 1/连接参数 hive.server2.thrift.min.wor 阅读全文

posted @ 2019-12-20 16:20 锋锋2019 阅读(1259) 评论(0) 推荐(0)

权限管理ranger
摘要:参考: https://help.aliyun.com/document_detail/66410.html?spm=5176.11065259.1996646101.searchclickresult.1603776cRVFb03 Apache Ranger提供集中式的权限管理框架,可以对Hado 阅读全文

posted @ 2019-12-15 17:56 锋锋2019 阅读(1482) 评论(0) 推荐(0)

EMR-LDAP配置
摘要:usersync是负责在配置policy的时候可选用户有ldap里的用户,admin是负责登录webui的 https://cwiki.apache.org/confluence/display/RANGER/Configure+Ranger+UserSync+for+LDAP 配置: SYNC_L 阅读全文

posted @ 2019-12-09 14:28 锋锋2019 阅读(685) 评论(0) 推荐(0)

阿里redis
摘要:参考: 连接: https://help.aliyun.com/document_detail/43848.html?spm=a2c4g.11186623.2.29.295542efrNOQy0 同RDS: 需设置白名单和安全组才能访问: #注意,如果不需要帐号密码登录,这需要关闭: #如需要帐号密 阅读全文

posted @ 2019-12-07 20:44 锋锋2019 阅读(300) 评论(0) 推荐(0)

EMR日常操作
摘要:1/ 数据root密码修改后emr配置修改: 2/ 添加s3访问 S3:hadoop-aws-2.8.5.jarjar -tfv hadoop-aws-2.8.5.jar |grep S3FileSystem/usr/lib/hadoop-current/share/hadoop/tools/lib 阅读全文

posted @ 2019-12-05 11:05 锋锋2019 阅读(272) 评论(0) 推荐(0)

OSS
该文被密码保护。

posted @ 2019-11-25 16:34 锋锋2019 阅读(20) 评论(0) 推荐(0)

RAM
摘要:OSS的授权RAM: auth = oss2.Auth('<yourAccessKeyId>', '<yourAccessKeySecret>') RAM控制台: 在添加权限中添加oss full权限 阅读全文

posted @ 2019-11-25 16:23 锋锋2019 阅读(104) 评论(0) 推荐(0)

阿里RDS
摘要:白名单设置: 创建高权限帐号: 只能创建一个 创建数据库和帐号就在控制台的帐号管理和数据库管理做就行了. #有些参数设置只能在控制台的参数设置里做 #开RDS的外网地址后,需提供的访问RDS服务的外网地址, 加完白名单他才能访问.加白名单时选经典网络 阅读全文

posted @ 2019-11-19 16:57 锋锋2019 阅读(124) 评论(0) 推荐(0)

阿里EMR部署
摘要:选自定义购买: 选择master配置: 选择core配置: 下一步,选高级里在jdbc后填RDS的url, 用户名,密码: jdbc:mysql://rm-d7o7x76l11u0434zn.mysql.eu-west-1.rds.aliyuncs.com/hivemeta?createDataba 阅读全文

posted @ 2019-11-19 16:56 锋锋2019 阅读(354) 评论(0) 推荐(0)

站点初始化
摘要:站点初始化:1/ 建vpc:简单的方法是用默认的vpc和交换机建立一个ECS,就会让你选一个默认VPC和默认交换机 也可以自己建,规划好ip段:https://help.aliyun.com/document_detail/100380.html?spm=a2c4g.11186623.6.558.3 阅读全文

posted @ 2019-11-16 17:08 锋锋2019 阅读(177) 评论(0) 推荐(0)

阿里EMR原理
摘要:hadoop2.8.5: https://hadoop.apache.org/docs/r2.8.5/ 阿里文档: EMR里可以通过 Ranger组件来实现https://help.aliyun.com/document_detail/66410.html?spm=a2c4g.11186623.3. 阅读全文

posted @ 2019-11-09 18:15 锋锋2019 阅读(1056) 评论(0) 推荐(0)

导航