08 2019 档案
摘要:一、连接VPN时异常 不能建立到远程计算机的连接。你可能需要更改此连接的网络设置。 二、解决办法 1、选择设备管理器 2、找到网络适配器 3、将网络设备器中WAN开头的右键点击卸载设备 4、然后右键网络适配器点击扫描检测硬件改动 5、等WAN 恢复过来 6、然后重新连接VPN即可。 二、连上VPN,
阅读全文
摘要:描述:将HDFS副本数修改为2第一步:将HDFS上已有文件副本数修改为2 第二步:修改dfs.replication值为2(页面上操作),然后重启HDFShdfs-site.xml文件: 第三步:修改副本数之后进行核对 第四步、手动创建一个文件,上传至HDFS,观察其副本数如果副本数还是3,首先确认
阅读全文
摘要:一、什么是Flink? Apache Flink是一个面向分布式数据流处理和批量数据处理的开源计算平台,提供支持流处理和批处理两种类型应用的功能。 二、Flink特点 1、现有的开源计算方案,会把流处理和批处理作为两种不同的应用类型:流处理一般需要支持低延迟、Exactly-Once保证,而批处理一
阅读全文
摘要:一、查看HDFS下的参数信息 二、hdfs与dfs结合使用的参数信息 其他一些操作命令 说明:仅记录用于学习的指令。 1、追加文件内容到hdfs文件系统中的文件 2、查看hadoop的Sequencefile文件内容 3、使用df命令查看可用空间 [root@master ~]# hdfs dfs
阅读全文
摘要:一、将hive表数据查询出来转为json对象输出 1、将查询出来的数据转为一行一行,并指定分割符的数据 2、使用UDF函数,将每一行数据作为string传入UDF函数中转换为json再返回 1、准备数据 2、查询出来的数据转为一行一行,并指定分割符的数据 3、准备UDF函数 二、将hive表数据查询
阅读全文

浙公网安备 33010602011771号