打赏
摘要: http://www.runoob.com/linux/linux-shell.html 第一章、linux 的介绍和安装1.1 linux 操作系统介绍 linux 的创始人 Linus torvalds。 linux 与 GNU 和 minix linux 与 windows linux 与 u 阅读全文
posted @ 2016-11-09 20:44 大数据和AI躺过的坑 阅读(1892) 评论(0) 推荐(0)
摘要: Linux 介绍 内核 库: .so 共享对象,windows:dll 动态链接库 应用程序 Linux的基本原则:1、由目的单一的小程序组成;组合小程序完成复杂任务;2、一切皆文件;3、尽量避免捕获用户接口;4、配置文件保存为纯文本格式; 用户接口GUI接口:CLI接口: 命令提示符,prompt 阅读全文
posted @ 2016-11-09 19:48 大数据和AI躺过的坑 阅读(535) 评论(0) 推荐(0)
摘要: 软件安装和管理软件包1、bin文件.bin2、rpm包3、源码压缩包 安装软件的步骤: 1、检查是否已经安装 rpm -qa | grep jdk 2、下载软件包 3、安装 依赖 rpm 包,已经编译之后的应用程序。 rpm命令: 1、安装rpm -i /PATH/TO/PACKAGE_FILE - 阅读全文
posted @ 2016-11-09 19:46 大数据和AI躺过的坑 阅读(372) 评论(0) 推荐(0)
摘要: 前言 使用默认的Kali Linux设置来学习是可以的,但是我们通常要修改系统的一些基本设置,来最大化使用Kali平台的功能。 以下内容 网络的基础知识 使用图形用户界面来配置网卡 使用命令行来配置网卡 使用图形用户界面来配置网卡 使用命令行来配置无线网卡 启动、停止和重启Apache服务器 安装F 阅读全文
posted @ 2016-11-09 17:48 大数据和AI躺过的坑 阅读(19672) 评论(0) 推荐(0)
摘要: 写在前面的话 能看懂此博客的朋友,深信你有一定的Kali基础了。 使用APT软件包处理工具(apt-get)、Debian软件包管理器(dpkg)来维护、升级和安装自定义及第三方应用程序 APT软件包处理工具(apt-get) APT软件包处理工具是一个轻量级但功能强大的命令行工具,用于安装和删除软 阅读全文
posted @ 2016-11-09 16:45 大数据和AI躺过的坑 阅读(3754) 评论(0) 推荐(0)
摘要: 安装Kali里的应用程序或软件包 安装额外的软件是apt-get命令最基本的功能了,命令非常简单易懂。安装软件包的语法如下: apt-get install 软件包名 比如,安装图像编辑软件gimp,则apt -get install gimp。 更新 每时每刻都要检查软件源,或软件库,以获得安装在 阅读全文
posted @ 2016-11-09 16:28 大数据和AI躺过的坑 阅读(5705) 评论(0) 推荐(0)
摘要: 为什么需要渗透测试? 答:如果不能确定防火墙、IDS、文件完整性监控等风险减缓控制的实际效果,那么就应当进行渗透测试。虽然漏洞扫描(脆弱性评估)能够发现各个漏洞,但是渗透测试则会验证这些漏洞在实际环境里被利用的可能性。 标准的渗透测试 .事前互动 .情报收集 .威胁建模 .漏洞分析 .漏洞利用 .深 阅读全文
posted @ 2016-11-09 16:22 大数据和AI躺过的坑 阅读(579) 评论(0) 推荐(0)
摘要: Kali Linux是什么? Kali Linux是一个渗透测试平台兼安全审计平台,它集成了多款漏洞检测、目标识别和漏洞利用工具。 Kali Linux是专门用于渗透测试的Linux操作系统;基于Debian的linux发行版;集成300多个渗透测试程序;支持绝大多数的无线网卡;修改了内核以支持(无 阅读全文
posted @ 2016-11-09 16:21 大数据和AI躺过的坑 阅读(703) 评论(0) 推荐(0)
摘要: 原博文出自于: http://blog.csdn.net/oopsoom/article/details/39401391 感谢! Spark1.1推出了Uer Define Function功能,用户可以在Spark SQL 里自定义实际需要的UDF来处理数据。 因为目前Spark SQL本身支持 阅读全文
posted @ 2016-11-09 16:10 大数据和AI躺过的坑 阅读(7006) 评论(0) 推荐(0)
摘要: 原博文出自于:http://blog.csdn.net/longzilong216/article/details/23921235(暂时) 感谢! 自己写代码时候的利用到的模板 UDF步骤: 1.必须继承org.apache.hadoop.hive.ql.exec.UDF 2.必须实现evalua 阅读全文
posted @ 2016-11-09 12:19 大数据和AI躺过的坑 阅读(3620) 评论(0) 推荐(1)
摘要: 原博文出自于: http://blog.csdn.net/liuj2511981/article/details/8523084 感谢! Hive进行UDF开发十分简单,此处所说UDF为Temporary的function,所以需要hive版本在0.4.0以上才可以。一、背景: Hive是基于Had 阅读全文
posted @ 2016-11-09 12:15 大数据和AI躺过的坑 阅读(1057) 评论(0) 推荐(0)
摘要: 原博文出自于: http://blog.csdn.net/book_mmicky/article/details/25714049 感谢! 1:上www.mysql.org下载64位版本mysql5.6.12 (MySQL-5.6.12-1.el6.x86_64.rpm-bundle.tar)。 2 阅读全文
posted @ 2016-11-09 11:26 大数据和AI躺过的坑 阅读(264) 评论(0) 推荐(0)
摘要: 原博文出自于: http://sanwen.net/a/gqkotbo.html 感谢! 来源:数盟 调优概述 有的时候,我们可能会遇到大数据计算中一个最棘手的问题——数据倾斜,此时Spark作业的性能会比期望差很多。数据倾斜调优,就是使用各种技术方案解决不同类型的数据倾斜问题,以保证Spark作业 阅读全文
posted @ 2016-11-09 11:23 大数据和AI躺过的坑 阅读(966) 评论(0) 推荐(0)
摘要: 原博文出自于: http://blog.csdn.net/pengych_321/article/details/52014249#comments 感谢! 场景 好的,假设项目数据调研与需求分析已接近尾声,马上进入Coding阶段了,辣么在Coding之前需要干马呢?是的,“统一开发工具、开发环境 阅读全文
posted @ 2016-11-09 11:14 大数据和AI躺过的坑 阅读(2292) 评论(0) 推荐(0)
摘要: 前言 第1章 为什么Spark SQL? 第2章 Spark SQL运行架构 第3章 Spark SQL组件之解析 第4章 深入了解Spark SQL运行计划 第5章 测试环境之搭建 第6章 Spark SQL之基础应用 第7章 ThriftServer和CLI 第8章 Spark SQL之综合应用 阅读全文
posted @ 2016-11-09 10:39 大数据和AI躺过的坑 阅读(934) 评论(0) 推荐(0)
摘要: 前言 Spark MLlib是Spark对常用的机器学习算法的实现库,同时包括相关的测试和数据生成器。 阅读全文
posted @ 2016-11-09 09:33 大数据和AI躺过的坑 阅读(1079) 评论(0) 推荐(0)