摘要： 1.BCB模式是需要设置iv偏移量和Key值，这两个值就像账号和密码一样，当这两个值一致时才能确保加密和解密的数据一致。（ps:这两个值千万不能暴露出去哦！） 2.JAVA版本代码： 这里的iv偏移量：1234567812345678 key：1234567812345678 1 import or 阅读全文

摘要： 阿里云oss对象存储配置CDN 1.打开阿里云CDN 2.填写信息，这个地方要注意，我的备案域名是www.ljwXXX.work,我们可以自定义一个域名，test.ljwXXX.work作为加速域名。 3.添加成功后到域名解析列表设置相关信息，到这一步还没有完全成功的！ 4.去到阿里云的域名解析，添 阅读全文

摘要： 使用ip代理业务用例 1.使用精灵代理（http://www.jinglingdaili.com/Shop-index.html），通过Api获取，每次返回一个固定时间（五分钟）的IP，然后将获取到的ip存入mongoDB数据库使用。 2.每次调用爬虫的时候，都会从数据库中拿到代理ip。①若ip失效 阅读全文

摘要： 一、键值对RDD的创建 1、从文件中加载 /opt目录下创建wordky.txt文件。 wordky.txt文件中输入以下三行字符： Hadoop is good Spark is fast Spark is better 使用map（）函数转换得到相应的键值对RDD并输出： 2、从列表中创建键值对 阅读全文