2022年6月16日
4.3：flume+Kafka日志采集实验
摘要： 〇、目标 使用kafka和flume组合进行日志采集 拓扑结构 一、重启SSH和zk服务 打开终端，首先输入：sudo service ssh restart 重启ssh服务。之后输入下述命令开启zookeeper服务： zkServer.sh start 二、启动flume 输入cd /home/ 阅读全文
posted @ 2022-06-16 19:26 哥们要飞 阅读(138) 评论(0) 推荐(0)
4.2：Scrapy爬虫
摘要： 使用Scrapy框架对网站的内容进行爬取 在桌面处打开终端，并在终端中输入： scrapy startproject bitNews cd bitNews/bitNews 修改items文件的内容，输入vim items.py按 i 进行编辑，将其中的代码修改为： # -*- coding: utf 阅读全文
posted @ 2022-06-16 16:44 哥们要飞 阅读(28) 评论(0) 推荐(0)
4.1：简单python爬虫
摘要： 简单python爬虫 在创建的python文件中输入下列代码： # coding:utf-8 import requests from bs4 import BeautifulSoup def spider(url,headers): with open('renming.txt', 'w', en 阅读全文
posted @ 2022-06-16 16:20 哥们要飞 阅读(77) 评论(0) 推荐(0)
【SQL真题】SQL3：每类视频近一个月的转发量/率
摘要： 题目： https://www.nowcoder.com/practice/a78cf92c11e0421abf93762d25c3bfad?tpId=268&tqId=2285068&ru=/exam/oj&qru=/ta/sql-factory-interview/question-rankin 阅读全文
posted @ 2022-06-16 11:04 哥们要飞 阅读(62) 评论(0) 推荐(0)