摘要: 1. 环境配置(Spark伪分布式安装) 1.1 虚拟机配置 处理器:4核 内存:4G 硬盘:40G 用户名:spark 主机名:ubuntu-vm 操作系统:Ubuntu 22.04.5-desktop 1.2 apt换源 sudo mv /etc/apt/sources.list /etc/ap 阅读全文
posted @ 2025-11-29 21:34 faf4r 阅读(24) 评论(0) 推荐(0)
摘要: Hadoop实验 1. Hadoop安装配置 1.1 单机版 1.1.1下载安装 浏览器前往https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/,下载hadoop-3.3.6.tar.gz ,默认下载到~/Downloads文件夹。使用 阅读全文
posted @ 2025-11-10 16:15 faf4r 阅读(34) 评论(0) 推荐(0)
摘要: Image uploader for Typora 基于博客园和xmlrpc的Typora图片上传脚本,项目可在GitHub查看:faf4r/image-uploader-for-typora Description 在Typora中插入的图片都是本地图片,对于本地保存很不错,但要想分享文档时就很麻 阅读全文
posted @ 2025-10-18 21:03 faf4r 阅读(10) 评论(0) 推荐(0)
摘要: 用户与项目管理 创建用户与项目 cd ~ source keystonerc_admin # 应用需要的环境变量,获取权限以便后续操作 openstack project create cec # 创建项目 openstack user create --domain default --passw 阅读全文
posted @ 2025-10-07 21:36 faf4r 阅读(24) 评论(0) 推荐(0)
摘要: 1. 虚拟机配置 1.1 生成动态IP地址 centos默认未启用DHCP服务,使用dhclient请求动态IP地址,临时获取网络连接能力,以进一步配置。此处请求到动态IP地址192.168.26.128/24。 1.2 配置静态IP地址 OpenStack服务依赖固定IP地址,配置静态IP地址可保 阅读全文
posted @ 2025-10-07 21:35 faf4r 阅读(84) 评论(0) 推荐(0)
摘要: python解释器runtime嵌入 背景介绍 最近遇到个项目Windrecorder,感觉挺有趣想试试,但是该项目没有打包好的软件,只能使用源码运行,最主要的是项目不支持python3.12、推荐3.11,恰好我的系统环境是python3.12,平时也经常使用,不想为了这个项目将系统环境改为3.1 阅读全文
posted @ 2025-07-02 02:44 faf4r 阅读(93) 评论(0) 推荐(0)
摘要: scrapy运行机制 详见Architecture overview 安装 直接pip install scrapy即可 使用 命令行 scrapy startproject name命令创建一个新的Scrapy项目 scrapy crawl SpiderName命令运行爬虫 scrapy runs 阅读全文
posted @ 2024-10-11 19:35 faf4r 阅读(85) 评论(0) 推荐(0)
摘要: jupyter notebook的一些常用使用技巧 阅读全文
posted @ 2024-09-26 18:55 faf4r 阅读(81) 评论(0) 推荐(0)
摘要: 刷题时用到reversed遍历,便想知道与range遍历相比哪个更快。 结论是reversed和直接遍历没区别 阅读全文
posted @ 2024-09-24 23:34 faf4r 阅读(34) 评论(0) 推荐(0)
摘要: 使用Python内置的defaultdict和Counter能方便的实现计数等操作 阅读全文
posted @ 2024-09-15 14:05 faf4r 阅读(49) 评论(0) 推荐(0)