摘要:一、背景 收到一个小需求,某项目会上传了很多图片,产品想看看用户上传的图片都是啥。 线上业务表里存了图片url和一些用户ID信息,需要将图片都下载下来并以日期_用户ID等信息命名。起初想的是先输hive服务器地址和账密,执行查询url等信息SQL存在列表里,再遍历列表挨个下载图片。然而我也不知道hi
阅读全文
随笔分类 - T2_Python
关于Python的一些知识,按爬虫、科学计算、网页架构、桌面服务四个部分来组织。
摘要:一、背景 收到一个小需求,某项目会上传了很多图片,产品想看看用户上传的图片都是啥。 线上业务表里存了图片url和一些用户ID信息,需要将图片都下载下来并以日期_用户ID等信息命名。起初想的是先输hive服务器地址和账密,执行查询url等信息SQL存在列表里,再遍历列表挨个下载图片。然而我也不知道hi
阅读全文
|