摘要: PyTorch分布式训练详解教程 scatter, gather & isend, irecv & all_reduce & DDP 本文将从零入手,简单介绍如何使用PyTorch中的多种方法进行分布式训练。 具体而言,我们将使用四种方法,分别是: (1)scatter, gatter; (2)is 阅读全文
posted @ 2020-10-05 06:52 天靖居士 阅读(12043) 评论(0) 推荐(3) 编辑
摘要: 记录一下配置多节点Hadoop和Spark的过程。 建立三个节点node,分别是node0,node1,node2.其中node0作为master节点。三台云虚拟机均为Ubuntu 16版本,Hadoop为3.1.4版本,Spark为2.4.7版本。 Hadoop 首先是下载和配置Hadoop. 第 阅读全文
posted @ 2020-09-18 04:07 天靖居士 阅读(455) 评论(0) 推荐(0) 编辑
摘要: 使用PyTorch跑pretrained预训练模型的时候,发现在加载数据的时候会报错,具体错误信息如下: 发现是字符编码出了问题。经过搜索相关问题,发现是因为pretrained的模型是在python2下训练的,而自己的环境则是python3,由于两者字符编码不兼容,使得预训练的模型不能加载进来。 阅读全文
posted @ 2019-06-21 11:12 天靖居士 阅读(3009) 评论(0) 推荐(1) 编辑
摘要: 最新版VS Code(2019年6月)出了一系列新的插件,包括Remote Development,Remote SSH等,使得用户可以使用VS Code远程连接服务器写代码,方便了协同工作。具体配置(Mac/Linux, Windows)操作如下: 1.首先,在插件市场中搜索这些插件,安装Remo 阅读全文
posted @ 2019-06-15 10:51 天靖居士 阅读(8706) 评论(0) 推荐(0) 编辑
摘要: Web GIS系列: 1. "搭建简易Web GIS网站:使用GeoServer+PostgreSQL+PostGIS+OpenLayers3" 2. "使用GeoServer+QGIS发布WMTS服务" 3. "使用GeoServer+OpenLayers发布和调用WMTS、Vector Tile 阅读全文
posted @ 2019-02-16 03:02 天靖居士 阅读(15773) 评论(0) 推荐(0) 编辑
摘要: 国内GIS/Cartography同行大部分使用CorelDraw绘制地图。相比之下,国外同行则更多使用Adobe Illustrator绘制地图。CorelDraw和Illustrator两个软件均为矢量图形制作软件,可以添加多种效果。两者的差异可以参考这个网页:https://www.admec 阅读全文
posted @ 2019-02-14 11:28 天靖居士 阅读(7445) 评论(0) 推荐(0) 编辑
摘要: PostgreSQL 速查、备忘手册 作者:汪嘉霖 这是一个你可能需要的一个备忘手册,此手册方便你快速查询到你需要的 常见功能 。有时也有一些曾经被使用过的高级功能。如无特殊说明,此手册仅适用于 Linux 下(但是许多也都可以在 Windows 下的 psql 命令窗运行),部分功能可能需要你的软 阅读全文
posted @ 2018-04-17 18:22 天靖居士 阅读(648) 评论(0) 推荐(0) 编辑
摘要: LIRE教程之源码分析 |LIRE Tutorial of Analysis of the Source Code 最近在做地理图像识别和检索的研究,发现了一个很好用的框架LIRE,遂研究了一通。网上的教程不算很多,而且LIRE更新比较快,一些方法已经更新或废弃,故想写几篇文章重新总结一下框架内的多 阅读全文
posted @ 2018-04-09 12:04 天靖居士 阅读(1869) 评论(6) 推荐(1) 编辑
摘要: 最近在使用GeoServer调用Vector Tile服务时,经常会显示不出来结果。打开浏览器调试台,发现报No 'Access Control Allow Origin' header is present on the requested resource这个错误。主要原因是不能跨域访问。例如服 阅读全文
posted @ 2017-11-23 14:46 天靖居士 阅读(10116) 评论(1) 推荐(0) 编辑
摘要: Web GIS系列: 1. "搭建简易Web GIS网站:使用GeoServer+PostgreSQL+PostGIS+OpenLayers3" 2. "使用GeoServer+QGIS发布WMTS服务" 3. "使用GeoServer+OpenLayers发布和调用WMTS、Vector Tile 阅读全文
posted @ 2017-11-23 14:19 天靖居士 阅读(19333) 评论(0) 推荐(0) 编辑