共 18 页: 上一页 1 2 3 4 5 6 下一页 末页
摘要:最近经常听到embedding技术,感觉很是困惑,所以写下此博客,对相关知识进行索引和记录: 参考链接: https://www.toutiao.com/a6690680620642730510/ graph embedding 技术学习 如何理解 Graph Convolutional Netwo 阅读全文
posted @ 2019-11-28 00:56 xuyaowen 阅读 (22) 评论 (0) 编辑
摘要:# 定时刷新 nvidia-smi 显示的结果 nvidia-smi -l 1 # 以 1 秒的频率进行刷新 nvidia-smi -lms 1 #以 1 毫秒的频率进行刷新 #保持更新,更多内容请关注 cnblogs.com/xuyaowen; 相关链接: https://www.cnblogs. 阅读全文
posted @ 2019-11-25 15:26 xuyaowen 阅读 (13) 评论 (0) 编辑
摘要:watch 能间歇地执行程序,并将输出结果以全屏的方式显示,默认时2s执行一次; watch -n 5 ping -c 1 www.baidu.com # 进行循环5秒钟,发送一次ping包; 使用范例: To watch for mail, you might do watch -n 60 fro 阅读全文
posted @ 2019-11-25 15:16 xuyaowen 阅读 (25) 评论 (0) 编辑
摘要:之前发现几张图对于linux使用者有着较强的参考意义,下面对其进行简单备忘: # linux 静态信息查看工具 # linux 性能测试工具 benchmark # linux 性能观测工具 # linux 性能调优工具 资源来源链接:http://www.brendangregg.com/linu 阅读全文
posted @ 2019-11-22 00:29 xuyaowen 阅读 (46) 评论 (0) 编辑
摘要:使用man手册的方式,能大大加快开发速度,可能安装的时候有些安装不完整,下面结合网络上搜索信息进行补充: $ sudo apt-get install manpages $ sudo apt-get install manpages-dev $ sudo apt-get install manpag 阅读全文
posted @ 2019-11-21 18:53 xuyaowen 阅读 (21) 评论 (0) 编辑
摘要:下面是在使用fuse3 编译bbfs 过程中一些参数,用于备忘: FUSE_CFLAGS="-I/usr/local/include/fuse3" FUSE_LIBS="-L/usr/local/lib/x86_64-linux-gnu -lfuse3 -lpthread -ldl" ./confi 阅读全文
posted @ 2019-11-20 01:17 xuyaowen 阅读 (21) 评论 (0) 编辑
摘要:常常会用到 zip 命令,但是时间一长,就忘记了具体参数,下面简要记录,进行备忘: 常用命令: zip -q -r nvprof_test_out.zip nvprof_test_out/ # 压缩 参数解析: 功能说明:压缩文件。 语 法:zip [-AcdDfFghjJKlLmoqrSTuvVw 阅读全文
posted @ 2019-11-18 15:48 xuyaowen 阅读 (26) 评论 (0) 编辑
摘要:最近需要使用 nvprof 此时cuda 程序运行的性能,下面对使用过程进行简要记录,进行备忘: 常用使用命令:nvprof --unified-memory-profiling off python run.py (这是因为某块内存被设置了不允许分析,导致)参考:https://docs.nvid 阅读全文
posted @ 2019-11-18 12:35 xuyaowen 阅读 (86) 评论 (0) 编辑
摘要:最近进行学习过程中,遇到一些可以用得上的benchmark,在这里进行简要记录:之后估计会用到 TensorFlow benchmarks https://github.com/tensorflow/benchmarks 文件系统测试工具整理 https://www.cnblogs.com/xuya 阅读全文
posted @ 2019-11-18 12:01 xuyaowen 阅读 (27) 评论 (0) 编辑
摘要:最近需要使用到 ramfs 和 tmpfs 做内存文件系统,下面对这两个文件系统相关的信息,做一下总结: 参考链接: https://www.thegeekstuff.com/2008/11/overview-of-ramfs-and-tmpfs-on-linux/ https://www.cnbl 阅读全文
posted @ 2019-11-18 10:06 xuyaowen 阅读 (32) 评论 (0) 编辑
摘要:有时候,我们没有root用户的时候,我们进行安装deb包就不能之间安装到系统之中了; 为了方便,我们可以直接解压 dpkg -x same.deb .; 直接解压到当前目录,然后在配置环境变量,即可启动运行程序; 当然,还有另外一个命令: dpkg -i --instdir=/dest/dir/pa 阅读全文
posted @ 2019-11-16 16:13 xuyaowen 阅读 (132) 评论 (0) 编辑
摘要:最近要尝试探究一下alluxio相关的知识,本博客进行对alluxio的安装过程进行备忘: 单例安装过程: https://docs.alluxio.io/os/user/stable/cn/contributor/Contributor-Getting-Started.html (开发者指南) h 阅读全文
posted @ 2019-11-16 14:32 xuyaowen 阅读 (36) 评论 (0) 编辑
摘要:最近编译 horovod框架过程中,需要使用openmpi 4.0但是环境中的openmpi版本比较低,所以在手动安装openmpi4.0 用于编译,下面对过程进行简要记录,进行备忘: curl -O -L https://download.open-mpi.org/release/open-mpi 阅读全文
posted @ 2019-11-15 21:37 xuyaowen 阅读 (35) 评论 (0) 编辑
摘要:gcc 4.9 编译安装教程,因为项目编译过程中,需要采用特定的gcc版本来进行编译,所以进行简要记录,进行备忘: 下载:curl -O -L https://mirrors.tuna.tsinghua.edu.cn/gnu/gcc/gcc-4.9.0/gcc-4.9.0.tar.gz 解压:tar 阅读全文
posted @ 2019-11-15 20:26 xuyaowen 阅读 (37) 评论 (0) 编辑
摘要:最近需要 Horovod 相关的知识,在这里记录一下,进行备忘: 分布式训练,分为数据并行和模型并行两种; 模型并行:分布式系统中的不同GPU负责网络模型的不同部分。神经网络模型的不同网络层被分配到不同的GPU或者同一层内部的不同参数被分配到不同的GPU之上; 数据并行:不同的GPU有同一个模型的多 阅读全文
posted @ 2019-11-15 18:45 xuyaowen 阅读 (46) 评论 (0) 编辑
共 18 页: 上一页 1 2 3 4 5 6 下一页 末页