随笔分类 -  学习笔记

上一页 1 2 3 4 5 6 7 8 9 10 下一页

关闭 scrapy redis ,转载:https://my.oschina.net/2devil/blog/1631116
该文被密码保护。

posted @ 2020-08-24 21:02 我和你并没有不同 阅读(4) 评论(0) 推荐(0)

scrapy 学习笔记 参考:https://zhuanlan.zhihu.com/p/79067223
该文被密码保护。

posted @ 2020-08-13 20:51 我和你并没有不同 阅读(0) 评论(0) 推荐(0)

conda 学习笔记
摘要:Anaconda 快速搭建selenium chrome环境(详细教程):https://www.jianshu.com/p/99b55b2834e6 【我直接把chromdirver放到自己的虚拟环境目录下了D:\ProgramData\miniconda3\envs\py37】 安装:https 阅读全文

posted @ 2020-08-08 22:08 我和你并没有不同 阅读(280) 评论(0) 推荐(0)

jupyterhub
摘要:用户通过哪个ip和端口访问jupyterhub:通过c.JupyterHub.ip和c.JupyterHub.port来设置 当Proxy 或Spawners是远程服务时,通过哪个ip和端口来和hub通信:c.JupyterHub.hub_ip和c.JupyterHub.hub_port 当hub在 阅读全文

posted @ 2020-08-06 13:46 我和你并没有不同 阅读(954) 评论(0) 推荐(0)

heml学习笔记
摘要:仓库的管理和维护方法请参考官网文档 https://docs.helm.sh 注意在YAML中有一个空行,为什么?当模板引擎运行时,它 移除了 {{ 和 }} 里面的内容,但是留下的空白完全保持原样。 YAML认为空白是有意义的,因此管理空白变得很重要。幸运的是,Helm模板有些工具可以处理此类问题 阅读全文

posted @ 2020-08-03 18:49 我和你并没有不同 阅读(503) 评论(0) 推荐(0)

离线安装
摘要:离线安装configurable-http-proxy 这里一个nodejs的包,但我们要离线安装。 直接把/usr/lib/node_modules/configurable-http-proxy拷过去,然后追加到PATH 离线安装python3.7 安装python3.7: https://ww 阅读全文

posted @ 2020-08-02 17:38 我和你并没有不同 阅读(655) 评论(0) 推荐(0)

Java之调用Python代码 转载:https://mp.weixin.qq.com/s/cr8dXzwsQhtei9TfXwcMcA
摘要:对于一个数据分析方面的工作者来说,最熟悉的语言无疑就是Python了。对于软件开发者而言,Java又是极其重要的工具。那么,一个很自然的问题就是,我们能够在Java中调用Python代码吗? 想要在Java中调用Python代码,有以下两个办法: 直接通过Runtime进行调用 调用Jython 在 阅读全文

posted @ 2020-07-21 18:32 我和你并没有不同 阅读(312) 评论(0) 推荐(0)

查看 GPU 基本信息 nvidia-smi 命令
摘要:nvidia-smi命令, 可以显示NVIDIA显卡基本信息和相关进程占用显存情况。参数说明:(1)GPU信息参数: 参数名称参数说明 GPU GPU 编号 Name GPU 型号 Persistence-M 持续模式的状态。持续模式虽然耗能大,但是在新的GPU应用启动时,花费的时间更少,这里显示的 阅读全文

posted @ 2020-07-14 14:02 我和你并没有不同 阅读(3016) 评论(0) 推荐(0)

使用 gdb 调试多进程程序 —— 以调试 nginx 为例 转自:https://mp.weixin.qq.com/s/m2c2xujMTHz5ZdpnDMWLJw
摘要:这里我们说的多进程程序指的是一个进程使用 Linux 系统调用 fork() 函数产生的子进程,没有相互关联的进程就是普通的 gdb 调试,不必刻意讨论。 在实际的应用中,如有这样一类程序,如 nginx,对于客户端的连接是采用多进程模型,当 nginx 接受客户端连接后,创建一个新的进程来处理这一 阅读全文

posted @ 2020-07-07 15:37 我和你并没有不同 阅读(2201) 评论(1) 推荐(0)

nginx教程 转自:https://github.com/dunwu/nginx-tutorial
摘要:什么是Nginx? Nginx (engine x) 是一款轻量级的 Web 服务器 、反向代理服务器及电子邮件(IMAP/POP3)代理服务器。 什么是反向代理? 反向代理(Reverse Proxy)方式是指以代理服务器来接受 internet 上的连接请求,然后将请求转发给内部网络上的服务器, 阅读全文

posted @ 2020-07-07 15:36 我和你并没有不同 阅读(763) 评论(0) 推荐(0)

flower 转自:https://www.jianshu.com/p/4a408657ef76
摘要:flower的启动 首先flower作为web页面来管理celery后台任务,和任务队列是隔离的,也就是flower的运行与否并不会影响到任务队列的真正执行,但是flower中可以通过API接口来管理celery中的任务执行。 在django工程目录下面(和manage.py文件在一个层级),具体的 阅读全文

posted @ 2020-07-05 12:57 我和你并没有不同 阅读(641) 评论(0) 推荐(0)

celery 转自:https://www.cnblogs.com/pyedu/p/12461819.html
摘要:一、什么是Celery 1.1、celery是什么 Celery是一个简单、灵活且可靠的,处理大量消息的分布式系统,专注于实时处理的异步任务队列,同时也支持任务调度。 Celery的架构由三部分组成,消息中间件(message broker),任务执行单元(worker)和任务执行结果存储(task 阅读全文

posted @ 2020-07-02 20:50 我和你并没有不同 阅读(366) 评论(0) 推荐(0)

k8s 转载:https://mp.weixin.qq.com/s/2XDtMeMoEdoGC4xaCfAwAw
摘要:4. k8s service 类型? ClusterIP 集群内部容器访问地址,会生成一个虚拟 IP 与 pod 不在一个网段。 NodePort 会在宿主机上映射一个端口,供外部应用访问模式。 Headless CluserIP 无头模式,无 serviceip,即把 spec.clusterip 阅读全文

posted @ 2020-05-28 16:55 我和你并没有不同 阅读(571) 评论(0) 推荐(0)

Kubernetes 学习笔记 权威指南第七章
摘要:1 Kubernetes对集群网络有如下要求。 (1)所有容器都可以在不用NAT的方式下同别的容器通信。 (2)所有节点都可以在不用NAT的方式下同所有容器通信,反之亦然。 (3)容器的地址和别人看到的地址是同一个地址。 原生的Docker网络目前还不能很好地支持这些要求 2 处于不同命名空间中的网 阅读全文

posted @ 2020-05-26 21:27 我和你并没有不同 阅读(204) 评论(0) 推荐(0)

Kubernetes 学习笔记 权威指南第四章
摘要:1 为RC快速创建service: 2 通过创建一个无Label Selector的Service来实现调用外部服务,手动创建一个和该Service同名的Endpoint,用于指向实际的后端访问地址 3 Headless Service:不为Service设置ClusterIP(入口IP地址),仅通 阅读全文

posted @ 2020-05-25 21:01 我和你并没有不同 阅读(123) 评论(0) 推荐(0)

Kubernetes 学习笔记 权威指南第二&三章
摘要:1 etcd服务作为Kubernetes集群的主数据库,在安装Kubernetes各服务之前需要首先安装和启动 2 在多个Node组成的Kubernetes集群内,跨主机的容器间网络互通是Kubernetes集群能够正常工作的前提条件 3 创建资源用create 查询用get 查询详细信息descr 阅读全文

posted @ 2020-05-23 18:03 我和你并没有不同 阅读(216) 评论(0) 推荐(0)

Kubernetes 学习笔记 权威指南第一章
摘要:1 虚拟机采用NAT的网络模式以便连接外网 2 在每个Pod中都运行着一个特殊的被称为Pause的容器,其他容器则为业务容器,这些业务容器共享Pause容器的网络栈和Volume挂载卷,因此它们之间的通信和数据交换更为高效,在设计时我们可以充分利用这一特性将一组密切相关的服务进程放入同一个Pod中 阅读全文

posted @ 2020-05-22 15:49 我和你并没有不同 阅读(162) 评论(0) 推荐(0)

什么时候使用消息队列
摘要:什么时候不使用MQ? 上游实时关注执行结果,通常采用RPC。 什么时候使用MQ? (1)数据驱动的任务依赖; (2)上游不关心多下游执行结果; (3)异步返回执行时间长 阅读全文

posted @ 2020-05-17 16:55 我和你并没有不同 阅读(708) 评论(0) 推荐(0)

高并发 转载
摘要:https://mp.weixin.qq.com/s?__biz=MjM5ODYxMDA5OQ==&mid=2651962114&idx=1&sn=9488b6c9598c3f39bcdf802d37e76795&chksm=bd2d0ede8a5a87c8b9d02bbd1a6e03a477c2b 阅读全文

posted @ 2020-05-17 16:13 我和你并没有不同 阅读(140) 评论(0) 推荐(0)

高可用 转载
摘要:转载:https://mp.weixin.qq.com/s?__biz=MjM5ODYxMDA5OQ==&mid=2651962050&idx=1&sn=f60b8bb833fe3425f5227da42e3b3adf&chksm=bd2d0f1e8a5a8608f81d42a16eea476d0b 阅读全文

posted @ 2020-05-17 12:30 我和你并没有不同 阅读(172) 评论(0) 推荐(0)

上一页 1 2 3 4 5 6 7 8 9 10 下一页