摘要: 爬虫是一个比较容易上手的技术,也许花5分钟看一篇文档就能爬取单个网页上的数据。但对于大规模爬虫,完全就是另一回事,并不是1*n这么简单,还会衍生出许多别的问题。 系统的大规模爬虫流程如图所示。 先检查是否有API API是网站官方提供的数据接口,如果通过调用API采集数据,则相当于在网站允许的范围内 阅读全文
posted @ 2019-07-22 00:31 suntl 阅读(763) 评论(0) 推荐(0)
摘要: 所需工具: 1、chorme内核浏览器,如Chorme、Firefox等等 2、vlc视频播放器 准备工作完成,开始工作 1、打开优酷的随便一个视频 2、按下F12选择Network(网络)选择Media(媒体),可能一次刷不出来,多尝试几次就OK啦 3、复制链接地址(红框部分) 4、启动vlc,打 阅读全文
posted @ 2018-11-27 23:08 suntl 阅读(547) 评论(0) 推荐(0)
摘要: C语言变长数组data[0] 1、前言 今天在看代码中遇到一个结构中包含char data[0],第一次见到时感觉很奇怪,数组的长度怎么可以为零呢?于是上网搜索一下这样的用法的目的,发现在linux内核中,结构体中经常用到data[0]。这样设计的目的是让数组长度是可变的,根据需要进行分配。方便操作 阅读全文
posted @ 2018-10-20 10:31 suntl 阅读(2954) 评论(0) 推荐(0)
摘要: 目前使用过的各大厂商取流规则是在实际的工作中遇到的相关视频接入问题,通过rtsp协议接入视频数据的一些记录,其中的图片可能来源于网络,内容部分来源于网络,本人仅仅是对相关内容作了汇总。 海康RTSP取流URL格式 备注: VLC 可以支持解析 URL 里的用户名密码,实际发给设备的 RTSP 请求不 阅读全文
posted @ 2018-09-03 14:48 suntl 阅读(6578) 评论(0) 推荐(1)
摘要: While using the apt-get command or the relatively new APT package management tool in Ubuntu Linux or its derivatives such as Linux Mint (which I actua 阅读全文
posted @ 2018-02-07 18:05 suntl 阅读(286) 评论(0) 推荐(0)
摘要: C语言指针5分钟教程 指针、引用和取值 什么是指针?什么是内存地址?什么叫做指针的取值?指针是一个存储计算机内存地址的变量。在这份教程里“引用”表示计算机内存地址。从指针指向的内存读取数据称作指针的取值。指针可以指向某些具体类型的变量地址,例如int、long和double。指针也可以是void类型 阅读全文
posted @ 2017-01-16 17:28 suntl 阅读(639) 评论(0) 推荐(0)
摘要: LibCurl开发_未了的雨_百度空间 - Google Chrome (2013/7/26 21:11:15) LibCurl开发一:LibCurl编程流程1.调用curl_global_init()初始化libcurl2.调用curl_easy_init()函数得到easyinterface型指针3.调用curl_easy_setopt设置传输选项4.根据curl_easy_setop... 阅读全文
posted @ 2017-01-16 17:15 suntl 阅读(4471) 评论(0) 推荐(1)
摘要: 揭开Socket编程的面纱 - 博客 - 伯乐在线 - Google Chrome (2013/9/22 19:28:24) 揭开Socket编程的面纱2013/09/21 | 分类:IT技术|1 条评论| 标签:SOCKET分享到:28原文出处:源码工作室的博客对TCP/IP、UDP、Socket编程这些词你不会很陌生吧?随着网络技术的发展,这些词充斥着我们的耳朵。那么我想问:1.... 阅读全文
posted @ 2017-01-16 17:13 suntl 阅读(421) 评论(0) 推荐(0)
摘要: Linux多进程开发(三)进程创建之守护进程的学习 - _Liang_Happy_Life__Dream - 51CTO技术博客 - Google Chrome (2013/10/11 16:48:27) Linux多进程开发(三)进程创建之守护进程的学习2013-07-04 17:25:35标签:守护进程daemonLinux多进程开发系统编程原创作品,允许转载,转载时请务必以超链接形式标... 阅读全文
posted @ 2017-01-16 17:13 suntl 阅读(695) 评论(0) 推荐(0)
摘要: Unix高级环境编程系列笔记 (2013/11/17 14:26:38)Unix高级环境编程系列笔记出处信息 通过这篇文字,您将能够解答如下问题:如何来标识一个线程?如何创建一个新线程?如何实现单个线程的退出?如何使调用线程阻塞等待指定线程的退出,并获得退出线程的返回码?如何通过一个线程让另外一个线程退出?如何实现线程退出时的清理动作?Unix系统如何实现线程之间的同步?什么情况会发生线程死... 阅读全文
posted @ 2017-01-16 17:12 suntl 阅读(811) 评论(0) 推荐(0)
摘要: linux c编程open() read() write()函数的使用方法及实例 | 奶牛博客 - Google Chrome (2013/8/31 17:56:10) 今天把文件IO操作的一些东东整理下.基本的,对于锁机制下次再整理.常用的文件IO函数有标题的三个open() read() wri 阅读全文
posted @ 2017-01-16 17:10 suntl 阅读(226) 评论(0) 推荐(0)
摘要: Linux平台MYSQL的C语言API全列表 - 第三只眼的专栏 - 博客频道 - CSDN.NET - Google Chrome (2013/8/18 22:28:58) Linux平台MYSQL的C语言API全列表2013-02-19 15:1778人阅读评论(0)收藏举报1.mysql_affected_rows() //返回上次UPDATE、DELETE或... 阅读全文
posted @ 2017-01-16 17:07 suntl 阅读(937) 评论(0) 推荐(0)
摘要: 如何设置一个永远无法删除的Cookie -- 系统架构 -- IT技术博客大学习 -- 共学习 共进步! - Google Chrome (2013/6/20 9:46:38) 如何设置一个永远无法删除的Cookie出处信息 在网站统计中,我们最常用的是用 Cookie标识身份,由于浏览器自带的 Cookie容易被用户删除。于是很多人使用Flash Cookie来跟踪用户的信息。但是在... 阅读全文
posted @ 2017-01-16 16:53 suntl 阅读(818) 评论(0) 推荐(0)
摘要: HTTP Header 详解 HTTP Header 详解 2013/09/21 | 分类: IT技术 | 0 条评论 | 标签: HTTP 分享到:36 2013/09/21 | 分类: IT技术 | 0 条评论 | 标签: HTTP 分享到:36 原文出处: zcmhi HTTP(HyperTe 阅读全文
posted @ 2017-01-16 16:49 suntl 阅读(229) 评论(0) 推荐(0)
摘要: error: openssl 的所有解决方案 (2013/6/22 17:39:00)error: openssl/crypto.h: No such file or directory 解决方案 (2013/6/22 17:39:00) error: openssl/crypto.h: No such file or directory error: openssl/md5.h: No... 阅读全文
posted @ 2017-01-16 12:16 suntl 阅读(4199) 评论(0) 推荐(0)