摘要：
停止服务的方式有两种：快速关闭和标准关闭，下面依次说明： （一）快速关闭方法（快速，简单，数据可能会出错） 目标：通过系统的kill命令直接杀死进程： 杀完要检查一下，避免有的没有杀掉。 #通过进程编号关闭节点 kill -2 54410 【补充】 如果一旦是因为数据损坏，则需要进行如下操作（了解） 阅读全文
posted @ 2020-11-10 11:22
哈喽哈喽111111
阅读(2318)
评论(0)
推荐(0)
摘要：
参考地址：https://blog.csdn.net/weixin_43622131/article/details/105984032 已配置好的所有的配置文件下载地址：https://files.cnblogs.com/files/sanduzxcvbnm/conf.zip MongoDB安装 阅读全文
posted @ 2020-11-09 18:07
哈喽哈喽111111
阅读(505)
评论(0)
推荐(0)
摘要：
在你已经安装部署并允许MongoDB服务后，你必须要了解MongoDB的运行情况，并查看MongoDB的性能。这样在大流量得情况下可以很好的应对并保证MongoDB正常运作。 MongoDB中提供了mongostat 和 mongotop 两个命令来监控MongoDB的运行情况。 mongostat 阅读全文
posted @ 2020-11-09 16:28
哈喽哈喽111111
阅读(151)
评论(0)
推荐(0)
摘要：
MongoDB数据备份 在Mongodb中我们使用mongodump命令来备份MongoDB数据。该命令可以导出所有数据到指定目录中。 mongodump命令可以通过参数指定导出的数据量级转存的服务器。 语法 mongodump命令脚本语法如下： >mongodump -h dbhost -d db 阅读全文
posted @ 2020-11-09 16:25
哈喽哈喽111111
阅读(145)
评论(0)
推荐(0)
摘要：
分片 在Mongodb里面存在另一种集群，就是分片技术,可以满足MongoDB数据量大量增长的需求。 当MongoDB存储海量的数据时，一台机器可能不足以存储数据，也可能不足以提供可接受的读写吞吐量。这时，我们就可以通过在多台机器上分割数据，使得数据库系统能存储和处理更多的数据。 为什么使用分片 复 阅读全文
posted @ 2020-11-09 16:19
哈喽哈喽111111
阅读(128)
评论(0)
推荐(0)
摘要：
MongoDB复制是将数据同步在多个服务器的过程。 复制提供了数据的冗余备份，并在多个服务器上存储数据副本，提高了数据的可用性， 并可以保证数据的安全性。 复制还允许您从硬件故障和服务中断中恢复数据。 什么是复制? 保障数据的安全性 数据高可用性 (24*7) 灾难恢复 无需停机维护（如备份，重建索 阅读全文
posted @ 2020-11-09 16:14
哈喽哈喽111111
阅读(159)
评论(0)
推荐(0)
摘要：
MongoDB 中聚合(aggregate)主要用于处理数据(诸如统计平均值，求和等)，并返回计算后的数据结果。 有点类似 SQL 语句中的 count(*)。 aggregate() 方法 MongoDB中聚合的方法使用aggregate()。 语法 aggregate() 方法的基本语法格式如下 阅读全文
posted @ 2020-11-09 16:11
哈喽哈喽111111
阅读(128)
评论(0)
推荐(0)
摘要：
索引通常能够极大的提高查询的效率，如果没有索引，MongoDB在读取数据时必须扫描集合中的每个文件并选取那些符合查询条件的记录。 这种扫描全集合的查询效率是非常低的，特别在处理大量的数据时，查询可以要花费几十秒甚至几分钟，这对网站的性能是非常致命的。 索引是特殊的数据结构，索引存储在一个易于遍历读取 阅读全文
posted @ 2020-11-09 16:04
哈喽哈喽111111
阅读(137)
评论(0)
推荐(0)
摘要：
MongoDB sort() 方法 在 MongoDB 中使用 sort() 方法对数据进行排序，sort() 方法可以通过参数指定排序的字段，并使用 1 和 -1 来指定排序的方式，其中 1 为升序排列，而 -1 是用于降序排列。 语法 sort()方法基本语法如下所示： >db.COLLECTI 阅读全文
posted @ 2020-11-09 15:47
哈喽哈喽111111
阅读(599)
评论(0)
推荐(0)
摘要：
MongoDB Limit() 方法 如果你需要在MongoDB中读取指定数量的数据记录，可以使用MongoDB的Limit方法，limit()方法接受一个数字参数，该参数指定从MongoDB中读取的记录条数。 语法 limit()方法基本语法如下所示： >db.COLLECTION_NAME.fi 阅读全文
posted @ 2020-11-09 15:36
哈喽哈喽111111
阅读(635)
评论(0)
推荐(0)
摘要：
描述 $type操作符是基于BSON类型来检索集合中匹配的数据类型，并返回结果。 MongoDB 中可以使用的类型如下表所示： 类型 数字 备注 Double 1 String 2 Object 3 Array 4 Binary data 5 Undefined 6 已废弃。 Object id 7 阅读全文
posted @ 2020-11-09 14:48
哈喽哈喽111111
阅读(330)
评论(0)
推荐(0)
摘要：
描述 条件操作符用于比较两个表达式并从mongoDB集合中获取数据。 在本章节中，我们将讨论如何在MongoDB中使用条件操作符。 MongoDB中条件操作符有： (>) 大于 - $gt (<) 小于 - $lt (>=) 大于等于 - $gte (<= ) 小于等于 - $lte 我们使用的数据 阅读全文
posted @ 2020-11-09 14:40
哈喽哈喽111111
阅读(347)
评论(0)
推荐(0)
摘要：
MongoDB 查询文档使用 find() 方法。 find() 方法以非结构化的方式来显示所有文档。 语法 MongoDB 查询数据的语法格式如下： db.collection.find(query, projection) query ：可选，使用查询操作符指定查询条件 projection ： 阅读全文
posted @ 2020-11-09 14:25
哈喽哈喽111111
阅读(239)
评论(0)
推荐(0)
摘要：
MongoDB remove()函数是用来移除集合中的数据。 MongoDB数据更新可以使用update()函数。在执行remove()函数前先执行find()命令来判断执行的条件是否正确，这是一个比较好的习惯。 语法 remove() 方法的基本语法格式如下所示： db.collection.re 阅读全文
posted @ 2020-11-09 14:16
哈喽哈喽111111
阅读(153)
评论(0)
推荐(0)
摘要：
MongoDB 使用 update() 和 save() 方法来更新集合中的文档。接下来让我们详细来看下两个函数的应用及其区别。 update() 方法 update() 方法用于更新已存在的文档。语法格式如下： db.collection.update( <query>, <update>, { 阅读全文
posted @ 2020-11-09 14:09
哈喽哈喽111111
阅读(136)
评论(0)
推荐(0)
摘要：
文档的数据结构和 JSON 基本一样。 所有存储在集合中的数据都是 BSON 格式。 BSON 是一种类似 JSON 的二进制形式的存储格式，是 Binary JSON 的简称。 插入文档 MongoDB 使用 insert() 或 save() 方法向集合中插入文档，语法如下： db.COLLEC 阅读全文
posted @ 2020-11-09 13:54
哈喽哈喽111111
阅读(167)
评论(0)
推荐(0)
摘要：
MongoDB 中使用 drop() 方法来删除集合。 语法格式： db.collection.drop() 参数说明： 无 返回值 如果成功删除选定集合，则 drop() 方法返回 true，否则返回 false。 实例 在数据库 mydb 中，我们可以先通过 show collections 命 阅读全文
posted @ 2020-11-09 12:10
哈喽哈喽111111
阅读(358)
评论(0)
推荐(0)
摘要：
MongoDB 中使用 createCollection() 方法来创建集合。 语法格式： db.createCollection(name, options) 参数说明： name: 要创建的集合名称 options: 可选参数, 指定有关内存大小及索引的选项 options 可以是如下参数： 字 阅读全文
posted @ 2020-11-09 12:07
哈喽哈喽111111
阅读(166)
评论(0)
推荐(0)
摘要：
语法 MongoDB 删除数据库的语法格式如下： db.dropDatabase() 删除当前数据库，默认为 test，你可以使用 db 命令查看当前数据库名。 实例 以下实例我们删除了数据库 baidu。 首先，查看所有数据库： > show dbs admin 0.000GB config 0. 阅读全文
posted @ 2020-11-09 12:02
哈喽哈喽111111
阅读(234)
评论(0)
推荐(0)
摘要：
语法 MongoDB 创建数据库的语法格式如下： use DATABASE_NAME 如果数据库不存在，则创建数据库，否则切换到指定数据库。 实例 以下实例我们创建了数据库 baidu: > use baidu switched to db baidu > db baidu > 如果你想查看所有数据 阅读全文
posted @ 2020-11-09 11:53
哈喽哈喽111111
阅读(201)
评论(0)
推荐(0)
摘要：
标准 URI 连接语法： mongodb://[username:password@]host1[:port1][,host2[:port2],...[,hostN[:portN]]][/[database][?options]] mongodb:// 这是固定的格式，必须要指定。 username 阅读全文
posted @ 2020-11-09 11:47
哈喽哈喽111111
阅读(392)
评论(0)
推荐(0)
摘要：
安装 MongoDB 提供了 linux 各个发行版本 64 位的安装包，你可以在官网下载安装包。 安装前我们需要安装各个 Linux 平台依赖包。 Red Hat/CentOS： sudo yum install libcurl openssl MongoDB 源码下载地址：https://www 阅读全文
posted @ 2020-11-09 11:40
哈喽哈喽111111
阅读(270)
评论(0)
推荐(0)
摘要：
SQL术语/概念 MongoDB术语/概念 解释/说明 database database 数据库 table collection 数据库表/集合 row document 数据记录行/文档 column field 数据字段/域 index index 索引 table joins 表连接,Mo 阅读全文
posted @ 2020-11-09 11:30
哈喽哈喽111111
阅读(95)
评论(0)
推荐(0)
摘要：
官方文档地址：https://docs.fluentd.org/output/mongo_replset td-agent版本默认没有包含out_mongo插件，需要安装这个插件才能使用 使用的是td-agent，安装这个插件： $ /usr/sbin/td-agent-gem install ge 阅读全文
posted @ 2020-11-06 16:18
哈喽哈喽111111
阅读(186)
评论(0)
推荐(0)
摘要：
linux主机ip：192.168.0.253 1. 创建网络与容器 docker pull mongo docker network create mongo-rs docker run --name mongo1 -p 27027:27027 --net mongo-rs -d mongo mo 阅读全文
posted @ 2020-11-06 15:52
哈喽哈喽111111
阅读(1483)
评论(1)
推荐(1)
摘要：
官方文档地址：https://docs.fluentd.org/output/mongo td-agent版本默认没有包含out_mongo插件，需要安装这个插件才能使用 使用的是td-agent，安装这个插件： $ /usr/sbin/td-agent-gem install gems $ /us 阅读全文
posted @ 2020-11-06 12:47
哈喽哈喽111111
阅读(443)
评论(0)
推荐(0)
摘要：
官方文档地址：https://docs.fluentd.org/deployment/plugin-management 命令fluent-gem是Fluentd用来安装插件的，它是gem命令的包装器。 比如:fluent-gem install fluent-plugin-grep 如果使用的是t 阅读全文
posted @ 2020-11-06 12:30
哈喽哈喽111111
阅读(1461)
评论(0)
推荐(0)
摘要：
安装 # 拉取镜像 docker pull mongo # 运行容器 docker run -itd --name mongo -p 27017:27017 mongo --auth 参数说明： -p 27017:27017 ：映射容器服务的 27017 端口到宿主机的 27017 端口。外部可以直 阅读全文
posted @ 2020-11-06 11:09
哈喽哈喽111111
阅读(182)
评论(0)
推荐(0)
摘要：
安装 # 拉取镜像 docker pull wurstmeister/zookeeper docker pull wurstmeister/kafka # 启动zookeeper容器（Zookeeper用于崩溃检测，实现Topic发现，和维护Topic的生产和消费状态） docker run -t 阅读全文
posted @ 2020-11-05 17:35
哈喽哈喽111111
阅读(383)
评论(0)
推荐(0)
摘要：
官方文档地址：https://docs.fluentd.org/output/kafka td-agent版本自带包含out_kafka2插件，不用再安装了，可以直接使用。 若是使用的是Fluentd，则需要安装这个插件： $ fluent-gem install fluent-plugin-kaf 阅读全文
posted @ 2020-11-05 17:14
哈喽哈喽111111
阅读(3652)
评论(0)
推荐(0)
摘要：
官方文档地址：https://docs.fluentd.org/output/elasticsearch td-agent的v3.0.1版本以后自带包含out_elasticsearch插件，不用再安装了，可以直接使用。 若是使用的是Fluentd，则需要安装这个插件： $ fluent-gem i 阅读全文
posted @ 2020-11-05 15:50
哈喽哈喽111111
阅读(3916)
评论(0)
推荐(0)
摘要：
官方地址：https://docs.fluentd.org/quickstart/td-agent-v2-vs-v3-vs-v4 阅读全文
posted @ 2020-11-05 09:09
哈喽哈喽111111
阅读(652)
评论(0)
推荐(0)
摘要：
说明： 1.该镜像内默认配置文件路径是/fluentd/etc/fluent.conf 2.该镜像默认启用tcp的5140和24224端口 3.镜像dockerhub地址：https://hub.docker.com/_/fluentd 4.版本 # 拉取镜像 docker pull fluentd 阅读全文
posted @ 2020-11-04 17:10
哈喽哈喽111111
阅读(2776)
评论(0)
推荐(0)
摘要：
我们在做日志处理时，往往会从多个源服务器收集日志，然后在一个（或一组）中心服务器做日志聚合分析。 源服务器上的日志可能属于同一应用类型，也可能属于不同应用类型。我们可能需要在聚合服务器上对这些不同类型的日志分类处理，一个实现方法就是在Fluentd内部重新给这些日志打tag，然后重新路由到合适的ou 阅读全文
posted @ 2020-11-04 14:46
哈喽哈喽111111
阅读(1043)
评论(0)
推荐(0)
摘要：
in_http插件允许使用HTTP协议来采集日志事件。这个插件会建立一个支持REST风格的HTTP端点，来接收日志事件请求。 配置示例 <source> @type http port 9880 bind 0.0.0.0 body_size_limit 32m keepalive_timeout 1 阅读全文
posted @ 2020-11-04 14:37
哈喽哈喽111111
阅读(560)
评论(0)
推荐(0)
摘要：
stdout即标准输出，out_stdout将收到的日志事件打印到标准输出。 如果Fluentd以daemon方式在后台运行，out_stdout会将事件输出到Fluentd的运行日志中。 这个插件在调试时非常有用。 通常，我们在使用其他输出插件时，如果在目的接收端收不到日志，或收到的日志数据不准确 阅读全文
posted @ 2020-11-04 14:21
哈喽哈喽111111
阅读(630)
评论(0)
推荐(0)
摘要：
copy即复制，out_copy的作用就是将日志事件复制到多个输出，这样就可以对同一份日志做不同类型的分析处理。 out_copy内置于Fluentd，无需单独安装。 示例配置 <match pattern> @type copy <store> @type file path /var/log/f 阅读全文
posted @ 2020-11-04 14:18
哈喽哈喽111111
阅读(358)
评论(0)
推荐(0)
摘要：
in_tail输入插件内置于Fluentd中，无需安装。 它允许fluentd从文本文件尾部读取日志事件，其行为类似linux的tail -F命令（按文件名来tail）。 这几乎是最常用的一个输入插件了。 示例配置 <source> @type tail path /var/log/httpd-ac 阅读全文
posted @ 2020-11-03 17:56
哈喽哈喽111111
阅读(1630)
评论(0)
推荐(0)
摘要：
out_forward是一个带缓存的输出插件，用于向其他节点转发日志事件，并支持转发节点之间的负载均衡和自动故障切换。 out_forward支持至多一次和至少一次传输模式，默认为至多一次。 out_forward内置于Fluentd，无需安装。 1.示例配置 <match pattern> @ty 阅读全文
posted @ 2020-11-03 17:45
哈喽哈喽111111
阅读(531)
评论(0)
推荐(0)
摘要：
in_forward插件通常用于从其他节点接收日志事件，这些节点包括其他Fluentd实例、fluent-cat命令行或者Fluentd客户端程序。这是目前效率最高的日志事件接收方法。 in_forward插件会在本地打开一个tcp监听socket，用于接收日志事件。同时，它也会开启一个udp端口用 阅读全文
posted @ 2020-11-03 17:39
哈喽哈喽111111
阅读(601)
评论(0)
推荐(0)
浙公网安备 33010602011771号