作者 饶琛琳第一部分 Part 1Logstash1章 入门示例2章 插件配置3章 场景示例4章 性能与监控5章 扩展方案6章 Logstash源码解析7章 插件开发8章 Beats  Logstash is a tool for managing events and logs. You can use it to collect logs, parse th
转载 2024-05-17 16:27:09
26阅读
首先推荐一款mongodb可视化工具:Robo 3t 下载链接为  https://robomongo.org/,然后瞅一眼数据库的使用排名,说明学习MongoDB是非常有必要的MongoDB 概念解析不管我们学习什么数据库都应该学习其中的基础概念,在mongodb中基本的概念是文档、集合、数据库,下面我们挨个介绍。下表将帮助您更容易理解Mongo中的一些概念:1、文
上图所示,consumer订阅kafka集群中(一个broker中的一个topic中)的消息,然后对broker发起一个获取消息的请求,请求中携带了topic、partition、offset等信息,接着用pull的方式获取kafka log中所有可用消息,并对消息中的数据进行处理,比如使用spark进行计算,将结果存入DB中。 consumer订阅消息时,会连接上任
# MongoDB权威指南2### O’Reilly Media, Inc.介绍### 第一部分 MongoDB介绍#### 1 MongoDB简介##### 1.1 易于使用###
转载 2020-05-31 12:32:00
267阅读
内容参考《MongoDB权威指南2》以下内容基本都是参照《MongoDB权威指南2》这本书的内容学习并且测试的,目前是三章和第四章的内容。我用的MongoDB的版本是4.0。// 一:创建,更新,删除文档 for (var i = 0; i < 100; i++){ // 插入文档_id id不可以重复,不指定id会自动生成id db.foo.insert({"no":"no
转载 2023-11-23 19:09:35
56阅读
Kafka实战笔记单机搭建kafka的运行需要提前配好Java 环境,笔者的是 java version “1.8.0_201”第一步 下载程序下载源码 此处用的是2.11本解压[root@cluster01:opt] # tar -xzf kafka_2.11-2.1.0.tgz [root@cluster01:opt] # cd kafka_2.11-2.1.0第二步 启动服务开启zook
作者: 【美】Srinath Perera , Thilina Gunarathne 译者: 杨卓荦 责编: 杨海玲2.2 HDFS基准测试Hadoop MapReduce实战手册运行基准测试程序,可以很好地验证HDFS集群是否已如预期般正确设置并执行。DFSIO是一个Hadoop自带的基准测试,可以用来分析一个HDFS集群的I/O性能。该部分展示了如何使用DFSIO来对HDFS集群的读取和写入性
mongoDB简介(本文由www.169it.com搜集整理)    MongoDB是一个高性能,开源,无模式的文档型数据库,是目前在IT行业非常流行的一种非关系型数据库(NoSql)。它在许多场景下可用于替代传统的关系型数据库或键/值存储方式。Mongo使用C++开发。Mongo的官方网站地址是:http://www.mongodb.org/.MongoDB灵活的数据存储方式
文档是Mongodb中数据的基本单元,非常类似于关系数据库管理系统中的行(但是比行要复杂得多)。类似地,集合可以被看做是没有模式的表。Mongodb单个实例可以容纳多个独立的数据库,每一个都有自己的集合和权限。Mongodb自带简洁但功能强大的JavaScript Shell,这个工具对于管理Mongodb实例和操作数据作用非常大。每一个文档都有一个特殊的键“_id”,它在文档所处的集合中是唯一的
Hadoop权威指南42章 关于MapReduce2.1 气象数据集2.2 使用Unix工具来分析数据2.3 使用Hadoop来分析数据2.3.1 map和reduce2.3.2 Java MapReduce2.3.2.1 运行测试2.4 横向扩展2.4.1 数据流2.4.2 combiner 函数2.4.3 运行分布式的MapReduce作业2.5 Hadoop Streaming 2
转载 2023-11-03 10:34:55
116阅读
内容简介本书从JVM和Java API两个方面,深入地介绍了Java 8和Java 11等新的Java长期支持版本中影响性能的因素。本书先从Java应用程序的通用方法、基准测试的缺陷、性能监控工具等方面,分析了如何通过JVM的配置方式影响程序的性能;接着从即时编译、垃圾回收、堆内存与原生内存最佳实践、线程与同步的性能等方面,分析了常见的优化方向及其特性。2专注于更加成熟的Java 8和Ja
原创 2024-01-22 22:26:45
454阅读
# MongoDB权威指南2概述与示例 MongoDB是一种非关系型数据库管理系统,基于文档的存储架构而闻名。它能够处理大规模的数据和快速的查询需求,因此越来越受到开发者的青睐。本文将基于“MongoDB权威指南2”,为你提供一个简要的介绍和代码示例,以帮助你了解MongoDB的基本概念。 ## 什么是MongoDB? MongoDB是一个基于文档的NoSQL数据库,数据以BSON(
原创 10月前
35阅读
Kafka权威指南笔记 kafka版本0.9.01一 第三章生产者    1.内容:生产者的设计,组件,使用,配置选项,分区方法和序列号器。    2.消息的场景:每个消息都很重要?是否允许丢失消息?重复消息是否可接受?严格的延迟和吞吐量要求。例如:不允许消息丢失和重复消费,可以接受延迟为500ms,吞吐量要求高。    3.生产者发送消
【学习笔记】Kubernetes网络概念及策略控制Kubernetes 基本网络模型约法三章四大目标对基本约束的解释Netns 探秘Netns 究竟实现了什么Pod 与 Netns 的关系主流网络方案简介典型的容器网络实现方案Flannel 方案Network Policy 的用处Network Policy 基本概念配置实例内容总结 Kubernetes 基本网络模型Kubernetes 对一
第一部分 MongoDB介绍第一章 MongoDB简介1.1 易于使用1.2 易于扩展1.3 丰富的功能1.4 卓越的性能第二章 MongoDB基础知识2.1 文档2.2 集合2.2.1 动态模式2.2.2 命名2.2.3 集合的创建、删除2.3 数据库2.3.1 数据库命名2.3.2 数据库的创建、使用和删除2.4 数据类型2.5 MongoDB shell2.5.1 简单的增、删、改、查:2
# JavaScript权威指南7科普 JavaScript是一种脚本语言,广泛用于网页开发。它可以在浏览器中运行,与HTML和CSS一起构建网页交互性。本文将介绍JavaScript的基础知识,包括语法、数据类型、函数、对象等内容,并通过代码示例帮助读者更好地理解。 ## JavaScript语法 JavaScript的语法类似于C语言,有变量、条件语句、循环语句等基本结构。下面是一个
原创 2024-04-23 06:17:25
34阅读
# MongoDB 权威指南3:深入理解MongoDB MongoDB,作为一种高性能、高可用的NoSQL数据库,已经成为许多企业和开发者的首选。在《MongoDB 权威指南3》这本书中,作者深入讲解了MongoDB的各个方面,包括数据模型、查询语言、索引、聚合框架等。本文将结合书中内容,介绍MongoDB的基本概念、数据模型、查询语言、索引和聚合框架,并提供一些代码示例。 ## Mo
原创 2024-07-17 06:16:12
90阅读
# Hadoop权威指南5 ## 介绍 Hadoop是一个开源的分布式计算框架,可用于处理大规模数据集。本文将介绍Hadoop的基本概念和使用方法,同时提供代码示例帮助读者更好地理解。 ## Hadoop基本概念 在Hadoop中,有两个核心概念:HDFS(Hadoop分布式文件系统)和MapReduce。HDFS用于存储数据,MapReduce用于处理数据。 ### HDFS(Ha
原创 2024-04-17 06:36:31
85阅读
K8S权威指南 2是一本深入探究Kubernetes技术的书籍,对于想要深入了解和学习K8S的开发者来说是一本非常有用的参考书。在本文中,我将向你介绍如何利用这本书来加深对Kubernetes的理解。 首先,让我们看一下整个过程的流程,以下是实现K8S权威指南 2的步骤表格: | 步骤 | 操作 | |:--:|:--| | 1 | 下载并安装K8S权威指南 2 | | 2 | 阅
原创 2024-03-20 10:42:46
30阅读
对于大部分 Kubernetes 用户来说,安全是无关紧要的,或者说没那么紧要,就算考虑到了,也只是敷衍一下,草草了事。实际上 Kubernetes 提供了非常多的选项可以大大提高应用的安全性,只要用好了这些选项,就可以将绝大部分的攻击抵挡在门外。为了更容易上手,我将它们总结成了几个最佳实践配置,大家看完了就可以开干了。当然,本文所述的最佳安全实践仅限于 Pod 层面,也就是容器层面,于容器的生命
转载 2024-05-24 10:30:06
24阅读
  • 1
  • 2
  • 3
  • 4
  • 5