一、环境系统 CentOS7.0 64位namenode01 192.168.0.220namenode02 192.168.0.221datanode01 192.168.0.222da
原创
2016-04-28 15:26:02
806阅读
IT界在过去几年中出现了一个有趣的现象。很多新的技术出现并立即拥抱了“大数据”。稍微老一点的技术也会将大数据添进自己的特性，避免落大部队太远，我们看到了不同技术之间的边际的模糊化。假如你有诸如Elasticsearch或者Solr这样的搜索引擎，它们存储着JSON文档，MongoDB存着JSON文档，或者一堆JSON文档存放在一个Hadoop集群的HDFS中。你可以使用这三种配置完成很多同养的事情
转载
2023-09-14 15:27:16
47阅读
目录一、MongoDB与MySQL的区别1.1 MongoDB与MySQL的区别1.2 mongodb的优劣势1.3 总结二、MongoDB与Hadoop的区别三、不适合MongoDB的场景四、MongoDB能为我解决哪些问题五、mongodb与关系型数据库相比的优缺点5.1 与关系型数据库相比，MongoDB的优点：5.2 与关系型数据库相比，MongoDB的缺点：5.3 Mongodb的优点与
转载
2023-07-12 13:38:49
124阅读
NoSql 简介： COUCH DB REDIS MONGODB NEO4J HBASE BIGTABLE 存储非结构化数据 索引多：单键，多键，数组，全文，2D。MonggoDB数据类型： null,boolean ,没有int 型，内嵌文档, secureCRT :http://la...
原创
2021-07-29 10:59:18
129阅读
## Hadoop与MongoDB
Hadoop和MongoDB是两个非常流行的大数据处理工具。Hadoop是一个开源的分布式计算框架，用于存储和处理大规模数据集。MongoDB是一个开源的文档数据库，用于存储和查询结构化和半结构化数据。
### Hadoop简介
Hadoop由Apache开发，是一个可靠、可扩展和高效的分布式计算框架。它的核心组件包括Hadoop Distributed
原创
2023-12-10 03:21:39
72阅读
常用的
hadoop配置文件笔记 一..core-site.xml<property>
<name>fs.default.name</name>
<value>hdfs://master:9000</value>
</property>
<!--ha
转载
2024-10-30 16:55:32
13阅读
HBase使用的是列存储，MongoDB使用的是行存储，对于行存储和列存储各有各的优缺点，对于大数据而言，进行快速的数据处理，列存储是必须的，但是就列存储而言，对于数据的完整性和对硬件的要求较高，然而，行存储的数据冗余是大数据处理的弊端，不优化，无法适应快速数据处理的要求。 PS：增加一些Hadoop和MongoDB的对比。Hadoop强于分布式存储及运算，分布式存储及运算，分布式存储及运算，主
转载
2024-11-01 08:49:27
16阅读
目录1. Nosql概述2. 什么式NoSQL3. NoSQL的四大分类 1. Nosql概述为什么要用Nosql大数据时代，一般的数据库无法进行处理了！2006年 HadoopHadoop 是一个由 Apache 基金会所开发的分布式系统集成架构，用户可以在不了解分布式底层细节情况下，开发分布式程序，充分利用集群的威力来进行高速运算与存储，具有可靠、高效、可伸缩的特点Hadoop简介Hadoo
转载
2023-08-15 22:28:57
88阅读
一. 与关系型数据库管理系统相比 1. 处理大数据 如果数据访问模式中包含大量的硬盘寻址,那么读取大量数据集就必然会花更长的时间(相较于流数据读取模式,流读取主要取决于传输速率)。另一方面,如果数据库系统只更新一小部分记录,那么传统的B树(关系型数据库中使用的一种数据结构,受限于寻
转载
2023-08-18 20:53:13
163阅读
高可用性即HA（High Availability）指的是通过尽量缩短因日常维护操作（计划）和突发的系统崩溃（非计划）所导致的停机时间，以提高系统和应用的可用性。一、高可用集群的解决方案高可用性即HA（High Availability）指的是通过尽量缩短因日常维护操作（计划）和突发的系统崩溃（非计划）所导致的停机时间，以提高系统和应用的可用性。计算机系统的高可用在不同的层面上有不同的表现：（1）
转载
2024-01-12 15:22:26
90阅读
总结一下mongodb、redis、memcache三者的区别：mongodb和memcached不是一个范畴内的东西。mongodb是文档型的非关系型数据库，其优势在于查询功能比较强大，能存储海量数据。和memcached更为接近的是Redis。它们都是内存型数据库，数据保存在内存中，通过tcp直接存取，优势是速度快，并发高，缺点是数据类型有限，查询功能不强，一般用作缓存。1.性能Redis和m
转载
2023-06-18 14:47:18
0阅读
1、性能 都比较高，性能对我们来说应该都不是瓶颈。总体来讲，TPS方面redis和memcache差不多，要大于mongodb。 2、操作的便利性 memcache数据结构单一：（key-value）redis丰富一些，数据操作方面，redis更好一些，较少的网络IO次数，同时还提供list，set，hash等数据结构的存储。mongodb支持丰富的数据表达，索引，最类似关系型数据库，支持的查询语
转载
2023-08-04 12:07:34
77阅读
现在的分布式项目基本都会用到Redis和MongoDB，可是Redis和MongoDB到底有什么不同呢，今天我就基于我们公司的项目来具体介绍一下Redis和MongoDB的各自的应用场景。首先我们这个项目中有两种应用场景：场景一：要求TPS（不知道的右转百度）特别高的，比如我们项目有一个点赞的功能，这个点赞的功能促发频率特别高，而且并发量也会特别大，但是它的数据量不会特别大。基于这种情况下，我们采
转载
2023-05-25 15:27:34
46阅读
一、关系型数据库：MySQL二、非关系型的数据库：MongoDB 和 Redis 三、Mysql MongoDB Redis 的适用场景 一、MySQLMySQL 是一个关系型数据库。MySQL在 WEB 应用方面 MySQL是最好的RDBMS(Relational Database Management&
转载
2023-06-07 14:57:01
157阅读
1. 优缺点: 1. MemCache: 1>优点：利用多核心优势，单实例吞吐量可达到几十万qps(日常4-6万) 适用于最大程度抗量 2>缺点：只支持简单的key/value结构，不
转载
2023-05-29 09:10:21
109阅读
一、概述MongoDB 更类似 MySQL，支持字段索引、where等查询，其优势在于查询功能比较强大，擅长查询 JSON 数据，且能存储海量数据，但是不支持事务。Redis 是一个开源（BSD许可）的，内存中的数据结构存储系统，支持多种类型的数据结构，可用作数据库，高速缓存和消息队列代理。 二、具体区别1、内存管理机制Redis 数据全部存在内存，定期写入磁盘，当内存不够时，可以选择指定的 LR
转载
2023-05-30 11:05:16
76阅读
所以总结一下，MongoDB 的适用场景为：数据不是特别重要（例如通知，推送这些），数据表结构变化较为频繁，数据量特别大，数据的并发性特别高，数据结构比较特别（例如地图的位置坐标），这些情况下用 MongoDB ， 其他情况就还是用 MySQL ，这样组合使用就可以达到最大的效率。 MongoDB和Redis区别
简介MongoDB更类似Mysql，支持字段索引、游标操作，其优势在于查询功能比较
转载
2023-05-25 15:28:18
49阅读
项目中用的是MongoDB，但是为什么用其实当时选型的时候也没有太多考虑，只是认为数据量比较大，所以采用MongoDB。最近又想起为什么用MongoDB，就查阅一下，汇总汇总：之前也用过redis，当时是用来存储一些热数据，量也不大，但是操作很频繁。现在项目中用的是MongoDB，目前是百万级的数据，将来会有千万级、亿级。就Redis和MongoDB来说，大家一般称之为Redis缓存、MongoD
转载
2023-05-25 12:45:18
78阅读
关系型数据库首选 mysql 文档型数据库首选 mongodb 内存型数据库首选 redis数据库的主要功能:1.存取 (主要技术有: 内存读写,文件读写,分布式文件读写,事务读写, 容灾备份,主从复制,消峰读写 ,读写锁保护,脏数据处理,读写分离 ,索引优化,物理逻辑分区 等等) 2.分析 ( 选取字段 ,条件过滤, 分组, 统计, 排序, 索引优化, MapReduce等 )这三种数据库必须
转载
2023-08-10 17:03:27
44阅读
都是非关系型数据库，性能都非常高，但是mongoDB和memcache、redis是不同的两种类型。后两者主要用于数据的缓存，前者主要用在查询和储存大数据方面，是最接近数据库的文档型的非关系数据库。这里我主要谈谈memcache和redis的区别。①从数据存储位置上来分，memcache的数据存在内存中，而redis既可以存储在内存中，也可以存储的到磁盘中，达到持久化存储的功能，memcache一
转载
2023-06-29 11:17:47
52阅读
