PART ONE前言目前数据湖已成为大数据领域最新热门话题之一,而什么是数据湖,每家数据平台和云厂商都有自己解读。整体来看,数据湖主要能力优势是:集中式存储原始、海量、多来源、多类型数据,支持数据快速加工及计算。相比于传统数据仓库,数据湖对数据有更大包容性,支持结构化/半结构化/非结构化数据,能快速进行数据落地和数据价值发掘。数据湖技术体系可以分为三个子领域:数据湖存储、数
一.Cockpit简介1.1基本介绍    Cockpit是一个免费且开源基于web管理工具,系统管理员可以执行诸如存储管理、网络配置、检查日志、管理容器等任务。通过Cockpit提供友好 Web 前端界面可以轻松地管理我们 GNU/Linux 服务器,非常轻量级,Web 界面也非常简单易用。更重要是通过Cockpit可以实现集中式管理。1.2 功能特点下
转载 2024-07-17 10:51:09
187阅读
一.Cockpit简介1.1基本介绍    Cockpit是一个免费且开源基于web管理工具,系统管理员可以执行诸如存储管理、网络配置、检查日志、管理容器等任务。通过Cockpit提供友好 Web 前端界面可以轻松地管理我们 GNU/Linux 服务器,非常轻量级,Web 界面也非常简单易用。更重要是通过Cockpit可以实现集中式管理。1.2 功能特点下面是 Cockpit一些功能
原创 2021-03-10 09:40:24
2854阅读
一、ckman简介通过网页端可视化界面,ckman可以非常便捷完成集群导入、部署、节点增删以及性能指标的监控等功能,可以大大简化集群部署操作流程,从而起到事半功倍效果。二、ckman架构  ckman支持多中心部署,使用nacos进行配置同步,可以对多个集群进行管理,在集群每个节点下,如果配置node_exporter,则可以对对应节点进行指标监控。node_exporter数据
转载 2024-04-12 22:41:09
80阅读
照章节目录,本周主题是SSD。在外面,介绍SSD文章非常之多,在我文章里面就不重复其他地方介绍过知识了。赶在睡觉时间之前发出来,希望大家能够轻轻松松了解点知识,然后合眼睡觉~在本篇文章中,我想着重分析以下几个问题:1.在不同厂商实现中,SSD读写iops为什么会有如此之大差距?2.SSD优势在于没有寻道时间了,为什么4K随机写还会是个性能大瓶颈?3.FLASH控制器,看来成败就看
系统整体对比开源协议说明 GPL:不允许修改后和衍生代码做为闭源商业软件发布和销售,修改后该软件产品必须也采用GPL协议; GPLV2:修改文本整体就必须按照GPL流通,不仅该修改文本源码必须向社 会公开,而且对于这种修改文本流通不准许附加修改者自己作出限制; GPLV3:要求用户公布修改源代码,还要求公布相关硬件;LGPL:更宽松GPL TFS TFS(Taobao File S
SATA1.0:理论数据传输速率为1.5Gbps,约150MB/s. SATA2.0:理论数据传输速率为3Gbps,约300MB/S. SATA3.0 :理论数据传输速率为6Gbps,约600MB/S. USB2.0:理论数据传输速率为480Mbit/s。 USB3.0:理论数据传输速率为4.8Gb/s。 当前主要厂商磁盘产品读写速度。 SATA1.0普通硬盘:数据传输率约60MB/
转载 2010-04-01 14:26:19
2562阅读
近线存储是PACS首选 [导读]医疗PACS通常采用近线存储结构,将非常用数据采用磁带或光盘作为存储介质,通过完善联机索引机制以及磁盘缓存机制,使磁带或光盘中数据在访问时可以获得接近在线数据访问性能。 标签:近线存储 PACS 卫生信息化三个重要产业目标 医疗PACS(PictureArchivingandCommunicationSystem,医疗影像存储与传输系
转载 2023-09-12 17:17:14
209阅读
网络设备存储介质通常有:FLASH、NVRAM、CF卡   Flash:用于存放启动时引导程序文件BootWare,剩余空间用于BOOTWARE备份和系统重要参数存储 NVRAM :用于存储系统运行时异常信息。 通常为128K   CF卡:用于存放整机软件系统和配置文件,内置CF卡缺省为256MB,系统标识cfa0,处于机器内部,外部不可见 外置CF卡可选
原创 2010-12-22 13:08:43
1089阅读
上次介绍了磁盘,这篇来介绍一下RAID要介绍RAID技术原因,其实是因为目前大部分分布式存储在做事情其实RAID在很多年前就已经做到了,所以如果你希望做存储相关事情,那么RAID是必须要理解,但不一定要用到概念:)计算机要存储和读取数据,主要依托这么两个部件:1.通信管道和通信协议,心灵感应还需要靠电波通信呢不是?~一般来说这通信管道在计算机内就是总线,使用电信号,在计算机外则很多选择,可
原创 2013-08-26 10:31:00
844阅读
市面上常见存储介质有CF卡、SD卡、SM卡、记忆棒(Memory Stick)、xD卡和小硬盘(MICRoDRIVE)。 1、CF卡 CF卡(Compact Flash)是1994年由SanDisk最先推出。CF卡具有PCMCIA-ATA功能,并与之兼容;CF卡重量只有14g,仅纸板火柴般大小(43mm x 36m x m3.3mm),是一种
转载 2024-03-18 09:49:14
57阅读
      最近有朋友向我抱怨,现在U盘难用,拷贝一部电影要很长时间,而爱U的人知道存储介质现在市场很泛滥,不是所有的U盘都能达到我们想要读取速度,我们也因此发了不少钱购买这系列产品,特别是在校大学生,U盘可以说是我们常用工具,拷电影,拷做好作业可以说离不开存储介质,移动硬盘解决了我们不少人问题,但是绝大部分同学还是觉得它体积大,和笔记本电脑一样
原创 2014-03-21 15:15:36
635阅读
按需配置,不要作用在虚拟化服务器区域
原创 2022-06-04 00:47:42
125阅读
已知常用5中存储方式: 1.File I/O 2.SQLite 3.Preferences 4.Con
原创 2022-11-04 11:26:07
194阅读
在本章,我们稍微涉及一些硬件和操作系统层面的事情。计算机是由硬件和软件组成,而所有软件唯一目标就是尽可能最大化利用下层硬件能够提供特性,完成上层功能。所以才会有人说,硬件是骨头,软件是血肉,骨头决定生物形态,软件决定生物神态。不过,依然请放心,我们不会讨论复杂东西,作为一个软件工程师,也没有人会要求我们去写一个磁盘存储硬件驱动代码~在这里,我们只讨论那些为了后面我们理解软件存储
# 关于cockpit学习 ## 背景 ``` 使用node-exporter 可以监控很多资源使用情况 但是这个需要搭建一套prometheus和grafana工具 并且每个机器都需要安装一套node-exporter进行数据dump cockpit 是红帽开发一套监控组件, 可以监控网络
原创 2023-06-10 01:03:21
190阅读
前言    近期爆出Zabbix有严重bug,加上一直对zabbix性能、UI不满。所以这次想钻研一下最近很火open-falcon,源于小米公司开源项目,赞一个。一、官网介绍        监控系统是整个运维环节,乃至整个产品生命周期中最重要一环,事前及时预警发现故障,事后提供翔实数据用
摘要 数据存储方式对应用程序整体性能有着极大影响。对数据存取,是顺利读写还是随机读写?将数据放磁盘上还将数据放flash卡上?多线程读写对性能影响?面对着多种数据存储方式,我们如何选择?本文给大家提供了一份不同存储模式下性能测试数据,方便大家在今后程序开发过程中可以利用这份数据选择合适数据存储模式。
原创 2011-06-10 07:06:58
3427阅读
1. 电脑内存非永久性举例:xbox 电源线拔掉后,内存里面的数据都会丢失内存(Memory),又叫「易失性」存储器2. 存储器(Storage)任何写入「存储器」数据,比如硬盘,数据会一直存在,直到被覆盖或者删除,断电也不会消失存储器是「非易失性」举例:U 盘3. 打孔纸卡、打孔纸带最早存储介质1940 年代,纸卡标准是 80 列 * 12 行,一张纸卡可以存储 960 位数据最大纸卡程
文章目录四、存储服务存储服务1、存储定义2、存储方式3、4、存储方式一、EVS云硬盘特点性能指标二、对象存储服务(OBS):三、SFS弹性文件服务(Scalable File Service,SFS)文件按类型1、SFS2、SFS Turbo弹性文件服务SFS与对象存储服务OBS、云硬盘EVS之间对比四、云备份(Cloud Backup adn Recovery,CBR)应用场景1、云服务器备份
  • 1
  • 2
  • 3
  • 4
  • 5