存储之道-51CTO博客

存储之道

237W+
人气
136
文章
0
关注
159
粉丝

博客之星
专家博主

关注私信

原创 136
翻译 0
转载 0
评论 152
点赞 198

全部

原创
说说存储虚拟化技术(2)
1

来自存储老吴的博客——存储之道概述存储虚拟化技术其实不是一个特别新的东西，在很早以前就有了存储虚拟化技术。存储技术发展到今天，虚拟化技术在SSD、RAID、Volume、Scaleout等各个方面都发挥了巨大的作用。记得在2006年的时候，我们实验室做了一个非常宏大的项目叫VSDS，这个项目就是一个典型的存储虚拟化项目。在这个项目中，采用了大量的存储虚拟化技术。首先将磁盘进行虚拟化，通

wuzhongjie 发布于：2015-07-31

阅读 2898

评论 0

收藏 4
原创
说说存储虚拟化技术(1 )
0

存储虚拟化技术其实不是一个新东西，在很早以前就有了存储虚拟化技术。技术发展到今天，在存储虚拟化技术之上又诞生了其他很多新的概念和技术。记得在2006年的时候，我们实验室在做一个非常宏大的项目叫VSDS，这个项目就是一个典型的存储虚拟化项目。在这个项目中，采用了大量的存储虚拟化技术。首先将磁盘进行虚拟化，通过池化的方式将所有磁盘存储资源进行管理，然后再将磁盘存储池中的资源分配给系统中的存

wuzhongjie 发布于：2015-07-31

阅读 10000+

评论 0

收藏 1
原创
SSD上如何进行数据保护？荐
2

来自存储老吴的博客--存储之道闪存技术的发展使得其成本下降、容量增加，越来越多的企业级用户也都在考虑如何将闪存SSD技术应用到自己的环境中去，从而解决性能、功耗、体积等存储常见问题。前几年闪存技术主要在互联网领域得到了大量应用，其主要原因在于互联网需要面临大量的访问IO压力，传统的磁盘存储系统无法提供高IOPS的能力，所以，只能借助闪存的高性能来解决互联网发展过程中的难题。所以，今天闪

wuzhongjie 发布于：2015-07-28

阅读 2126

评论 0

收藏 0
原创
镁光256Gb NAND Flash芯片介绍
2

总体概述该芯片是一款典型的大容量NAND Flash存储颗粒，支持Open NAND Flash Interface (ONFI) 2.1的接口标准，采用ONFI NANDFlash的操作协议。该芯片采用Multiple-level Cell （MLC）技术，根据不同的容量，一个芯片内部封装了多个DIE（LUN），每个DIE由两个Plane构成，一个Plane可以分成2048个Block，每个Bl

wuzhongjie 发布于：2015-06-28

阅读 10000+

评论 0

收藏 1
原创
谈谈软件定义存储荐
5

在存储领域，最近一段时间出了太多的新概念，其中包括“软件定义存储”、“Server SAN”以及“云存储”等。很多概念把大家弄的云里雾里，不知所云。那到底什么是软件定义存储？什么是Server SAN？什么是云存储？其实很多存储厂商都没有很好的定义，行业也没有一致的清晰定义。市场、媒体给出的很多都是宏观的解释。在这样一个概念满天飞的年代，不仅用户感觉到困惑，而且技术人员同样会看不清楚未来的技术方向

wuzhongjie 发布于：2015-06-13

阅读 10000+

评论 3

收藏 2
原创
海量数据备份归档技术及系统荐
2

在去年的一个数据备份的会议上，我和参会人员分享了数据备份系统的相关技术。其中一个观点是随着闪存技术的不断发展，总有一天闪存会成为一种主流的备份介质，其主要原因在于闪存介质的高密特性以及故障的可预测性。当然，由于闪存介质天生的缺陷，在没有强大软件支撑的前提下，目前无法满足备份系统长期数据可靠性的需求。闪存技术发展到今天，面向Nand Flash的FTL技术日趋成熟，而面向SSD的系统级软

wuzhongjie 发布于：2015-04-20

阅读 2228

评论 2

收藏 0
原创
非易失内存技术NVDIMM 荐
1

从技术的角度来看，NAND Flash闪存介质虽然存在擦写次数寿命的问题，但是，配合软件算法、系统级的数据保护技术，NAND Flash的寿命问题变得不再是一个棘手的问题，而NAND Flash更多的优势成为该项技术向前推进的重要动力。采用NAND Flash构建的SSD正快速的替代传统磁盘，已经大面积的在互联网领域得到应用，并且不断向对数据可靠性有要求的企业级市场***。 SSD和传统磁

wuzhongjie 发布于：2015-03-07

阅读 10000+

评论 0

收藏 0
原创
中国闪存论坛演讲报告——全闪存阵列技术
0

今年10月份的时候参加中国闪存论坛，并有幸通过分论坛演讲的形式和很多朋友一起分享了闪存存储技术。最近一段时间一直在从事闪存存储系统方面的研发，从产品、市场、应用和技术的角度对闪存存储进行过深入的思考，思考之后越发觉得存储的未来在于闪存或者严格意义上说在于半导体介质。这种新型介质的引入，对存储系统的研发、应用都产生了革命性的变化。传统存储技术不能直接满足新介质的需求；新介质的引入对存储技术提出了很多

wuzhongjie 发布于：2014-12-15

阅读 1237

评论 0

收藏 0
原创
地铁事件对系统稳定性、可用性的思考
1

昨天晚高峰发生在北京地铁上的一件事情让我心里一直很难受，一个年轻的生命在地铁的两个自动门之间被夹身亡。姑且不论受害者的家属是什么样的一个心情，作为一个普通人，都会觉得非常的惋惜和愤恨。为什么地铁门不止一次的夺走了一条又一条的生命？不要以为这是一个“低概率事件”而默认事情的合理性。如果我们尊重人的生命，那么即使再低的概率也是付出了极高的代价，这种事情就不应该发生。地铁夹人夺走生命的事情已

wuzhongjie 发布于：2014-11-08

阅读 1266

评论 0

收藏 0
原创
Linux为何需要为全闪阵列做特殊优化？荐
0

这周一参加了在小米公司举办的China Linux Storage and File system workshop会议。该会议主要探讨Linux中的相关存储技术，例如文件系统和RAID等技术，交流的比较多的还是文件系统技术。在这个会议上我代表memblaze做了一个来自产业界的技术交流，主要针对全闪阵列的需求，提出了对Linux中的一些优化需求。应朋友的要求，在此对所做报告作一个简单的介绍，起到

wuzhongjie 发布于：2014-10-25

阅读 2277

评论 0

收藏 0
原创
中国闪存论坛有感
4

今天有幸参加了存储届的又一行业盛典中国闪存论坛。学术界、工业界的很多人给出了自己使用闪存、采用闪存优化应用、闪存产品、闪存技术的独特见解。我也有幸通过分论坛给出了自己对闪存技术的一些理解和想法，特别是全闪存阵列的技术发展和挑战。今天也听了很多的技术报告，其中，最吸引我的还是华中科技大学给出的《新型非易失存储器件研究与应用趋势分析》报告。在此和大家简单分享一下。毫无疑问，半导体存储是下一代的主流存储

wuzhongjie 发布于：2014-10-23

阅读 1895

评论 2

收藏 0
原创
一个IO的传奇一生（14）—— Linux中的MD开源RAID（2）
0

续《一个IO的传奇一生（13）—— Linux中的MD开源RAID（1）》 4.6 make_request函数说明函数原型：static int make_request (request_queue_t *q, struct bio * bi)参数：*q，请求队列

wuzhongjie 发布于：2014-09-07

阅读 3945

评论 0

收藏 0
原创
一个IO的传奇一生（13）—— Linux中的MD开源RAID（1）
1

1、前言 RAID是IO路径中的关键模块，甚至在整个存储系统中，RAID是最为核心和复杂的模块。在Linux操作系统中，提供了一个开源的RAID，那就是MD RAID。该RAID可以实现RAID0、RAID1、RAID5和RAID6的功能，在产业界得到了广泛的应用。MD RAID对外采用块设备的形式导出，因此，通过块设备层的调度，BIO请求会被发送到RAID模块进行进一步的IO处理。在M

wuzhongjie 发布于：2014-08-31

阅读 8987

评论 3

收藏 0
原创
双重编解码算法对比荐
1

概述双重编解码算法是实现数据保护的关键技术。磁盘阵列中的常用算法是RAID6，其属于Reed-solomon算法范畴。RAID6算法计算复杂度较高，往往需要硬件加速单元的支持。随着闪存技术的发展，新的编解码技术层出不穷，因此有必要了解常用阵列技术的双重编解码算法，通常来讲，常用双重编解码算法主要有如下三种： 1，二维（2D）奇偶校验方法2，EVEN-ODD编码校验法3，Reed-Solo

wuzhongjie 发布于：2014-08-30

阅读 1979

评论 0

收藏 0
原创
如何挖掘NAND Flash的IO性能荐
0

NAND Flash芯片是构成SSD的基本存储单元，NAND Flash芯片工艺的发展、结构的变化将会推动整个闪存存储产业的高速发展。在设计闪存存储系统的时候，特别是在设计NAND Flash控制器、SSD盘或者卡的时候，都需要深入的了解NAND Flash的操作方法、接口命令及其时序。一个NAND Flash芯片虽然非常小，采用LGA或者TSOP的封装形式，但是，其内部结构还是非常复杂的。特别是

wuzhongjie 发布于：2014-08-24

阅读 10000+

评论 0

收藏 0
原创
剖析XtremIO的XDP技术
2

在闪存上如何建RAID是存储行业一直关心的一个问题。大家知道传统RAID是不能直接部署到SSD盘上去的，除非采用RAID0或者RAID1的配置方式。如果强行把RAID5或者RAID6部署到SSD上，那么SSD的写放大问题将会变得尤为突出，SSD盘的使用寿命将大打折扣。因此，如何在SSD的基础上构建RAID成为闪存阵列需要考虑的一个问题。 EMC的XtremIO系统是一款非常典型的全闪存阵

wuzhongjie 发布于：2014-08-22

阅读 2775

评论 3

收藏 0
原创
华为Dorado全闪存阵列荐
3

要问存储届最近最热门的技术是什么？那当属闪存存储技术。要问最近最热门的存储产品是什么？那一定当属全闪存阵列。无论是存储寡头还是初创企业，大家都把目光投向了全闪存阵列。为什么全闪存阵列会有如此大的价值呢？个人认为主要有如下几个方面：1, 随着半导体制程、3DNAND Flash技术的发展推进，NAND Flash无论在成本上还是在容量上都向着有利的一面高速发展。闪存的每GB成本在以每年20%左右的速

wuzhongjie 发布于：2014-08-10

阅读 5115

评论 4

收藏 0
原创
昆山事件的思考
3

在硅谷出差的时候经常要去购物，买一些手表、电子产品、衣服还有一些吃的。每周一上班的时候都会和美国同事分享一下购物的经历，一方面找一些谈资和美国同事增进感情；另一方面也可以互相分享一下购物经验。在交流的过程中，美国同事都会提到这些东西都是“made in china”。他们很不解为什么我一个中国人需要到美国去买“made in china”的东西，不仅质量好，而且还便宜。我也不解，但是通过其他事件，

wuzhongjie 发布于：2014-08-03

阅读 917

评论 0

收藏 0
原创
全闪存阵列市场解析
0

alan.wu@aliyun.com (吴忠杰) 最近，EMC的XtremIO全闪存阵列市场表现强劲，在短短的六个月之内，给公司带来了超过1亿美元的销售额，成为EMC增长最快的一个产品线。XtremIO这么好的市场表现甚至都超过了公司的预测，并且有望成为2014年闪存阵列的全球销售冠军。XtremIO这么好的表现是否说明全闪存阵列的春天到了呢？种种迹象表明，全闪存阵列市场发展

wuzhongjie 发布于：2014-07-17

阅读 1284

评论 0

收藏 0
原创
计算和存储的融合荐
5

alan.wu@aliyun.com 记得2000年初的时候，中科院计算所的一位同事发表了一篇文章，观点是计算和存储的分离。在那个年代SAN和NAS正在兴起，存储的管理慢慢从服务器中分离出来，独立发展。从而形成了以块接口为代表的存储局域网络（SAN）和文件为接口的网络附属存储（NAS）。当存储从计算资源中分离出来之后，IT架构演化成如下结构： NAS存储网络提供文件

wuzhongjie 发布于：2014-07-08

阅读 4048

评论 2

收藏 1
原创
硅谷的支点: 斯坦福大学
1

今天在整理照片的时候，翻阅出了很多在美国出差时候的照片。景色特别美丽的几张照片是在斯坦福大学拍的。每次去硅谷出差，必去的一个地方就是斯坦福大学。景色宜人是吸引我的一个原因。更为重要的是，斯坦福大学作为硅谷的支点，支撑起了整个硅谷的技术发展。斯坦福大学创新的精神直接或者间接的推动了硅谷的发展。出差硅谷，呼吸一下斯坦福大学的空气，也能让在生活在雾霾下的肺好好净化一下。

wuzhongjie 发布于：2014-06-30

阅读 1507

评论 2

收藏 0
原创
备份领军产品DataDomain
0

1、概述... 12、开创磁盘备份的新模式... 23、重复数据删除... 44、破解磁盘瓶颈点... 45、全局数据消重文件系统DDFS. 66、CPU-Centric存储系统... 77、数据无损体系结构... 98、高效的远程数据复制... 109，小结... 11 1, 概述长期以来备份存储领域被磁带介质所统治，其主要原因有两个方面。第一，磁带

wuzhongjie 发布于：2014-06-27

阅读 4804

评论 0

收藏 0
原创
分布式一致Hash算法荐
6

alan.wu@aliyun.com 在分布式存储中面临的一个重要问题是如何在多个存储节点上分布数据。了解GFS之类文件系统的同学都知道可以采用元数据服务器（MS）的方式决定数据块在存储节点上的分布映射。采用元数据服务器方式可以很好的将数据和元数据分离，访问文件系统命令空间的时候，可以直接从元数据服务器上获取文件的映射信息。基于MS的分布式存储架构如下图所示：基于

wuzhongjie 发布于：2014-06-26

阅读 10000+

评论 4

收藏 0
原创
可以在SSD上建传统RAID吗? 荐
8

当被问及“在SSD上能否建传统RAID”这个问题的时候，大家的第一反应应该是“可以建，但是需要Trim命令的支持”。在网上也可以看到很多人拿SSD来建RAID，但基本上都会配置成RAID0或者RAID1。很少有人会去建RAID5，这是为什么呢？答案很简单，在SSD基础上如果配置类似于RAID5这样的Parity-RAID，那么SSD的整体性能不能很好的发挥出来，更为重要的是Parity-RAID会

wuzhongjie 发布于：2014-06-24

阅读 10000+

评论 6

收藏 0
原创
看固态存储厂商在硝烟四起的市场中如何发展？
2

alan.wu@aliyun.com 前两天sandisk以11亿美元收购了独领风骚若干年的Fusion-io。熟悉企业级固态存储的看官都应该熟悉Fusion-io。这是一家非常创新的企业，最早推出了采用PCIe为接口的固态存储卡，并且将其部署到服务器中，为数据库等对延迟有要求的应用进行加速，起到了非常好的效果，更为重要的是在fusion-io的引领下，PCIe接口逐渐演变成

wuzhongjie 发布于：2014-06-22

阅读 961

评论 1

收藏 0
原创
NAND Flash操作技术详解荐
0

NAND Flash是构成固态存储的基本存储单元其采用IO的接口方式与控制器相连。控制器对NAND Flash进行操作时需要通过命令交互的方式对NAND Flash进行操作。下面对NAND Flash的操作进行解析可以发现在研发FTL的时候可以充分发掘NAND Flash提供的操作命令来优化读写性能。分析介绍的NAND Flash以Micron提供的MT29F16G08AA为蓝本。该芯片能够提供1

wuzhongjie 发布于：2014-06-22

阅读 10000+

评论 0

收藏 0
原创
神秘的Flash Translation Layer （FTL）
4

如果仅仅是SSD的使用者，一定不会在意在SSD内部居然还存在一个复杂的软件层Flash Translation Layer（FTL）。其实就是这个FTL才是SSD固态硬盘的软件核心技术。正因为有了FTL，NAND Flash才能被当成硬盘来使用；文件系统才可以直接把SSD当成普通块设备来使用。由于FTL是SSD设计厂商最为重要的核心技术，因此，没有一家厂商愿意透露这方面的技术信息，并且

wuzhongjie 发布于：2014-06-16

阅读 10000+

评论 2

收藏 1
原创
Flash存储的故事荐
0

Flash存储是存储界的新人和红人。Flash存储系统由于其优异的性能、高效的存储密度和出色的节能特性使得Flash存储有望替代机械磁盘成为企业级存储的核心。未来很有可能所有的数据都会存储在Flash存储介质上面，包括银行、中小企业、互联网、电信等存储大户。当年沉迷于电子设计的时候，没有想到一个小小的Flash居然能够做成一个新兴的存储产业。做电子设计的时候，很多时候需要用到存储芯片，比较老的存储

wuzhongjie 发布于：2014-06-14

阅读 2225

评论 0

收藏 0
原创
采用NAND Flash设计存储设备的挑战在哪里?
1

对于搞电子设计的工程师而言，NAND Flash是再熟悉不过的东西了。在电子设计的时候，NAND Flash通常作为大容量存储介质，可以类比为PC系统中的磁盘。在电子设计领域，对于小容量存储，还可以采用EEPROM之类的芯片；对于程序存储，可以选择NOR Flash。NOR Flash和NAND Flash之间的差别网上有过很多的讨论，在此不一一列数。NAND Flash作为大容量存储，替代磁盘存

wuzhongjie 发布于：2014-06-12

阅读 10000+

评论 0

收藏 1
原创
Intel NVMe SSD新产品一探究竟荐
0

前两天Intel发布了新一代的PCIe-SSD，Intel作为信息产业的动力引擎，此次事件不得不高度关注和重视。从2008年开始算起，这是Intel第三次发布固态存储盘了。2008年，Intel发布了SATA接口的固态存储盘X25-M。那款产品令我印象深刻，2008年市场上已经有很多SATA接口的SSD盘了，只是企业级的固态盘还很少。那年，我正在开发基于SSD的缓存系统，因

wuzhongjie 发布于：2014-06-10

阅读 2012

评论 0

收藏 0

首页
上一页
1
2
3
4
5
下一页
末页
共136条记录

wuzhongjie

分享到朋友圈

这个家伙比较懒，还没有个人介绍

关注技术：嵌入式开发存储 Linux
入住博客：2011-09-30 9.3年

七日热门: 使用Function和eventgrid实现storage account log的自动分析和转换; ITIL 4：服务目录管理; golang 发送post请求其body中json对象使用变量作为value; IDA调试修改内存数据; 100道Java并发和多线程基础面试题大集合（含解答），这波面试稳了~

最新文章: FlashRAID技术白皮书; 报告：NVMe存储系统机遇与挑战; NVMe闪存存储系统设计挑战; NVDIMM在闪存存储中的应用探讨; 面向数据可靠性存储系统设计思想探讨

最新评论: NVMe闪存存储系统设计挑战

wuzhongjie：I have added your wechat, we can talk in detail; 面向数据可靠性存储系统设计思想探讨

wx5ab04b73845f4：才发现您的博客，非常的赞同。非常荣幸能和您有一段时间的合作，为存储二战。目前虽然暂时不能密切合作，但精神不变，大家一起为可靠存储二战。; NVMe设备的性能有多高?

wz2013jy：在超融合存储架构当中，如果用NVME做第一层cache，普通SSD和SAS做第二和第三层，也可以得到不错的性能; RAID2.0核心思想：数据保护与物理资源管理域分离

旭日青海：RAID2.0技术是基于块的存储模式，通过将底层的磁盘切割成均匀大小的存储块CK，多个CK按照一定的规则组成CKG，然后再将CKG切割成extent，多个extent组成Volume卷，最后形成LUn。由于损坏级别是最小的CK块，所以数据重构和恢复时间想对于传统磁盘快了很多。当然由于磁盘的增加，CK坏掉的几率也大大增加，当坏掉的CK达到一定级别，硬盘就会告警、报废了。; SSD内部的IO抖动因素

wuzhongjie：以后会写一些NAND特性相关的文章，多多交流~

最近来访