51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
信创认证
公众号矩阵
移动端
视频课 免费课 排行榜 短视频 直播课 软考学堂
全部课程 软考 信创认证 华为认证 厂商认证 IT技术 PMP项目管理 免费题库
在线学习
文章 资源 问答 课堂 专栏 直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
CKA（Kubernetes 管理员认证）精品班
按照企业k8s需求进行技能培训，帮助用户快速拿下CKA认证，K8S采用新版本进行授课，课程内容全、讲解详细 。 免费试学
软考高级：系统架构设计师精品班
根据考试大纲对知识点、高频考点进行深入讲解，传授答题技巧及判断标准，助力高效备考。 免费试学
信创认证：系统架构师精品班（高级）
信息技术应用创新人才考试评价 免费试学

EC 算法 hdfs
ECDHE“短暂 - 椭圆曲线 - 迪菲 - 赫尔曼”算法（ephemeral Elliptic Curve Diffie–Hellman）离散对数（ Discrete logarithm）离散对数里的一个核心操作是模运算，取余数 举例 假设有模数 17，底数 5，那么“5 的 3 次方再对 17 取余数得 6”（5 ^ 3 % 17 = 6）就是在离散整数域上的一次指数运算（5
EC 算法 hdfs
https
离散对数
服务器
暴力破解
转载
智能开发者
4月前
31阅读

HDFS EC
为了实现降本增效，京东HDFS 团队在 EC 功能的移植、测试与上线过程中，基于自身现状采取的一些措施并最终实现平滑上线。同时自研了一套数据生命周期管理系统，对热温冷数据进行自动化管理。在研发落地过程中还构建了三维一体的数据校验机制，为 EC 数据的正确性提供了强有力的技术保障。本文详细介绍在研发一个复杂系统时，如何基于实际情况进行取舍，并确立行动准则。在功能上线过程中，要保持对线上系统的敬畏，确
HDFS EC
hadoop
数据
HDFS
数据块
转载
doscommand
9月前
72阅读

ec使用 hadoop ec hdfs
副本机制的利弊HDFS是一个高吞吐、高容错的分布式文件系统，但是 HDFS 在保证高容错的同时也带来了高昂的存储成本，比如有 5T的数据存储在 HDFS 上，按照 HDFS 的默认 3 副本机制，将会占用 15T 的存储空间。那么有没有一种能达到和副本机制相同的容错能力，但是能大幅度降低存储成本的机制呢？那就是在 HDFS 3.x 版本引入的纠删码机制。纠删码（Erasure Coding 简称
ec使用 hadoop
Hadoop
HDFS
数据
数据块
转载
架构设计师之光
2023-07-21 20:58:15
278阅读

hdfs ec恢复 hdfs修复
在前面的文章 《HDFS DataNode 设计实现解析》中我们对文件操作进行了描述，但并未展开讲述其中涉及的异常错误处理与恢复机制。本文将深入探讨 HDFS 文件操作涉及的错误处理与恢复过程。读异常与恢复读文件可能发生的异常有两种：读取过程中 DataNode 挂了读取到的文件数据损坏HDFS 的文件块多副本分散存储机制保障了数据存储的可靠性，对于第一种情况 DataNode 挂了只需要失败转移
hdfs ec恢复
后端
大数据
网络
数据
转载
mob64ca1401464d
2024-02-27 16:24:06
126阅读

hdfs ec 命令 hdfs cp命令
HDFS中的命令行    本文介绍了HDFS以命令行执行的时候。几个经常使用的命令行的作用和怎样使用~1. fsfs是启动命令行动作,该命令用于提供一系列子命令。使用形式为hadoop fs –cmd <args>当中，cmd是子命令，args是详细的命令操作。比如hadoop fs –help或者说fs是其余子命令的父亲。其余都是在“-cmd”的模式下的！2. –
hdfs ec 命令
大数据
hadoop
目标路径
命令行
转载
数据探索家
2024-04-28 11:23:39
32阅读

hdfs ec纠删码技术
 注意空格，有的命令少空格 随着云计算业务的快速发展，国内外云计算企业的专利之争也愈发激烈。在云计算这样的技术领域，专利储备往往代表着企业最新的技术实力。本文将与大家共同分享云计算领域的最新技术与解决方案。　　一、纠删码原理　　纠删码(Erasure Coding，EC)是一种编码容错技术，最早是在通信行业解决部分数据在传输中的损耗问题。其基本原理就是把传输的信号分段，加入一定
hdfs ec纠删码技术
数据
配置文件
数据块
转载
风华绝代的java
4月前
43阅读

hadoop的ec算法
# 学习Hadoop的EC算法 在分布式计算和数据存储的领域，Hadoop是一个非常强大的工具，而EC（Erasure Coding）算法则是提升数据存储效率与可靠性的重要算法。对于刚入行的小白来说，学习用Hadoop实现EC算法的过程主要分为以下几个步骤： ## 流程概述 | 步骤 | 描述 | |------|-------------------
Hadoop
bash
HDFS
原创
mob64ca12d74a10
2024-08-13 07:04:27
100阅读

vivo HDFS EC大规模落地实践
EC编码能够对部分缺失的数据进行数据恢复，广泛应用于存储与通信领域。vivo目前HDFS集群节点达万台级别，数据规模接近EB级别，并且业务数据规模还在以较高速度持续增长中。在推进压缩算法缓解存储压力的同时，EC编码的推进是存储降本的一大有力手段。 ...
数据
HDFS
校验和
转载
mob64ca140e76c8
14天前
416阅读

vivo HDFS EC 大规模落地实践
EC编码能够对部分缺失的数据进行数据恢复，广泛应用于存储与通信领域。vivo目前HDFS集群节点达万台级别，数据规模接近EB级别，并且业务数据规模还在以较高速度持续增长中。在推进压缩算法缓解存储压力的同时，EC编码的推进是存储降本的一大有力手段。
HDFS
大数据
Erasure Coding
大数据计算与存储
原创
vivo互联网
14天前
47阅读

java ec算法是什么
# 如何实现 Java EC 算法 **初学者指南** EC（Elliptic Curve，椭圆曲线）算法是一种用于加密和签名的高效算法。在这篇文章中，我将引导你理解 Java 中的 EC 算法，并逐步实现一个简单的例子。我们将分为几个步骤进行，这样有助于你理清思路。 ## 流程概述 下面是我们将遵循的步骤： | 步骤 | 描述 | |--
数据
java
ci
原创
mob64ca12d36217
10月前
91阅读

ec java 算法 java epoch
在之前的文章我们介绍了一下 Java 中的包装类，本章我们来看一下 Java 中的日期操作。 在我们日常编程中，日期使我们非常常用的一个操作，比如读写日期，输出日志等，那接下来我们就看一下 Java 中的日期操作。
ec java 算法
Java
System
java
转载
恋上一只猪
2023-07-11 11:20:54
84阅读

ECC算法实现python ceph ec算法
Crush算法1、Crush的目的      优化分配数据，高效的重组数据，灵活的约束对象副本放置，硬件故障时候最大化保证数据安全2、流程        Ceph 架构中，Ceph客户端是直接读写存放在OSD上的RADOS Object，因此，Ceph需要走完(Pool, Object) → (Pool, PG) → OSD s
ECC算法实现python
数据
子节点
ci
转载
AIGC创想家
2024-01-26 10:07:58
87阅读

java 实现EC算法 java equas
一句话概括：==比较的是两个对象的引用（即内存地址）是否相等，而equals()比较的是两个对象的值（即内存地址里存放的值）是否相等。当然equals()在个别类中被重写了那就例外了。详细论述：eqauls 与 = =之异同1）比较方式角度：= =是面向过程的操作符；equals是面向对象的操作符= =不属于任何类，equals则是任何类（在Jav
java 实现EC算法
equals
java
primitive
object
转载
IT狼人9号
2023-09-29 15:00:17
68阅读

hdfs EC纠删码 hadoop 纠删码
目录：1.  背景2. 纠删码(Erasure Coding)介绍3. 纠删码(Erasure Coding)原理4. 总结 一. 背景随着大数据技术的发展，HDFS作为Hadoop的核心模块之一得到了广泛的应用。为了系统的可靠性，HDFS通过复制来实现这种机制。但在HDFS中每一份数据都有两个副本，这也使得存储利用率仅为1/3，每TB数据都需要占
hdfs EC纠删码
hadoop3
EC
数据
数据块
转载
梦断蓝桥魂
2024-08-02 10:33:20
112阅读

hdfs ec模式机架感知 hadoop机架感知原理
　　　　　　　　　　　　　　　　　　　　　　Hadoop基础-网络拓扑机架感知及其实现　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　作者：尹正杰版权声明：原创作品，谢绝转载！否则将追究法律责任。    一.网络拓扑结构　　在本地网络中，两个节点被称为“彼此近邻”是什么意思？在海量数据处理中，其主要限制因素是节点之间数据的
hdfs ec模式机架感知
大数据
java
shell
hadoop
转载
云端筑梦师
2024-02-23 11:06:12
94阅读

HDFS 纠删码技术（Erasure Coding, EC）详解 - 指南
HDFS 纠删码技术（Erasure Coding，简称 EC）是 HDFS 为解决传统副本机制存储效率低的问
HDFS
数据
原始数据
转载
代码工匠传奇
1月前
380阅读

java ec椭圆曲线算法中协商密钥
1.引言2.数学概念2.1 同余式数学上，同余（英语：congruence modulo，符号：≡）是数论中的一种等价关系。当两个整数除以同一个正整数，若得相同余数，则二整数同余。同余是抽象代数中的同余关系的原型。两个整数a,b,若它们除以正整数m所得到的余数相等，则称a,b对于模m同余，记作a≡b (mod m)。读作a与b关于模m同余。（例 26≡14(mod&n
java ec椭圆曲线算法中协商密钥
算法
安全
哈希算法
模运算
转载
代码探险家
8月前
31阅读

android中 产生ec算法的密钥对
最近，有收到不少站长关于部署双算法SSL证书的问题，为了帮助站长给用户提供更安全的防护以及更完美的体验，小编将在本篇介绍如何申请和安装双算法SSL证书！ 什么是双算法？双算法是指当今使用的两种最受欢迎的公钥加密算法，一个是RSA算法，一个是ECC算法。《在日益连接的世界中，RSA有多安全》文章中，小编有讲过这两个加密算法的特点及区别，简单来说：RSA算法：国际标准算法，比ECC算法的适
android中 产生ec算法的密钥对
生成ecc证书
SSL
加密算法
Web
转载
编程小天才
8月前
18阅读

ceph ec
Ceph是一个开源软件存储系统，它提供了一个高度可扩展的对象存储系统，可以用于处理大量数据。在Ceph中，EC（Erasure Coding）是一种高效的数据保护机制，它通过将数据切分为多个数据块，并计算校验码来实现数据冗余和容错能力。 红帽是一个知名的开源软件公司，它提供了许多基于Ceph的解决方案，以帮助企业构建高可靠性和高性能的存储系统。红帽的Ceph EC方案结合了Ceph的对象存储能力
数据块
校验码
数据
原创
blue呀
2024-02-28 12:15:37
142阅读

java ec
# Java EC：Java中的错误代码处理 在软件开发中，错误处理是一个非常重要的话题。遇到错误时，我们需要能够捕获并处理它们，以确保程序的稳定性和可靠性。在Java中，错误代码处理是通过异常处理机制来实现的。本文将介绍Java中的异常处理机制，以及如何使用它来处理错误代码。 ## 异常处理机制 在Java中，程序在运行过程中遇到错误时会抛出异常。异常是一种Java对象，它包含有关错误的详
Java
自定义异常
异常处理机制
原创
mob64ca12f24f3a
2024-02-29 06:20:30
32阅读
  • 1
  • 2
  • 3
  • 4
  • 5
精品课程领资料
免费资料>
2025软考
系统架构设计师 系统规划与管理师 软件设计师 系统集成项目管理工程师
信创认证
系统架构师 信创集成项目管理师 信创规划管理师 系统开发工程师
厂商认证
CKA/CKS架构师 红帽认证工程师 Oracle-OCP认证 Oracle-OCM认证
IT技术
数据库高级工程师 AIGC大模型实战 Linux云计算架构师 Python全栈开发
华为认证
数通HCIP认证 云计算HCIE认证 华为存储HCIE认证 HCIP安全认证
相关文章

EC模块 python ec模块怎么用

EC tags

hive ec

PYTHON EC

EC BIOS

EC 架构 ec架构和ecs架构

hdfs排序 hadoop排序算法

hdfs 磁盘扩容 hdfs 磁盘空间分配算法

EC Client Customizing   EC Client 客户化

Agile EC 301 Installing and Configuring EC Web Connector

Copyright © 2005-2025 51CTO.COM 版权所有 京ICP证060544号

关于我们
官方博客 全部文章 热门标签 班级博客
了解我们 网站地图 意见反馈
友情链接
鸿蒙开发者社区 51CTO学堂
51CTO 软考资讯