HA：high availability,高可用
1.NFS 网络共享存储设备。 2.QJM Quorum Journal Manager
3.两个名称节点
active //激活
standby //待命 SPOF ： single point of fail
转载
2023-07-24 14:26:47
82阅读
0 简介： a) combine发生在map流程中b) 一般combine代码和自定义reduce代码相同，如果需要不相同，只需要继承hadoop.mapreduce.Re
原创
2023-04-21 00:47:21
20阅读
所有内容摘自阿里巴巴的《Java开发手册-嵩山版》 【强制】避免通过一个类的对象引用访问此类的静态变量或静态方法，无谓增加编译器解析成本，直接用类名来访问即可。 【强制】所有的覆写方法，必须加 @Override 注解。 说明：getObject() 与 get0bject() 的问题。一个是字母的 ...
转载
2021-09-07 10:23:00
194阅读
2评论
所有内容摘自阿里巴巴的《Java开发手册-嵩山版》 【强制】类、类属性、类方法的注释必须使用 Javadoc 规范，使用 /*内容/ 格式，不得使用 // xxx 方式。 说明：在 IDE 编辑窗口中，Javadoc 方式会提示相关注释，生成 Javadoc 可以正确输出相应注释；在 IDE 中，工 ...
转载
2021-09-08 17:58:00
175阅读
2评论
[阿里规约] 好记性不如烂笔头 ???? 1.【强制】业务上具有唯一特性的字段，即使是多个字段的组合，也必须建成唯一索引。
转载
2021-08-01 01:14:00
137阅读
2评论
1.为什么要把降维作为一个单独的预处理步骤？复杂度依赖于输入的维度d和数据样本的规模N，为了减少存储量和计算时间。较简单的模型在小数据集上更为鲁棒，较简单的模型具有较小的方差。当数据能够用较少特征解释时，就能够更好地理解解释数据的过程，使得能够提取知识。当数据能够用少数维表示而不丢失信息时，我们可以对数据绘图，并且可视化地分析它的结构和离群点。降维的主要方法有两个：特征选择和特征提取。特征选择是从
转载
2023-12-15 17:35:58
70阅读
所有内容摘自阿里巴巴的《Java开发手册-嵩山版》 【强制】前后端交互的 API，需要明确协议、域名、路径、请求方法、请求内容、状态码、响应体。 说明： 1）协议：生产环境必须使用 HTTPS。 2）路径：每一个 API 需对应一个路径，表示 API 具体的请求地址： a）代表一种资源，只能为名词， ...
转载
2021-09-09 13:28:00
278阅读
2评论
规约算法0.引言1.reduction_12.reduction_23.reduction_34.result 0.引言有的地方也称之为归约算法./* asum: sum of all entries of a vector.
* This code only calculates one block to show the usage of shared memory and synchro
转载
2024-04-27 13:53:13
45阅读
个人理解：程序第一是要供人阅读的，方便业内人员交流、沟通。也方便自己或者他人维护、升级。所以编写程序需要一定的规约，来保持编写代码的简洁性和一致性。 关于c语言基本数据类型： 为方便跨硬件平台移植，我定义一下数据类型。 typedef unsigned char BOOLEAN; typedef unsigned char
原创
2014-02-21 14:32:00
703阅读
Python 的 re 模块（Regular Expression 正则表达式）提供各种正则表达式的匹配操作。在文本解析、复杂字符串分析和信息提取时是一个非常有用的工具，下面总结了 re 模块的常用方法。一. 预定义字符\d 匹配所有的十进制数字 0-9
\D 匹配所有的非数字，包含下划线
\s 匹配所有空白字符（空格、TAB等）
\S 匹配所有非空白字符，包含下划线
\w 匹
转载
2023-07-29 18:35:14
151阅读
1. 【强制】隶属于用户个人的页面或者功能必须进
原创
2022-08-03 11:42:42
55阅读
所有内容摘自阿里巴巴的《Java开发手册-嵩山版》 【强制】隶属于用户个人的页面或者功能必须进行权限控制校验。 说明：防止没有做水平权限校验就可随意访问、修改、删除别人的数据，比如查看他人的私信内容。 【强制】用户敏感数据禁止直接展示，必须对展示数据进行脱敏。 说明：中国大陆个人手机号显示：139* ...
转载
2021-09-10 11:19:00
41阅读
2评论
目录一、为什么要用 Numpy 库1. 低效的Python for循环2. Numpy为什么如此高效3. 什么时候用Numpy二、Numpy 数组的创建1. 从列表开始创建2. 从头创建数组三、Numpy 数组的性质1. 数组的属性2. 数组索引3. 数组的切片4. 数组的变形5 数组的拼接6. 数组的分裂四、Numpy 四大运算1. 向量化运算2. 矩阵运算3. 广播运算4. 比较运算和掩码5
转载
2024-05-09 13:55:11
40阅读
# 实现Java规约教程
## 摘要
本文将教会刚入行的小白如何实现Java规约。首先，我们将介绍整个实现的流程，然后详细说明每一步需要做什么，包括需要使用的代码和代码的解释。希望通过本文的指导，小白能够更好地理解和实践Java规约。
---
### 整个实现流程
下面是实现Java规约的流程表格：
| 步骤 | 描述 |
| ---- | ---- |
| 1 | 导入规约插件 |
|
原创
2024-03-07 04:21:34
35阅读
所有内容摘自阿里巴巴的《Java开发手册-嵩山版》 【强制】存储方案和底层数据结构的设计获得评审一致通过，并沉淀为文档。 说明：有缺陷的底层数据结构容易导致系统风险上升，可扩展性下降，重构成本也会因历史数据迁移和系统平滑过渡而陡然增加，所以，存储方案和底层数据结构都需要认真地进行设计和评审，生产环境 ...
转载
2021-09-13 11:19:00
173阅读
2评论
背景： 1、自动化测试过程中需要用python连接数据库对界面上计算出来的数据进行校验 2、平时查询数据库用的PLSQL,公司用的orcal数据库 3、cmd打开命令提示符，输入python，提示版本位3.9，64位，plsql新建sql window查询，输入select * from v$version,看到plsql是64位的4、写在前面：安装的python、instantclient位数需
转载
2024-01-10 12:32:13
90阅读
一、IEC主要规约概论IEC规约适用范围通讯方式IEC101厂站与调度主站间通讯串行IEC102电量主站与站内抄表终端通讯 IEC103与站内继电保护设备间通讯串行IEC104厂站与调度主站间通讯以太网 101月104比较：相同点：①适用范围：厂站与主站之间②规约结构：应用层定义相同不同点：①通讯方式：10
转载
2024-07-22 22:13:35
658阅读
五、数据规约数据归约（Data Reduction）用于在尽可能保持数据完整性的基础上得到数据的归约表示。也就是说，在归约后的数据集上挖掘将更有效，而且仍会产生相同或相似的分析结果。数据归约包括维归约、数量归约和数据压缩。（一）维归约维归约的思路是减少所考虑的随机变量或属性的个数，使用的方法有属性子集选择、小波变换和主成分分析。属性子集选择是一种维归约方法，其中不相关、弱相关或冗余的属性或维被检测
转载
2023-11-22 19:06:28
21阅读
本系列来自《编写高质量代码 改善python程序的91个建议》的读书笔记整理。本章主要内容
建议8：利用assert语句来发现问题
建议9：数据交换值时不推荐使用中间交换变量
建议10：充分利用Lazy evaluation的特性
建议11：理解枚举替代实现的缺陷
建议12：不推荐使用typ
1. datanode介绍1.1 datanodedatanode是负责当前节点上的数据的管理，具体目录内容是在初始阶段自动创建的，保存的文件夹位置由配置选项{dfs.data.dir}决定1.2 datanode的作用datanode以数据块的形式存储HDFS文件
datanode响应HDFS 客户端读写请求
datanode周期性向NameNode汇报心跳信息,数据块信息，缓存数据块信息1.3
转载
2023-07-06 18:39:01
88阅读
