大数据时代，数据从被保护资产上升到生产资料，数据只有流动才能实现更大的价值，这一理念已经成为共识。但数据在流动中会面临更多的风险，既有数据泄露的所有者权益损失的风险，也包含了对其他方如个人隐私侵犯和影响国家安全的风险。对应的，这种流动的数据环境对数据安全的体系提出了新的要求，很难再用传统的系统安全保护体系：通过静态的隔离保护措施来控制数据在流动中的风险。如何看待和解决数据流动带来的安全挑战？安全牛
原创
2021-05-29 13:26:48
1294阅读
今天聊聊阿里前数据团队负责人车品觉的《数据的本质》，书名的后缀虽然有“本质”两个字，但从我的理解看，书中并没有直接讲“本质”，更多的是基于作者在阿里的从业经验从全局、战略角度讲企业数据化，里面对于实战的东西不多，适合读者从书中了解阿里对数据化的整体理解。结合最近的几个经历摘录几点感触较深的观点。1、互惠互利，数据流通之匙数字化首先要有数据，按全数字化角度看，数据来自不同的系统，不同的终端，这就必然
原创
2021-03-08 17:18:15
170阅读
组合逻辑和时序逻辑学习笔记服完上篇博文的知识，再服用此博文效果更佳！认真看下去，其实还挺有意思。仅供学习交流使用！我们知道，诸如加、减、乘、除、比较等运算都可以用组合逻辑来实现，但运算的输入必须稳定一段时间，才可能得到稳定的输出，而输出要被下一阶段的运算作为输入，也必须要有一段时间的稳定，因而输出结果必须保存在寄存器组中。在计算电路中设有许多寄...
原创
2022-04-14 15:23:38
240阅读
组合逻辑和时序逻辑学习笔记服完上篇博文的知识，再服用此博文效果更佳！认真看下去，其实还挺有意思。本文来自于《从算法设计到硬件逻辑的实现》，仅供学习交流使用！我们知道，诸如加、减、乘、除、比较等运算都可以用组合逻辑来实现，但运算的输入必须稳定一段时间，才可能得到稳定的输出，而输出要被下一阶段的运算作为输入，也必须要有一段时间的稳定，因而输出结果必须保存在寄存器组中。在计算电路中设有许多寄...
原创
2021-08-20 14:24:45
143阅读
在软工视频还有自考课本中以及后面的学习中，我们都要用到数据流图，那么什么是数据流图呢，在我没有深入了解它之前先介绍一下。一、数据流图(DFD) 它从数据传递和加工角度，以图形方式来表达系统的逻辑功能、数据在系统内部的逻辑流向和逻辑变
img src="https://image.baidu.com/search/detail?ct=503316480&z=0&ipn=d&word=%E5%8A%A8%E7%94%BB&step_word=&hs=0&pn=50&spn=0&di=33620926680&pi=0&rn=1&tn=baidui
转载
2021-06-05 22:44:50
195阅读
今天群里在讨论 AIDL 的问题，我突然想到一个问题：客户端通过 AIDL 传递给服务端一
原创
2023-06-21 14:09:47
93阅读
传统的数据拷贝备份根本无法满足实时性、快速性和不间断性，于是不少技术专家想出了很多高精尖的技术来完善数据备份过程，达到备份数据的目的，实现数据备份的技术形象地称之为数据流动技术。数据中心里什么东西最宝贵?是数据，数据是数据中心里流淌的血液，也是可以产生效益带来价值的东西，所以数据对数据中心最重要。比如：保存个人信息的系统，银行账户、使用网络流量费用等等，如果这些数据损失，不仅给客户带来损失，还将使
原创
2021-05-25 10:41:17
213阅读
今天看了一个Android的Training生命周期转换的例子，顿觉得他的设计非常巧妙，我的分析如下： 1.在com.example.android.lifecycle包中有： 3个正常的全屏activity，一个类似dialog的activity 2.在com.example.android.lifecycle.util包中有： StatusTracker.java, 用于将activity产生的已执行的周期函数和当前的状态存储在两个list中 Utils.java， 用一个线程动态的更新activity中的两个显示当前周期函数...
转载
2013-08-20 21:28:00
75阅读
2评论
数据流图（Data Flow Diagram）：简称DFD，它从数据传递和加工角度，以图形方式来表达系统的逻辑功能、数据在系统内部的逻辑流向和逻辑变换过程，是结构化系统分析方法的主要表达工具及用于表示软件模型的一种图示方法。 数据流图是结构化分析方法中使用的工具,它以图形的方式描绘数据在系统中流动和处理的过程，由于它只反映系统必须完成的逻辑功能，所以它是一种功能模型。在结构化开发方法中，数据流图
一、概念 大数据中包含两种处理方式：流处理和批处理。流处理：即流式处理。流式处理假设数据的潜在价值是数据的新鲜度，需要尽快处理得到结果。在这种方式下，数据以流的方式到达。在数据连续到达的过程中，由于流携带了大量数据，只有小部分的流数据被保存在有限的内存中。流处理方式用于在线应用，通常工作在秒或毫秒级别。批处理：批处理方式中，数据首先被存储，然后再分析。MapReduce是非
一、大数据技术划分 二、流式计算历史演进 目前主流的流式计算框架有Storm/Jstorm、Spark Streaming、Flink/Blink三种。 Apache Storm是一个分布式实时大数据处理系统。Storm设计用于在容错和水平可扩展方法中处理大量数据。它是一个流数据框架，具有最高的摄取率。在Storm中，需要先设计一个实时计算结构，我们称之为拓扑
数据资产分级分类规范是国内企业广泛采用的信息安全管理规范之一。该规范涵盖了资产分类、安全等级、安全要求、安全管理等多个方面，旨在为企业实施数据安全管理提供指导和标准化操作流程。以下介绍数据资产分级分类规范的核心内容。
原创
2023-06-12 14:53:43
212阅读
HDFS是分布式文件系统，扩展极为方便，非常适合存储大文件和非结构化的数据。HDFS有着高容错性的特点，设计用来部署在低廉的硬件上。HDFS流式数据访问采用一次写入，多次读取。通过放开的Posix标准要求，达到高的读取性能。首先回顾一下HDFS基本概念，接着讨论在Hadoop中，如何实现HDFS和NFS互访。 原生HDFS的系统架构是一个典型的主、从(Master Slave)架构，包括
原创
2021-05-12 14:22:17
2050阅读
ETL作为数据集成平台，提供与抖音等数据源的无缝集成，简化数据交换和整合。
public class Test{
public static void main(String[] args){
System.out.println("hello world");
}
}之前的时候写了一篇文章是关于大数据需要学习那些知识点，好久没有更新过博客了。从现在起有时间的时候就会跟大家从最基本的java开发开始讲解关于大数据的知识，当然很多的知识点都是我一边学习一边在更新，所
1、大数据流程图 2、大数据各个环节主要技术 2.1、数据处理主要技术 Sqoop：（发音：skup）作为一款开源的离线数据传输工具，主要用于Hadoop(Hive) 与传统数据库（MySql,PostgreSQL）间的数据传递。它可以将一个关系数据库中数据导入Hadoop的HDFS中， 也可以将HDFS中的数据导入关系型数据库中。 Fl
