题目背景 通过月岛，帝王蟹和天体探测仪，你成功拼合了三个天体科技，接下来你要做的，就是来到风暴之眼的中心，准备那个神秘实验的最后一步。 最终的真相近在咫尺，你能否成功通过这场考验呢？ 题目描述 天体风暴中的气象瞬息万变。 风暴中的道路构成一棵 n 个结点的无根树，第 i个结点有初始权值 \(w_i\ ...
转载
2021-08-11 17:31:00
140阅读
2评论
深度之眼 alexnet (Technical and Explanation)The AlexNet convolutional neural network(CNN) was introduced in the year 2012. Since then, the utilization of deep convolutional neural network has skyrocketed
转载
2023-10-26 06:44:22
72阅读
前言这半个月除了工作上的事，一直忙于学习机器学习基础理论，每天背
原创
2023-03-20 09:23:45
100阅读
如何成为人生更大的赢家我相信每一个人都想赢，但我们是否懂得如何才能赢，怎样做才能赢得更大，在这里和大家分享一下赢的秘诀，以此共勉，只要大家做到下面这五个方面，你的人生不赢都不行。首先，我们来分析一下这个字的结构，我们就知道为什么是五个方面，也能很清晰知道是那五个方面。其次我们看如何运用这五个方面才能让我们真正成为赢家。我们很容易看到“赢”字是由五个字组成在一起的合体字，是由一个亡，一个口，一个月，
任务学习时长：1/13——1/14 任务名称：赛题解读以及数据下载导入、赛题的理解分析 任务简介：赛题的初步理解分析 详细说明： 本节将会赛题的背景资料的了解以及数据文件的分布以及数据的下载以及本地导入，赛题的理解分析通过对构建自己对构建特征来说有一个比较大的作用，针对于数据的解读来说比较重要的一环。 数据的解读包括数据的EDA、数据的可视化，数据的类型、数据的文件分布、数据的特征组合的一些猜测都
简述Zookeeper 是一个开源的分布式的，为分布式框架提供协调服务的 Apache 项目。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。zookeeper工作机制Zookeeper从设计模式角度来理解：是一个基 于观察者模式设计的分布式服务管理框架，它负 责 存储和管理大家都关心的数据，然后接受观察者的 注册，一旦这些数据的状态发生变化，Z
转载
2024-07-04 17:27:56
60阅读
文章目录前言论文结构学习目标基础知识补充论文研究背景、成果、意义研究背景模型框架研究成果摘要核心论文框架算法比较模型详解细节一： 一、二阶相似度细节二 ：自编码器细节三：网络稀疏性处理细节四：目标函数细节五：优化公式推导细节六：时间复杂度实验设置与分析代码复现准备工作main实现思路具体代码model损失与代码的对应datasetdraw_cora问题 前言本课程来自深度之眼，部分截图来自课程视
转载
2024-01-16 22:23:12
66阅读
文章目录前言论文总览学习目标导图研究意义第一课 论文导读论文背景文本分类简介文本分类文本分类发展历史机器学习深度学习前期知识储备第二课 论文精读论文整体框架摘要传统/经典算法模型Bag-of-words基于词向量的k-means基于词的卷积网络模型（略）长短时记忆模型模型一维卷积字符量化文本分类模型数据扩充对比模型及模型优缺点实验和结果数据集实验结果讨论和总结讨论总结（创新点）代码复现数据集下载
转载
2024-08-08 12:09:07
39阅读
大数据：分享大数据之基础语法1计算机理论介绍2编程基础--进制分类、进制转换进制就是进位制。指的是我们来表示一个数字的时候进位的制度。进制分类计算机中，常用的进制有以下几种:进制描述示例备注二进制使用0和1来描述所有的自然数0,1,10,11,100,101使用0b开头八进制使用0-7来描述所有的自然数4,5,6,7,10,11,12使用0开头十进制使用0-9来描述所有的自然数6,7,8,9,10
原创
2020-03-11 16:37:46
1750阅读
一、什么是FlinkFlink起源于德国柏林工业大学、柏林洪堡大学和哈索普拉特纳的博士生和研究生联合开展的项目。Flink是一个分布式流和批处理数据结合的统一计算框架，其核心是一个提供了数据分发以及并发化计算的流数据处理引擎。Flink在流引擎之上构建批处理，覆盖本机迭代，托管内存和程序优化。二、数据流开发流程1.抽象层次SQL
原创
2021-03-07 20:28:14
677阅读
大数据之presto 默认的配比是query.max-memory-per-node的值在jvm重点的Xmx的10%左右即可。 presto官网 https://prestodb.io/docs/current/release/release-0.215.html 日常维护： 1、问题：maxRequestsQueuedPerDestinatio 日
原创
2022-06-13 10:45:20
614阅读
1、Redis概述 Redis是一个开源，先进的key-value存储，并用于构建高性能，可扩展的应用程序的完美解决方案。 Redis的三个主要特点： Redis数据库完全在内存中，使用磁盘仅用于持久性。 相比许多键值数据存储，Redis拥有一套较为丰富的数据类型。String，Li ...
转载
2021-08-11 11:00:00
207阅读
2评论
一、安装： 1 解压然后把mysql的驱动放在$SQOOP_HOME/lib 目录中2. conf/sqoop-en.sh export HADOOP_COMMON_HOME=/home/hadoop/hadoop/hadoop-2.3.0export HADOOP_MAPRED_HOME=/home/hadoop/hadoop/hadoop-2.3.0 注意事项 1.数据库驱动：在执行s...
原创
2021-07-29 10:47:17
756阅读
在当今数字化时代，大数据已经成为企业发展的必争之地。作为全球领先的信息通信解决方案供应商，华为一直致力于为客户提供可靠、高效的大数据解决方案。其中，OSPF作为大数据网络的核心协议之一，发挥着至关重要的作用。
OSPF(Open Shortest Path First)是一种链路状态路由协议，用于在大规模IP网络中自动计算路由信息。在大数据网络中，OSPF可以帮助数据中心实现高速、高效的数据传输
原创
2024-03-05 12:08:21
30阅读
HDFS
原创
2022-01-12 15:58:30
99阅读
hadoop：是一个开源软件平台，它本身不能完成特定功能，但是可以利用服务器集群，对海量数据进行分布式处理。一、hadoop组件：HDFS(分布式文件系统)； YARN(运算资源调度系统)； Mapreduce(分布式运算编程框架)；二、点击流框架分析：数据采集：定制开发采集程序，或使用开源框架FLUME;数据预处理：定制开发mapreduce程序运行于hadoop集群;数据仓库技术：基于hado
原创
2022-04-22 10:22:53
127阅读
Mapreduce是一个分布式运算程序的编程框架，是用户开发“基于hadoop的数据分析应用”的核心框架。Mapreduce分布式运算程序往往分2个阶段：map阶段：并发实例，各司其职，互不干涉，完全并行； reduce阶段：并发实例，互补干涉，但它们的数据依赖上一个阶段实例输出； mrapplication master 负责监管map和reduce。Mapreduce实现两个表的join:方式
原创
2022-04-22 10:31:09
79阅读
例如：假设要对8亿个正整数进行排序（000000000-999999999），该如何操作？
分析：首先，确认这些数是不是不重复的，这点很重要，8亿个9整数占用内存很庞大，用计算机直接一次性进行处理显然不现实，800,000,000*4Byte=3.0G。为此可以利用Bloom Filter建立N个哈希函数的映射集；或者使用导入数据库的方法；还可以使用bit位的方法......
1、分段排序
原创
2013-04-14 11:19:35
880阅读
点赞
