Kafka是由Apache软件基金会开发的一个开源流处理平台，被广泛地应用在数据缓冲、异步通信、汇集日志、系统解耦等方面。相比较于其他常见消息系统，Kafka在保障了大部分功能特性的同时，还在高吞吐、低延迟等方面有很突出的表现。这篇文章不同于其他介绍Kafka使用或实现的文章，只是谈谈Kafka用了什么“黑科技”使他在性能方面有这么突出的表现。消息顺序写入磁盘磁盘大多数都还是机械结构（SSD...
原创
2021-06-15 17:04:57
190阅读
详解Kafka: 大数据开发最火的核心技术 架构师技术联盟 2019-06-10 09:23:51 本文共3268个字，预计阅读需要9分钟。 广告 广告 大数据时代来临，如果你还不知道Kafka那你就真的out了(快速掌握Kafka请参考文章：如何全方位掌握Kafka核心技术)！据统计，有三分之一的
转载
2019-06-18 08:52:00
104阅读
2评论
随着“大数据”“云计算”“人工智能”等等科技的兴起，IT行业在今后三到五年将会迎来一个高速发展期。这也就意味
原创
2021-12-18 17:24:20
10000+阅读
点赞
这些领域的发展也面临着诸多挑战，例如AIGC需要解决内容的原创性、准确性和版权问题，AI Agent需要提升交互的自然性和人性化，具象智能需要更高效地将AI技术与物理世界结合。此外，工业物联网还为工厂的智能化升级提供了海量数据，推动了5G行业应用的快速发展。此外，随着5G、物联网、云等新兴技术的普及，网络安全挑战也不断增
原创
2024-03-06 15:55:27
86阅读
@TOC 在2024年，许多技术话题都备受关注，其中一些最火的话题包括： 1.生成式人工智能： 生成式人工智能是当前最热门的技术话题之一。它使机器能够创造类似于人类创作的内容，从而给各个行业带来了革命
原创
2024-03-05 14:23:47
120阅读
在当今信息化飞速发展的时代，软件行业日益繁荣，软件水平考试（软考）也备受瞩目。软考作为一个权威的IT专业技术认证，不仅能为个人职业发展增添砝码，更是企业选拔人才的重要参考。中级软考作为软考体系中的一环，其考试内容既有一定的专业深度，又具备较广的适用性，因此备受广大IT从业者的青睐。
那么，在中级软考的众多科目中，什么最火呢？这无疑是许多准备投身软考大军的人们最为关心的问题。从历年的报考人数、考试
原创
2024-05-15 12:48:01
69阅读
为什么现在大数据技术能这么火?为什么现在很多公司都纷纷向数据型公司转型?为什么现在大数据技术人才的工资能高出其他行业的两到三倍?等你了解了大数据分析的超强魔力之后，你就知道原因了!
大数据分析，可以做到很多技术都做不到的事情：
1.描述型分析：发生了什么?
这是很常见的分析方法。在业务中，这种方法向数据分析师提供了重要指标和业务的衡量方法。
例如，每月的营收和损失账单。数据分析
原创
2021-08-03 17:44:40
278阅读
自1995年Java正式发布，到如今已经影响了世界20多年，Java成为第一大开发平台，市场需求大，程序员薪资也是一路高涨。有许多朋友是看到Java的高薪，转行到IT行业做开发的。但事实上，有些人入行之后发现，自己与大牛的薪资差距很大，涨薪很难。同样是Java程序员，自己的问题出在哪里？梳理大家的问题发现，SpringBoot技术是目前市面上从事Java企业级开发过程中使用量最大的技术，但难精通，
转载
2023-07-19 22:09:26
112阅读
在讲新一代大数据技术架构前，先讲下大数据特征与大数据技术要解决的问题。1.大数据特征：“大量化(Volume)、多样化(Variety)、快速化(Velocity)、价值密度低（Value）”就是“大数据”显著的4V特征，或者说，只有具备这些特点的数据，才是大数据。2.大数据技术要解决的问题：大数据技术被设计用于在成本可承受的条件下，通过非常快速（velocity）地采集、发现和分析，从大量（vo
转载
2023-08-15 15:06:21
505阅读
大数据都学什么？大数据(big data)，指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产，下面给大家看一下大数据都需要学点什么。 第一阶段为JAVASE+MYSQL+JDBC，主要学习一些Java语言的概念，如字符、流程控制、面向对象、进程线程、枚举反射等，学习MySQL数据
转载
2024-01-15 13:21:36
92阅读
学习大数据之前，我们首先要知道的就是：1.什么是大数据？2.大数据是做什么的？3.大数据就业领域，就业形势是怎么样的？4.等明确以上三点之后，就可以开始着手学习大数据要确定学习线路，零基础编程基础的小白怎么去学习？仔细阅读完本文，你需要花大概20分钟很多初学者，对大数据的概念都是模糊不清的，大数据是什么，能做什么，学的时候，该按照什么线路去学习，学完往哪方面发展，想深入了解。第一：什么是大数据，大
原创
2018-11-18 12:48:42
59阅读
学习大数据之前，我们首先要知道的就是：1.什么是大数据？2.大数据是做什么的？3.大数据就业领域，就业形势是怎么样的？4.等明确以上三点之后，就可以开始着手学习大数据要确定学习线路，零基础编程基础的小白怎么去学习？仔细阅读完本文，你需要花大概20分钟很多初学者，对大数据的概念都是模糊不清的，大数据是什么，能做什么，学的时候，该按照什么线路去学习，学完往哪方面发展，想深入了解。第一：什么是大数据，大
原创
2018-11-18 12:48:34
94阅读
Ragged Tensors 的应用前景广泛，尤其是在处理变长数据、复杂结构数据和多模态数据的场景中。随着数据复杂性的增加，Ra
原创
2024-09-19 12:27:07
572阅读
1.为什么产生大数据技术？ 首先，大数据是众多数据信息的集合，随着社会的发展，我们周围的数据信息越来越多，仅仅是通过我们人脑对这些数据信息进行分类处理，是很有限的，而大数据技术就是为了解决这个问题而产生的，通过这个技术，把这些数据信息进行分类处理，然后把我们所需的数据信息呈现给我们，为我们查找数据信 ...
转载
2021-09-09 22:39:00
257阅读
2评论
菜鸟学Python 2020-09-24以下文章来源于大数据DT ，作者朱凯大数据DT提供大数据、AI等领域干货学习资源的「宝藏号」，跟50万技术人共同成长，一起玩转大数据、Python、数据分析、数据科学、人工智能！还会有各种好玩又奇葩的数据解读，边学习边吃瓜！点击上方“菜鸟学Python”，选择“星标”公众号回复"666"获取精选的学习资料！作者：朱凯来源：大数据DT（ID：hzdashuju
转载
2021-03-29 17:11:27
186阅读
菜鸟学Python 2020-09-24以下文章来源于大数据DT ，作者朱凯大数据DT提供大数据、AI等领域干货学习资源的「宝藏号」，跟50万技术人共同成长，一起玩转大数据、Python、数据分析、数据科学、人工智能！还会有各种好玩又奇葩的数据解读，边学习边吃瓜！点击上方“菜鸟学Python”，选择“星标”公众号回复"666"获取精选的学习资料！作者：朱凯来源：大数据DT（ID：hzdashuju
转载
2021-04-01 19:45:30
124阅读
01 概述十年前我们只有Hadoop，大家首先通过HDFS实现海量数据的共享存储，然后使用MapReduce以批处理的方式处理这些海量数据，这一切看起来似乎十分完美。但众口难调啊，有人觉得MapReduce的编程模型太难使用了，为什么不能使用SQL来分析数据呢？我们数据库领域已经有非常成熟的数据仓库模型了，为何不实现一个大数据技术的数据仓库呢？于是Hive类的框架便诞生了，人们开始使用Hive类的
原创
2021-03-25 21:13:54
189阅读
01 概述十年前我们只有Hadoop，大家首先通过HDFS实现海量数据的共享存储，然后使用MapReduce以批处理的方式处理这些海量数据，这一切看起来似乎十分完美。但众口难调啊，有人觉得MapReduce的编程模型太难使用了，为什么不能使用SQL来分析数据呢？我们数据库领域已经有非常成熟的数据仓库模型了，为何不实现一个大数据技术的数据仓库呢？于是Hive类的框架便诞生了，人们开始使用Hive类的
原创
2021-03-25 21:13:59
104阅读
关于大数据的概念，指的是无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的数据集合。而大数据技术，是指从各种各样类型的数据中，快速获得有价值信息的能力。那么关于大数据的技术大致包含哪些内容? 第一，数据采集ETL工具负责将分布的、异构数据源中的数据如关系数据、平面数据文件等抽取到临时中间层后进行清洗、转换、集成，最后加载到数据仓库或数据集市中，成为联机分析处理、数据挖掘的基础。第二，数据
转载
2023-08-20 06:58:38
32阅读
最火WEB前端在过去的20年里，web 从简陋的文档分享网络进化为一个大平台，具有了当初创建它时我们无法想象的能力。自诞生之日起，web 一直在努力适应用户需求，web 的成长过程中，也走过弯路，许多错误都是在后来才被解决的。由于 web 本身还在蹒跚学步，Flash 和 Silverlight 等插件才有了主导市场的机会。而当智能手机革命到来的时候，情形完全改变了，人们抛弃了他们的桌面浏览器（和
转载
2017-05-16 14:58:58
697阅读
