# 大数据技术的多样性：除了 Hadoop
在大数据时代，Hadoop无疑是一个重要的技术框架，但它并不是唯一的选择。随着技术的不断发展，出现了很多新的大数据处理工具和平台，满足不同企业的需求。本文将介绍几个主要替代Hadoop的技术，并提供基本的代码示例。
## 1. Apache Spark
Apache Spark是一个快速的、通用的大数据处理引擎，支持批处理和流处理。它以内存计算为基
容器是一种虚拟化技术，通过隔离技术和镜像技术将打包好的镜像以进程的形式运行在操作系统之上，共用系统内核，以达到轻量隔离，简化部署的能力。 优点：1. 隔离损耗虚拟机是通过虚拟硬件指令去隔离各操作系统与硬件资源，而容器通过cgroup,eth0等cpu,mem,network虚拟隔离技术让系统工作在更加轻量级的进程级别，从而能减少容器启停调度成本。2.镜像技术部署方便容器镜像技术可以将容
转载
2023-10-26 22:22:28
82阅读
一.COR应用场景1.四类：数字原生类： 淘宝商品图是最具有代表性的数字原生类文字图。 特点：1）最复杂多样：各种字体、背景、排列、组合等（MTWI挑战赛-最大的OCR竞赛）。 2）最有价值：商品信息载体 3）图片量最大：千亿图片，每日不停更新。文档类： 文档类OCR需求非常广，涉及各种公务场景。 特点：1）100%识别率：人的输入准确率为98%，探索AI知识的极限；2）产品易用性：完
转载
2024-10-19 23:09:03
131阅读
“集装箱之父”马尔科姆·麦克莱恩，因为将集装箱在运输业中应用和普及被《福布斯》列入1950年以来改变世界的10个人之一。而在计算机领域，我们有幸见证了容器技术近几年来的迅猛发展对于软件发展的越来越多的影响。正好赶上好机会，入职了威佩(坐标杭州，欢迎来撩)之后接触这些前沿的技术也越来越多，在很多场景下都有用到容器技术进行开发或测试生产，也逐渐对容器技术有了一些自己的认识和理解。本文主要阐述一下容器技
转载
2024-07-15 22:31:22
103阅读
本文主要谈一下那些Java知识“已经过时”，没必要继续学习了。我判断的依据主要有以下几点：实际开发能否用到？是否有助于加深对技术的理解？对面试是否有用？JSPJSP在实际开发中，主要是作为 MVC 模型中的 V（View）层出现的。当然，View 层的渲染技术除了JSP，还有 FreeMaker、Velocity 等。JSP 作为页面模板，在后端通过 MVC 框架渲染成 HMTL，然后再发送到客户
转载
2023-12-13 12:13:35
62阅读
“我是九你是三”“？”“除了你还是你”今天七夕，正赶上工作比较忙，用 Python 简单写了个告白的小玩意儿，效果如图： 灵感来源于千图成像，多张小图合成一张。但考虑到实现难度，以及本着原创练习的原则，将设计思路简化如下：准备一张主图（合影），若干数量的背景素材图（女友照片）根据主图尺寸，生成等大的白色背景图，将素材图缩放逐个贴上去将主图与贴满素材的背景图融合为最终成果图代码实现过程中，采用了 P
星球活动第一期，将在 7 月 9 日晚 20:00 整开放，持续一周。准备续费的老会员，或者对「程序猿 DD」星球已了解准备加入的新会员，可以直接拖到文章底部了解详情。「...
转载
2021-08-20 16:10:05
662阅读
一、什么是Docker?1.1 理解Docker容器的简单概念? 有一个最常见的例子来很好的帮我们简单了解Docker容器技术： 当我们在一台计算机中配置好了环境，花费了极大的时间和精力成功开发部署好了一个应用。
转载
2023-10-06 17:16:37
114阅读
网络爬虫：网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。通俗的讲，爬虫就是能够自动访问互联网并将网站内容下载下来的的程序或脚本，类似一个机器人，能把别人网站的信息弄到自己的电脑上，再做一些过滤，筛选，归纳，整理，排序等等。可以做爬虫的语言：P
转载
2023-09-28 21:33:24
53阅读
一年一度的七夕节即将来临，作为一个程序员的我需要有属于我自己的浪漫，在这里我给大家准备了有关Java，Python以及Web的浪漫表白程序，使用swing画的爱心，使用Python的turtle模块画的爱心以及表白程序，使用canvas画的色彩斑斓的玫瑰，这里将源码提供给大家，希望大家都能度过一个浪漫而又独特的七夕节！ 作为一个程序员，无论是前端后端，异或是测试运维，想必都知道1024，1024可
转载
2024-08-12 10:49:28
39阅读
一、except vt.除, 把...除外, 反对, 不计vi.反对prep.除了...之外, 若不是, 除非conj.只是, 要不是基本解释exceptprep.除...之外, 除去, 除掉We all went except John.除了约翰外, 我们都去了。习惯用语except for除...之外, 只是except that除了, 只是例句：You will be punished, I
转载
2023-11-12 12:32:59
103阅读
最近，极客时间发生了一个大事件，互动社区「部落」上线了！极客时间的数十万用户都可以在这里互动交流。现在部落刚刚开放，已经很热闹了，来往人员络绎不绝，各种大咖的的身影不时初现其中，比如小道消息公众号作者冯大辉，stormzhang 公众号作者帅张，手机淘宝前端前负责人、极客时间专栏作者 winter……当然，让部落如此鲜活又富有生气的，还是极客时间的数十万普通用户。在这里，有吆喝一起组队学习的，有交
原创
2021-04-03 17:39:52
490阅读
脉脉热榜#技术水平高低对程序员来说有多重要#，有程序员表示最大的悲哀议：一、技术.
原创
2023-01-12 09:56:13
219阅读
原博文2013-01-03 23:28 −Turtle乃龟的意思,最初属于logo语言的(没玩过)..不过后来也有别的语言支持.其一是SmallBasic,其二就是Python.一直不知道这个库竟然是Python内置的.它是基于Tk库的. 用起来很简单. from turtle import * 即可. 简单画线. 其中reset()...相关推荐2018-06-02 23:54 −“小海龟”tu
转载
2024-01-08 20:43:39
44阅读
这份Java面试题整整花了三个月的时间来整理，都是自己在工作中总结出来，记住多少就写多少，希望这份资料可以帮助你们。Redis12道面试题1.什么是Redis？答：Remote Dictionary Server(Redis)是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。它通常被称为数据结构服务器2. Redis有哪
转载
2024-01-31 00:04:23
35阅读
python是编程入门者非常不错的选择，现在不少程序员都开始转行到python行列中，因为简单易学、应用范围广，不过学习python还是需要一个好的工具，否则会吃不少苦头，那么Python编程必备5大工具，你用过几个?1、lpython：是一个基于Python Shell的交互式解释器。自动补全非常好用，甚至用了它之后，很多程序员小伙伴们就不想再用自带的pythonshell啦。2、Anacond
转载
2023-07-12 21:49:14
72阅读
前端的数据存储方式，你除了用过 Cookies、localStorage 和 sessionStorage 外，还有用过其它的存储方式么？其实除了前面提到的 3 种存储方式，目前主流的浏览器还支持 Web SQL 和 IndexedDB。目前市场上主流的浏览器有 Chrome 、Safari、Firefox、Opera、UC Browser 和 Internet Explorer 等，其中截止 2
转载
2022-10-24 10:21:13
145阅读
我相信很多人都知道谷歌公司开发了Kubernetes（简称K8S），但是除了K8S之外，谷歌公司还有许多其他优秀的技术。在这篇文章中，我将向大家介绍一些谷歌公司开发的其他技术，帮助大家更全面地了解谷歌公司的技术栈。
### 谷歌公司除了K8S还有什么技术？
在这里，我将向大家介绍几个谷歌公司开发的其他技术，它们分别是：TensorFlow、Angular和Protocol Buffers。下面
原创
2024-03-12 10:40:40
43阅读
目录1 面向对象编程的概念2 C#面向对象的三大特性2.1 封装访问修饰符C#中默认访问修饰符2.2 继承尝试根据已知类创建基类基于基类创建派生类2.3 多态3 对象4 类4.1 类的静态成员4.2 所有类都派生自Object类举例证明4.3 C#中的基类一些规范5 类&Unity组件5.1 类在Unity的使用5.2 类对象在属性窗口的可视化1 面向对象编程的概念只要接触到了C#就一定听
一直做企业网络技术支持，这些年的工作经验告诉我：一个优秀的网络管理人员只有技术是远远不够的，良好的、科学的习惯有时候比技术更加重要。企业网络更多时候运行在常态下，网管更多扮演着网络维护者的角色，而不是消防队、救火队。这个时候，更需要网络管理员以严谨、认真、积极的态度做好网络的日常维护，而良好的习惯在其中起着决定性的作用。那么，企业网管应该养成哪些好习惯呢?下面分网络常态和非常态分别谈谈网管应该具有
转载
2009-06-03 02:11:19
404阅读
