spark基本概念Spark一种与 Hadoop 相似的通用的集群计算框架，通过将大量数据集计算任务分配到多台计算机上，在性能和迭代计算上很有看点，提供高效内存计算，现在是Apache孵化的顶级项目。Spark 由加州大学伯克利分校 AMP 实验室 (Algorithms, Machines, and People Lab) 开发，可用来构建大型的、低延迟的数据分析应用程序。Spark
第1章 Spark概述
1.1 什么是SparkSpark是一种快速、通用、可扩展的大数据分析引擎，2009年诞生于加州大学伯克利分校AMPLab，2010年开源，2013年6月成为Apache孵化项目，2014年2月成为Apache顶级项目。项目是用Scala进行编写。目前，Spark生态系统已经发展成为一个包含多个子项目的集合，其中包含SparkSQL、Spark&nb
转载
2023-08-09 13:53:30
116阅读
一、docker 是什么Docker容器是Docker进程+镜像文件（Docker 镜像中包含了运行环境和配置）官方定义：Docker是以Docker容器为资源分割和调度的基本单位，封装整个软件运行时环境，为开发者和系统管理员设计的，用于构建、发布和运行分布式应用的平台。是一个跨平台，可移植并且简单易用的容器解决方案。Docker是通过内核虚拟化技术（namespace及cgroups等）来提供容
转载
2023-06-01 12:44:06
84阅读
【PMP是什么意思中文翻译】—— 深入解析PMP认证及考试相关内容
PMP，即项目管理专业人士（Project Management Professional），是国际项目管理协会（PMI）颁发的一项全球公认的项目管理专业人士认证。该认证证明持有人具备项目管理的知识和技能，能够有效地领导项目团队，实现项目目标。PMP认证已经成为项目管理领域的金标准，对于提升项目管理人员的职业素养和竞争力具有重要
1、string list hash结构中，每个至少完成5个命令，包含插入 修改 删除 查询，list 和hash还需要增加遍历的操作命令1、 Keys相关的命令操作：（1） 查看key是否存在：EXISTS name #判断该键是否存在，存在返回1，否则返回0。#该键并不存在，因此append命令返回当前Value的长度（2） 添加键：app
request和response介绍request是代表HTTP请求信息的对象，response是代表HTTP响应信息的对象。当浏览器发请求访问服务器中的某一个Servlet时，服务器将会调用Servlet中的service方法来处理请求。在调用service方法之前会创建出request和response对象。其中request对象中封装了浏览器发送给服务器的请求信息（请求行、请求头、请求实体等
PO：persistant object持久对象最形象的理解就是一个PO就是数据库中的一条记录。好处是可以把一条记录作为一个对象处理，可以方便的转为其它对象。 BO：business object业务对象主要作用是把业务逻辑封装为一个对象。这个对象可以包括一个或多个其它的对象。比如一个简历，有教育经历、工作经历、社会关系等等。我们可以把教育经历对应一个PO，工作经历对应一个P
转载
2023-07-06 13:44:03
100阅读
什么是recovery?用智能手机常刷ROM的朋友一定会知道。recovery中文意思是恢复,复苏的意思。笼统的说：就是一个刷机的工程界面，在这个界面你可以直接用sd卡上的zip的rom升级或者备份你的系统。一般刷rom之前最好wipe一下（wipe只是抹除rom 以外的个人数据，不会影响rom 本身），也就是返回出厂设置一下比较好，但是这样就会丢失你的所有软件，短信彩信，联系人（备份在goog
Redis概述及数据类型Redis是什么？Redis（Remote Dictionary Server )，即远程字典服务，是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。是一个高性能的key-value数据库。 redis的出现，很大程度补偿了memcached这类key/value存储的不足，在部 分场合可以对关系
转载
2023-08-31 18:54:40
92阅读
Nginx（发音同engine x）： 是异步框架的 Web服务器，也可以用作反向代理，负载均衡器和 HTTP缓存。该软件由 Igor Sysoev 创建，并于2004年首次公开发布。同名公司成立于2011年，以提供支持。2019年3月11日，Nginx公司被F5 Networks以6.7亿美元收购。 Nginx是免费的开源软件，根据类BSD许可证的条款发布。一大部分Web服务器使用Nginx，通
什么是NFS ？ NFS 是Network File System的缩写，即网络文件系统。一种使用于分散式文件系统的协定，由Sun公司开发，于1984年向外公布。功能是通过网络让不同的机器、不同的操作系统能够彼此分享个别的数据，让应用程序在客户端通过网络访问位于服务器磁盘中的数据，是在类Unix系统间实现磁盘文件共享的一种方法 它的主要功能是通过网
Scheme(计算机程序语言)语音编辑锁定讨论上传视频Scheme 编程语言是一种Lisp方言，诞生于1975年，由 MIT 的 Gerald J. Sussman 和 Guy L. Steele Jr. 完成。它是现代两大Lisp方言之一；另一个方言是Common Lisp。Scheme遵循极简主义哲学，以一个小型语言核心作为标准，加上各种强力语言工具(语法糖)来扩展语言本身。MIT曾用Sche
原理：游标就是把数据按照指定要求提取出相应的数据集，然后逐条进行数据处理。游标的概念 1.1游标(Cursor)它使用户可逐行访问由SQL Server返回的结果集。 使用游标(cursor)的一个主要的原因就是把集合操作转换成单个记录处理方式。 用SQL语言从数据库中检索数据后，结果放在内存的一块区域中，且结果往往是一个含有多个记录的集合。 游标
简介NIS全称Network Information System，翻译过来是网络信息服务。是一套用来管理电脑网络中所有与电脑系统管理相关设置，如用户帐号、密码、主机名称或组群等的主从式目录服务协议。NIS提供了通用数据库访问设施，可以实现向你的网络上的所有主机分发信息，比如象passwd和groups文件所包含的信息。这使得网络看起来象一个独立系统，在所有的主机上有着相同的帐号。你可以以同样的方
win: Windows 操作系统；mac: macOS（操作系统）。英文（English）中文一（港台地区）中文二Abstract摘要；抽象的摘要；抽象的Abstraction抽象抽象Access存取访问Accessibility无障碍；协助工具 (win)；辅助功能 (mac)无障碍；辅助功能 (win/mac)Activate, Activation启用，启动激活Active使用中的；现行的
Docker 是什么https://www.docker.com/Docker 这个单词英文原意是码头工人，搬运工的意思，这个搬运工搬运的是各种应用的容器。官方的说法是，Docker 是提供给开发者和系统管理员一个分布式应用的开放平台。在更多人的理解中，Docker 是一种把你的应用或者服务打包后放在容器中运行的技术。Docker 可以说有三个关键点：构建，运输，运行。这三个词可以对应我上述提到的
终于等到了这个交互式学习神器，把 CNN 的工作过程画得明明白白，帮助萌新轻松入门。什么是 CNN？Convolutional Neural Network，中文译为「卷积神经网络」。这个常见但有些深奥的词汇，只可意会，不能言传。如果打开教材，会看到这样一些解释：卷积层是深度神经网络在处理图像时十分常用的一种层。当一个深度神经网络以卷积层为主体时，我们也称之为卷积神经网络。神经网络中的卷积层就是用
执行SQL查询时，主要的几个瓶颈在于：CPU运算速度、内存缓存区大小、磁盘IO速度。而对于大数据量数据的查询，其瓶颈则一般集中于磁盘IO，以及内存缓存。那么为了提高SQL查询的效率，一方面我们需要考虑尽量减少查询设计的数据条目数——建立索引，设立分区；另一方面，我们也可以考虑切实减少数据表物理大小，从而减少IO大小。在SQL Server 2008中，最新提供了一项功能“压缩（Compressio
COA 的概念Chart of accounts (COA): 指包含所有会计科目定义并按顺序排列的清单，其中每一项都是一个总账科目，称为总账科目 (G/L Account)。Chart of accounts 在中文中一般称为科目表。在 SAP 中，每一个总账科目 (G/L Account) 都有两个层次 (level)，首先必须在 Chart of accounts level 维护相关信息
概述： Spark是一个基于内存计算的开源集群计算系统，目的是让数据分析更加快速。 Spark非常小巧玲珑，由加州伯克利大学AMP实验室的小团队开发。使用的语言 是Scala，项目的core部分的代码只有63个Scala文件。（AMP实验室名字有点意思：Algorithm Machine People，算法、机器、人） &nbs
