本文旨在讲解Hive的运行原理，帮助使用者更好的了解在使用的过程中它做了些什么工作，深入的理解他的工作机制，提高开发人员理论层面的知识。后面会逐渐推出Hive使用、Hbase原理与使用等大数据专题类文章，敬请关注。什么是Hive？ Hive是建立在 Hadoop 上的数据仓库基础构架。它提供了一系列的工具，可以用来进行数据提取转化加载（ETL）
由于真空开关的灭弧能力极强，开断时会引起特殊的操作过电压，造成高压电机绝缘击穿，回路变压器故障，甚至导致开关柜自身损坏烧毁。三相组合式过电压保护器（以下简称保护器）是专用于3～35kV中压系统，保护系统内部操作过电压（主要是真空开关强制截流过电压，也包扩多次重燃过电压和三相开断不同步产生的过电压）对电气设备侵害的产品。其核心工作原理是采用放电间隙给氧化锌阀片分压的方式，降低产品的操作冲击保护残压，
转载
2009-07-30 17:14:38
650阅读
点赞
VPN 工作原理 引言 在过去几十年中，世界发生了很大的变化。现在很多公司除了处理本地或地区性事务外，还要
原创
2014-08-06 18:32:44
2014阅读
1 为什么要使用Storm？Apache Storm是一款免费且开源的分布式实时计算系统。Storm可以轻松地可靠地处理无限数据流，从而实时处理Hadoop进行批处理的操作。Storm很简单，可以与任何编程语言一起使用，并且使用起来非常有趣！Storm有许多用例：实时分析，在线机器学习，连续计算，分布式RPC，ETL等等。Storm速度很快：基准测试表明，每个节点每秒处理超过一百万个元组。它具有可
深入JVM工作原理（一）一、JVM基础知识（一）java跨平台解释（二）JVM介绍（三）JDK、JRE、JVM三者关系（四）JVM的生命周期启动和消亡：JVM运行起点：JVM的两种线程：二、JVM的工作机制（类加载机制）（一）类加载时机（二）类加载器（三）双亲委派模型（四）类加载详细过程三、JVM的工作过程（内存模型）（一）程序计数器（二）虚拟机栈（三）本地方法栈（四）堆（五）方法区四、java
不足之处，欢迎专家、同行、读者批评指正。Java的工作原理Java程序从写代码到实际运行需要经过三个步骤：编写，编译、运行。在不同的阶段，分别生成了不同类型的文件。在理解工作原理的时候，我们可以看：这个文件由谁产生，给谁使用，是什么类型的。第一个阶段，编写。这个阶段由程序员写代码（用什么写无所谓，用记事本写都可以。不过编辑器我推荐Sublime）。写出来以后，保存为“.java”后缀的文件。这个文
Hadoop其实并不是一个产品，而是一些独立模块的组合。主要有分布式文件系统HDFS和大型分布式数据处理库MapReduce。由于目前主要用到HDFS，所以这里看一下它的工作原理，以及相应的介绍下配置。什么是HDFS？Hadoop下面工作原理我就直接copy了。。工作原理写操作：有一个文件FileA，100M大小。Client将FileA写入到HDFS上。HDFS按默认配置。HDFS分布在三个机架
文章目录MapReduce 工作原理一、MapReduce工作过程二、MapTask工作原理三、Reduce Task工作原理四、Shuffle工作原理五、MapReduce编程组件1、inputFormat组件2、Mapper组件3、Reducer组件4、Partitioner组件5、Combiner组件6、OutputFormat组件六、MapReduce运行模式1、本地运行模式2、集群运行
今天整理了一下hive的相关知识,其中包括hive原理及其表相关的一些内容,主要为个人理解： 1.hive是什么有什么用？hive是数仓工具,可以抽取,转换,加载数据(ETL), Hive不适用于毫秒级的响应,因为其底层是调用MR程序在Yarn上运行操作hdfs上的结构化静态数据来实现处理数据的功能,但Hive将sql跟MR结合,可以实现多维度的查询,用户的学习成本较低,上手较为容易.2.hive
内容分发网络（CDN）采用智能路由和流量管理技术，及时发现能够给访问者提供最快响应的加速节点，并将访问者的请求导向到该加速节点，由该加速节点提供内容服务。利用内容分发与复制机制，CDN客户不需要改动原来的网站结构，只需修改少量的DNS配置，就可以加速网络的响应速度。
当用户访问了使用CDN服务的网站时，DNS域名服务器通过CNAME方式将最终域名请求重定向到CDN系统中的智能DNS负载均衡系
转载
精选
2008-05-15 16:56:15
1064阅读
SSL 是一个安全协议，它提供使用 TCP/IP 的通信应用程序间的隐私与完整性。因特网的 超文本传输协议 （HTTP）使用 SSL 来实现安全的通信。
在客户端与服务器间传输的数据是通过使用对称算法（如 DES 或 RC4）进行加密的。公用密钥算法（通常为 RSA）是用来获得加密密钥交换和数字签名的，此算法使用服务器的SSL数字证书中的公用密钥。有了服务器的SSL数字证书，客户端也可以验证服
转载
精选
2008-09-05 14:46:17
828阅读
RIP路由协议及工作原理
RIP（Routing information Protocol，路由信息协议）是应用较早、使用较普遍的内部网关协议（Interior Gateway Protocol，IGP），适用于小型同类网络的一个自治系统（AS）内的路由信息的传递。RIP协议是基于距离矢量算法（Distance Vector Algorithms，DVA）的。它使用“跳数”，即metric来衡量
转载
精选
2009-04-06 18:57:30
714阅读
SSL 是一个安全协议，它提供使用 TCP/IP 的通信应用程序间的隐私与完整性。因特网的 超文本传输协议 （HTTP）使用 SSL 来实现安全的通信。
在客户端与服务器间传输的数据是通过使用对称算法（如 DES 或 RC4）进行加密的。公用密钥算法（通常为 RSA）是用来获得加密密钥交换和数字签名的，此算法使用服务器的SSL数字证书中的公用密钥。有了服务器的SSL数字证书，客户端也可以验证服务器
转载
精选
2009-10-13 18:44:08
469阅读
点赞
2评论
FTP工作原理
FTP工作原理 拿下载文件为例，当你启动FTP从远程计算机拷贝文件时，你事实上启动了两个程序：一个本地机上的FTP客户程序：它向FTP服务器提出拷贝文件的请求。另一个是启动在远程计算机的上的FTP服务器程序，它响应你的请求把你指定的文件传送到你的计算机中。FTP采用“客户机/服务器”方式，用户端要在自己的本地计算机上安装FTP客户程序。 FTP客户程序有字符
转载
2010-06-12 23:50:46
305阅读
原创
2011-03-16 14:51:27
2031阅读
点赞
Varnish将所有的HTTP object存于一个单独的大文件中，而该文件在工作进程初始时就将其整个mmap到内存中。Varnish在该块内存中实现类似于一个简单的“文件系统”，具有分配、释放、修剪、合并等功能。
Varnish文件缓存的优点，就如其创始人Poul-Henning Kamp所说，它是一个具有“现代设计理念”的软件，其整体设计优点
转载
精选
2011-06-22 13:59:32
438阅读
两台连接到互联网上的电脑相互之间通信，必须有各自的IP地址，但由于现在的IP地址资源有限，宽带接入运营商不能做到给每个报装宽带的用户都能分配一个固定的IP地址（所谓固定IP就是即使在你不上网的时候，别人也不能用这个IP地址，这个资源一直被你所独占），所以要采用DHCP方式对上网的用户进行临时的地址分配。也就是你的电脑连上网，DHCP服务器才从地址池里临时分配一个IP地址给你，每次上网分
原创
2011-12-17 21:47:17
584阅读
session是一种保存上下文信息的机制，它是针对每一个用户的，变量的值保存在服务器端，通过SessionID来区分不同的客户，session是以Cookie或URL重写为基础。默认使用Cookie来实现，系统会创造一个名为JSESSIONID的输出Cookie，或称为"Session Cookie"，以区别Persistent Cookies(通常所说的Cook
转载
精选
2012-02-12 19:46:18
243阅读
PING是如何工作的
在该例中，我用ping检查www.mattmarg.com ，即，我每秒钟向www.mattmarg.com发送一个ICMP回送请求信息包，当ping程序从远程主机(www.mattmarg.com)收到回送答复时， 它在屏幕上显示答复，并列出几条有用的信息：第1条信息是返回答复的主机的IP地址（通常应该是www.mattmarg.com的IP地址 )；第2条信息是序列号，
转载
精选
2012-10-12 11:20:35
507阅读
