1．配置监听配置监听的方法有3种：Database PLSExtProc Executable Database 模式是标准的配置方式，也是最常用的数据库连接方式。PLSExtProc 模式允许PL/SQL程序访问外部程序，并且被大多数实例配置为默认连接方式Executable 模式允许外部程序能通过一个tns连接被访问(目前没用到过)Database 模式
pg_strom: 提升 PostgreSQL 性能的 GPU 加速库 pg_strom FDW module of PostgreSQL using GPU for Asynchronous Super-Parallel Query Execution 项目地址: https://gitcode.com/gh_mirrors/pg/pg_strom 项目简介是一个用于扩展 PostgreSQ
pg_strom: 提升 PostgreSQL 性能的 GPU 加速库 pg_strom FDW module of PostgreSQL using GPU for Asynchronous Super-Parallel Query Execution 项目地址: https://gitcode.com/gh_mirrors/pg/pg_strom 项目简介是一个用于扩展 PostgreSQ
关于压缩表，可以调整的参数看起来只有key_block_size，在建表时指定，意味着innodb会将page压缩到指定的大小，例如，如果设置Key_block_size=8，则将其压缩到8k。Key_block_size的值应根据记录的长度来确定，如果设置的过小，可能由于一个page无法压缩太多行而出现高概率的压缩失败，导致不得不split page.但设置为16k则不会取得太好的压缩
转载
2024-02-19 10:55:30
84阅读
# Hive开启压缩
作为一名经验丰富的开发者，我将教会你如何在Hive中开启压缩功能。下面将详细介绍整个过程，并提供每个步骤需要执行的代码。
## 过程概述
以下是在Hive中开启压缩功能的步骤概述。通过按照这些步骤逐一执行，你将能够成功实现压缩功能。
| 步骤 | 操作 |
|------|------|
| 1. | 设置压缩编解码器 |
| 2. | 压缩表数据 |
| 3
原创
2023-08-03 16:24:03
100阅读
之前只会配置postgresql的指定IP的远程权限，后来一个客户想通过远程连接postgre，但是她的IP经常发生变动，导致我每次都要重新再进行设置，后来终于找到了方法，现做如下记录：只针对Windows服务
原创
2021-06-22 14:52:01
643阅读
一、 查询要求Q13语句查询获得消费者的订单数量，包括过去和现在都没有订单记录的消费者。Q13语句的特点是：带有分组、排序、聚集、子查询、左外连接操作并存的查询操作。二、 Oracle执行Oracle编写的查询SQL语句如下：select /*+ parallel(n) */ c_count, count(*) as custdistfrom ( select c_custkey, count(o
转载
2024-07-17 22:30:44
93阅读
大数据-Hive（三）目录Hive表的数据压缩方式Hive表的文件存储格式存储和压缩结合多字符分割场景Hive表的数据压缩方式压缩配置参数要在Had
转载
2023-12-11 23:24:50
56阅读
1：压缩首先打开hive的压缩功能命令：set hive.exec.compress.intermediate=true;开启map端数据压缩功能命令：set mapreduce.map.output.compress=true;设置map端的数据压缩格式：命令：set mapreduce.map.output.compress.codec=org.apache.hadoop.io.compres
转载
2024-05-14 13:40:19
23阅读
XY个人记一、HBase的压缩配置HBase压缩的三个阶段：1.在数据进入HDFS之前进行压缩2.在MapRecduce的shuffle过程中：Map完成 Reduce开始阶段 数据在节点之间传输的时候进行压缩3.数据处理完成存到HDFS之上的时候进行压缩压缩的目的：1.节省HDFS的存储空间，缓解存储压力2.减少网络传输的数据，减轻网络传输负载HBase配置压缩前hadoop需要支持压缩，关于h
转载
2023-08-18 21:49:02
401阅读
问题： 存储在HDFS上的一个大文件有100T，怎么在实时的要求下，快速找出对应的record 实时的增删改查 hbase 根据key 查找value 底层二进制编码 序列化和反序列化 主键 列簇1 列簇2 。。。 &nbs
转载
2024-02-10 02:18:03
38阅读
一，nginx开启gzip压缩 gzip on; //该指令用于开启或关闭gzip模块(on/off)gzip_min_length 1k; //设置允许压缩的页面最小字节数，页面字节数从header头得content-length中进行获取。默认值是0，不管页面多大都压缩。建议设置成大于1k的字节数，小于1k可能会越压越大。gzip_buffers 4 16k; //
转载
2024-06-22 08:09:18
378阅读
PART I: 介绍Distiller模型压缩包含的算法: 稀疏算法(剪枝+正则化)+低精度算法（量化）Distiller特点:(1) 该框架融合了剪枝,正则化及量化算法(2) 一系列分析及评估压缩性能的工具(3) 较流行压缩算法的应用稀疏神经网络可以基于 (weig
postgresql开启运行日志，也就是oracle 的alert日志 logging_collector=off时 用pg_ctlstart启动 启动日志信息和系统操作日志信息都写到当前terminal的stdout。 用ppas-9.1start启动 启动日志信息和系统操作日志信息都写到了pg_
转载
2020-08-17 21:17:00
1205阅读
2评论
1、用BACKUP LOG database WITH NO_LOG清除日志
把数据库属性中的故障还原模型改为“简单”可以大大减慢日志增长的速度。
如果把还原模型调到简单，这样就不支持时间点还原了，但是日志文件会很小，如果数据比较重要推荐还是把数据库的还原模型调为完全
用BACKUP LOG database WITH NO_LOG命名
转载
2024-05-11 18:32:52
241阅读
这两天越南那边服务器测试，2000用户顺便耗光服务器100m带宽，建议运营方增加带宽的同时，发现nginx 没有开始gzip压缩，导致一些400-500K左右的文件直接下载去了，这方面占用太多带宽，所有果断开启gzip 下面是copy复制的一些gzip详解，
Nginx Gzip 压缩配置
随着nginx的发展，越来越多的网站使用nginx，因
原创
2012-07-06 12:30:10
1240阅读
1评论
Nginx开启Gzip压缩功能，可以使网站的css、js、xml、html等静态文件在传输时进行压缩,提
原创
2022-12-30 15:31:29
921阅读
背景HBase是目前主流的Nosql数据库之一，由于其优秀的水平扩展能力，业界常将其用来存储海量级的数据。在我们使用HBase的时候，为了节省服务器的存储成本，建议开启HBase的数据压缩特性。主流的HBase压缩方式有LZO和Snappy，Snappy的压缩比会稍微优于LZO。需要注意的是，Snappy是需要单独下载并编译安装的，此过程不在本文讨论范文之内，本文主要介绍如何通过HBase s...
转载
2021-07-11 14:59:49
2985阅读
在大数据处理中，Hive是一个常用的数据仓库工具，可以进行数据查询、分析和处理。而在Hive中，我们经常会使用TextFile格式来存储数据，但是当数据量很大时，文件会变得非常大，这时就需要考虑对文件进行压缩，以减少存储空间和提高查询速度。
Hive提供了一种简单的方法来开启文件压缩，下面我们来看一下如何使用Hive TextFile开启压缩：
首先，我们需要在Hive中创建一个表，并指定文件
原创
2024-04-06 06:02:29
114阅读
集成compression-webpack-plugin插件实现打包Gzip压缩 nginx 配置一，配置vue项目打包生成gzip
1.1 package.json 添加如下配置 参考 若依 配置：{
"name": "ruoyi",
"version": "3.8.6",
"description": "若依管理系统",
"author": "若依",
"license":
