昨天做了个日常大数据归档,归档700W数据,表字段130左右,字段比较多,分享下! ----先禁用表的index 1.先获取需要禁用的索引 declare @tname varchar(100) set @tname='orders' select 'alter index '+' '+c.indexname+' '+'on'+' '&
原创
2012-04-26 16:07:00
887阅读
昨天做了个日常大数据归档,归档700W数据,表字段130左右,字段比较多,分享下!----先禁用表的index1.先获取需要禁用的索引declare @tname varchar(100)set @tname='orders'select 'alter index '+' '+c.indexname+' '+'on'+' '+@tname+' '+'disable'from (select * from (SELECTOBJECT_NAME(i.OBJECT_ID)
转载
2012-04-26 16:07:00
72阅读
2评论
事务日志备份事务日志是自上次备份事务日志后对数据库执行的所有事务的一系列记录。可以使用事务日志备份将数据库恢复到特定的即时点(如输入多余数据前的那一点)或恢复到故障点。
还原事务日志备份时,Microsoft® SQL Server™ 前滚事务日志中记录的所有更改。当 SQL Server 到达事务日志的最后时,已重新创建了与开始执行备份操作的那一刻完全相同的数据库
转载
2024-04-28 19:54:51
53阅读
最近新接到的一项工作是把SQL Server中保存了四五年的陈年数据(合同,付款,报销等等单据)进行归档,原因是每天的数据增量很大,而历史数据又不经常使用,影响生产环境的数据查询等操作。要求是: 1 归档的数据与生产环境数据分开保存,以便提高查询效率和服务器性能。 2 前端用户能够查询已归档的数据,即系统提供的功能不能发生改变 看起来要求不是很高,我自然会联想到两种
转载
2024-05-02 10:42:57
36阅读
改变非归档模式到归档模式:
1)SQL>SHUTDOWN NORMAL/IMMEDIATE;
2)SQL>STARTUP MOUNT;
3)SQL>ALTER DATABASE ARCHIVELOG;
4)SQL>ALTER DATABASE OPEN;
转载
2011-03-28 09:24:14
742阅读
//归档 反归档(麻烦的方法) /* //归档 //创建Person实例对象 Person *person1=[[Person alloc]init]; person1.name=@"bbb"; person1.age=@"39"; Person *person2=[[Person alloc]...
原创
2022-07-14 12:04:19
67阅读
show parameter '%archive%';显示出归档日志的所有参数log_archive_start 这个参数在oracle10g已经没有用了。log_archive_max_processes ,oracle启动的进程为arc0,arc1,arc2,arc3.开启自动归档模式后,会默认启动N个进程数,可以根据服务器负载时间段设置这个参数的大小。alter &n
原创
2014-10-03 17:00:08
3452阅读
闫鑫承诺:您来到了我的小屋,就是来到了真理的世界!
热备份 ---数据库处于open下的备份
不是所有数据库都可以热备份
可以热备份的前提是 ---归档数据库
归档的含义有二 &
原创
2013-04-15 20:35:40
565阅读
点赞
1. #pragma mark 如果想要实现归档和反归档的操作需要签订一个协议 NSCoding[NSKeyedArchiver archiveRootObject:stuArr toFile:documentPath]; // 归档(写入)- (void)encodeWithCoder:(NSCoder *)aCoder { // 归档 [a
原创
2023-04-06 17:14:40
68阅读
转载
2017-06-07 22:34:00
64阅读
2评论
归档/tmp/mes/2020072310 是将HDFS上的那个目录下的文件归档。/tmp/mes/20200723 归档到那个目录下 hadoop archive -archiveName input.har -p /tmp/mes/2020072310 /tmp/mes/20200723 归档之后:hado
转载
2023-06-28 16:34:30
122阅读
1 . 在mount下才可以变成归档。SQL> shutdown immediate数据库已经关闭。已经卸载数据库。ORACLE 例程已经关闭。SQL> startup mount;ORACLE 例程已经启动。Total System Global Area &nbs
原创
2013-09-12 18:48:28
588阅读
hdfs的优化主要包括两方面: 一、hdfs本身的优化,常见项有 1.1 文件块block的大小设置: (1). 数据块的备份数(复制因子,默认3) (2). HDFS数据块的大小,默认值是128M(hdfs的大小应当根据两个因素来确定,一个是系统中常见文件的大小,一个是系统硬盘的速度,最优值应当接近硬盘速度) 1.2 hdfs小文件归档,hdfs中可能存储了大量的小文件,及其影响性能,我们可以对
转载
2024-01-13 08:35:57
93阅读
Hadoop archive 唯一的优势可能就是将众多的小文件打包成一个har 文件了,那这个文件就会按照dfs.block.size 的大小进行分块,因为hdfs为每个块的元数据大小大约为150个字节,如果众多小文件的存在(什么是小文件内,就是小于dfs.block.size 大小的文件,这样每个文件就是一个block)占用大量的namenode 堆内存空间,打成har 文件可以大大降低na
转载
2023-12-20 20:39:40
47阅读
一.主要概述MySQL数据库归档历史数据主要可以分为三种方式:一.创建编写SP、设置Event;二.通过dump导入导出;三.通过pt-archiver工具进行归档。第一种方式往往受限于同实例要求,往往被大家舍弃。第二种,性能相对较好,但是归档表较多时运维也是比较头疼的事。所以很多DBA往往采用第三种方式--pt-archiver。pt-archiver是Percona-Toolkit工具集中的一
转载
2023-08-22 21:07:18
151阅读
在linux系统中,我们一般对文件目录的管理,都是通过tar来进行,比如压缩文件,备份文件等,tar可以说是非常好用的。 我现在来讲解一下tar的几种使用方法:1.归档为tar包2.归档压缩为.gz的包3.归档压缩为.bz2的包4.保存原路径并归档为tar包5.解开tar包6.解开.tar.gz的包7.解开.tar.bz2的包8.直接将tar包解压到原路径
原创
2015-12-14 10:15:18
1366阅读
1. 写宏的时候可以建一个只有header的头文件2. #pragma mark 如果想要实现归档和反
原创
2023-03-02 12:20:43
142阅读
A:scp实现两个远程主机之间的文件复制:推的命令: 把111上的user文件 推到 112的家目录下 命令 &
转载
2023-10-27 00:48:15
105阅读
HDFS 并不擅长存储小文件,因为每个文件最少一个 block,每个 block 的元数据都会在 NameNode 占用内存,如果存在大量的小文件,它们会吃掉NameNode 节点的大量内存。Hadoop Archives 可以有效的处理以上问题,它可以把多个文件归档成为一个文件,归档成一个文件后还可以透明的访问每一个文件。 使用方法创建 Archives(档案) Usage: had
转载
2023-12-02 13:54:35
95阅读
开启归档并更新归档目录
1)建日志目录,并更改权限
mkdir -p /log/arch_log
chown oracle.oinstall -R /log/arch_log
2)开启归档
sqlplus / as sysdba
shutdown immediat;
startup mount;
alter database archivelog;
3) 更改归档日志
原创
2012-12-22 20:39:26
582阅读