背景  最近在负责公司数据Oracle转PG;老平台数据库:Oracle11g;新平台数据库:PostgreSQL12。由于平台统计规则有变动;所以正在推广的游戏数据无法全部迁移过来;只能在老平台上运行。而支付数据接口升级;统一进入新平台数据PG。需要将部分支付数据由PostgreSQL同步到Oracle。  简而言之:PostgreSQL增量同步表到Oracle。首先声明我不是反“去IOE”潮流            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2021-04-28 14:30:04
                            
                                1312阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
             常用脚本:
-----1. 0级备份
常用脚本: -----1. 0级备份 批处理文件: set ORACLE_SID=orcl rman target sys/test@orcl  cmdfile= 'S:/backup/scripts/0/db_fullbakup_or            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2013-05-07 10:33:06
                            
                                1026阅读
                            
                                                        
                                点赞
                            
                                                                                    
                                1评论
                            
                                                 
                 
                
                             
         
            
            
            
            Incremental Backup: 2 个级别,level 0 和level 1, 0 级备份包含数据文件中所有block,1 级备份改变的block,执行增量备份的时候,要先做0 级备份,作为增量备份的基础.(1)An INCREMENTAL backup at level 0 backs u...            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2015-02-19 16:16:00
                            
                                188阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            在rman增量备份中,有差异增量和累积增量的概念    1、概念    差异增量:是备份上级(如0级备份相对于1级备份为1级备份上级)及同级备份以来所有变化的数据块,差异增量是默认增量备份方式,这个用的多一些。    累积增量:是备份上级备份以来所有变化的块    因为累积增量是            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                            精选
                                                        
                            2014-11-01 15:34:22
                            
                                861阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            关于增量更新DataX 支持多种数据库的读写, json 格式配置文件很容易编写, 同步性能很好, 通常可以达到每秒钟 1 万条记录或者更高            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-08-04 10:34:14
                            
                                2292阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            在rman增量备份中,有差异增量和累积增量的概念    1、概念    差异增量:是备份上级及同级备份以来所有变化的数据块,差异增量是默认增量备份方式    累积增量:是备份上级备份以来所有变化的块    因为累积增量是备份上级备份以来所有            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2017-05-18 14:18:19
                            
                                639阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            一、 导出/导入(Export/Import) ---- 利用Export可将数据从数据库中提取出来,利用Import则可将提取出来的数据送回Oracle数据库中去。 ---- 1. 简单导出数据(Export)和导入数据(Import) ---- Oracle支持三种类型的输出: ----...            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2014-10-16 16:48:00
                            
                                265阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            oracle 增量备份脚本
OS :RHEL AS 4 oracle 10g
 
0备份脚本
#!/bin/bash# incremental level 0 backup script
 
source /home/oracle/.bash_profile
 
current_day=`date +%Y%m%d`mkdir /home/oracle/RMANBACK            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2009-07-07 20:09:34
                            
                                2068阅读
                            
                                                                                    
                                1评论
                            
                                                 
                 
                
                             
         
            
            
            
            一、 导出/导入(Export/Import) ---- 利用Export可将数据从数据库中提取出来,利用Import则可将提取出来的数据送回Oracle数据库中去。 ---- 1. 简单导出数据(Export)和导入数据(Import) ---- Oracle支持三种类型的输出: ----...            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2014-11-26 11:15:00
                            
                                329阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            在rman增量备份中,有差异增量和累积增量的概念
     1、概念
    差异增量:是备份上级及同级备份以来所有变化的数据块,差异增量是默认增量备份方式    累积增量:是备份上级备份以来所有变化的块
   &nbs            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                            精选
                                                        
                            2009-10-13 00:27:26
                            
                                1864阅读
                            
                                                                                    
                                1评论
                            
                                                 
                 
                
                             
         
            
            
            
            采用0221222增量备份策略,7天一个轮回 也就是周日0级备份,周1 2 4 5 6 采用2级增量备份            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-09-26 13:39:37
                            
                                485阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            在rman增量备份中,有差异增量和累积增量的概念    1、概念    差异增量:是备份上级及同级备份以来所有变化的数据块,差异增量是默认增量备份方式累积增量:是备份上级备份以来所有变化的块    因为累积增量是备份上级备份以来所有变化的数据块,所以累积增量需要更多的备份时间,同时需要较小的恢复时间;而差异增量正好相反,它可以备份同级备份            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2014-01-24 11:19:07
                            
                                820阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            1.概念差异增量备份自上级及同级备份以来所有更改过的块。累积增量备份自上级备份以来所有更改过的块。因为累积增量是备份上级备份以来所有更改过的数据块,所以累积增量备份需要更多的备份时间及较少的恢复时间;差异备份则相反,它可以备份同级备份以来更改过的数据块。所以会减少备份时间,但在恢复时需要更多的时间。差异增量备份更快,会写出更少的块,产生更小的备份文件。备份过程更快,但在恢复时,RMAN必须过滤并应...            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2021-08-09 22:42:35
                            
                                915阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            在rman增量备份中,有差异增量和累积增量的概念
     1、概念
    差异增量:是备份上级及同级备份以来所有变化的数据块,差异增量是默认增量备份方式    累积增量:是备份上级备份以来所有变化的块
     因为累积增            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2010-07-06 13:08:29
                            
                                401阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            这种迁移方式适合大批量的大表或者需要增量同步的表进行迁移,支持全量初始化+Oracle GoldenGate(OGG)增量同步,通过navicat工具进行Oracle-->MySQL表结构转化,再通过数据同步工具OGG进行全量表初始化以及后续的增量同步。
注意:使用增量方式同步的表都需要有主键,确保每行数据的唯一。
先使用navicat进行表结构的转化,具体参考迁移方式二里面的步骤。
Ora            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-10-15 12:00:10
                            
                                500阅读
                            
                                                                             
                 
                
                             
         
            
            
            
                    select a.*        from  (      ) a        LEFT JOIN (  SELECT  f_id  FROM T_BASE ) B  ON A.PROUSERID=B.F_ID         WHERE B.F比 如果A表的数据不存在于B表        用            
                
         
            
            
            
            全备份RMAN> list backupset;List of Backup Sets===================  BS Key  Type LV             
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-08-17 08:56:17
                            
                                174阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            1.概念差异增量备份自上级及同级备份以来所有更改过的块。累积增量备份自上级备份以来所有更改过的            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2022-04-11 17:18:12
                            
                                923阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            前言首先扫一下盲,sqoop(sql-to-hadoop),是连接关系型数据库和hadoop的桥梁。(1)数据导入:把关系型数据库的数据导入到Hadoop相关的系统(hbase和hive); (2)数据导出:把数据从hadoop导出到关系型数据库。 sqoop是利用mapreudude加快数据的传输速度,批处理的方式进行数据传输。一、全量导入从RDBMS到HIVE:sqoop import \
-            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-01-29 02:06:45
                            
                                262阅读
                            
                                                                             
                 
                
                                
                    