Etl工具将sqlserver数据同步到oracle设计说明

软件说明

创新互联2013年开创至今，是专业互联网技术服务公司，拥有项目做网站、成都网站制作网站策划，项目实施与项目整合能力。我们以让每一个梦想脱颖而出为使命，1280元鼓楼做网站,已为上家服务,为鼓楼各地企业和个人服务,联系电话:18982081108

通过etl工具定时将SqlServer指定的表数据同步到oracle数据库

在数据库建立增删改的触发器。触发器将变更放到临时表里。

通过etl工具读取临时表同步给oracle

优点：比较实时

缺点：影响到业务系统，因为需要在业务系统建立触发器

实例说明：

例如在sqlserver有一张用户表（sys_user）需定时同步oracle数据库的用户表，

包括新增、删除、修改同步

给同步的表建三类触发器：

insert触发器：向表中插入数据时被触发；

update触发器：修改表中数据时被触发；

delete触发器：从表中删除数据时被触发。

以sqlserver的用户表举例，

Sqlserver的sys_user表，有两个字段id，name

具体流程：

以新增数据举例

Ø 一、在sqlserver新建触发器trigger_sysuser_insert

if (object_id('trigger_sysuser_insert') is not null)

drop trigger trigger_sysuser_insert

go

create trigger trigger_sysuser_insert

on sys_user --表名

for insert --插入后触发

--instead of insert --插入前触发,使用插入前触发时,不执行默认插入

as

--开始执行逻辑

declare @id int, @name varchar(20);

select @id = id, @name = name from sys_user; -------------- inserted 存放了当前插入的值

--select @name,@age

---创建临时表

if not exists (select * from sysobjects where id = object_id('##sys_user_insert')

and OBJECTPROPERTY(id, 'IsUserTable') = 1)

create table ##sys_user_insert

(

id int,

name varchar(32)

);

insert into ##sys_user_insert (id,name) values(@id,@name);

go

在sys_user新增数据时会被触发，将新增的数据加入临时表##sys_user_insert，此时

的临时表 ##sys_user_insert会增加一条记录

Ø 二、配置elt流程

节点1 从临时表读取数据，写入数据流

节点2 从数据流获取数据写入oracle

节点3 从sqlserver的临时表删除已经被同步的记录

Ø 三、建立作业调度

设置调度周期

适用增量数据同步

在要同步的源表里有时间戳字段，每当数据发生新增，时间戳会记录发生变化的时间，etl工具根据时间范围定时同步数据

优点：基本不影响业务系统

缺点：要求源表必须有时间戳这一列，适用增量场景，修改、删除不太适用

定时清空oracle数据源，将sqlserver的数据全盘拷贝到oracle数据源。一般用于数据量不大，实时性要求不高的场景。

优点：基本不影响业务系统，开发、部署都很简单

缺点：效率低

Etl流程

结论

准能现场数据同步，涉及增、删、改的同步，比较适用触发器的方式进行数据同步，但触发器仍会存在失效的情况，若现场有数据质量系统，定期数据稽核，查缺补漏，保证两边数据库的一致性；

SQLServer如何获取所有表及表的说明

select top 1000

ROW_NUMBER() OVER (ORDER BY a.object_id) AS No, 

a.name AS 表名,

isnull(g.[value],'-') AS 说明

from

sys.tables a left join sys.extended_properties g

on (a.object_id = g.major_id AND g.minor_id = 0)

No 表名 说明

1 test_table 测试表

2 test_main -

sqlserver的系统表

1、查看表和试图

SELECT * FROM sys.objects WHERE object_id = object_id('表名或视图名')

在sqlserver中一般可通过查询sys.objects系统表来得知结果，不过可以有更方便的方法

如下：

if object_id('tb_table') is not null

print 'exist'

else

print'not exist'

如上，可用object_id()来快速达到相同的目的，tb_table就是我将要创建的资源的名称，所以要先判断当前数据库中不存在相同的资源

object_id()可接受两个参数，第一个如上所示，代表资源的名称，上面的就是表的名字，但往往我们要说明我们所要创建的是什么类型的资源，

这样sql可以明确地在一种类型的资源中查找是否有重复的名字，如下：

if object_id('tb_table','u') is not null

print 'exist'

else

print'not exist'

第二个参数 "u" 就表示tb_table是用户创建的表，即：USER_TABLE地首字母简写

查询sys.objects中可得到各种资源的类型名称(TYPE列)，这里之举几个主要的例子

u ----------- 用户创建的表，区别于系统表(USER_TABLE)

s ----------- 系统表(SYSTEM_TABLE)

v ----------- 视图(VIEW)

p ----------- 存储过程(SQL_STORED_PROCEDURE)

2、查看表的列名

select * from syscolumns where id=object_id('表名') and name='列名'

3、查看数据库

select * from sys.databases where name = 'student'

4、查看备份设备

"select * from sys.backup_devices where name ='backupdb'

（添加备份设备：exec sp_addumpdevice 'disk','backupdb','d:\\backup\\backupdb.bak'）

5、查看数据文件

select name, physical_name dbfile from sys.master_files where database_id=db_id('student')

master数据库中sysdatabases表（是sqlserver中所有的数据库的库名） ：

如果你要查询的是所有数据库（用户/系统）：

select * from master..sysdatabases

如果你要查询的是用户数据库，则使用：

select * from master..sysdatabases where dbid 4

如果你要查询的是系统数据库，只需要把where字句改为dbid 4即可。

6、查看执行的sql语句

SELECT cacheobjtype,objtype,usecounts,sql

from sys.syscacheobjects where sql not like'%cach%' and sql not like '%sys.%'

2.对应数据库中sysobjects表（反应的是相应数据库中所有的对象）：

这个表的用处是最大的，因为它里面存放的有：表（系统/用户）、存储过程（系统/用户）、视图、主键、外键等。

这里就不一一说明了。

比如你sqlserver中有个数据库名叫 test,如果要查询该数据库中的所有表对象：

select * from test..sysobjects where type = ’u’ or type = ’s’

这里的type = ’u’是表示用户表对象，type = ’s’是系统表对象，怎样单独查询用户表对象或者系统表对象就不用说了吧。

如果你要查询的是存储过程当然也分了系统和用户了：

这个是查询数据库中所有存储过程

select * from test..sysobjects where type = ’p’

如果你要查询的是用户存储过程则加上 and category 2 即可。

查询系统存储过程就不用说了吧（category = 2 谁不知道。。。）

查询视图与查询存储过程一样，比如：

你查询的是数据库中所有视图

select * from test..sysobjects where type = ’v’

如果你要查询的是用户视图则加上 and category 2 即可。

其他的就不说了，就把 它们的type给大家说下：

type = ’ pk’ 表示主键。

type = ’ d’ 外键引用。

type = ’uq’ 唯一索引。

下面附录一些常用系统表

名称 地址 说明

sysaltfiles 主数据库 保存数据库的文件

syscharsets 主数据库 字符集与排序顺序

sysconfigures 主数据库 配置选项

syscurconfigs 主数据库 当前配置选项

sysdatabases 主数据库 服务器中的数据库

syslanguages 主数据库 语言

syslogins 主数据库 登陆帐号信息

sysoledbusers 主数据库 链接服务器登陆信息

sysprocesses 主数据库 进程

sysremotelogins主数据库 远程登录帐号

syscolumns 每个数据库 列

sysconstrains 每个数据库 限制

sysfilegroups 每个数据库 文件组

sysfiles 每个数据库 文件

sysforeignkeys 每个数据库 外部关键字

sysindexs 每个数据库 索引

sysmenbers 每个数据库 角色成员

sysobjects 每个数据库 所有数据库对象

syspermissions 每个数据库 权限

systypes 每个数据库 用户定义数据类型

sysusers 每个数据库 用户

查看sqlserver数据库有哪些表

1、首先我们打开数据库进入数据库。

2、然后我们输入账号和密码，点击链接即可进入数据库中。

3、然后我们在左侧树里找到要改的数据库。

4、然后我们即可找到我们要查看的所有的表。

5、然后我们右键点击设计。

6、然后我们可以查看到数据库表单。

请问sql 2000 master数据库里每个表的说明,都是干什么的，最好有详细说明

master 注要存的是SQLSERVER的内部数据库表，如：数据库中的所有对象 dbo.sysobjects

sql怎么添加说明

一楼的那是加注释

只能在自己的脚本里看到

楼主说的应该是给表加comment表创建完成

别人在数据库里能看见这个表各个字段的说明文字

如下：

create

table

yyy_t

(

username

varchar(16)

not

null,

userid

number(10)

not

null

)

comment

on

table

yyy_t

is

'用户表';

comment

on

column

yyy_t.username

is

'用户名';

comment

on

column

yyy_t.userid

is

'用户id';

我靠刚回答完就看到有人捷足先登了？郁闷

白写这么多了。。