sql server数据库同步

Question

select b.clientcode,b.itype,b.clientname,(CASE WHEN a.introstamp=b.introstamp THEN null ELSE b.intro END) AS intro,b.introstamp, (CASE WHEN a.logostamp=b.logostamp THEN null ELSE b.logo END) AS logo,b.logostamp, (CASE WHEN a.picstamp=b.picstamp THEN null ELSE b.pic END) AS pic,b.picext, b.picstamp, b.recommend, b.h_order, b.c_order, b.begindate, b.enddate, b.updatestamp, b.m_updatestamp from client a , userver.PosMain.dbo.v_mclient b where a.clientcode=b.clientcode and b.machinecode='0101' and b.updatestamp<>a.updatestamp
本条语句的目的是选择出服务器端的数据与本地不同的部分。
userver.PosMain是链接服务器。
现在的问题是这条语句执行时间太长(大约40秒)，其中数据量才100条
不知道大家有没有什么好的解决方法。
去掉后面的and b.machinecode='0101' and b.updatestamp<>a.updatestamp
这两个条件速度为2秒。
本来数据库同步可以使用复制服务器，但是这里想用普通sql语句对比更新

Answer 1

SQLServer2000同步复制技术实现步骤
 
一、 预备工作
1.发布服务器,订阅服务器都创建一个同名的windows用户,并设置相同的密码,做为发布快照文件夹的有效访问用户
--管理工具
--计算机管理
--用户和组
--右键用户
--新建用户
--建立一个隶属于administrator组的登陆windows的用户（SynUser）
2.在发布服务器上,新建一个共享目录,做为发布的快照文件的存放目录,操作:
我的电脑--D:\ 新建一个目录,名为: PUB
--右键这个新建的目录
--属性--共享
--选择"共享该文件夹"
--通过"权限"按纽来设置具体的用户权限,保证第一步中创建的用户(SynUser) 具有对该文件夹的所有权限
--确定
3.设置SQL代理(SQLSERVERAGENT)服务的启动用户(发布/订阅服务器均做此设置)
开始--程序--管理工具--服务
--右键SQLSERVERAGENT
--属性--登陆--选择"此账户"
--输入或者选择第一步中创建的windows登录用户名（SynUser）
--"密码"中输入该用户的密码
4.设置SQL Server身份验证模式,解决连接时的权限问题(发布/订阅服务器均做此设置)
企业管理器
--右键SQL实例--属性
--安全性--身份验证
--选择"SQL Server 和 Windows"
--确定
5.在发布服务器和订阅服务器上互相注册
企业管理器
--右键SQL Server组
--新建SQL Server注册...
--下一步--可用的服务器中,输入你要注册的远程服务器名 --添加
--下一步--连接使用,选择第二个"SQL Server身份验证"
--下一步--输入用户名和密码（SynUser）
--下一步--选择SQL Server组,也可以创建一个新组
--下一步--完成
6.对于只能用IP,不能用计算机名的,为其注册服务器别名（此步在实施中没用到）
  (在连接端配置,比如,在订阅服务器上配置的话,服务器名称中输入的是发布服务器的IP)
开始--程序--Microsoft SQL Server--客户端网络实用工具
--别名--添加
--网络库选择"tcp/ip"--服务器别名输入SQL服务器名
--连接参数--服务器名称中输入SQL服务器ip地址
--如果你修改了SQL的端口,取消选择"动态决定端口",并输入对应的端口号
二、 正式配置
1、配置发布服务器
打开企业管理器，在发布服务器（B、C、D）上执行以下步骤:
(1) 从[工具]下拉菜单的[复制]子菜单中选择[配置发布、订阅服务器和分发]出现配置发布和分发向导 
(2) [下一步] 选择分发服务器 可以选择把发布服务器自己作为分发服务器或者其他sql的服务器（选择自己）
(3) [下一步] 设置快照文件夹 
采用默认\\servername\Pub
(4) [下一步] 自定义配置 
可以选择:是,让我设置分发数据库属性启用发布服务器或设置发布设置
否,使用下列默认设置（推荐）
(5) [下一步] 设置分发数据库名称和位置 采用默认值
(6) [下一步] 启用发布服务器 选择作为发布的服务器
(7) [下一步] 选择需要发布的数据库和发布类型
(8) [下一步] 选择注册订阅服务器
(9) [下一步] 完成配置
2、创建出版物
发布服务器B、C、D上
(1)从[工具]菜单的[复制]子菜单中选择[创建和管理发布]命令
(2)选择要创建出版物的数据库，然后单击[创建发布]
(3)在[创建发布向导]的提示对话框中单击[下一步]系统就会弹出一个对话框。对话框上的内容是复制的三个类型。我们现在选第一个也就是默认的快照发布(其他两个大家可以去看看帮助)
(4)单击[下一步]系统要求指定可以订阅该发布的数据库服务器类型,
SQLSERVER允许在不同的数据库如 orACLE或ACCESS之间进行数据复制。
但是在这里我们选择运行"SQL SERVER 2000"的数据库服务器
(5)单击[下一步]系统就弹出一个定义文章的对话框也就是选择要出版的表
注意: 如果前面选择了事务发布 则再这一步中只能选择带有主键的表
(6)选择发布名称和描述
(7)自定义发布属性 向导提供的选择:
是 我将自定义数据筛选,启用匿名订阅和或其他自定义属性
否 根据指定方式创建发布 （建议采用自定义的方式）
(8)[下一步] 选择筛选发布的方式 
(9)[下一步] 可以选择是否允许匿名订阅
1)如果选择署名订阅,则需要在发布服务器上添加订阅服务器
方法: [工具]->[复制]->[配置发布、订阅服务器和分发的属性]->[订阅服务器] 中添加
否则在订阅服务器上请求订阅时会出现的提示:改发布不允许匿名订阅
如果仍然需要匿名订阅则用以下解决办法 
[企业管理器]->[复制]->[发布内容]->[属性]->[订阅选项] 选择允许匿名请求订阅
2)如果选择匿名订阅,则配置订阅服务器时不会出现以上提示
(10)[下一步] 设置快照 代理程序调度
(11)[下一步] 完成配置
当完成出版物的创建后创建出版物的数据库也就变成了一个共享数据库。----------------------------
--参考: 
/* 
作者:邹建 
*/ /*--同步两个数据库的示例 有数据 
srv1.库名..author有字段:id,name,phone, 
srv2.库名..author有字段:id,name,telphone,adress 要求： 
srv1.库名..author增加记录则srv1.库名..author记录增加 
srv1.库名..author的phone字段更新，则srv1.库名..author对应字段telphone更新 
--*/ --大致的处理步骤 
--1.在   srv1   上创建连接服务器,以便在   srv1   中操作   srv2,实现同步 
exec   sp_addlinkedserver     'srv2','','SQLOLEDB','srv2的sql实例名或ip' 
exec   sp_addlinkedsrvlogin   'srv2','false',null,'用户名','密码' 
go --2.在   srv1   和   srv2   这两台电脑中,启动   msdtc(分布式事务处理服务),并且设置为自动启动 
我的电脑--控制面板--管理工具--服务--右键   Distributed   Transaction   Coordinator--属性--启动--并将启动类型设置为自动启动 
go 
--然后创建一个作业定时调用上面的同步处理存储过程就行了 企业管理器 
--管理 
--SQL   Server代理 
--右键作业 
--新建作业 
--"常规"项中输入作业名称 
--"步骤"项 
--新建 
--"步骤名"中输入步骤名 
--"类型"中选择"Transact-SQL   脚本(TSQL)" 
--"数据库"选择执行命令的数据库 
--"命令"中输入要执行的语句:   exec   p_process   
--确定 
--"调度"项 
--新建调度 
--"名称"中输入调度名称 
--"调度类型"中选择你的作业执行安排 
--如果选择"反复出现" 
--点"更改"来设置你的时间安排 
然后将SQL   Agent服务启动,并设置为自动启动,否则你的作业不会被执行 设置方法: 
我的电脑--控制面板--管理工具--服务--右键   SQLSERVERAGENT--属性--启动类型--选择"自动启动"--确定. 
--3.实现同步处理的方法2,定时同步 --在srv1中创建如下的同步处理存储过程 
create   proc   p_process   
as 
--更新修改过的数据 
update   b   set   name=i.name,telphone=i.telphone 
from   srv2.库名.dbo.author   b,author   i 
where   b.id=i.id   and 
(b.name <> i.name   or   b.telphone <> i.telphone) --插入新增的数据 
insert   srv2.库名.dbo.author(id,name,telphone) 
select   id,name,telphone   from   author   i 
where   not   exists( 
select   *   from   srv2.库名.dbo.author   where   id=i.id) --删除已经删除的数据(如果需要的话) 
delete   b   
from   srv2.库名.dbo.author   b 
where   not   exists( 
select   *   from   author   where   id=b.id) 
go 

Answer 2

SQL SERVER 2005 同步复制技术以下实现复制步骤（以快照复制为例） 运行平台SQL SERVER 2005 一、准备工作： 1．建立一个 WINDOWS 用户，设置为管理员权限，并设置密码，作为发布快照文件的有效访问用户。 2．在SQL SERVER下实现发布服务器和订阅服务器的通信正常（即可以互访）。打开1433端口，在防火墙中设特例 3．在发布服务器上建立一个共享目录，作为发布快照文件的存放目录。例如：在D盘根目录下建文件夹名为SqlCopy 4．设置SQL 代理（发布服务器和订阅服务器均设置）本篇文章发表于www.xker.com(小新技术网) 打开服务(控制面板---管理工具---服务) ---右击SQLSERVER AGENT---属性---登录---选择“此帐户“ ---输入或选择第一步中创建的WINDOWS 用户 ---“密码“中输入该用户密码 5．设置SQL SERVER 身份验证，解决连接时的权限问题（发布、订阅服务器均设置） 步骤为：对象资源管理器----右击SQL实例-----属性----安全性----服务器身份验证------选“SQL Server和WINDOWS“，然后点确定 6.开启SQL Server 2005的网络协议TCP/IP和管道命名协议并重启网络服务。 7.在SQL Server中创建步骤1中对应的系统用户登陆名，作为发布数据库的拥有者（设置为dbo_owner和public）。 8．以系统超级用户sa登陆SQL Server建立数据库和表。 9．发布服务器和订阅服务器互相注册 步骤如下：视图----单击以注册服务器----右键数据库引擎----新建服务器注册-----填写要注册的远程服务器名称------身份验证选“SQL Server验证“-----用户名(sa) 密码------创建组（也可不建）-----完成。 10．对于只能用IP，不能用计算机名的，为其注册服务器别名 二、开始： 发布服务器配置（在发布服务器上配置发布和订阅） 1． 选择 复制 节点 2． 右键本地发布 ----下一步---------系统弹出对话框看提示----直到“指定快照文件夹“ ----在“快照文件夹“中输入准备工作中创建的目录(指向步骤3所建的共享文件夹)------选择发布数据库-------选择发布类型-------选择订阅服务器类型-------选择要发布的对象------设置快照代理-------填写发布名称。本篇文章发表于www.xker.com(小新技术网) 3． 右键本地订阅--------选择发布服务器-------选择订阅方式（如果是在服务器方订阅的话选择推送订阅反之 选择请求订阅）-------填加订阅服务器--------选择代理计划（一般选择连续运行）---------其余选择默认项。 至此, SQL SERVER 2005 同步复制就完成了。使用复制技术，用户可以将一份客户端的数据发布到多台服务器上，从而使不同的服务器用户都可以在权限的许可的范围内共享这份数据。复制技术可以确保分布在不同地点的数据自动同步更新，从而保证数据的一致性,就无需编程实现客户端和服务器端数据同步了！大大提高了工作效率！

Answer 3

都说了使用链接服务器，用sql语句对比更新有什么好办法。
不要使用同步復制功能

Answer 4

select b.clientcode,b.itype,b.clientname,(CASE WHEN a.introstamp=b.introstamp THEN
 null ELSE b.intro END) AS intro,b.introstamp, (CASE WHEN a.logostamp=b.logostamp
 THEN null ELSE b.logo END) AS logo,b.logostamp, (CASE WHEN a.picstamp=b.picstamp 
THEN null ELSE b.pic END) AS pic,b.picext, b.picstamp, b.recommend, b.h_order, 
b.c_order, b.begindate, b.enddate, b.updatestamp, b.m_updatestamp from client a ,
 userver.PosMain.dbo.v_mclient b where a.clientcode=b.clientcode and
 b.machinecode='0101' and b.updatestamp<>a.updatestamp现在的问题是这个sql执行太慢，严重超时。
//==================
--在srv1中创建如下的同步处理存储过程 
create   proc   p_process   
as 
--更新修改过的数据 
update   b   set   name=i.name,telphone=i.telphone 
from   srv2.库名.dbo.author   b,author   i 
where   b.id=i.id   and 
(b.name <> i.name   or   b.telphone <> i.telphone) --插入新增的数据 
insert   srv2.库名.dbo.author(id,name,telphone) 
select   id,name,telphone   from   author   i 
where   not   exists( 
select   *   from   srv2.库名.dbo.author   where   id=i.id) --删除已经删除的数据(如果需要的话) 
delete   b   
from   srv2.库名.dbo.author   b 
where   not   exists( 
select   *   from   author   where   id=b.id) 
go 
//==========================
我的sql语句和上面的语句是一个意思。
数据表里面有blob字段，每个字段大小为100k左右的图片，记录数才100条，到了10000条的时候就不敢想象了。

Answer 5

如果2个表都有自动递增id，而且源表是只增不删改的
可以仅仅比较2表的id来插入
insert B
select * from A
where id>(select max(id) from B)现在一个项目就是这样做的，虽然是跨地区，效果还是挺好

Answer 6

数据表结构服务端和客户端有些区别，例如
client表，服务端的client表里面包括终端号，客户端只需要属于自己的部分。
client表一般不会删除，但会修改，里面还有blob图片字段。
还有些表，如客户端办理的会员卡，需要上传到服务器，同时还要从服务器下载
别的客户端办理的卡
数据库里面我都做了updatestamp字段，每次增加或者更新都+1

Answer 7

select b.clientcode,b.itype,b.clientname,(CASE WHEN a.introstamp=b.introstamp THEN
 null ELSE b.intro END) AS intro,b.introstamp, (CASE WHEN a.logostamp=b.logostamp
 THEN null ELSE b.logo END) AS logo,b.logostamp, (CASE WHEN a.picstamp=b.picstamp 
THEN null ELSE b.pic END) AS pic,b.picext, b.picstamp, b.recommend, b.h_order, 
b.c_order, b.begindate, b.enddate, b.updatestamp, b.m_updatestamp 
from client a ,
 userver.PosMain.dbo.v_mclient b 
where a.clientcode=b.clientcode and b.machinecode='0101' 
--and b.updatestamp<>a.updatestamp
这样（屏蔽最后一行）的结果大约多少条，要多少时间

Answer 8

现在客户端数据70条，服务端数据70条
去掉b.machinecode='0101' 条件后
如果与服务器不相同的数据为0，那么时间差不多2秒，
如果不去掉这个条件需要40秒。
客户端数据全部清除以后，客户端0条，服务端70条和上面的执行时间差不多。
直接select top 5 * from userver.posmain.client 时间是8秒
不用链接服务器直接connection远程连接
select top 5 * from client时间5秒

Answer 9

--and b.machinecode='0101' 
--and b.updatestamp<>a.updatestamp
这两个条件去掉b.updatestamp<>a.updatestamp
执行时间没有什么变化，
去掉b.machinecode='0101'时间才有变化。
userver.PosMain.dbo.v_mclient 是个视图

Answer 10

去掉b.machinecode='0101'时间才有变化？
那就加上这个字段做索引好了

Answer 11

根本没什么用。
select a.* from userver.PosMain.dbo.client b where a.clientcode=b.clientcode
and a.updatestamp<>b.updatestamp 
就这么条语句执行时间1分多钟，
选择出来的不相同的数据为0条。

Answer 12

跨服务器的2个表关联，传输的数据量会导致慢
如果能先把参与关联的表缩小，传输的数据量也就少了
select b.clientcode,b.itype,b.clientname,(CASE WHEN a.introstamp=b.introstamp THEN
 null ELSE b.intro END) AS intro,b.introstamp, (CASE WHEN a.logostamp=b.logostamp
 THEN null ELSE b.logo END) AS logo,b.logostamp, (CASE WHEN a.picstamp=b.picstamp 
THEN null ELSE b.pic END) AS pic,b.picext, b.picstamp, b.recommend, b.h_order, 
b.c_order, b.begindate, b.enddate, b.updatestamp, b.m_updatestamp 
from client a ,
(select * from userver.PosMain.dbo.v_mclient where machinecode='0101') b 
where a.clientcode=b.clientcode --and b.machinecode='0101' 
and b.updatestamp<>a.updatestamp还有，哪个服务器作为执行者，也有关系，一般应该把数据量大的表所在的服务器作为执行者，这样传输的数据量也就少了

Answer 13

还有，哪个服务器作为执行者，也有关系，一般应该把数据量大的表所在的服务器作为执行者，这样传输的数据量也就少了
//=============================
因为是客户端要和服务端同步，执行者的关系一定是客户端做链接服务器连接到服务端，不可能服务端链接到客户端。sql 语句一定是在客户端执行
简单语句
select * from remote.client a ,client b where a.clientcode=b.clientcode and a.updatestamp <> b.updatestamp
这么条语句本来两个表的数据都是相同的，那么返回就是空，但是要执行40秒。
反而select * from remote.client 
返回70行，每记录50k,只有23秒，返回的时间只是网络传输时间。
本地表和远程表比较的时候会把服务端的数据下载到本地来比较吗？

Answer 14

(select * from userver.PosMain.dbo.v_mclient where machinecode='0101') b 
刚没有看明白你的意思，这种写法我早就写过了，没有太实质的意义，速度基本一样，执行超时

Answer 15

 先 将CLIENT数据 INSERT 到SERVER 的 TEMP_TABLE 表里，再
在SERVER 里 进行比较操作，WHERE条件多一点， 也许  这样会快些。

Answer 16

发一个时间比较1.select b.infoid from userver.ticketmain.dbo.v_minfo b where not exists(select infoid from info where info.infoid=b.infoid) and b.machinecode='05320101'
只选择出infoid,数据量20条，执行时间1秒以内
2.select top 3 * from userver.ticketmain.dbo.v_minfo where machinecode='05320101'
执行时间2秒，每条记录大小50k.
3.select top 3 * from userver.ticketmain.dbo.v_minfo where machinecode='05320101' 
and infoid in
(select b.infoid from userver.ticketmain.dbo.v_minfo b where not exists(select infoid from info where info.infoid=b.infoid) and b.machinecode='05320101')
后面的in 语句为上面1里面的内容
执行时间40秒从这里看出，两个步骤每个步骤的时间需要很短，但是组合在一起执行以后时间就会很长。
4.select top 3 * from userver.ticketmain.dbo.v_minfo where machinecode='05320101' 
and infoid in（20，25，30）
这样的执行时间与步骤2的时间相同。
这样是否是先选择出infoid 然后组合出infoid in (......)的语句，执行？
没有搞明白步骤3里面的语句怎么会执行那么长的时间？？