中国领先的IT技术网站
|
|

SQL Server实时同步更新远程数据库遇到的问题

TableA与TableB结构相同,但数据数量不一定相同,应为有可能TableC也在更新TableB。由于数据更新不频繁,为简单起见想到使用了触发器Tirgger。

作者:qingspace来源:博客园|2017-05-25 08:52

开发者大赛路演 | 12月16日,技术创新,北京不见不散


工作中遇到这样的情况,需要在更新表TableA(位于服务器ServerA 172.16.8.100中的库DatabaseA)同时更新TableB(位于服务器ServerB 172.16.8.101中的库DatabaseB)。

TableA与TableB结构相同,但数据数量不一定相同,应为有可能TableC也在更新TableB。由于数据更新不频繁,为简单起见想到使用了触发器Tirgger。记录一下遇到的一些问题:

1. 访问异地数据库

在ServerA 中创建指向ServerB的链接服务器,并做好账号映射。addlinkedserver存储过程创建一个链接服务器,参数详情参见官方文档。第1个参数LNK_ServerA是自定义的名称;第2参数产品名称,如果是SQL Server不用提供;第3个参数是驱动类型;第4个参数是数据源,这里写SQL Server服务器地址

  1. exec sp_addlinkedserver 'LNK_ServerB_DatabaseB','','SQLNCLI','172.16.8.101' 

配置链接服务器后,默认使用同一本地账号登陆远程数据库,如果账号有不同,还需要进行账号映射。sp_addlinkedsrvlogin参数详情参见官方文档。第1个参数同上;第2个参数false即使用后面参数提供的用户密码登陆;第3个参数null使所有本地账号都可以使用后面的用户密码来登陆链接服务器,如果第3个参数设置为一个本地SQL Server登陆用户名,那么只有这个用户才可以使用远程账号登陆链接服务器;最后两个是登录远程服务器的用户和密码。

  1. exec sp_addlinkedsrvlogin 'LNK_ServerB_DatabaseB','false',null,'user','password' 

如果要删除以上配置可以如下

  1. exec sp_droplinkedsrvlogin 'LNK_ServerB_DatabaseB',null 
  2. exec sp_dropserver 'LNK_ServerB_DatabaseB','droplogins' 

上面的配置在SQL Server Management Studio管理器里Server Objects下LinkedServers可以查询到,如果一切链接正常,可以直接打开链接服务器上的库表

值得注意的是以上两个存储过程不能出现在触发器代码中,而是事先在服务器ServerA中运行完成配置,否则触发器隐式事务的要求会报错“The procedure 'sys.sp_addlinkedserver' cannot be executed within a transaction.”

2. 配置分布式事务

SQL Server的触发器是隐式使用事务的,链接服务器是远程服务器,需要在本地服务器和远程服务器之间开启分布式事务处理,否则会报“The partner transaction manager has disabled its support for remote/network transactions”的错误。我在ServerA和ServerB中都开启分布式事务协调器,并进行适当配置,以支持分布式事务。ServerA和ServerB都是Windows Server 2012 R2,其他版本服务器类似。

(1)首先在Services.msc中确认Distributed Transaction Coordinator已经开启,其他版本的服务器不一定默认安装,需要安装windows features的方式先进行该特性的安装。


(2)在服务器管理工具Administrative Tools中找到Component Services,在Local DTC中属性Security选项卡中配置如下,打开相关安全设置,完成后会重启服务,也有文档称需要重启服务器,但是至少2012 R2不用。

(3)配置防火墙,Inbound和Outbound都打开

3. 数据库字段text, ntext的处理

业务中表TableA中有一个Content字段是ntext类型,同步到TableB时需要对内容做一些替换处理。对于text和ntext类型是一个过时的类型,微软官方建议用(N)VARCHAR(MAX)替换,可查阅这里。今后设计时可以考虑,这里我们考虑对ntext进行处理。

但是在触发器中,inserted和deleted表都是不允许对text/ntext/image类型进行处理的,这里我们采用一个曲线救国的办法,从数据库中把记录读取到临时表中,然后通过textptr和patindex函数和updatetext命令完成字符串替换处理

  1. if exists(select * from tempdb..sysobjects where id=object_id('tempdb..#temp_tablea'))  
  2.     drop table #temp_tablea 
  3. select * into #temp_tablea from TableA where ID = @ID 
  4. declare @s varchar(200),@d varchar(200) 
  5. select @s='/_target/',@d='/_replacement/' 
  6. declare @p varbinary(16),@postion int,@l int 
  7. select @p=textptr(Content),@l=len(@s),@postion=patindex('%'+@s+'%',Content)-1 from #temp_tablea 
  8. while @postion>0 
  9. begin 
  10.     updatetext #temp_tablea.Content @p @postion @l @d 
  11.     select @postion=patindex('%'+@s+'%',Content)-1 from #temp_tablea 

特别注意以上代码对于text类型处理中文时会出问题,由于text存储non-unicode的数据,patindex会将中文字符解释为1个字符,而updatetext命令却将中文字符解释为2个字符。SQL Server 2005以上版本可以这样做替换:

  1. update #temp_tablea set Content=cast(replace(cast(Content as nvarchar(max)),@s,@d) as text) 

4. 执行远程数据库操作

当配置链接服务器时,我们可以直接访问远程数据库表了,如下

  1. insert into LNK_ServerB_DatabaseB.DatabaseB.dbo.TableB ... 
  2. update LNK_ServerB_DatabaseB.DatabaseB.dbo.TableB set ... 

但简陋的SQL编辑器往往会对语法报错,另外为方便编程,我们希望通过exec sp_executesql的方式获得更多的灵活性。其实exec就可以直接执行sql语句,但如果有返回值就比较困难了。如下,从远程服务器上通过ID查询表TableB后返回Name,sp_executesql存储过程可以使用output关键字定义变量为返回变量,其中@Name output为返回变量,@ID则是传入变量。

  1. declare @sql nvarchar(500), @Name nvarchar(50),@ID nvarchar(40) 
  2. set @SQL=N'select @Name=Name from LNK_ServerB_DatabaseB.DatabaseB.dbo.TableB where ID=@ID' 
  3. exec sp_executesql @SQL,N'@Name nvarchar(50) output,@ID nvarchar(40)',@Name output,@ID 

另外exec直接执行sql语句,本质上是执行拼接后的sql字符串,有时将变量拼接进字符串会困难的多(到底需要几个单引号),而sp_executesql则清晰多了

  1. declare @SQL nvarchar(500),@Name nvarchar(50),@Count int,@ID nvarchar(40) 
  2. set @Name=N'Cat' 
  3. set @Count=0 
  4. set @ID=N'{00000000-0000-0000-0000-000000000000}' 
  5. set @SQL=N'update TableA set Name='''+@Name+''', Count='+@Count+' where ID='''+@ID+'''' 
  6. exec(@SQL) 
  7. set @SQL=N'update TableA set Name=@Name,Count=@Count where ID=@ID' 
  8. exec sp_executesql @SQL, N'@Name nvarchar(50),@Count int,@ID nvarchar(40)',@Name,@Count,@ID 

【编辑推荐】

  1. 专业并专注,星瑞格软件探索国产数据库发展之道
  2. 备份Informix-Online数据库三法
  3. DB-Engines:关系型数据库的争霸赛
  4. mysql-proxy数据库中间件架构
  5. MySQL数据库结合pam_mysql模块实现vsftpd虚拟用户
【责任编辑:武晓燕 TEL:(010)68476606】

点赞 0
分享:
大家都在看
猜你喜欢

读 书 +更多

安全模式:J2EE、Web服务和身份管理最佳实践与策

本书全面阐述Java应用安全的基本知识并介绍一种强大的结构化安全设计方法;介绍独立于厂商的安全架构;列出详细的评估核对表以及23种经过实...

订阅51CTO邮刊

点击这里查看样刊

订阅51CTO邮刊