這種架構(gòu)一般用在以下三類(lèi)場(chǎng)景
成都創(chuàng)新互聯(lián)公司專注于上饒企業(yè)網(wǎng)站建設(shè),響應(yīng)式網(wǎng)站開(kāi)發(fā),成都商城網(wǎng)站開(kāi)發(fā)。上饒網(wǎng)站建設(shè)公司,為上饒等地區(qū)提供建站服務(wù)。全流程定制網(wǎng)站,專業(yè)設(shè)計(jì),全程項(xiàng)目跟蹤,成都創(chuàng)新互聯(lián)公司專業(yè)和態(tài)度為您提供的服務(wù)
1. 備份多臺(tái) Server 的數(shù)據(jù)到一臺(tái)如果按照數(shù)據(jù)切分方向來(lái)講,那就是垂直切分。比如圖 2,業(yè)務(wù) A、B、C、D 是之前拆分好的業(yè)務(wù),現(xiàn)在需要把這些拆分好的業(yè)務(wù)匯總起來(lái)備份,那這種需求也很適用于多源復(fù)制架構(gòu)。實(shí)現(xiàn)方法我大概描述下:業(yè)務(wù) A、B、C、D 分別位于 4 臺(tái) Server,每臺(tái) Server 分別有一個(gè)數(shù)據(jù)庫(kù)來(lái)隔離前端的業(yè)務(wù)數(shù)據(jù),那這樣,在從庫(kù)就能把四臺(tái)業(yè)務(wù)的數(shù)據(jù)全部匯總起來(lái),而不需要做額外的操作。那沒(méi)有多源復(fù)制之前,要實(shí)現(xiàn)這類(lèi)需求,只能在匯總機(jī)器上搭建多個(gè) MySQL 實(shí)例,那這樣勢(shì)必會(huì)涉及到跨庫(kù)關(guān)聯(lián)的問(wèn)題,不但性能急劇下降,管理多個(gè)實(shí)例也沒(méi)有單臺(tái)來(lái)的容易。
2. 用來(lái)聚合前端多個(gè) Server 的分片數(shù)據(jù)。
同樣,按照數(shù)據(jù)切分方向來(lái)講,屬于水平切分。比如圖 3,按照年份拆分好的數(shù)據(jù),要做一個(gè)匯總數(shù)據(jù)展現(xiàn),那這種架構(gòu)也非常合適。實(shí)現(xiàn)方法稍微復(fù)雜些:比如所有 Server 共享同一數(shù)據(jù)庫(kù)和表,一般為了開(kāi)發(fā)極端透明,前端配置有分庫(kù)分表的中間件,比如愛(ài)可生的 DBLE。
3. 匯總并合并多個(gè) Server 的數(shù)據(jù)
第三類(lèi)和第一種場(chǎng)景類(lèi)似。不一樣的是不僅僅是數(shù)據(jù)需要匯總到目標(biāo)端,還得合并這些數(shù)據(jù),這就比第一種來(lái)的相對(duì)復(fù)雜些。比如圖 4,那這樣的需求,是不是也適合多源復(fù)制呢?答案是 YES。那具體怎么做呢?
mysql有事務(wù)的,沒(méi)有問(wèn)題.
最佳答案
.介紹
現(xiàn)在的網(wǎng)站隨著訪問(wèn)量的增加,單一服務(wù)器無(wú)法承擔(dān)巨大的訪問(wèn)量,有沒(méi)有什么方便快捷的方式解決這個(gè)問(wèn)題呢,答案是”有”!
比如建立服務(wù)器群,進(jìn)行均衡負(fù)載.
但是如果要解決像電信網(wǎng)通這樣的互訪問(wèn)題(中國(guó)網(wǎng)民的悲哀..),這個(gè)解決辦法就無(wú)能為力了!
要解決這個(gè)問(wèn)題最方便快捷的方式就是建立鏡像網(wǎng)站!由訪問(wèn)者自己選擇適合自己網(wǎng)絡(luò)的速度最快的網(wǎng)站!這樣即可以解決線路問(wèn)題,又可以解決訪問(wèn)量問(wèn)題!
2.網(wǎng)站同步的數(shù)據(jù)分類(lèi)
網(wǎng)站數(shù)據(jù)基本分為兩類(lèi):
一類(lèi)是文件,比如HTML,ASP,PHP等網(wǎng)頁(yè)文件,或者RAR,ZIP,RM,AVI等可下載文件!
要實(shí)現(xiàn)他們的同步很簡(jiǎn)單,用FTP同步軟件就可以了!至于哪幾個(gè)我會(huì)在后面做詳細(xì)介紹.
一類(lèi)是數(shù)據(jù)庫(kù)數(shù)據(jù)文件,比如MySQL,SQLServer等等!
數(shù)據(jù)庫(kù)同步的方法也很多,最簡(jiǎn)單的辦法只是將數(shù)據(jù)庫(kù)目錄同步一下就OK了!
在后面我也會(huì)做詳細(xì)講解!
3.網(wǎng)站文件的同步
在這里用到的主要工具就是FTP,網(wǎng)站文件同步分兩種情況,一種是本地到遠(yuǎn)程,一種是遠(yuǎn)程到遠(yuǎn)程(FXP)!第一種不用說(shuō)了,第二種遠(yuǎn)程到遠(yuǎn)程即FXP,支持它的軟件也很多,但是真正適合多網(wǎng)站同步鏡像的卻不多!
下面我介紹幾個(gè)我認(rèn)為不錯(cuò)的軟件!
1.首先我要推薦的是國(guó)產(chǎn)的FTP軟件”網(wǎng)絡(luò)傳神”,功能非常強(qiáng)大,特別是在網(wǎng)站的同步鏡像方面,可惜的是,這款非常經(jīng)典的軟件已經(jīng)不再更新了,最后更新時(shí)間是2003年3月,最后一個(gè)版本是3.12!雖然如此還是非常好用的!下面是一段官方的簡(jiǎn)介:
網(wǎng)絡(luò)傳神完全吸收了Cuteftp和UpdataNow的全部功能,并且增加了其他軟件沒(méi)有的多項(xiàng)功能:支持網(wǎng)站互傳;支持網(wǎng)站同步 (UPDATANOW);支持后臺(tái)上傳(多線程上傳多個(gè)文件);可同時(shí)打開(kāi)多個(gè)站點(diǎn);多站點(diǎn)計(jì)劃上傳功能,支持鏡像站點(diǎn);支持宏操作支持計(jì)劃操作;支持文件高級(jí)比較上傳;支持目錄隱藏過(guò)濾(為用ForntPage作主頁(yè)的朋友帶來(lái)福音);服務(wù)器自動(dòng)識(shí)別功能;資源管理器瀏覽方式;可以自定義命令;支持 RFC959標(biāo)準(zhǔn)具有更好的穩(wěn)定性;完備的信息返回機(jī)制及錯(cuò)誤監(jiān)控機(jī)制完整的中文幫助。
2.第二款是由ReGet同一開(kāi)發(fā)公司制作的專用于網(wǎng)站同步的軟件”WebSynchronizer”,用這款軟件,你才會(huì)體驗(yàn)到網(wǎng)站同步的方便快捷,簡(jiǎn)單容易.最新版本是1.3.62,網(wǎng)上能找到XX的最后版本是1.1版!下面是一段簡(jiǎn)介:
檔案同步化工具-WebSynchronizer,由知名續(xù)傳軟件ReGet之軟件出版公司所推出,是網(wǎng)站同步化、檔案鏡像、檔案?jìng)浞莸慕^佳工具,可以執(zhí)行下列主要工作:1)本機(jī)資料夾及遠(yuǎn)程資料夾的同步化;2)兩臺(tái)遠(yuǎn)程計(jì)算機(jī)中的資料夾同步化;3)兩個(gè)本機(jī)資料之同步化。
3.其他還有一些軟件如同步快梭(AutoSyncFTP),也能實(shí)現(xiàn)簡(jiǎn)單的網(wǎng)站同步,不過(guò),這款軟件非常不穩(wěn)定,而且2001年就已經(jīng)停止開(kāi)發(fā).所以,不用考慮了!還有上次有朋友提到的SiteMirro,由于網(wǎng)上找不到可以用的版本,所以沒(méi)有辦法測(cè)試!
網(wǎng)絡(luò)傳神網(wǎng)站同步鏡像使用傻瓜指南
上次在網(wǎng)絡(luò)技術(shù)版已經(jīng)發(fā)過(guò)一個(gè)簡(jiǎn)單的使用方法介紹,如果嫌我羅嗦(o(_)o),大家可以參考那篇文章:
第一次運(yùn)行網(wǎng)絡(luò)傳神的時(shí)候,它會(huì)讓你選擇”完全模式”和”啟動(dòng)模式”,要使用網(wǎng)站同步必須選擇”完全模式”.
進(jìn)入主界面:你會(huì)發(fā)現(xiàn)這個(gè)軟件非常像FlashGet,要使用網(wǎng)站同步功能,點(diǎn)擊軟件左下角的”FTP客戶端”.
現(xiàn)在你要做的就是添加你的鏡像母站和需要鏡像的網(wǎng)站:文件-站點(diǎn)管理,在里面添加你需要同步的幾個(gè)的FTP服務(wù)器,下面我將介紹具體設(shè)置(主要是鏡像母站的設(shè)置)
母站設(shè)置最重要的地方就是”比較目錄(網(wǎng)站同步)”:
1.拖動(dòng)傳送
就是手動(dòng)拖動(dòng)傳送時(shí)候的傳送方式,非拖動(dòng)方式不受影響,因?yàn)槟刚镜母禄旧鲜菑谋镜啬夸涍M(jìn)行的,所以建議這里選擇第二項(xiàng)”只上傳不同的文件”,鏡像站點(diǎn)這里可以忽略
2.磁盤(pán)比較設(shè)置
這個(gè)功能非常有用,可以通過(guò)文件長(zhǎng)度和文件日期進(jìn)行文件差異對(duì)比.
你還可以設(shè)置本地目錄過(guò)濾和服務(wù)器目錄過(guò)濾,非常靈活!
好了,添加好母站和鏡像站之后,我們來(lái)設(shè)置同步:
如果是添加鏡像站,則會(huì)跳出下面的母站選擇窗口:
設(shè)置好多個(gè)鏡像站點(diǎn)之后,返回主界面就可以進(jìn)行網(wǎng)站同步了:
注意事項(xiàng):
一般不要改動(dòng)鏡像站點(diǎn)前面的“對(duì)鉤”標(biāo)志,因?yàn)殓R像站點(diǎn)同步的原理是“根據(jù)主站點(diǎn)的同步信息更新鏡像站點(diǎn)”,如果景象站點(diǎn)沒(méi)有更新那么必須將該鏡像站點(diǎn)單獨(dú)同步。
注意一般應(yīng)該“選項(xiàng)窗口”-〉“FTP客戶端”-〉“計(jì)劃”中的“最大連接個(gè)數(shù)”和“最大線程個(gè)數(shù)”一般不要改動(dòng)保持為“1”。
如果同步時(shí)某個(gè)站點(diǎn)出錯(cuò)同步?jīng)]有完全完成只需按“計(jì)劃”窗口中的按鈕單獨(dú)執(zhí)行某個(gè)站點(diǎn)的傳送即可。
再介紹一下網(wǎng)站鏡像同步中必要的功能,定時(shí)同步,這樣你就只要做好母站的更新,其他的讓網(wǎng)絡(luò)傳神幫你完成:
點(diǎn)擊設(shè)置:
進(jìn)入網(wǎng)絡(luò)傳神的選項(xiàng)設(shè)置窗口,選中FTP客戶端中的定時(shí)同步
定時(shí)下載:在指定的時(shí)段內(nèi)下載文件。
定時(shí)上傳:在指定的時(shí)段內(nèi)用網(wǎng)站同步的方法進(jìn)行上傳。
開(kāi)始時(shí)間:如果要使用定時(shí)方式必須設(shè)置此項(xiàng),在設(shè)置的時(shí)間中會(huì)自動(dòng)開(kāi)始所有設(shè)置為計(jì)劃的站點(diǎn)。
停止時(shí)間:如果設(shè)置此項(xiàng)則當(dāng)系統(tǒng)時(shí)間大于停止時(shí)間時(shí)自動(dòng)停止所有設(shè)置為計(jì)劃的站點(diǎn)。
注意:定時(shí)上傳種沒(méi)有“停止時(shí)間”選項(xiàng),網(wǎng)站同步完成后會(huì)自動(dòng)停止,同時(shí)網(wǎng)站同步同一時(shí)間只能運(yùn)行一次。
網(wǎng)絡(luò)傳神還有很多為便于同步鏡像設(shè)置的功能,大家實(shí)際使用中去體會(huì)吧!
WebSynchronizer網(wǎng)站同步鏡像使用傻瓜指南
WebSynchronizer功能非常強(qiáng)大,不單單是網(wǎng)站同步,還可以進(jìn)行本地目錄同步,本地到遠(yuǎn)程同步,功能方面遠(yuǎn)勝過(guò)傳神,不過(guò),國(guó)內(nèi)好像沒(méi)有漢化版,對(duì)于一些對(duì)英文感冒的朋友用起來(lái)會(huì)不太舒服,希望CCF里的漢化高手能將他中文化!
開(kāi)始運(yùn)行程序,老外的軟件就是智能,一打開(kāi)這個(gè)軟件就會(huì)有一個(gè)同步向?qū)鰜?lái)!
在這里,你也看出來(lái)了吧,這個(gè)軟件只支持兩個(gè)目錄間的同步.不過(guò),我們可以創(chuàng)建多個(gè)項(xiàng)目來(lái)解決這個(gè)問(wèn)題!具體我在后面介紹!這里,我們來(lái)看看如何建立兩個(gè)遠(yuǎn)程目錄的同步!
選擇第二項(xiàng),進(jìn)入下一個(gè)選擇框:
網(wǎng)站同步當(dāng)然是選擇第一項(xiàng)了!再進(jìn)入下一步,要你選擇同步的第一個(gè)服務(wù)器,建議在這里serverslist,先編輯好需要同步的幾個(gè)FTP
同步方式設(shè)置說(shuō)明:
第一項(xiàng)的意思是:上傳下載所有改變的文件
第二項(xiàng)的意思是:不改變文件夾內(nèi)容,只下載新的文件
點(diǎn)擊下一步進(jìn)行第二個(gè)服務(wù)器設(shè)置,方法和第一個(gè)一樣!
設(shè)置完成后,你還可以修改任務(wù)名稱!
我覺(jué)得這點(diǎn)就是這個(gè)軟件非常優(yōu)秀的地方,以任務(wù)的方式進(jìn)行管理.非常方便!
OK,現(xiàn)在我們就可以看到他的主界面了!
還有一點(diǎn)要提,他的計(jì)劃任務(wù)更能也很強(qiáng)大,在這里我就不再多說(shuō)了!用過(guò)才知道他的強(qiáng)大!
有朋友會(huì)說(shuō),我要進(jìn)行兩個(gè)以上的網(wǎng)站同步怎么辦?
很簡(jiǎn)單,再多建幾個(gè)任務(wù)就可以了,要鏡像多少網(wǎng)站都沒(méi)有問(wèn)題!
這個(gè)軟件的網(wǎng)站同步鏡像可以非常靈活,比如可以本地-遠(yuǎn)程,然后再遠(yuǎn)程-遠(yuǎn)程!或者本地-遠(yuǎn)程1,本地-遠(yuǎn)程2,遠(yuǎn)程1-遠(yuǎn)程2,任何情形下的同步都可以完成!
數(shù)據(jù)庫(kù)同步操作指南
說(shuō)完了文件同步,我們?cè)賮?lái)探討一下數(shù)據(jù)庫(kù)同步!
這里我主要教大家兩種最常用的數(shù)據(jù)庫(kù)的同步方法!
MySQL
MySQL數(shù)據(jù)同步主要有三種方式:
1.利用MySQL自身的數(shù)據(jù)庫(kù)同步功能
2.利用MySQL數(shù)據(jù)庫(kù)的特性(數(shù)據(jù)庫(kù)存在固頂目錄,并且以文件形式存儲(chǔ)),進(jìn)行數(shù)據(jù)庫(kù)目錄同步以達(dá)到數(shù)據(jù)同步目的
3.利用專用的MySQL數(shù)據(jù)庫(kù)同步軟件
1.利用MySQL自身的數(shù)據(jù)庫(kù)同步功能(下面參考自網(wǎng)上的文章,寫(xiě)的非常詳細(xì)了)
MySQL從3.23.15版本以后提供數(shù)據(jù)庫(kù)復(fù)制功能。利用該功能可以實(shí)現(xiàn)兩個(gè)數(shù)據(jù)庫(kù)同步,主從模式,互相備份模式的功能.
數(shù)據(jù)庫(kù)同步復(fù)制功能的設(shè)置都在mysql的設(shè)置文件中體現(xiàn)。mysql的配置文件(一般是my.cnf),在unix環(huán)境下在/etc/mysql/my.cnf或者在mysql用戶的home目錄下的my.cnf。
windows環(huán)境中,如果c:根目錄下有my.cnf文件則取該配置文件。當(dāng)運(yùn)行mysql的winmysqladmin.exe工具時(shí)候,該工具會(huì)把c:根目錄下的my.cnf命名為mycnf.bak。并在winnt目錄下創(chuàng)建my.ini。mysql服務(wù)器啟動(dòng)時(shí)候會(huì)讀該配置文件。所以可以把my.cnf中的內(nèi)容拷貝到my.ini文件中,用my.ini文件作為mysql服務(wù)器的配置文件。
設(shè)置方法:
設(shè)置范例環(huán)境:
操作系統(tǒng):window2000professional
mysql:4.0.4-beta-max-nt-log
Aip:10.10.10.22
Bip:10.10.10.53
A:設(shè)置
1.增加一個(gè)用戶最為同步的用戶帳號(hào):
GRANTFILEON*.*TObackup@'10.10.10.53'IDENTIFIEDBY‘1234’
2.增加一個(gè)數(shù)據(jù)庫(kù)作為同步數(shù)據(jù)庫(kù):
createdatabasebackup
B:設(shè)置
1.增加一個(gè)用戶最為同步的用戶帳號(hào):
GRANTFILEON*.*TObackup@'10.10.10.22'IDENTIFIEDBY‘1234’
2.增加一個(gè)數(shù)據(jù)庫(kù)作為同步數(shù)據(jù)庫(kù):
createdatabasebackup
主從模式:A-B
A為master
修改Amysql的my.ini文件。在mysqld配置項(xiàng)中加入下面配置:
server-id=1
log-bin
#設(shè)置需要記錄log可以設(shè)置log-bin=c:mysqlbakmysqllog設(shè)置日志文件的目錄,
#其中mysqllog是日志文件的名稱,mysql將建立不同擴(kuò)展名,文件名為mysqllog的幾個(gè)日志文件。
binlog-do-db=backup#指定需要日志的數(shù)據(jù)庫(kù)
重起數(shù)據(jù)庫(kù)服務(wù)。
用showmasterstatus命令看日志情況。
B為slave
修改Bmysql的my.ini文件。在mysqld配置項(xiàng)中加入下面配置:
server-id=2
master-host=10.10.10.22
master-user=backup#同步用戶帳號(hào)
master-password=1234
master-port=3306
master-connect-retry=60預(yù)設(shè)重試間隔60秒
replicate-do-db=backup告訴slave只做backup數(shù)據(jù)庫(kù)的更新
重起數(shù)據(jù)庫(kù)
用showslavestatus看同步配置情況。
注意:由于設(shè)置了slave的配置信息,mysql在數(shù)據(jù)庫(kù)目錄下生成master.info
所以如有要修改相關(guān)slave的配置要先刪除該文件。否則修改的配置不能生效。
雙機(jī)互備模式。
如果在A加入slave設(shè)置,在B加入master設(shè)置,則可以做B-A的同步。
在A的配置文件中mysqld配置項(xiàng)加入以下設(shè)置:
master-host=10.10.10.53
master-user=backup
master-password=1234
replicate-do-db=backup
master-connect-retry=10
在B的配置文件中mysqld配置項(xiàng)加入以下設(shè)置:
log-bin=c:mysqllogmysqllog
binlog-do-db=backup
注意:當(dāng)有錯(cuò)誤產(chǎn)生時(shí)*.err日志文件。同步的線程退出,當(dāng)糾正錯(cuò)誤后要讓同步機(jī)制進(jìn)行工作,運(yùn)行slavestart
重起AB機(jī)器,則可以實(shí)現(xiàn)雙向的熱備。
測(cè)試:
向B批量插入大數(shù)據(jù)量表AA(1872000)條
A數(shù)據(jù)庫(kù)每秒鐘可以更新2500條數(shù)據(jù)。
2.數(shù)據(jù)庫(kù)目錄同步,方法和文件同步一樣,設(shè)置好需要同步的兩個(gè)數(shù)據(jù)庫(kù)目錄就可以了!
缺點(diǎn)很明顯,數(shù)據(jù)同步只能單向進(jìn)行,可以作為備份方案
3.用專用的MySQL同步軟件進(jìn)行同步
這方面的軟件有SQLBalance和MyReplicator,優(yōu)點(diǎn)是方便直觀,還有很多爭(zhēng)強(qiáng)功能!
缺點(diǎn)和2一樣,只能單項(xiàng)同步!
當(dāng)然你也可以修改鏡像網(wǎng)站的程序?yàn)樘峤粩?shù)據(jù)到母數(shù)據(jù)庫(kù),讀取則在當(dāng)前鏡像下的數(shù)據(jù),不過(guò),修改起來(lái)麻煩!普通用戶修改也非常難!呵呵,大家了解一下就可以!給大家一個(gè)思路!有能力的朋友可以試試阿!
4.關(guān)于MySQL論壇的數(shù)據(jù)同步
由于數(shù)據(jù)來(lái)源的不可控制(不好表達(dá)),論壇數(shù)據(jù)是實(shí)時(shí)的,而且還要考慮來(lái)自鏡像論壇的數(shù)據(jù),如何實(shí)現(xiàn)鏡像論壇與母論壇數(shù)據(jù)同步呢?
用1中介紹的MySQL自帶的數(shù)據(jù)庫(kù)同步功能互相備份模式就可以實(shí)現(xiàn)的!
不過(guò),具體的應(yīng)用我沒(méi)有測(cè)試!穩(wěn)定性不敢保證!
有能力的朋友推薦用下面這種思路來(lái)同步,相對(duì)來(lái)說(shuō)減少點(diǎn)效率,但能減少發(fā)生的錯(cuò)誤!
比如鏡像論壇數(shù)據(jù)同步:
1.母論壇和鏡像論壇的數(shù)據(jù)全寫(xiě)在母論壇數(shù)據(jù)庫(kù)里,主從模式,讀取只在本地讀取,這個(gè)需要修改程序!
2.每次寫(xiě)數(shù)據(jù),都同時(shí)提交到兩個(gè)數(shù)據(jù)庫(kù)中,安全,但是效率很差,也得修改程序!
MSSQL
MSSQL數(shù)據(jù)同步利用數(shù)據(jù)庫(kù)復(fù)制技術(shù)實(shí)現(xiàn)數(shù)據(jù)同步更新(來(lái)自網(wǎng)絡(luò),也是非常完美的教程)
復(fù)制的概念
復(fù)制是將一組數(shù)據(jù)從一個(gè)數(shù)據(jù)源拷貝到多個(gè)數(shù)據(jù)源的技術(shù),是將一份數(shù)據(jù)發(fā)布到多個(gè)存儲(chǔ)站點(diǎn)上的有效方式。使用復(fù)制技術(shù),用戶可以將一份數(shù)據(jù)發(fā)布到多臺(tái)服務(wù)器上,從而使不同的服務(wù)器用戶都可以在權(quán)限的許可的范圍內(nèi)共享這份數(shù)據(jù)。復(fù)制技術(shù)可以確保分布在不同地點(diǎn)的數(shù)據(jù)自動(dòng)同步更新,從而保證數(shù)據(jù)的一致性。
SQL復(fù)制的基本元素包括
出版服務(wù)器、訂閱服務(wù)器、分發(fā)服務(wù)器、出版物、文章
SQL復(fù)制的工作原理
SQLSERVER主要采用出版物、訂閱的方式來(lái)處理復(fù)制。源數(shù)據(jù)所在的服務(wù)器是出版服務(wù)器,負(fù)責(zé)發(fā)表數(shù)據(jù)。出版服務(wù)器把要發(fā)表的數(shù)據(jù)的所有改變情況的拷貝復(fù)制到分發(fā)服務(wù)器,分發(fā)服務(wù)器包含有一個(gè)分發(fā)數(shù)據(jù)庫(kù),可接收數(shù)據(jù)的所有改變,并保存這些改變,再把這些改變分發(fā)給訂閱服務(wù)器
SQLSERVER復(fù)制技術(shù)類(lèi)型
SQLSERVER提供了三種復(fù)制技術(shù),分別是:
1、快照復(fù)制(呆會(huì)我們就使用這個(gè))
2、事務(wù)復(fù)制
3、合并復(fù)制
只要把上面這些概念弄清楚了那么對(duì)復(fù)制也就有了一定的理解。接下來(lái)我們就一步一步來(lái)實(shí)現(xiàn)復(fù)制的步驟。
第一先來(lái)配置出版服務(wù)器
(1)選中指定[服務(wù)器]節(jié)點(diǎn)
(2)從[工具]下拉菜單的[復(fù)制]子菜單中選擇[發(fā)布、訂閱服務(wù)器和分發(fā)]命令
(3)系統(tǒng)彈出一個(gè)對(duì)話框點(diǎn)[下一步]然后看著提示一直操作到完成。
(4)當(dāng)完成了出版服務(wù)器的設(shè)置以后系統(tǒng)會(huì)為該服務(wù)器的樹(shù)形結(jié)構(gòu)中添加一個(gè)復(fù)制監(jiān)視器。同時(shí)也生成一個(gè)分發(fā)數(shù)據(jù)庫(kù)(distribution)
第二創(chuàng)建出版物
(1)選中指定的服務(wù)器
(2)從[工具]菜單的[復(fù)制]子菜單中選擇[創(chuàng)建和管理發(fā)布]命令。此時(shí)系統(tǒng)會(huì)彈出一個(gè)對(duì)話框
(3)選擇要?jiǎng)?chuàng)建出版物的數(shù)據(jù)庫(kù),然后單擊[創(chuàng)建發(fā)布]
(4)在[創(chuàng)建發(fā)布向?qū)的提示對(duì)話框中單擊[下一步]系統(tǒng)就會(huì)彈出一個(gè)對(duì)話框。對(duì)話框上的內(nèi)容是復(fù)制的三個(gè)類(lèi)型。我們現(xiàn)在選第一個(gè)也就是默認(rèn)的快照發(fā)布(其他兩個(gè)大家可以去看看幫助)
(5)單擊[下一步]系統(tǒng)要求指定可以訂閱該發(fā)布的數(shù)據(jù)庫(kù)服務(wù)器類(lèi)型,SQLSERVER允許在不同的數(shù)據(jù)庫(kù)如ORACLE或ACCESS之間進(jìn)行數(shù)據(jù)復(fù)制。但是在這里我們選擇運(yùn)行"SQLSERVER2000"的數(shù)據(jù)庫(kù)服務(wù)器
(6)單擊[下一步]系統(tǒng)就彈出一個(gè)定義文章的對(duì)話框也就是選擇要出版的表
(7)然后[下一步]直到操作完成。當(dāng)完成出版物的創(chuàng)建后創(chuàng)建出版物的數(shù)據(jù)庫(kù)也就變成了一個(gè)共享數(shù)據(jù)庫(kù)。
第三設(shè)計(jì)訂閱
(1)選中指定的訂閱服務(wù)器
(2)從[工具]下拉菜單中選擇[復(fù)制]子菜單的[請(qǐng)求訂閱]
(3)按照單擊[下一步]操作直到系統(tǒng)會(huì)提示檢查SQLSERVER代理服務(wù)的運(yùn)行狀態(tài),執(zhí)行復(fù)制操作的前提條件是SQLSERVER代理服務(wù)必須已經(jīng)啟動(dòng)。
(4)單擊[完成]。完成訂閱操作。
完成上面的步驟其實(shí)復(fù)制也就是成功了。但是如何來(lái)知道復(fù)制是否成功了呢?這里可以通過(guò)這種方法來(lái)快速看是否成功。展開(kāi)出版服務(wù)器下面的復(fù)制——發(fā)布內(nèi)容——右鍵發(fā)布內(nèi)容——屬性——擊活——狀態(tài)然后點(diǎn)立即運(yùn)行代理程序接著點(diǎn)代理程序?qū)傩該艋钫{(diào)度把調(diào)度設(shè)置為每一天發(fā)生,每一分鐘,在0:00:00 和23:59:59之間。接下來(lái)就是判斷復(fù)制是否成功了打開(kāi)C: /ProgramFiles/MicrosoftSQLServer/MSSQL/REPLDATA/unc/XIAOWANGZI_database_database 下面看是不是有一些以時(shí)間做為文件名的文件夾差不多一分中就產(chǎn)生一個(gè)。要是你還不信的話就打開(kāi)你的數(shù)據(jù)庫(kù)看在訂閱的服務(wù)器的指定訂閱數(shù)據(jù)庫(kù)下看是不是看到了你剛才所發(fā)布的表—
一個(gè)手工同步的方案
--定時(shí)同步服務(wù)器上的數(shù)據(jù)
--例子:
--測(cè)試環(huán)境,SQLServer2000,遠(yuǎn)程服務(wù)器名:xz,用戶名為:sa,無(wú)密碼,測(cè)試數(shù)據(jù)庫(kù):test
--服務(wù)器上的表(查詢分析器連接到服務(wù)器上創(chuàng)建)
createtable[user](idintprimarykey,numbervarchar(4),namevarchar(10))
go
--以下在局域網(wǎng)(本機(jī)操作)
--本機(jī)的表,state說(shuō)明:null表示新增記錄,1表示修改過(guò)的記錄,0表示無(wú)變化的記錄
ifexists(select*fromdbo.sysobjectswhereid=object_id(N'[user]')andOBJECTPROPERTY(id,N'IsUserTable')=1)
droptable[user]
GO
createtable[user](idintidentity(1,1),numbervarchar(4),namevarchar(10),statebit)
go
--創(chuàng)建觸發(fā)器,維護(hù)state字段的值
createtriggert_stateon[user]
afterupdate
as
update[user]setstate=1
from[user]ajoininsertedbona.id=b.id
wherea.stateisnotnull
go
--為了方便同步處理,創(chuàng)建鏈接服務(wù)器到要同步的服務(wù)器
--這里的遠(yuǎn)程服務(wù)器名為:xz,用戶名為:sa,無(wú)密碼
ifexists(select1frommaster..sysserverswheresrvname='srv_lnk')
execsp_dropserver'srv_lnk','droplogins'
go
execsp_addlinkedserver'srv_lnk','','SQLOLEDB','xz'
execsp_addlinkedsrvlogin'srv_lnk','false',null,'sa'
go
--創(chuàng)建同步處理的存儲(chǔ)過(guò)程
ifexists(select*fromdbo.sysobjectswhereid=object_id(N'[dbo].[p_synchro]')andOBJECTPROPERTY(id,N'IsProcedure')=1)
dropprocedure[dbo].[p_synchro]
GO
createprocp_synchro
as
--setXACT_ABORTon
--啟動(dòng)遠(yuǎn)程服務(wù)器的MSDTC服務(wù)
--execmaster..xp_cmdshell'isql/S"xz"/U"sa"/P""/q"execmaster..xp_cmdshell''netstartmsdtc'',no_output"',no_output
--啟動(dòng)本機(jī)的MSDTC服務(wù)
--execmaster..xp_cmdshell'netstartmsdtc',no_output
--進(jìn)行分布事務(wù)處理,如果表用標(biāo)識(shí)列做主鍵,用下面的方法
--BEGINDISTRIBUTEDTRANSACTION
--同步刪除的數(shù)據(jù)
deletefromsrv_lnk.test.dbo.[user]
whereidnotin(selectidfrom[user])
--同步新增的數(shù)據(jù)
insertintosrv_lnk.test.dbo.[user]
selectid,number,namefrom[user]wherestateisnull
--同步修改的數(shù)據(jù)
updatesrv_lnk.test.dbo.[user]set
number=b.number,name=b.name
fromsrv_lnk.test.dbo.[user]a
join[user]bona.id=b.id
whereb.state=1
--同步后更新本機(jī)的標(biāo)志
update[user]setstate=0whereisnull(state,1)=1
--COMMITTRAN
go
--創(chuàng)建作業(yè),定時(shí)執(zhí)行數(shù)據(jù)同步的存儲(chǔ)過(guò)程
ifexists(SELECT1frommsdb..sysjobswherename='數(shù)據(jù)處理')
EXECUTEmsdb.dbo.sp_delete_job@job_name='數(shù)據(jù)處理'
execmsdb..sp_add_job@job_name='數(shù)據(jù)處理'
--創(chuàng)建作業(yè)步驟
declare@sqlvarchar(800),@dbnamevarchar(250)
select@sql='execp_synchro'--數(shù)據(jù)處理的命令
,@dbname=db_name()--執(zhí)行數(shù)據(jù)處理的數(shù)據(jù)庫(kù)名
execmsdb..sp_add_jobstep@job_name='數(shù)據(jù)處理',
@step_name='數(shù)據(jù)同步',
@subsystem='TSQL',
@database_name=@dbname,
@command=@sql,
@retry_attempts=5,--重試次數(shù)
@retry_interval=5--重試間隔
--創(chuàng)建調(diào)度
EXECmsdb..sp_add_jobschedule@job_name='數(shù)據(jù)處理',
@name='時(shí)間安排',
@freq_type=4,--每天
@freq_interval=1,--每天執(zhí)行一次
@active_start_time=00000--0點(diǎn)執(zhí)行
go
see to
都是一個(gè)數(shù)據(jù)庫(kù)里,直接用關(guān)聯(lián)即可, 1。這樣即可以省數(shù)據(jù)庫(kù)空間, 2。還方便數(shù)據(jù)操作, 3。并且不要做二次數(shù)據(jù)插入! 4。而且絕對(duì)的同步!主機(jī)開(kāi)兩個(gè)窗口,一個(gè)進(jìn)入mysql,一個(gè)是shell --主機(jī)阻斷寫(xiě)操作 mysql FLUSH TABLES WITH READ LOCK; Query OK, 0 rows affected (0.00 sec) mysql mysql mysql SHOW MASTER STATUS
具體操作:
1、在分析型數(shù)據(jù)庫(kù)上創(chuàng)建目標(biāo)表,數(shù)據(jù)更新類(lèi)型為實(shí)時(shí)寫(xiě)入,字段名稱和MySQL中的建議均相同;
2、在阿里云數(shù)據(jù)傳輸?shù)目刂婆_(tái)上創(chuàng)建數(shù)據(jù)訂閱通道,并記錄這個(gè)通道的ID;
3、 配置dts-ads-writer/app.conf文件,配置方式如下:所有配置均保存在app.conf中,運(yùn)行前請(qǐng)保證配置正確;修改配置后,請(qǐng)重啟writer,基本配置:
注意事項(xiàng):
1、RDS
for
MySQL表和分析型數(shù)據(jù)庫(kù)中表的主鍵定義必須完全一致;如果不一致會(huì)出現(xiàn)數(shù)據(jù)不一致問(wèn)題。如果需要調(diào)整RDS/分析型數(shù)據(jù)庫(kù)表的主鍵,建議先停止writer進(jìn)程;
2、一個(gè)插件進(jìn)程中分析型數(shù)據(jù)庫(kù)db只能是一個(gè),由adsJdbcUrl指定;
3、一個(gè)插件進(jìn)程只能對(duì)應(yīng)一個(gè)數(shù)據(jù)訂閱通道;如果更新通道中的訂閱對(duì)象時(shí),需要重啟進(jìn)程。
首先備份好你本地的數(shù)據(jù)庫(kù),方法如下。
1、用APMServ5.2.6(網(wǎng)站上面有下載)帶的phpmyadmin
進(jìn)行備份恢復(fù)。
A、運(yùn)行APMServ5.2.6,
點(diǎn)擊右邊的“管理MySql
數(shù)據(jù)庫(kù)”。服務(wù)器填寫(xiě)127.0.0.1:3306,
登入名稱:root,密碼為空進(jìn)行登錄。在左邊是數(shù)據(jù)庫(kù)列表。點(diǎn)擊你的數(shù)據(jù)庫(kù)。點(diǎn)導(dǎo)出、拉到
最下面把“另存為文件”打勾。點(diǎn)執(zhí)行。這樣你就可以備份你的數(shù)據(jù)庫(kù)了。
2、運(yùn)行mySQL-Front
備份恢復(fù)你的數(shù)據(jù)庫(kù)。
A、新建一個(gè)登錄。
信息欄中隨便寫(xiě)一下名字。標(biāo)識(shí)你的登錄信息。
B、點(diǎn)擊連接欄,分別填好:
服務(wù)器:服務(wù)器的IP
端
口:一般為3306
C、點(diǎn)擊注冊(cè)欄,分別填好:
用
戶:你申請(qǐng)的數(shù)據(jù)庫(kù)的用戶名(如果是本地一般為root),
密
碼:數(shù)據(jù)庫(kù)的密碼(本地為空)
數(shù)據(jù)庫(kù):你申請(qǐng)的數(shù)據(jù)庫(kù)名。
填寫(xiě)好這些信息后點(diǎn)擊“確定”這樣就能鏈接到你的遠(yuǎn)程數(shù)據(jù)庫(kù)了。左邊這個(gè)遠(yuǎn)程數(shù)據(jù)。
服務(wù)器的一些數(shù)據(jù)庫(kù),點(diǎn)擊你的數(shù)據(jù)庫(kù)后等待鏈接。直至返回所有數(shù)據(jù),你便能打開(kāi)你的數(shù)據(jù)庫(kù)。
中的數(shù)據(jù)表了。在這里你可以修改你的數(shù)據(jù)表結(jié)構(gòu),刪除填加數(shù)據(jù)等(小心操作)。
D、右鍵點(diǎn)擊你的數(shù)據(jù)庫(kù)進(jìn)行備份(輸出)數(shù)據(jù),有幾種備份的類(lèi)型,一般選sql。
1、h2數(shù)據(jù)庫(kù)你寫(xiě)一個(gè)dao類(lèi)(例如:insert方法),mysql也寫(xiě)一個(gè)mydao類(lèi)(例如:insertmysql()),
當(dāng)往h2數(shù)據(jù)庫(kù)執(zhí)行插入的時(shí)候 new dao().inser(sql);
new mydao().insertmysql(sql);
2、也可以直接到數(shù)據(jù)庫(kù)操作寫(xiě)存儲(chǔ)過(guò)程和游標(biāo)自動(dòng)同步。
3、使用第三方插件。有很多這樣子的平臺(tái)做企業(yè)數(shù)據(jù)一體化的
名稱欄目:包含數(shù)倉(cāng)和mysql怎么同步的詞條
當(dāng)前網(wǎng)址:http://aaarwkj.com/article40/hsoceo.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供品牌網(wǎng)站制作、靜態(tài)網(wǎng)站、外貿(mào)建站、建站公司、動(dòng)態(tài)網(wǎng)站、移動(dòng)網(wǎng)站建設(shè)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)