日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Oracle遷移PostgreSQL實戰(zhàn):低業(yè)務(wù)中斷、可校驗、可回退的完整方案

Oracle遷移PostgreSQL實戰(zhàn):低業(yè)務(wù)中斷、可校驗、可回退的完整方案 搞Oracle到PostgreSQL遷移這件事圈子里聊得最多的不是工具選哪個而是怎么讓業(yè)務(wù)別停太久、數(shù)據(jù)到底搬對沒有、出了問題能不能跑回去這三個靈魂拷問。我最近完整跟完了一個核心交易系統(tǒng)的遷移項目正好把整套打法梳理一遍給準備上車的朋友當(dāng)個參考。先說結(jié)論Oracle遷PostgreSQL難點從來不在怎么導(dǎo)數(shù)據(jù)而在遷移鏈條的整體設(shè)計。你只有把低業(yè)務(wù)中斷、可校驗、可回退當(dāng)成一個整體目標來拆解才能避免那種數(shù)據(jù)導(dǎo)完了、業(yè)務(wù)起不來、回也回不去的尷尬局面。1. 遷移項目啟動前先想清楚怎么切再動手1.1 遷移背景與目標拆解我們這個項目是從Oracle 11g遷到PostgreSQL 14源庫大概有3TB數(shù)據(jù)核心業(yè)務(wù)表最大的一張超過8億行還有不少用到了CLOB、分區(qū)、存儲過程的老業(yè)務(wù)。業(yè)務(wù)側(cè)給的要求很明確停機窗口最多4小時切換后一個月內(nèi)如果發(fā)現(xiàn)重大問題必須能回退并且遷移完成后要拿出讓業(yè)務(wù)信服的數(shù)據(jù)一致性證明。這三條要求翻譯成技術(shù)語言就是低業(yè)務(wù)中斷不能搞先停庫全量導(dǎo)出再全量導(dǎo)入的老套路必須走全量增量同步的雙軌方案把真正的停機時間壓縮到只需要處理增量追趕和切換驗證這兩個環(huán)節(jié)??尚r炦w移完成后要用行數(shù)、校驗和、抽樣比對等手段證明數(shù)據(jù)沒丟、沒多、沒錯。不是拿兩條SQL對一下數(shù)量就完事而是要能經(jīng)得起業(yè)務(wù)和審計的追問。可回退切換后保留完整的回退通道包括源庫持續(xù)運行、反向同步機制、回退演練預(yù)案。一旦業(yè)務(wù)驗證不通過能在一個小時內(nèi)切回Oracle且不丟新增數(shù)據(jù)。這三個目標不是并列關(guān)系而是互相牽制的。比如為了可回退你可能需要在一段時間內(nèi)同時維護兩套庫的寫入為了低中斷你的增量同步工具必須足夠穩(wěn)定否則追趕不上就會無限拉長停機窗口為了可校驗又必須在遷移過程中保留足夠的審計痕跡方便回退時對賬。1.2 遷移前的源庫調(diào)研與風(fēng)險清單很多項目死在第一步?jīng)]搞清楚源庫里到底有什么就開始動手。我建議遷移前至少花一到兩周做一次徹底的源庫體檢輸出一份風(fēng)險清單。我們當(dāng)時重點排查了以下幾類東西對象清單表、索引、約束、序列、視圖、物化視圖、存儲過程、函數(shù)、包、觸發(fā)器、同義詞、DB Link。每一項都要統(tǒng)計數(shù)量并評估改造工作量。千萬別小看同義詞和DB Link業(yè)務(wù)SQL里如果大量使用遷移后全都要改。SQL使用情況抓取AWR報告和近一段時間的慢SQL重點看用了哪些Oracle獨有語法比如CONNECT BY層次查詢、()外連接、ROWNUM分頁、NVL、SYSDATE、MERGE、LISTAGG等。這些是SQL改造的重災(zāi)區(qū)。數(shù)據(jù)類型分布NUMBER、VARCHAR2、DATE、CLOB、BLOB、LONG、RAW、ROWID等類型的字段數(shù)量和最大長度。尤其是CLOB和LONG遷移后要用TEXT替代但業(yè)務(wù)代碼里對CLOB的操作方式可能需要調(diào)整。存儲過程復(fù)雜度統(tǒng)計有多少存儲過程、總代碼行數(shù)、用到了哪些Oracle獨有包DBMS_SQL、DBMS_JOB、DBMS_ALERT、UTL_FILE等。這部分改造成本往往被嚴重低估。我們項目里有1300多個存儲過程最終花了整個項目40%的工時在改寫上面。依賴關(guān)系應(yīng)用與數(shù)據(jù)庫的交互方式包括連接方式JDBC、OCI、ODBC、事務(wù)隔離級別、會話級參數(shù)設(shè)置、臨時表使用情況。應(yīng)用層的連接串、驅(qū)動、SQL寫法都要納入改造范圍。體檢報告出來后要讓業(yè)務(wù)方、DBA、開發(fā)三方一起評審明確哪些東西可以原樣遷哪些必須改造遷哪些是僵尸對象可以果斷拋棄。這一步做扎實了后面所有的方案才有依據(jù)。2. 低業(yè)務(wù)中斷的核心打法全量增量雙軌遷移2.1 遷移工具選型與取舍工具選型沒有標準答案核心看你的源庫版本、目標庫版本、數(shù)據(jù)總量、同步實時性要求和團隊熟悉度。我們當(dāng)時對比了三條路線Ora2Pg開源免費Perl寫的能把表結(jié)構(gòu)、數(shù)據(jù)、序列、視圖、存儲過程整體轉(zhuǎn)換支持直接連Oracle導(dǎo)出再導(dǎo)入PostgreSQL。優(yōu)點是自動化程度高缺點是大表導(dǎo)出用COPY方式對源庫有一定壓力而且存儲過程轉(zhuǎn)換質(zhì)量一般只能轉(zhuǎn)個骨架復(fù)雜邏輯基本還得人工改。pgloader同樣開源從Oracle讀數(shù)據(jù)到PostgreSQL非??煊玫囊彩荂OPY協(xié)議支持并行加載。但DDL遷移能力弱主要用來搬數(shù)據(jù)。自研抽取同步腳本用Python寫一套基于JDBC的全量導(dǎo)出和增量抽取腳本配合調(diào)度平臺實現(xiàn)斷點續(xù)傳和數(shù)據(jù)校驗。靈活性最高但開發(fā)量不小。我們最終采用了Ora2Pg轉(zhuǎn)結(jié)構(gòu)pgloader搬全量自研增量同步腳本Debezium做變更捕獲的組合方案。結(jié)構(gòu)轉(zhuǎn)換用Ora2Pg生成初始DDL再人工修全量數(shù)據(jù)用pgloader并行加載增量部分考慮到源庫是Oracle 11gDebezium的Oracle插件要裝額外組件最后是自己寫了一套基于日志的增量抽取程序。這里給個建議如果是Oracle 12c及以上Debezium是較好的增量同步方案社區(qū)活躍且支持斷點續(xù)傳11g就得掂量掂量了。2.2 全量遷移的并行與限速策略全量數(shù)據(jù)遷移最容易翻車的地方是導(dǎo)太猛把源庫IO打滿業(yè)務(wù)直接告警導(dǎo)太慢又趕不上停機窗口。所以并行度和限速必須提前設(shè)計。我們按表維度拆分任務(wù)用了一個簡單的規(guī)則小于100萬行的表單表單任務(wù)順序執(zhí)行100萬到1000萬行的表按主鍵范圍拆成4到8個分片并行超過1000萬行的表按主鍵范圍拆成16到32個分片每個分片獨立連接、獨立事務(wù)。同時設(shè)置了全局并發(fā)上限保證源庫的活躍會話數(shù)不超過20。pgloader本身有個batch concurrency參數(shù)可以控制并行度但實測下來對Oracle源庫支持一般所以我更推薦自己寫一個簡單的調(diào)度器用一張任務(wù)表記錄每個分片的狀態(tài)調(diào)度線程從里面撈待執(zhí)行的任務(wù)分發(fā)給工作線程工作線程處理完更新狀態(tài)出錯自動重試三次還是失敗就進入人工處理隊列。這里有個非常關(guān)鍵的細節(jié)全量遷移必須在增量同步啟動之前完成并且要記錄全量導(dǎo)出的數(shù)據(jù)快照時間點。我們的做法是全量開始前先在源庫開啟歸檔日志和補充日志然后啟動增量抽取程序?qū)崟r解析日志寫入Kafka全量導(dǎo)出的每張表在導(dǎo)出前記錄一個SCNSystem Change Number快照導(dǎo)出完成后用這個SCN到增量同步里做數(shù)據(jù)拼接。這樣才能保證全量導(dǎo)出期間產(chǎn)生的增量變更不會丟。2.3 增量同步與業(yè)務(wù)雙寫設(shè)計增量同步的目標是讓PostgreSQL和Oracle的數(shù)據(jù)差距保持在分鐘級以內(nèi)這樣停機切換時只需要把最后幾分鐘的增量追上就能關(guān)窗口。我們的增量鏈路是Oracle歸檔日志 → LogMiner解析 → Kafka → 自研消費者程序 → 應(yīng)用到PostgreSQL。為什么用LogMiner而不是直接用OGG主要是因為OGG授權(quán)成本和部署復(fù)雜度在當(dāng)時的環(huán)境下不劃算。LogMiner有幾個坑要提前踩必須提前開啟最小補充日志Supplemental Log否則LogMiner拿不到更新前的字段值UPDATE語句沒法正確重放。LogMiner解析出來的DDL語句不能直接拿到PostgreSQL執(zhí)行需要做語法轉(zhuǎn)換比如ALTER TABLE xxx ADD (col NUMBER)要改成ALTER TABLE xxx ADD COLUMN col NUMERIC。大事務(wù)解析會產(chǎn)生大量Redo記錄LogMiner內(nèi)存可能扛不住要設(shè)置合理的UTL_FILE落地目錄分段讀取。增量應(yīng)用端的沖突處理也需要設(shè)計。雙軌運行期間如果應(yīng)用還在繼續(xù)寫Oracle我們的增量程序會把這些變更實時投遞到PostgreSQL兩邊數(shù)據(jù)保持一致。但如果某個時刻增量應(yīng)用出現(xiàn)問題、落后太多或者業(yè)務(wù)在驗證階段直接在PostgreSQL上面做了修改就會產(chǎn)生回環(huán)沖突。我們的策略是切換之前所有寫操作只走OraclePostgreSQL只接受增量投遞的歷史數(shù)據(jù)切換之后應(yīng)用層切到PostgreSQLOracle那邊不再接收業(yè)務(wù)寫流量。這套單向?qū)憽㈦p向讀的策略在切換前把沖突可能性降到最低。2.4 停機窗口內(nèi)的切換步驟清單就算增量同步再穩(wěn)定切換當(dāng)天也必須有SOP每一步到什么狀態(tài)、由誰確認都要提前定義好。我們的切換清單大概是這樣的業(yè)務(wù)側(cè)發(fā)布維護通知應(yīng)用層開啟只讀模式或直接停止寫流量等待增量同步追上確認Oracle和PostgreSQL的數(shù)據(jù)延遲為0停止Oracle側(cè)的寫操作記錄停止時間點增量程序消費完Kafka里所有消息應(yīng)用完最后一筆變更執(zhí)行數(shù)據(jù)校驗?zāi)_本下一節(jié)細說確認兩邊數(shù)據(jù)一致關(guān)閉增量同步程序防止PostgreSQL繼續(xù)接收Oracle的變更應(yīng)用層修改數(shù)據(jù)庫連接配置切換到PostgreSQL執(zhí)行一批關(guān)鍵的冒煙測試SQL確認核心業(yè)務(wù)功能正常觀察5到10分鐘確認無異常后對外宣布切換完成。整個切換過程耗時大概1.5小時算上全量數(shù)據(jù)校驗、應(yīng)用重連、緩存預(yù)熱最終停機窗口控制在3小時左右滿足4小時的要求。這里要注意第5步的數(shù)據(jù)校驗不能等全部跑完才判斷我們在切換前就做過多次全量預(yù)校驗在增量持續(xù)運行的情況下切換當(dāng)天只做增量部分的差異性校驗和隨機抽表比對。3. 數(shù)據(jù)校驗方案讓業(yè)務(wù)信服的三個層次3.1 第一層行數(shù)與總量校驗最基礎(chǔ)的校驗是行數(shù)比對。對每張表執(zhí)行SELECT COUNT(*)兩邊對不上就說明有問題。但COUNT在大表上很慢動輒幾分鐘甚至更久。我們當(dāng)時是用pg_comparison這類工具直接對比但更通用的做法是按主鍵范圍分段統(tǒng)計行數(shù)每段一個任務(wù)并行跑最后匯總。如果源表和目標表都沒有主鍵Oracle里確實存在這種爛表那校驗就只能退而求其次按所有字段做GROUP BY后再COUNT或者用COUNT(*)配合SUM(HASH)來粗查。這類表數(shù)量不多還好如果很多強烈建議在建表階段就幫它們補上主鍵或唯一約束否則后續(xù)的數(shù)據(jù)一致性驗證基本沒法做。行數(shù)校驗是必要條件但不是充分條件行數(shù)一樣不代表數(shù)據(jù)一樣所以還要做第二層。3.2 第二層字段級CRC校驗與哈希比對第二層是對每一行的所有字段拼起來做哈希兩邊比對哈希值是否一致。具體做法是在源庫Oracle寫一段SQL把每行需要比對的字段用DBMS_CRYPTO.HASH或STANDARD_HASH算出一個哈希值SELECT id, STANDARD_HASH(col1 || | || col2 || | || col3, SHA256) AS row_hash FROM my_table;在目標庫PostgreSQL用同樣的拼接規(guī)則算哈希SELECT id, encode(sha256(convert_to(col1 || | || col2 || | || col3, UTF8)), hex) AS row_hash FROM my_table;兩邊按主鍵關(guān)聯(lián)對比row_hash是否一致把所有不一致的主鍵ID撈出來交給業(yè)務(wù)確認。這里有幾個坑必須注意拼接字符串里的分隔符不能和字段值本身沖突。我一般用兩個特殊字符比如||~|~||并提前檢查字段值里是否包含這些字符。字段值里的NULL要統(tǒng)一處理。Oracle里空字符串就是NULL而PostgreSQL里空字符串和NULL是不同的。我們統(tǒng)一約定NULL或空串都替換成一個特殊標記比如NULL。浮點類型BINARY_DOUBLE、NUMBER帶小數(shù)在Oracle和PostgreSQL二進制存儲上有差異直接拼接字符串做哈??赡艹霈F(xiàn)看起來一樣、哈希不一樣的誤報。處理方法是對數(shù)值類型先做格式化統(tǒng)一保留到小數(shù)點后6位或更多確保兩邊字符串一致。大數(shù)據(jù)量下表字段特別多時哈希計算會非常消耗源庫CPU。我們當(dāng)時在源庫用只讀快照或者備庫上跑哈希校驗避免影響生產(chǎn)。3.3 第三層業(yè)務(wù)規(guī)則抽樣比對哈希校驗?zāi)鼙WC技術(shù)層面的數(shù)據(jù)一致但業(yè)務(wù)方更關(guān)心他們用起來對不對。所以我們額外設(shè)計了一套業(yè)務(wù)規(guī)則的抽樣比對從核心業(yè)務(wù)表里隨機抽取若干個ID把該ID關(guān)聯(lián)的訂單、明細、流水全查出來業(yè)務(wù)方人工核對把一批統(tǒng)計報表SQL分別在Oracle和PostgreSQL上跑一遍比對聚合結(jié)果是否一致把幾個典型的復(fù)雜查詢多表關(guān)聯(lián)、子查詢、窗口函數(shù)在新庫上執(zhí)行業(yè)務(wù)方確認執(zhí)行結(jié)果和口徑符合預(yù)期。這個環(huán)節(jié)的意義不止于查數(shù)據(jù)還在于讓業(yè)務(wù)方建立對遷移結(jié)果的信任。技術(shù)團隊說一百句校驗過了不如業(yè)務(wù)方自己抽幾個單子確認來得踏實。3.4 校驗工具與自動化我們整個校驗體系是跑在一個自研的校驗平臺上的支持配置表清單、校驗類型、閾值和通知渠道。技術(shù)上不復(fù)雜核心就是一個任務(wù)調(diào)度器加一堆校驗?zāi)_本。不過如果你沒有自研條件有幾個現(xiàn)成工具可以參考pg_comparison專門做PostgreSQL與PostgreSQL/Oracle等多庫數(shù)據(jù)對比支持行數(shù)、全量、抽樣對比能輸出差異報告。DataGrip/DBeaver的數(shù)據(jù)對比功能適合小表、交互式核對不適合大批量自動化。xtc校驗工具一些開源實現(xiàn)里有基于CRC或MD5的文件級校驗?zāi)芰Φ苯佑迷跀?shù)據(jù)庫遷移上還是得改造。我的建議是工具只是輔助校驗方案和口徑才是核心。先把口徑和字段映射規(guī)則定義清楚工具只是幫你把規(guī)則跑起來。4. 可回退機制給業(yè)務(wù)一顆定心丸4.1 回退方案設(shè)計的兩種路線回退最理想的方案是雙活也就是切換后Oracle和PostgreSQL都保持可寫應(yīng)用層按比例把流量分攤到兩邊某一側(cè)出問題可以隨時把流量全部切到另一側(cè)。但雙活對數(shù)據(jù)一致性的要求極高寫入沖突處理的復(fù)雜度也很大普通項目很難真正做到。我們實際采用的是切換后保留源庫只讀反向同步增量的半雙活方案。具體來說切換時Oracle側(cè)停止業(yè)務(wù)寫入但數(shù)據(jù)庫實例不關(guān)閉歸檔日志繼續(xù)保留切換后增量同步程序反向工作監(jiān)聽PostgreSQL的變更用PostgreSQL的邏輯復(fù)制功能把變更同步回Oracle如果業(yè)務(wù)驗證期間發(fā)現(xiàn)重大問題需要回退我們先把PostgreSQL寫入停止等最后一批變更同步到Oracle然后應(yīng)用連接切回Oracle就能在較短時間內(nèi)恢復(fù)服務(wù)。這個方案的關(guān)鍵在于反向同步的可靠性和時延。PostgreSQL的邏輯復(fù)制Logical Replication機制比較成熟但把邏輯復(fù)制的變更重放到Oracle端還是得靠自研程序或中間件。我們當(dāng)時是寫了一個消費者從PostgreSQL的WAL里解析出變更再合成SQL語句應(yīng)用到Oracle。這里有個現(xiàn)實問題PostgreSQL邏輯復(fù)制默認只適合PostgreSQL到PostgreSQL跨庫重放得自己處理類型映射和SQL方言差異工作量不小。4.2 回退窗口與觀察期設(shè)計回退不是無限期的業(yè)務(wù)方也不能想什么時候退就什么時候退。我們在項目計劃里明確了一個回退觀察期切換后一個月內(nèi)業(yè)務(wù)如果發(fā)現(xiàn)重大數(shù)據(jù)或功能問題啟動回退流程超過一個月認為遷移已經(jīng)穩(wěn)定不再支持自動回退Oracle源庫進入只讀歸檔狀態(tài)。這個觀察期不是隨便定的是根據(jù)業(yè)務(wù)體量和風(fēng)險容忍度協(xié)商出來的。觀察期越長反向同步的維護成本和資源成本越高太短業(yè)務(wù)不放心。我見過有些項目觀察期只有一周結(jié)果第四天暴雷回退的時候反同步數(shù)據(jù)量太大差點沒退干凈。一般來說業(yè)務(wù)量大的核心系統(tǒng)觀察期建議不低于兩周最好是一個月非核心系統(tǒng)可以適當(dāng)縮短。4.3 回退演練不能等到出事才練回退方案寫了幾頁紙但真正出事的時候能不能按流程執(zhí)行只有練過才知道。我們在正式切換之前做了兩次完整的回退演練每次都能暴露問題。第一次演練暴露出一個經(jīng)典問題切換后業(yè)務(wù)在PostgreSQL上生成了大量新數(shù)據(jù)回退時要把這些數(shù)據(jù)反向同步回Oracle結(jié)果因為表結(jié)構(gòu)里有個字段類型映射不一致導(dǎo)致批量INSERT失敗。這類問題如果不演練真到回退的時候就是災(zāi)難。第二次演練我們提前修正了映射又測了流量切換的腳本確認應(yīng)用重啟后能讀到Oracle的最新數(shù)據(jù)整個回退耗時控制在40分鐘內(nèi)。所以我的建議是回退演練必須包含數(shù)據(jù)層和應(yīng)用層兩層驗證。數(shù)據(jù)層驗證反向同步是否完整、一致應(yīng)用層驗證連接切換、緩存清理、配置修改是否順利。只測數(shù)據(jù)不測應(yīng)用回退后業(yè)務(wù)還是起不來。5. 常見問題與排查技巧實錄整個遷移過程中我們踩過的坑和排查過的問題不少挑幾個有代表性的寫在這里供大家參考。5.1 Oracle的CONNECT BY在PostgreSQL里怎么改Oracle的層次查詢CONNECT BY PRIOR是遷移的高頻改造點。PostgreSQL沒有直接對應(yīng)的語法要用遞歸CTEWITH RECURSIVE改寫。比如Oracle里SELECT emp_id, mgr_id, LEVEL FROM emp START WITH mgr_id IS NULL CONNECT BY PRIOR emp_id mgr_id;改成PostgreSQLWITH RECURSIVE emp_tree AS ( SELECT emp_id, mgr_id, 1 AS level FROM emp WHERE mgr_id IS NULL UNION ALL SELECT e.emp_id, e.mgr_id, t.level 1 FROM emp e JOIN emp_tree t ON e.mgr_id t.emp_id ) SELECT emp_id, mgr_id, level FROM emp_tree;這里注意遞歸CTE的性能調(diào)優(yōu)空間比較大如果樹的深度和寬度都很大比如超過10層、幾十萬節(jié)點建議提前用真實數(shù)據(jù)量壓測必要時加search_depth之類的優(yōu)化手段。5.2ROWNUM和ROW_NUMBER()的等價改寫Oracle里用ROWNUM做分頁很常見SELECT * FROM ( SELECT t.*, ROWNUM rn FROM big_table t ) WHERE rn BETWEEN 101 AND 200;PostgreSQL里直接用LIMIT/OFFSETSELECT * FROM big_table ORDER BY id LIMIT 100 OFFSET 100;這里有個容易踩的隱形坑Oracle的ROWNUM是在排序之前生成的所以如果原SQL里寫了ORDER BY再套ROWNUM語義上是先取前N行再排序和PostgreSQL的LIMIT語義先排序再取前N行不一樣。改寫時必須先確認原SQL的業(yè)務(wù)意圖不然數(shù)據(jù)就錯了。5.3 CLOB字段遷移到TEXT后的性能問題Oracle的CLOB在PostgreSQL里一般對應(yīng)TEXT類型。看起來簡單但實測發(fā)現(xiàn)一個現(xiàn)象某些業(yè)務(wù)對CLOB字段做頻繁的UPDATE和SELECT在Oracle里有專門的LOB段和空間管理性能還行到PostgreSQL的TEXT上如果寫入的文本很大幾十KB到幾MBTOAST機制會觸發(fā)壓縮和外部存儲性能會有波動。我們的處理辦法把大文本字段單獨拆到一張擴展表里和主表用外鍵關(guān)聯(lián)需要時才JOIN出來。如果業(yè)務(wù)確實要頻繁讀寫大文本還可以把external存儲打開避免每次查詢都加載整個大字段。5.4 空字符串與NULL的語義差異Oracle里和NULL是等價的SELECT NVL(, x) FROM dual返回x。PostgreSQL里不是NULL。這一條差異在數(shù)據(jù)遷移時特別容易產(chǎn)生臟數(shù)據(jù)。我們在校驗階段發(fā)現(xiàn)不少表的某些字段兩邊值看起來不一致查了半天才發(fā)現(xiàn)是源庫存在空字符串遷移時我們統(tǒng)一轉(zhuǎn)換成了NULL但業(yè)務(wù)代碼里有用判斷的邏輯導(dǎo)致行為變了。后來我們定了規(guī)范Oracle到PostgreSQL遷移時空字符串按照Oracle語義統(tǒng)一轉(zhuǎn)NULL同時業(yè)務(wù)代碼里所有 的判斷改為IS NULL。這個規(guī)范在改造階段就要同步給開發(fā)團隊。5.5 分區(qū)表遷移的正確姿勢Oracle的分區(qū)表遷移到PostgreSQL有幾種方案用PostgreSQL原生分區(qū)表基于聲明式分區(qū)或者用繼承分區(qū)或者用pg_partman這類擴展。我們的經(jīng)驗如果分區(qū)數(shù)量不大幾十到幾百個用原生聲明式分區(qū)就夠了如果分區(qū)數(shù)量上千原生分區(qū)的元數(shù)據(jù)管理會有壓力可以考慮用pg_partman管理自動建分區(qū)。遷移時的一個常見坑Oracle分區(qū)表的全局索引和分區(qū)索引在PostgreSQL里沒有完全對應(yīng)的概念需要根據(jù)業(yè)務(wù)SQL的過濾條件重新設(shè)計索引策略。不要照搬Oracle的索引結(jié)構(gòu)否則查詢性能會很差。5.6 序列遷移的斷檔問題Oracle的SEQUENCE不保證連續(xù)PostgreSQL的SEQUENCE也一樣。但兩邊序列的CACHE和INCREMENT配置不同步可能導(dǎo)致ID沖突或斷檔。我們遷移時把Oracle序列的LAST_NUMBER和INCREMENT_BY記錄到PostgreSQL序列的同名參數(shù)上還要考慮增量同步階段兩邊應(yīng)用各拿各的序列號等切換后PostgreSQL序列起始值必須比Oracle當(dāng)前值大很多否則切過來后新生成的ID可能和同步回來的歷史數(shù)據(jù)撞車。這個問題真的很隱蔽但如果爆了就是主鍵沖突直接拖垮切換。建議切換前用腳本檢查所有序列的當(dāng)前值確保PostgreSQL側(cè)的值遠高于Oracle側(cè)。5.7 常見問題速查表問題現(xiàn)象常見原因排查/處理辦法校驗時哈希不一致字段拼接順序不一致、NULL/空串沒統(tǒng)一、浮點精度差異統(tǒng)一拼接規(guī)則字段值做標準化增量同步延遲持續(xù)增大Kafka消費能力不足、目標庫應(yīng)用能力差、大事務(wù)卡住增加消費者并行度排查大事務(wù)必要時手動補數(shù)切換后應(yīng)用報驅(qū)動錯誤JDBC連接串或驅(qū)動版本不兼容Postgres JDBC驅(qū)動與Oracle JDBC驅(qū)動用法不同檢查URL參數(shù)、schema設(shè)置存儲過程執(zhí)行失敗PL/SQL和PL/pgSQL語法差異人工改寫重點處理游標、動態(tài)SQL、異常處理查詢性能嚴重下降統(tǒng)計信息未收集、索引缺失、優(yōu)化器差異切換后立即執(zhí)行ANALYZE根據(jù)執(zhí)行計劃補索引回退時反向同步失敗類型映射不一致、主鍵沖突、循環(huán)依賴提前演練建立主鍵沖突處理規(guī)則類型映射表要用同一份我自己走完這個項目后最深的體會是數(shù)據(jù)庫遷移拼的不是單點技術(shù)有多強而是流程管理和風(fēng)險把控。這三個目標——低中斷、可校驗、可回退——每一個都對應(yīng)著一整套方案和工具鏈而它們之間又互相影響。建議準備動手的朋友先把你現(xiàn)有的停機窗口、數(shù)據(jù)量、業(yè)務(wù)容忍度都擺出來用這些邊界條件去倒推每一步該怎么做。方案設(shè)計得越細執(zhí)行的時候才越穩(wěn)。再補充一點遷移過程中所有腳本和命令一定要先在小環(huán)境里完整演練一遍帶上真實數(shù)據(jù)量的1%到5%壓測一下性能別等到正式切換才發(fā)現(xiàn)導(dǎo)出速度、校驗耗時、增量延遲這些數(shù)字完全不可控。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
九九伊人网| 日本高清视频在线观看黄已三辽| 色偷偷色偷偷欧美日韩| 美女天天干| 中欧人妻丝袜中文字幕| 亚洲精品天堂久久A∨51成人漫| 97最新在线播放视频| 欧美淫穴| 久久亚洲天堂| 91色综合| 8050午夜少妇无码| 亭亭丁香激情| 亚州五月| 一区二区三区黄片免费观看| 天天综合色电影| 97碰碰日本乱偷人妻中文的| 好属操| 人妻一区二区三区视频| 天天综合~91| 国产欧美伊人| 国产精品一区二区三| 一级黄碟在线看| 人妻素股| 性久久久| 日本免费中文一区二区三区四区| 91在线/欧洲| 欧美色干| 国产性久久久| 91人妻人人妻| 国产美女自拍视频| 天天激情干| 女优免费一区二区永久| 色悠久久久av| 中文字幕美女91| 亚洲各类熟们中文字幕| 亚洲色图a| 亚洲女优有码无码高清| 国产一级137片内射麻豆| 国产精品久久久久综合| 99久久综合| 欧美激情 亚洲色图| Sekablack无码一区| 九九亚洲视频| 欧美超碰人妻97| 懂色aV一区二区天美传媒| wwwcaobibi| 熟妇亚洲一区二区三区| 91国产丝袜白虎| 最新三级网址| 老熟女熟妇| 欧美碰碰综合色| 国内偷自视频区视频综合 | 国产综合网站在线播放 | 国产亚洲精品激情| 天天综合网国产| 九色 蝌蚪 熟女自| 脫衣舞一区二区三区| 91精品电影18| 校园春色五月天| 久久久噜噜噜久久久| 九九九综合精品| 91精品导航| 黄色视频特级毛片| 精品一区二区三区四区外站| 日本欧美韩国国产在线| 夜夜嗷嗷一区二区| 丁香五六月啪啪| 天美av在线观看| 欧美同性恋 的搜索结果 - 91n| 亚洲第一免费视频| 成人五月天色网| 国产拍偷精品网站| 亚洲国产一区二区三区四区国产| 丁香五月久久| 亚洲色阁| 性色一线| 色妇综合网| 亚洲欧美色图| 青娱乐999| 久久国产精品一级二级三级| 人妻欧美| 性色乱AV一区二区| 久久性爱视频99| 久久久蜜桃一区二区三区| 校园春色美腿丝袜| 久操不卡视频| 精品人妻一区二区三区日产| 嗯啊不要在线观看嗯啊| 熟女探花啪啪| 五月天伊人| 国产福利视频精品视频| 五月天加勒比啪| 影音先锋日本乱伦| 爱干爱射网啊啊啊| 国产精品一区二区亚洲人成毛片| 97精品视频网站| 亚洲,日韩,欧美,成人播放| 欧美 青青草| 五月天婷婷在线看| 夜夜福利| 青娱乐91| 一区二区激情国产熟女| 91夜色| 99热超碰| 嫩草在线视频| 成人一二三区| 青草青青久久久久久国产| 国产三级片在线观看| www.夜夜操| 97爱综合| 亚欧中文字幕在线视频| 爽极品影院| 99久久9| 午夜男女爽爽爽在线视频| 风间由美日韩欧美久久| 日韩亚洲欧美中文字幕| 69AV女优男人的天堂| 国产精品区在线12p| 中文字幕在线2| 国模无码一区二区三区在线| 国产精品久久久久久久久久久久久久吹| 丁香五月社区| 一区AV| 人妻丝袜肏逼| 婷婷午夜| 久久超碰日韩精品| 98精品国产乱码久久久久久| 国产亚洲精品自在线亚洲情侣| 好涩综合| 日本男人插女人的逼黄色| 中日韩欧美精品无码AⅤ一区二区| 久久精品男人的天堂| 26uuu国产成人综合| 天天做日日爱夜夜爽| 中文字幕在线播放2中文字幕在线观看2 | 欧美 传媒 麻豆 日韩 偷拍| 国产精品久久久蜜臀| 尤物视频偷拍免费| 青娱乐淫乱1314| 亚拍在线| 极品肉射| 亚洲天堂中文字| 激情久久久| 亚洲色交| 色情婷婷久久五月天| 国产精品秘 福利姬在线观看| 99在线精品视频| 中文字幕版| 免费一级毛片在线视频观看| 欧美不卡在线一区二区| 少妇九九九九| 丝袜视频一区二区在线播放国产中文| 国产又色又爽又舒服的三级视频| 午夜精品久久一区二区| 干妹子| 亚洲情色1区| 国产AV高清AV无码| 国产精品久久久久无码Av网曝门 | 超碰在线1234区| 亚洲砖码砖专无区2023| 嗯嗯不要 视频| 91精品人妻一区二区-全集完整版免费正片国语-B02AV | 干美女人妻| 欧美亚洲激情小说| 无码少妇精品一区二区60岁老人| 家庭乱伦国产精品| 久久华人网| 日韩精品99999| 欧美亚洲一级在线观看| 91欧美亚洲| 无码九九九九| 日本欧美色| 亚洲激情在线| 日韩性爱免费视频在线网站| 中文字幕日韩专区精品系列| 日韩少妇无码| 欧美精品系列| 一区二区播放| 亚洲大胆人体av| 中文无码一二三区| 婷婷五月天丁香| 久久精品中文字幕女同| 91麻豆天美国产| 亚洲无码色| 日韩人妻免费精品| 久久人人爽人人爽人人片Ⅴ| 蜜桃视频成a人v在线| 天天上日日上日韩精品| 欧美激情精品| 久久黄人人爽视频| JuliaAnn丝袜熟女系列| 久久久久久久久一区二区三区| 人人操人人射人人干| 久久精品一区| 91强奸乱轮| 东北黄色电影| 人妻色偷色噜| 色综合超碰超| 亚洲成人免费在线| 97香蕉网| 宅男91视频在线播放| 人妻激情视频| 无码在线亚洲| 99在线观看| 亚洲色图 欧美热图 清纯唯美 另类自拍| 亚洲不卡av在线| 久偷拍| 蜜臀久久99精品久久久久久久久| 五月天婷婷影院| 自偷自拍的亚洲视频| 国产一级αv免费看片| 2019天天干天天操| 欧美丝袜激情| 国产精品网站www| 97超碰天天爱天天爱| 日韩美女久久一区二区三区| av大香蕉网站| 欧美精品第四五页中文字幕在线观看| 久久久穴999| 免费久久9999| 色网在线| 羞答答AV中文字| 婷婷精品久久av影视| 青青草五月份天| 老鸭窝成人| 正宗无毛一线天嫩逼| 色噜噜人妻av中文字幕| 男人天堂毛片| 亚洲不卡三级手机播放| 在线亚洲丝袜视频网站| 亚洲国产丝袜在线观看| 蜜臀99久久精品久久久久久| 中文字幕三四区| a片自拍直播视频| 国产福利视频精品视频| 亚洲成人美女无吗| 天天插天天插| 加勒比AV网| 久久草视频污视频| 97网站在线观看| 午夜一区| 自拍内地三级在线观看| 色狠狠 - 百度| 果冻国产精品麻豆成人av| 中文字幕av乱伦| 91狠狠综合久久| 毛片中心9视频99| 日本大香蕉| av草草在线电影| 欧美性爱一区二区三区| 久久丁香久草综合网| 国产一区二区a毛片| 国产嫩草精品A88AV| 色色九区| 中文色综合| 亚洲色图欧美视频| 亚洲图片欧美制度| 国产吹潮女在线观看| 日韩精品一二三| JIZZJIZZ亚洲女人被躁| 午夜精品久久久久久久99蜜桃一| 欧美日韩91| 台湾佬中文娱乐自偷自拍| 成人片视频| 风韵犹存大大大大香蕉 | 襙一襙| 精品亚洲国产成人av网站| 中文字幕熟女人妻丝袜| 无遮挡一级毛片视频免费的| 婷婷久久五月天| 热久久精品| 青草影院内射高潮| 欧美天天综合| 国产精品免费视频人成| 夜夜操91744565| 97久久久久久久久久| 综合影院亚洲| 91啪9色| 国产精品熟女丝袜一区二区| 99国产人成精品| 亚洲熟妇图片| 中文字幕第7页| 成 人 A V免费视频在线观看| 国产一级操B视频| 欧美综合站| 色官网在线| 91 丝袜在线| 欧美美女视频| 激情视屏国产乱伦强奸| 男人天堂久久日韩| 97超碰久久| 日本熟妇人妻中出视频| 日韩精品99久久久久久中文字幕| 亚洲婷婷丁香在线| 激情色播| 青操影院| 久久av一级av少妇av高潮| 国产黄a三级三级三级av在线看| 一区二区不卡| 精品国产av一区二区三区四区入口| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 99999精品视频| www.成人无码| 国产精品夜夜夜| 操迟操逼在巾线Fre看| 国产黄a三级三级三级av在线看| 天天射天天色成人| 人人操人人摸人 | 免费av高清无码| 美女刺激久久国产欧美| 国产白丝网站| 狠狠色丁香| 无码精品啪啪啪一区二区三区三州| 飘花国产午夜精品不卡| 顶级少妇BT天堂| 久操精品| 天天日日舔舔| 91丨人妻丨国产丨丝袜| 嗯嗯啊啊视频在线看| 在线观看啊啊啊啊啊| 欧美日韩香蕉| 中文一区在线日| 久久综合国产精品国产| 91在线色| 亚洲伊人a线观看视频| 丁香九月 婷婷| 97人人爱人人做人人乐| 老熟女乱伦一区| 美女黄色一级A视频| 国产精品粉嫩福利在线| 密乳无码| 人妻内射一区二区在线视频| 日本成人A片免费看| 91殴美大片| 国产第12页| 黄呦呦在线| 久综合国内精品自在自线| 人妻精品一区二区全免费| 91九九| 1769成人国产精品视频| 久久发布国产伦子伦精品| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 亚洲天天自拍| 人妻少妇色综合| 60秒不遮不挡| 大香蕉 222| 思思久热在线精品66| 五月色网| 青草一区二区| 91丝袜美腿网站| 人人摸人人入| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 91精品久久久久久| 亚洲成A∨人影院在线欢看| 99re在线视频这里只有精品| 亚洲精品视频在线播放| 久久久久亚洲Av无码专区老牛影视| 99精品无码| 久久9久久| 色五月婷婷麻豆在| 男人久久天堂| 人妻少妇精品一区二区三区| 欧洲综合色| 欧美日韩m| 操逼A∨| 撸撸成人在线视频| 亚洲欧综合另类无码一区| 人人摸人人舔一区二区| 一区二区激情国产熟女 | 情色五月天就去干| 日本超碰在线国产一区| 98福利在线视频| 精品超碰国产| 欧美精品成人一区二区在线观看| 色麻豆AV| 91大学精品激情戏| 欧美午夜视频免费观看| 男人天堂最新手机版在线青青草| 中文字幕一区 二区三四五 区日 日骚 | 欧美精品 - 91爱爱| 天天操天天干一区二区| 91久久婷婷| 欧洲天天在线| 一级啊性爱在线视频| 色综合91好| 国产91精品久久久久久久网曝门| 国产一区二区视频在线播放| 欧美在线播放| 99福利社| 亚洲、日韩、综合、另类| 国产h小视频在线观看免费| 男生女生啊啊啊啊| 五月天激情视频| 久久久久久久久久久久久久久久9| A片 AV一级在线播放观看免费 | 97色插| 欧美成人AⅤ大片在线观看| 成人草草视频| 久久久久久九九九九-美女久久久久久久-成人AV | AV老汉| 亚洲 欧美日韩 另类| 久久在肏| 国产一区二区精品在线视频| 亚洲精品色| 五月婷婷AV| 老熟女乱伦一区| 中国91AV| 97国产精品久久久久| 亚洲欧美大| 中文字幕aⅴ在线视频| 91夜色| 性欧美第一页| 久久久穴999| 热久久这里只有精品| 日韩无码黄色片| 欧美91精品国产自产| 欧美熟妇精品黑人巨大一二三区| 大肥女高潮bbwbbwhd视频| 日韩在线视频1234| 免费黄色A片| 韩国免费播放一级毛片| 啊啊啊啊操死我| 人澡逼| 老熟妇综合| 亚洲一区深夜| 99热在线播放| 精品久久人妻成人网| 6080YYY午夜理论片在线观看| 亚洲成人ab| 另类图片五月天| 久操网在线| 色眯眯射| 强奸少妇AV导航网| 欧美极品少妇交| 亚洲欧美中文日韩视频中国语| 日韩熟女乱伦中出| 一级二级三级黑人无码| 中文字幕丰满子伦无码专区在线视频最新 | 国产精品96| 久久有码视频| 老熟妇一区二区三区| 欧美91网站| 日日A∨| 情色五月天久久久| 青青草视频爽一爽| 18精品一区| 夂久色| 动漫爆乳3D奶水一区在线观看 | 日本护士高潮| 91人妻尻屄视频| 日本丝袜人妻内射| 精品人妻一区二区视频| 国产日韩欧美操逼视频| 2017人人操,人人摸| 色综合国产在线观看| 亚洲丝袜少妇在线| 三级色影综合网| 精品无码久久| 精品97久久| 久久久久久久久久久人妻| 超碰午夜| 国产精品成久久久久午夜午夜| 欧亚日韩中文在线| 亚洲情色视频| 中欧人妻丝袜中文字幕| 精品传媒在线一区| 综合网天天| 国产捆绑一区| 中文字幕高清精品一区| 可以在线观看的黄色网址| 99国产在线 精品 视频| 一区二区三区成人高清视频| 2021久久国产综合精品青草| 很很热性爱视频| 1769精品一区二区三区| 中文字幕成人| 天天欧美色| 欧美亚男人的天堂| 狠狠亚洲| av草草在线电影| 国产白丝网站| 日韩精品一区二区人人人| 欧美黄业| CCYY草草影院地址入口| 日韩免费大片一级播放| 人人操人人操草草| 六月丁香五月婷婷| 禁止观看美女黄| 日本三级日本三级三级人妇四虎| 久久久久久九九九九-美女久久久久久久-成人AV| 少妇500双飞99| 日韩资源网| 麻豆一区二区AV天美| 亚洲电影中字一区二区| 天天操av懂色| 九九久久一区二区三区| 亚洲精品一区中文字幕乱码| 欧美亚洲丝袜美女电影| 久久同城AV| 亚洲天在线| 青草综合| 色色色欧美| 激情五月综合网| 欧美一二三区四五区| 综合97亚洲| 人妻熟女一区二区三区视频| 三级色综合| 99色色网| yazhousetuoumei| 欲综合网| 激情抓乳插进去啪啪啪日韩| 爱av免费| 91女人的网站| 日本不卡一区二区三区| 老熟女综合网| 国内精品久久人妻性色av| 97摸视频| 顶级少妇BT天堂| 激情文学小说一区二区| 91内射| 殴美在线AⅤ| 东京热激情视频一二三区| 精品9区| 黄色操人| 99热婷婷| 久久9精品视频| 日本一久是| 2017天天拍大香蕉| 欧美亚洲另类在线蜜桃| 国内精品999| 狠狠爱夜夜干| 国产欧美在线观看免费观看| 国产免费永久精品无码| 啊啊啊好舒服好爽啊啊啊视频| 日韩BBN| 老司机深夜18禁污污网站| 综合色色婷婷| 亚洲综合一| 国产 日韩 欧美一区| 综合欧美日本三级| 做爱福利视频一区二区| 亚洲97超碰| av天堂5| 日日黄色三级网站| 欧美美女视频| 亚州操逼网| 老熟妇一区二区三区啪啪| 色综合一区二区三区| 女人被添高潮免费视频| 欧美久久久| 亚洲毛片基地专区| 欧洲熟妇xxXx欧美老妇裸体| 亚洲的天堂网| 天天躁日日躁成人字幕aⅴ| 蜜桃久久综合视频| 亚洲精品久久久久久| 国产a片操逼| 久久25| 亚洲AV无码乱码| www.91色| 夜夜国自区| 色嗨嗨在线| 亚洲自拍一区夜夜操| 亚洲国产另类在线中文| 欧亚综合一卡二卡中文字幕| 欧美操逼录像国产黄色国产| 粉嫩av在线一区二区| 亚热日本熟女| 五月婷婷丁香六月丁香| 日韩三级网址| 精品无码久久久久久久杏吧| 色老汉玖玖爱| 久久久久久综合久久伊人蜜月| 免费看A片毛毛片在线播| 亚州色图欧美| 99这里只有精品国产| 人人操天天爽| 呦呦影院| 97资源欧美| 色欧美综合| 在线黄页看毛片| 日韩猛交| 老鸭窝亚洲毛片| 加勒比综合| 黄色污污污污污污网站| 大色综合| 国产老熟女| 久久国产熟女影院| 欧美亚洲一区二区久久久婷精品大包诱| 中文字幕国产在线天堂| 亚洲综合网图| 家庭乱伦国产| 亚洲日韩久久精品一区| 日本性爱少妇| 欧美色图自拍| 狠狠干狠狠色| 91制服丝袜中文字幕| 一二三区在线| 在线免费观看高清无码视频| 九九玖玖精品| 人人看人人插| 激情五月天校园春色网| 日韩成人性爱电影在线播放| 91蜜臀人妻中文字幕在线| 色五月网址| 亚洲另类春色| 熟女中出视频| 国产精品久久久久亚洲av| 国产人妻精品一区二区三区秋霞 | 五月婷婷激情| 欧美第一页| 亚洲成人精品久久久| 九九干| 精品女同一区二区三区| 国产精品一区人妻精品阁在线| 屁股久久久久久久| 歐美性天天| av天堂手机版追回| 精品久| 亚洲欧洲精品成人| 国产区性爱在线视频秋霞豆| 狠狠爱夜夜| 一区二区三区日韩欧美| 久久毛卡| 亚洲精品乱码久久久久久蜜桃麻豆| 丁香五月激情网| av毛片aaaaa免费看| 欧美综合 站| 色五月亚洲| 欧美一级AAAAAAA| 日韩精品国模| 婷婷五月天补不补| 日韩性爱毛片操骚逼| 亚洲清纯综合| 色眯眯射| 色欲天天综合网| 国产精品不卡av免费在线观看| 高清肉丝中文无码| 五月婷色| 日韩中文字幕精品一区在线| 天天舔天天日天天射| 丁香五月天堂网| 亚洲?V无码专区在线电影| 91挑色欧美| 婷婷久热| 国产精品网址| 青娱乐黄色录像| 宅男91视频在线播放| 午夜影美女日鸡鸡天天视频国产| 啊啊啊水好多| 神马久久啊啊| 嗯啊免费视频| 免费看一级a性色生活片久久无| 波多野结衣之双飞调教在线播放| 欧美亚洲91| 97jingpin| 国产日韩欧美中文在线播放 | 青青青草原| 久久久久9久久久久| 亚洲系列第一页| 日日摸天天爽夜夜欢| 足交视频老司机| 久久伊人最新网址视频| 乱老熟女一区二区三区| 国产成人在线观看综合| 成 人片 黄色大片| 九九九九热| 蜜桃传媒视频第一区入口在线看| 91九九九逼| 人妻久久久久久久久久久久久久久| 国产精品极品美女视频| 秋霞色色影院| 这里都是精品| 啊嗯嗯啊好大好爽| 欧亚第一综合网| 狠狠穞A片一區二區三區| 欧美性爱1080p| 欧美性爱第一页久久| 91在线观看,天天综合| 激情人妻另类| 亚洲成人精品久久久| 超碰79人人乐| 国产久久久久久久久一区二区| 欧美日韩日产免费网站看| 天天影视色香欲综合网小说| 狠狠爱大香蕉| 亚洲自拍小说| 精品一区99999| 999综合色| 午夜欧美J进J出白浆流出久久久| 视频二区美腿丝袜制服人妻欧美| 天天干天天狼在线视频| 久草网站免费在线观看| 自拍偷拍亚洲熟女妇人精品| 被窝影院午夜看片无码| 神马九九| 久久少妇| 久九九九| 综合第一页| 91中文字幕在线观看| 无码操逼天堂| 天天日天天射天天干| 一区,二区,三区网站| 国产视频三区四区| 欧美午夜精品久久久久久超碰| 免费AV播放| 欧美日韩第一页| 日本在线不卡v二区| 大香网站| 强奸乱伦av电影| 亚洲成人福利电影免费| 天堂无码精品国产久| 蜜乳av一区二区| 999精品国产高清一区二区| 俺去啦俺来也久久综合| 日本视频在线中文字幕| 久久婷婷电影网| 亚洲无码视频免费在线观看网址!| 夜夜精品视频| 91搡老女人老妇女老熟女歌词翻译| 亚州综| v91av| 啊啊啊啊啊在线| 97视频在线免费观看| 日本媚薬中文字幕在线| 欧亚日韩中文在线| 嗯嗯啊啊啊好爽| 夜夜性| 混色激情av| 日韩性色| 日日爱99| 国产精品久久久久久久无码AV| 青青草伊人久久| 91色宗合| 婷婷丁香人妻| 91n处女在线观看| www.成人无码| 91欧美色| 国产高清视频无码在线| 大色综合| 国产无码久久高清| 久久精品日韩| 亚洲第一成人影院色播| 五月丁香啪啪啪| 在线观看十八禁| 久久九七| 熟女露脸激情自拍视频| 91劲爆| 欧美色综合网| 成人免费性爱视视| 91丨豆花丨熟女| 免费av大片| 六六久久日韩不卡| 综合网久久| 亚洲天天精品| 97伊人网| 99人妻碰碰碰久久久久禁片| 精品人妻一区二区视频| 伊人色综合网电影| 九九热精品免费视频| 伊人国产视频| 久久精品综合| 97啪啪| 国产91av在线播放| 欧美性爱一级操| 人妻少妇久久久| 久久免费看高潮毛片韩国| 少妇色综合| 色九久| 人人性爱视频免费| 美女一区二区国产精品| 蜜桃久久综合视频| 久久久111| 黑人性欧美| 一级二级三级黑人无码| 国产精品久久久三级无码| 久久久一热在线播放| 亚洲日韩少妇一道本视频| 色天天野狼综合社区| 亚洲午夜未满十八勿入网站日本又色又爽又黄| 91人妻中文| 99色综合| 成人在线午夜视频一区| juliaann欧美丝袜办公室| 亚洲天堂一区二区久久| 久久99操天天日| 日日妻色网| 男人天堂网站| 91丨熟女丨丰满熟女| 国产suv精品一区二区四| AV久日| 欧美高清18A片| 一区二区三区机械有限公司| 五月天综合网| v91av| 一级特级aaaa毛片免费观看| 大香蕉AV丝袜| 麻豆天天躁天天揉揉AV| 国产一区二区三区白丝| 91free福利| 久久久久密| 97超碰欧美手机在线| AV女资源| A 在线网址| 91啪啪视频| 歐美一級亂黃99在綫精品| 亚洲精品黑丝| 肏逼福利网站| 日韩精品一区二区三区色欲| 亚洲色香| 中日韩免费看男女操逼大全| 国产1769在线| 性性欧美| 男人的天堂.com| 91中文字幕在线观看| 国产最新小视频在线播放下载| 人人人人人人少妇| 大香蕉琪琪日本女优不卡| 日韩熟女无码| 天堂蜜桃无码视频一区二区| 国产亚洲禁久一区二区| 超碰碰97| 欧美亚洲中文| 97干在线| 极品出轨视频网站| 91爰爱欧美| 91网站18禁| 日本人妻A片成人免费看片| 激情亚洲天堂| 国产呦精品系列在线观看| 丁香五月激情五月| 97伊人超碰| 久久婷婷综合国际产色怕| 搞中出视频在线观看| 亚洲人成网站7777| 91在线免费观看处女| 97天天日| 91狠| 精品少妇一区二区| 亚洲色图欧美视频| 1024午夜激情男人的天堂| 欧美日日操| 情色日播放AV| 91亚洲欧洲| 国产一区二区三区精品观看啪| 亚洲偷拍欧美激情| 亚洲一欧洲中文字幕在线| 久久人妇| 家庭乱伦性爱av| 蜜臀亚洲综合一二三四区| 国产日逼视频| 欧美日韩亚洲五月天婷婷| 日韩在线性爱免费视频| 欧美视频激情久久久久久| 超碰国产精品无码| 嗯嗯啊啊好疼| 亚洲成人av电影在线| 国产一区二区三区久久精品太古里| 国产精品原创巨作?v网站| 丝袜内射| 久久天天艹| 精品久久大胆人体| 91人妻中文| 加勒比久久av| 久久婷婷热| 亚洲熟妇A V黑人| 国产精品白虎| 国产辣妈在线视频福利| 国产盗摄美女如厕大神作品在线观看| 国产乱伦性爱区| 男人的天堂在线| 日韩激情中文字幕有码| 天天日天天干天天摸天天操| av天堂手机版追回| 熟人人妻少妇精品久久| 日本超碰在线国产一区| 少妇被c 黄 免费观看| 国产精品密臀网在线观看| 色哟哟511老熟女| 国产2.3.4区| 性一交一乱一交A片久久四色| 精品天堂| 九九九综合精品| 天天弄天天操| 人妻丰满熟妇av无码区蜜桃| 欧美一级三级| 亚洲一区在线观看欧洲| 亚洲一二三精品久久网| 国语对白露脸XXXXXX| 精品久久久久瑟瑟| 999亚洲国产视频| 国产91专区| 欧美一级A片在线看视频性色| 久久精品国产99久久,亚洲日韩久久日本一区一区三区 | 亚洲高清在线| 亚洲色图91| 久久99999| 人人透人人操| 视频一区二区免费在线| 91 丝袜在线观看| 久久久久人妻| 老子午夜伦不卡影院| 四虎影视永久在线观看精品免费网站| 欧美久久婷婷| 嫩草影院永久在线制服丝袜| 美国aaaaa一级黄片| 欧美性夜| 天天享受天天看| 玖玖资源综合在线视频| 亚洲毛片基地专区| 欧美婷婷久久| 91制服丝袜中文字幕| 精品.99999| 国产强上视频在线观看| 懂色Av一区二区三区| 樱花草社区www中国| 天天干天天插| 国内毛片无遮挡国产| 国产又粗又长又大的视频| 岛国精品视频在线观看 | 伊人在线大香蕉视频久久| 亚洲欲色9532548967一区| 在线岛| 日韩99999| 精品然女一区二区| 可以免费观看的AV| 欧美精品99久久久**| 97日亚洲欧美| 日韩中文字幕宗合在线| 亚洲无套久久嗯嗯| 国产精品无码在线| 国产精品美女久久久久久网站| 91在线国产后入风骚翘臀美女素人| 九九热男人天堂| 人人摸人人叼| 最新国产精品| 91痴汉| 成人一区二区三区四区| 久久色情| 国产精品久久久久久无码红治院| 亚洲欧美色图片| 综合天天。| 又黄又粗又硬又长又大| 99精品热| 欧美东京热精品A∨| 综合影院永久入口国产| 久久久一二三四区| 久久久久久久久久黄色网| 狠狠中文字幕| 高清在线偷拍自拍视频| 成人av影院在线观看| 人妻夜夜爽天天爽三区麻豆AV网站| 久热99999| 97超碰天天爱天天爱| 啪啪91| 精品一二三区久久AAA片| 夜夜操美女| 欧美啪啪色吧在线| 蜜桃臀一区二区三区久久| 精品人妻视频一区二区三区蜜桃视频| 精品久久久久久亚洲| 欧美亚洲日本激情在线| 久久av一级av少妇av高潮| 97无码视频在线播放| 亚洲精品97久久| 91天天综合在线| 色偷偷超碰亚洲| 极品后入免费视频| 91jk色拍| 亚洲天堂另类小说男人| 久久男人的天堂国产| 97碰在线视频| 欧美日韩性爱视屏免费看了| 色噜噜精品一区二区三| 最新亚洲人成网站在线影院| 91操熟女| 99精品九九九九九九| 综合网97| 人人妻人人色| 久久久久久久久久久97| 亚洲成人网站在线观看| 国产AV无码AV| A级国产欧美激情在线| 加勒比99999| 亚洲日韩熟女人妻高清在线| 一区中文字幕二区日韩| 大香蕉男女超碰精品在线| 欧美综合区| 久草国产在线视频| 综合熟女| 久热9| 激情欧美97| 99热99re6国产在线播放| 91天天爱| av线电影| 骚逼自拍99| 欧美偷偷网| 天天在线91| 男人的天堂三级| 玖玖综合视频| 91日产桃蜜| 性欧美999| 粉嫩久久久极品| 妇女乱色二区| 欧美性色欧美| 久久黄黄黄| 上床啊啊啊| 2017天天拍大香蕉| 高清视频一区| 日韩精品人妻| а√天堂资源官网在线资源| 中文AV制服乱伦| 岛国片在线播放| 国产精品嫩草影院免费| 日韩欧美俄罗斯A片| 精品亚洲国产成人AV制服丝袜| 亚洲乱熟女一区二区三区大香蕉| 国模精品一区二区三区苹果色戒| 婷婷视频网| 91超级碰碰| 色五月综合网| 91碰碰碰| 婷婷丁香五月激情啪啪| 婷婷五月综合在线| 亚洲超碰在线| 调教熟妇 久久久久久| 亚洲男人bt天堂| 精品网站9999| 久久爽爽精品| 少好三P| 91第一页| 少妇久久久久久| 内射老妇BBWX0C0CK| 91快色色色色色| 91久热| 亚洲成人一二三区| 国产视频第2页| 天天影视综合色| 婷婷丁香激情| 国产最新小视频在线播放下载| 日本色色色色色视频| 1024人妻| 哈哈操电影AV| 日本道日本道中文字幕日本道最新日本道在线观看 | a亚洲欧美色欲| 超碰国产精品久| 色99视频| 夜夜操天天肏| 国产91专区| 日本一二区不卡| 超碰在线观看av不卡| 久久曰曰| 美女人妻色网站| h色99999| 9久久久久| 午夜AV人气不卡| 屌逼麻豆| 欧美亚洲涩涩| 一起草视频在线| 双插性欧美一二三区| 91美| 偷拍色图| 欧美综合1性辶| 久久av无码| 欧美刺激色黄片免费看| 极品丝袜无码| 欧美天天在线| 色吧5亚洲| 国产一区二区精品久久99| 九九综合| 偷拍色图| 亚洲av噜噜噜噜噜噜| 日韩AV一起草| 中文字幕一区二区三区蜜臀| 97久久国产亚洲精品超碰热| 久久天堂| 欧美性爱另类综合| 亚州乱码中文字幕综合久久久| 日本在线15p| 亚洲国产精品成人综合| 婷婷亚洲天堂| 亚洲精品1区| 天天综合网日韩| 久久99人妖视频国产| 熟女色图在线| 中文字幕视频二区| 日韩美女操b| av婷婷色网| 综合少妇网| 日日操丁香五月天| 国产视频一区二区在线观看| 啊啊啊 在线| 免费一级a毛片久久久久久鸭绿欲| 亚洲色吧网| 天天干夜夜| 草草影院最新网址| 91neishe| 91 天天综合| 国产自产自拍| 国产久久一区二区三区野外在线| 怡春院久久| 久久激情亚洲精品无码?V| 9热9热综合网| 久久久999国产精品| 综合在线导航一区| 在线综合 亚洲 欧美中文字幕| 澳门色噜噜色噜噜色噜噜色噜噜色噜噜| 性开放中文AV高清无码免费看| 久久久久久久久久久久久9999| 91情色在线| 久操不卡视频| 日韩精品影视| 国产一区二区三区视频在线看| 欧美精品四区| 欧美色97| 加勒比综合在线| 人妻精品一区二区在线| 67194无码不卡| 欧美伊人电影| 亚洲午夜福利视频| 91国产在线精品| 黑人精品XXX一区一二区| 理论久久婷婷网 8| 男人天堂新在线| 99热99色| a片久久久久久久久久久久 | 99久久99九九99九九九| 欧美一二三级精品在线| 日韩人妻精品久久久久| 死我十八禁| 岛国1区2区3区在线观看| 国产原创自拍| 欧美色九九| 日本99热| 91女色| a级理论午夜日本| 精品成人女人久久| 日韩精品在线观看观看| 97干天天| 黄色片一区二区三区四区五区| 激情亚洲天堂| 久96热在线观看视频| yirendaxiangjiashipin| 97香蕉网| 欧美激情 日韩精品| 偷拍 欧美 日韩| 一区二区首页| 亚洲一卡二卡在线免费| 久久久久久一日韩字幕无码| 在线视频五十市| 五十路三区在线| 日韩在线视频1234| 97er欧美性| 国产精品久久久 | 久久粉色| 亚洲性综合9| 欧美精品三级黄片| 天天射,天天操,天天爽-国内精品一区二区三区-成人AV | 九九色精品| 久久区|