2020-07-24 11:23:12.145 [0-0-0-writer] warn commonrdbmswriter$task - 回滾此次寫入, 採用每次寫入一行方式提交. 因為:[9001, 2020072411231201011105516903453695186] unsupport packet=>030000001b0100, packet_name=mysql_set_server_option
5.1.34 對 preparedstatement 做replace 會發 com_set_option 包來設定client_multi_statements ，這個adb目前沒有支援，公升級下jdbc包應該就好了；
公升級到5.1.40即可修復。
91.5k資料replace方式同步，從102s減少到23s
"writemode": "insert"
DataX資料同步
wget tar xvf datax.tar.gz vi bash profile source bash profile在 datax home job目錄下，編寫同步指令碼 username root password 123456 splitpk id writer username root...
增量更新同步 檔案增量同步之rsync演算法
之前畢設有用到檔案增量同步，於是乎就記錄一下。在a和b兩個不同端之間有相似度很高的檔案，同時這個檔案又比較大。如果通過全量傳輸來更新，http傳輸量很大，非常不友好。那麼可以通過某些手段，只上傳修改的內容，其餘內容復用舊檔案。對於a b檔案進行同步為例，首先對a檔案進行分塊，並且對每一塊進行摘要計算...
同步資料庫神器DataX
datax同步資料步驟很簡單，其他不少人，寫的華麗呼哨，自己總結一篇。試了window 估計linux 一樣，步驟如下 安裝datax要求 python 2或者3 jdk 解壓出來是這樣 然後開啟 開啟 datax bin資料夾，再這個目錄下面cmd執行指令碼命令 中文亂碼 處理 回車就不是中文亂碼...