在Cloudera Manager（CM）07116.3.0版本環境中，將外部PostgreSQL數據庫遷移至MySQL數據庫服務是一項常見的運維任務，旨在提升數據庫兼容性、性能或滿足特定業務需求。本指南將詳細闡述遷移步驟、注意事項及最佳實踐，確保遷移過程平滑、數據完整。

一、遷移前準備

1. 環境評估：確認當前CM版本為07116.3.0，并檢查PostgreSQL數據庫中的數據（如CM的配置、監控、元數據等）。確保MySQL服務版本與CM兼容（推薦MySQL 5.7或以上）。
2. 備份數據：在遷移前，務必對PostgreSQL數據庫進行完整備份，可使用pg_dump工具導出數據。備份CM的配置文件（如/etc/cloudera-scm-server/db.properties）。
3. 安裝MySQL服務：在目標服務器部署MySQL，創建空數據庫（如scm），并配置用戶權限。確保網絡連通性，允許CM服務器訪問MySQL端口（默認3306）。

二、遷移步驟

1. 停止CM服務：在CM服務器上執行命令停止服務，避免數據寫入不一致。
`bash
sudo systemctl stop cloudera-scm-server
sudo systemctl stop cloudera-scm-agent
`

2. 導出PostgreSQL數據：使用pg<em>dump導出數據為SQL格式。例如：
`bash
pgdump -U postgres -h host> -d scm > scmbackup.sql
`

3. 轉換數據格式：由于PostgreSQL和MySQL語法存在差異（如數據類型、函數等），需對導出的SQL文件進行手動或工具調整。可使用sed命令或第三方工具（如pg2mysql）進行基礎轉換，但復雜對象（如存儲過程）可能需要重寫。
4. 導入MySQL數據庫：將轉換后的SQL文件導入MySQL。例如：
`bash
mysql -u root -p -h host> scm < scmbackup_converted.sql
`

5. 更新CM配置：修改CM的數據庫配置文件/etc/cloudera-scm-server/db.properties，指向MySQL服務。示例內容：
`properties
com.cloudera.cmf.db.type=mysql
com.cloudera.cmf.db.host=host>
com.cloudera.cmf.db.name=scm
com.cloudera.cmf.db.user=user>
com.cloudera.cmf.db.password=
com.cloudera.cmf.db.setupType=EXTERNAL
`

6. 啟動CM服務：重新啟動CM服務并驗證連接。
`bash
sudo systemctl start cloudera-scm-server
sudo systemctl start cloudera-scm-agent
`

1. 驗證遷移：登錄CM Web界面，檢查集群狀態、元數據是否完整。查詢MySQL數據庫確認表和數據已正常加載。

三、注意事項

• 兼容性問題：CM 07116.3.0對MySQL的驅動和語法支持可能存在限制，建議參考官方文檔驗證兼容性列表。
• 數據一致性：遷移過程中確保無新數據寫入，可在業務低峰期操作。
• 回滾方案：如果遷移失敗，需快速恢復PostgreSQL備份，并還原CM配置。
• 性能監控：遷移后監控MySQL服務的CPU、內存和連接數，調整參數（如innodb<em>buffer</em>pool_size）以優化性能。

四、最佳實踐

• 測試環境先行：在非生產環境模擬遷移流程，識別潛在問題。
• 增量遷移：對于大型數據庫，可考慮使用工具（如AWS DMS或自定義腳本）進行增量同步，減少停機時間。
• 文檔記錄：詳細記錄遷移步驟和參數變更，便于后續維護或故障排查。

通過以上步驟，您可以將CM的外部PostgreSQL數據庫安全遷移至MySQL服務，確保CM集群的持續穩定運行。如有復雜場景（如高可用集群），建議結合Cloudera官方支持或專業服務團隊協助完成。