排解無邊界 Lakehouse 問題

本頁說明如何解決無邊界 Lakehouse 的常見問題。

資料和資源過時或未更新

無邊界的 Lakehouse 聯合目錄會根據重新整理間隔,同步處理遠端雲端的 Metadata。目錄的背景中繼資料重新整理時間可能會較長,視資源數量 (共用項目、結構定義、命名空間、表格) 而定。如果先前的重新整理作業超出時間,系統會略過目前的重新整理作業,但會將下一次重新整理作業排定在下一個間隔。

如果查詢到的資料過時,可能是目錄的背景中繼資料重新整理作業過度執行或失敗。遠端雲端資源也適用相同行為。如果刪除遠端雲端中的資源,系統只會在下次成功重新整理背景中繼資料時,從 Lakehouse 刪除該資源。

Lakehouse Google Cloud 控制台頁面中,查看聯合目錄的背景中繼資料重新整理狀態,或執行 gcloud CLI:

前往 Lakehouse

gcloud alpha biglake iceberg catalogs describe FEDERATED_CATALOG_NAME \
    --project="PROJECT_ID"

gcloud alpha biglake delta-sharing catalogs describe FEDERATED_CATALOG_NAME \
    --project="PROJECT_ID"

連線或轉送問題

使用私人互連時,如果遇到連線或路由問題,請確認下列事項:

  • 驗證路徑傳播:檢查Google Cloud 中的 Cloud Router,確認該路由器已瞭解 AWS VPC 前置字元。檢查 AWS 路由表,確認這些路由表有返回 Google Cloud 虛擬私有雲的路徑。
  • 檢查 ILB 健康狀態:在 Google Cloud 控制台中,依序前往「網路服務」>「負載平衡」。檢查 ILB 後端服務的後端 (NEG) 是否正常運作。如果不是,請確認網路連線和 AWS 安全性群組規則。
  • 測試連線 Google Cloud:在與 ILB 或 Service Directory 端點相同的虛擬私有雲和子網路中啟動測試 VM 執行個體,然後嘗試連線至通訊埠 443 上的 AWS ENI IP 位址 (例如使用 curltelnet)。Google Cloud
  • Service Directory 解決方案:確認目錄的服務帳戶具有解析 Service Directory 端點的權限 (roles/servicedirectory.viewerroles/servicedirectory.pscAuthorizedService)。
  • 安全群組和防火牆規則:確認防火牆規則和 AWS 安全群組允許相關 IP 範圍之間的 TCP 通訊埠 443 流量。 Google Cloud