גורמים לקביעת קנה מידה ב-Dataproc Metastore

כשיוצרים שירות Dataproc Metastore, אפשר לבחור להשתמש בשירות Dataproc Metastore 2 או בשירות Dataproc Metastore 1.

במאמר הזה מוסבר איך לשלוט בצריכת המשאבים ב-Dataproc Metastore 2.

גורמי קנה מידה ומהדורות

‫Dataproc Metastore 2 משתמש בגורמי קנה מידה ובמהדורות (עומסי עבודה) כדי לטפל ברמות שונות של יציבות ועומסי עבודה. כשיוצרים שירות Dataproc Metastore, בוחרים את גורם ההתאמה לעומס ואת המהדורה.

אחרי שיוצרים את שירות Dataproc Metastore, אפשר להגדיל או להקטין את הקיבולת של השירות על ידי שינוי מקדם ההתאמה. גורמי קנה המידה נעים בין small ל-XLarge ומיוצגים על ידי מספר שנע בין 0.1 ל-6.0.

מידע נוסף על מהדורות וגורמי קנה מידה זמין במאמר גורמי קנה מידה ועומסי עבודה.

התאמה אוטומטית לעומס (Automatic scaling)

‫Dataproc Metastore 2 תומך גם בהתאמה אוטומטית לעומס. אם מפעילים את ההתאמה האוטומטית לעומס, מגדירים גורם מינימלי לקביעת קנה מידה וגורם מקסימלי לקביעת קנה מידה. אחרי שמגדירים את הפרמטרים האלה, השירות מגדיל או מקטין באופן אוטומטי את צריכת המשאבים כדי להריץ עומסי עבודה. התאמה אוטומטית לעומס זמינה רק למופעי Dataproc Metastore באזור יחיד.

מידע נוסף על הגדרת שינוי גודל אוטומטי זמין במאמר בנושא יצירת שירות לשינוי גודל אוטומטי.

אזורים עם משאבים מוגבלים

‫Dataproc Metastore קיים בכמה אזורים שבהם יש פחות משאבים זמינים מאשר באזורים אחרים. באזורים האלה, גורם קביעת קנה המידה המקסימלי מוגבל ל-1 ואין תמיכה בהתאמה אוטומטית לעומס. האזורים הבאים נחשבים לאזורים עם מגבלות על משאבים ב-Dataproc Metastore:

  • australia-southeast2
  • europe-southwest1
  • europe-west8
  • europe-west9
  • europe-west12
  • southamerica-west1
  • us-east5
  • us-south1
  • me-central1
  • me-central2
  • me-west1

המאמרים הבאים