ניהול הקצאת CPU באמצעות קבוצות משאבים של MySQL

במאמר הזה מוסבר איך להגדיר קבוצות משאבים של MySQL ב-Cloud SQL ל-MySQL ולהשתמש בהן כדי לנהל את הקצאת משאבי המעבד (CPU) לצורכי עיבוד הנתונים השונים, ולקבוע את סדר העדיפויות שלהם.

סקירה כללית

קבוצות משאבים של MySQL, שהוצגו ב-MySQL 8.0, מאפשרות לנהל את הקצאת משאבי המעבד (CPU) בין שרשורים שונים שפועלים במכונה אחת של מסד נתונים, ולקבוע את סדר העדיפויות שלהם. התכונה הזו שימושית כדי לצמצם את הבעיה של "שכן רועש", שבה משימות בעדיפות נמוכה, כמו ניתוח יומי או דוחות באצווה, יכולות להגדיל את השימוש ב-CPU ולפגוע בביצועים של חיבורי לקוח קריטיים בעדיפות גבוהה, כמו עיבוד עסקאות אונליין (OLTP).

אפשר להשתמש בקבוצות משאבים בכל המכונות של Cloud SQL ל-MySQL מגרסה 8.0 ואילך, גם במהדורת Cloud SQL Enterprise וגם במהדורת Cloud SQL Enterprise Plus.

ההבדלים בין קבוצות משאבים של MySQL בקהילה לבין קבוצות משאבים של Cloud SQL

‫Cloud SQL ל-MySQL הוא שירות שמנוהל במלואו. כדי להבטיח את האמינות של המכונה ולהגן על התהליכים הפנימיים של Cloud SQL, יש כמה הבדלים והגבלות בהשוואה להתנהגות של MySQL בקהילה:

אין תמיכה בשיוך ליבות מעבד (CPU)

אי אפשר לציין הצמדת מעבד (CPU) ברמת הליבה. לדוגמה, אי אפשר לציין את VCPU = 2-3 או את VCPU = 0 כשיוצרים קבוצת משאבים ב-Cloud SQL ל-MySQL. מכיוון שהטופולוגיה הבסיסית של ליבת ה-VM מופשטת, כל ניסיון להשתמש בסעיף VCPU בהצהרה CREATE RESOURCE GROUP או ALTER RESOURCE GROUP נכשל עם השגיאה הבאה של דחיית גישה.

ERROR 1227 (42000): Access denied; This operation (CPU clause) is not allowed on the Cloud SQL environment. Only THREAD_PRIORITY allowed;

קבוצות אסורות של משאבי מערכת

ב-Cloud SQL אין תמיכה ביצירת קבוצות של משאבי מערכת. מותר להשתמש רק בקבוצות משאבים ברמת המשתמש (TYPE = USER), עם עדיפויות של שרשורים שנעות בין 0 (העדיפות הגבוהה ביותר של המשתמש) לבין 19 (העדיפות הנמוכה ביותר של המשתמש).

קבוצות של משאבי מערכת אסורות כדי למנוע מעומסי עבודה של משתמשים להרעיב משימות קריטיות ברקע של Cloud SQL, כמו גיבויים, מעקב ורפליקציה.

אם תריצו את הפקודה CREATE RESOURCE GROUP עם TYPE = SYSTEM, תופיע השגיאה הבאה:

ERROR 1227 (42000): Access denied; This operation (TYPE=SYSTEM) is not allowed on the Cloud SQL environment. Only TYPE=USER is allowed;

רישום אוטומטי ביומן בינארי ושכפול של DDLs של קבוצות משאבים

בקהילת MySQL, פעולות של קבוצות משאבים כמו CREATE,‏ ALTER ו-DROP RESOURCE GROUP אף פעם לא נכתבות ביומן הבינארי. ב-Cloud SQL, ברירת המחדל הזו משתנה כך שכל הפקודות להגדרת קבוצות משאבים נכתבות ביומן הבינארי.

כך קבוצות המשאבים משוכפלות באופן אוטומטי לרפליקות לקריאה בלבד, ואפשר להשתמש בהנחיות לאופטימיזציה של שאילתות (או הנחיות RESOURCE_GROUP) ברפליקות כדי למנוע כשלים בשאילתות בגלל קבוצות חסרות. הגדרות הקבוצה מתועדות גם בזרם היומן הבינארי לשחזור מערכת מנקודה מסוימת בזמן (PITR).

הקצאות של סשנים של שרשורים כמו SET RESOURCE GROUP לא נכתבות ביומנים הבינאריים.

הרשאות אדמין ניתנות ל-cloudsqlsuperuser

כדי לעבוד עם קבוצות משאבים, צריך את הרשאות הניהול הבאות במסד הנתונים:

  • ‫RESOURCE_GROUP_ADMIN: יצירה, שינוי ומחיקה של קבוצות משאבים
  • ‫RESOURCE_GROUP_USER: הקצאת שרשורים או שימוש ברמזים בשאילתות

ב-Cloud SQL, שתי ההרשאות ניתנות כברירת מחדל לתפקיד cloudsqlsuperuser.

אדמינים של MySQL יכולים גם להעניק למשתמשים אחרים את הרשאת מסד הנתונים RESOURCE_GROUP_USER או RESOURCE_GROUP_ADMIN.

ניהול קבוצות של משאבים ב-Cloud SQL

אתם יכולים להגדיר ולנהל קבוצות משאבים ברמת המשתמש ב-Cloud SQL כדי לייעל את הקצאת המשאבים במסד הנתונים. כך אתם יכולים לשלוט בהקצאת משאבי המעבד (CPU) בין עומסי העבודה השונים של הסשנים במסד הנתונים במכונה, ולתעדף אותם.

לפרטים נוספים על הגדרת קבוצות משאבים ב-MySQL ועל התנהגות ההפניה, קראו את המאמר קבוצות משאבים במסמכי התיעוד של MySQL.

כדי לנהל קבוצות משאבים ב-Cloud SQL, אתם יכולים:

לפני שמתחילים

לפני שיוצרים קבוצת משאבים, צריך לוודא את הדברים הבאים:

  • אתם מחוברים למסד הנתונים באמצעות חשבון משתמש עם הרשאת RESOURCE_GROUP_ADMIN. למשתמש ברירת המחדל root ולכל חשבונות מסד הנתונים שהוקצה להם התפקיד cloudsqlsuperuser יש את ההרשאה הזו כברירת מחדל.

  • במכונה של Cloud SQL פועלת גרסת MySQL 8.0 ואילך.

יצירת קבוצת משאבים

יוצרים קבוצות משאבים ברמת המשתמש עם עדיפות שרשור בין 0 (העדיפות הגבוהה ביותר) ל-19 (העדיפות הנמוכה ביותר). עדיפות ברירת המחדל של השרשור לחיבורים רגילים היא 0.

כדי ליצור קבוצת משאבים, מריצים את ההצהרה הבאה:

CREATE RESOURCE GROUP GROUP_NAME
  TYPE = USER
  THREAD_PRIORITY = PRIORITY_VALUE;

מחליפים את מה שכתוב בשדות הבאים:

  • ‫GROUP_NAME: השם של קבוצת המשאבים שרוצים ליצור.
  • ‫PRIORITY_VALUE: העדיפות של תזמון המעבד (CPU) לקבוצת המשאבים, מ-0 (העדיפות הגבוהה ביותר) עד 19 (העדיפות הנמוכה ביותר).

שינוי העדיפות של קבוצת משאבים

כדי לשנות את עדיפות התזמון של המעבד (CPU) בקבוצת משאבים קיימת, מריצים את ההצהרה הבאה:

ALTER RESOURCE GROUP GROUP_NAME
  THREAD_PRIORITY = PRIORITY_VALUE;

מחליפים את מה שכתוב בשדות הבאים:

  • ‫GROUP_NAME: השם של קבוצת המשאבים שרוצים לשנות.
  • ‫PRIORITY_VALUE: העדיפות החדשה לתזמון המשימות ב-CPU.

הסרת קבוצת משאבים

כדי להסיר קבוצת משאבים, מריצים את ההצהרה הבאה:

DROP RESOURCE GROUP GROUP_NAME;

מחליפים את מה שכתוב בשדות הבאים:

  • ‫GROUP_NAME: השם של קבוצת המשאבים שרוצים למחוק.

הקצאת חיבורים ושאילתות לקבוצת משאבים

כדי לאכוף מגבלות על משאבים בעומס עבודה, מקצים חיבורים פעילים או שאילתות ספציפיות לקבוצות המשאבים של המשתמשים.

כדי להקצות חיבורים של סשנים לקבוצה:

  1. נותנים הרשאה למשתמש של עומס העבודה:

    GRANT RESOURCE_GROUP_USER ON *.* TO 'USERNAME'@'%';

    מחליפים את מה שכתוב בשדות הבאים:

    • ‫USERNAME: המשתמש במסד הנתונים שרוצים לתת לו את ההרשאה.
  2. כשהמשתמש מתחבר, מריצים את הפקודה:

    SET RESOURCE GROUP GROUP_NAME;

    מחליפים את מה שכתוב בשדות הבאים:

    • ‫GROUP_NAME: שם קבוצת המשאבים שאליה רוצים להקצות את החיבור.

    או לציין מזהה שרשור ספציפי:

    SET RESOURCE GROUP GROUP_NAME FOR THREAD_ID;

    מחליפים את מה שכתוב בשדות הבאים:

    • ‫GROUP_NAME: השם של קבוצת המשאבים שאליה רוצים להקצות את החיבור.
    • ‫THREAD_ID: המזהה של השרשור הספציפי במסד הנתונים שרוצים להקצות.

כדי להקצות שאילתה אחת לקבוצה (באמצעות רמז לאופטימיזציה):

משתמשים ברמז להערה של כלי האופטימיזציה RESOURCE_GROUP בתוך הצהרת ה-DML או ה-SELECT:

SELECT /*+ RESOURCE_GROUP(GROUP_NAME) */
  COLUMN_NAME_1,
  SUM(COLUMN_NAME_2)
FROM TABLE_NAME
GROUP BY COLUMN_NAME_1;

מחליפים את מה שכתוב בשדות הבאים:

  • ‫GROUP_NAME: השם של קבוצת המשאבים שרוצים להריץ את השאילתה במסגרתה.
  • ‫COLUMN_NAME_1: העמודה שלפיה רוצים לקבץ את התוצאות.
  • ‫COLUMN_NAME_2: ערך העמודה שרוצים לסכם.
  • ‫TABLE_NAME: הטבלה שרוצים לשלוח אליה שאילתה.

מעקב אחרי קבוצות של משאבים

כדי לבדוק את קבוצות המשאבים שהוגדרו:

SELECT * FROM INFORMATION_SCHEMA.RESOURCE_GROUPS;

כדי לראות את השרשורים של החיבורים הפעילים ואת קבוצות המשאבים שהוקצו להם, מריצים את השאילתה הבאה:

SELECT THREAD_ID, NAME, TYPE, RESOURCE_GROUP
  FROM performance_schema.threads;

המאמרים הבאים