במאמר הזה מוסבר איך להגדיר קבוצות משאבים של MySQL ב-Cloud SQL ל-MySQL ולהשתמש בהן כדי לנהל את הקצאת משאבי המעבד (CPU) לצורכי עיבוד הנתונים השונים, ולקבוע את סדר העדיפויות שלהם.
סקירה כללית
קבוצות משאבים של MySQL, שהוצגו ב-MySQL 8.0, מאפשרות לנהל את הקצאת משאבי המעבד (CPU) בין שרשורים שונים שפועלים במכונה אחת של מסד נתונים, ולקבוע את סדר העדיפויות שלהם. התכונה הזו שימושית כדי לצמצם את הבעיה של "שכן רועש", שבה משימות בעדיפות נמוכה, כמו ניתוח יומי או דוחות באצווה, יכולות להגדיל את השימוש ב-CPU ולפגוע בביצועים של חיבורי לקוח קריטיים בעדיפות גבוהה, כמו עיבוד עסקאות אונליין (OLTP).
אפשר להשתמש בקבוצות משאבים בכל המכונות של Cloud SQL ל-MySQL מגרסה 8.0 ואילך, גם במהדורת Cloud SQL Enterprise וגם במהדורת Cloud SQL Enterprise Plus.
ההבדלים בין קבוצות משאבים של MySQL בקהילה לבין קבוצות משאבים של Cloud SQL
Cloud SQL ל-MySQL הוא שירות שמנוהל במלואו. כדי להבטיח את האמינות של המכונה ולהגן על התהליכים הפנימיים של Cloud SQL, יש כמה הבדלים והגבלות בהשוואה להתנהגות של MySQL בקהילה:
- אין תמיכה ב-CPU core affinity
- קבוצות אסורות של משאבי מערכת
- רישום אוטומטי ביומן הבינארי ושכפול של DDLs של קבוצות משאבים
- הרשאות אדמין שניתנו מראש
אין תמיכה בשיוך ליבות מעבד (CPU)
אי אפשר לציין הצמדת מעבד (CPU) ברמת הליבה. לדוגמה, אי אפשר לציין את VCPU = 2-3 או את VCPU = 0 כשיוצרים קבוצת משאבים ב-Cloud SQL ל-MySQL. מכיוון שהטופולוגיה הבסיסית של ליבת ה-VM מופשטת, כל ניסיון להשתמש בסעיף VCPU בהצהרה CREATE RESOURCE GROUP או ALTER RESOURCE GROUP נכשל עם השגיאה הבאה של דחיית גישה.
ERROR 1227 (42000): Access denied; This operation (CPU clause)
is not allowed on the Cloud SQL environment. Only THREAD_PRIORITY allowed;
קבוצות אסורות של משאבי מערכת
ב-Cloud SQL אין תמיכה ביצירת קבוצות של משאבי מערכת.
מותר להשתמש רק בקבוצות משאבים ברמת המשתמש (TYPE = USER), עם עדיפויות של שרשורים שנעות בין 0 (העדיפות הגבוהה ביותר של המשתמש) לבין 19 (העדיפות הנמוכה ביותר של המשתמש).
קבוצות של משאבי מערכת אסורות כדי למנוע מעומסי עבודה של משתמשים להרעיב משימות קריטיות ברקע של Cloud SQL, כמו גיבויים, מעקב ורפליקציה.
אם תריצו את הפקודה CREATE RESOURCE GROUP עם TYPE = SYSTEM, תופיע השגיאה הבאה:
ERROR 1227 (42000): Access denied; This operation (TYPE=SYSTEM) is
not allowed on the Cloud SQL environment. Only TYPE=USER is allowed;
רישום אוטומטי ביומן בינארי ושכפול של DDLs של קבוצות משאבים
בקהילת MySQL, פעולות של קבוצות משאבים כמו CREATE, ALTER ו-DROP RESOURCE GROUP אף פעם לא נכתבות ביומן הבינארי. ב-Cloud SQL, ברירת המחדל הזו משתנה כך שכל הפקודות להגדרת קבוצות משאבים נכתבות ביומן הבינארי.
כך קבוצות המשאבים משוכפלות באופן אוטומטי לרפליקות לקריאה בלבד, ואפשר להשתמש בהנחיות לאופטימיזציה של שאילתות (או הנחיות RESOURCE_GROUP) ברפליקות כדי למנוע כשלים בשאילתות בגלל קבוצות חסרות.
הגדרות הקבוצה מתועדות גם בזרם היומן הבינארי לשחזור מערכת מנקודה מסוימת בזמן (PITR).
הקצאות של סשנים של שרשורים כמו SET RESOURCE GROUP לא נכתבות ביומנים הבינאריים.
הרשאות אדמין ניתנות ל-cloudsqlsuperuser
כדי לעבוד עם קבוצות משאבים, צריך את הרשאות הניהול הבאות במסד הנתונים:
-
RESOURCE_GROUP_ADMIN: יצירה, שינוי ומחיקה של קבוצות משאבים -
RESOURCE_GROUP_USER: הקצאת שרשורים או שימוש ברמזים בשאילתות
ב-Cloud SQL, שתי ההרשאות ניתנות כברירת מחדל לתפקיד cloudsqlsuperuser.
אדמינים של MySQL יכולים גם להעניק למשתמשים אחרים את הרשאת מסד הנתונים RESOURCE_GROUP_USER או RESOURCE_GROUP_ADMIN.
ניהול קבוצות של משאבים ב-Cloud SQL
אתם יכולים להגדיר ולנהל קבוצות משאבים ברמת המשתמש ב-Cloud SQL כדי לייעל את הקצאת המשאבים במסד הנתונים. כך אתם יכולים לשלוט בהקצאת משאבי המעבד (CPU) בין עומסי העבודה השונים של הסשנים במסד הנתונים במכונה, ולתעדף אותם.
לפרטים נוספים על הגדרת קבוצות משאבים ב-MySQL ועל התנהגות ההפניה, קראו את המאמר קבוצות משאבים במסמכי התיעוד של MySQL.
כדי לנהל קבוצות משאבים ב-Cloud SQL, אתם יכולים:
- יצירת קבוצת משאבים: יוצרים קבוצות משאבים ברמת המשתמש ומציינים עדיפויות מותאמות אישית לשרשורים.
- שינוי העדיפות של קבוצת משאבים: שינוי העדיפות של תזמון המעבד (CPU) בקבוצת משאבים קיימת ברמת המשתמש.
- הסרת קבוצת משאבים: הסרת קבוצת משאבים כשאין בה יותר צורך.
- הקצאת חיבורים ושאילתות לקבוצת משאבים: מיפוי של סשנים פעילים, משתמשי מסד נתונים או שאילתות ספציפיות לקבוצת משאבים.
- מעקב אחרי קבוצות משאבים: בודקים את קבוצות המשאבים שהוגדרו ואת הקצאות השרשורים.
לפני שמתחילים
לפני שיוצרים קבוצת משאבים, צריך לוודא את הדברים הבאים:
אתם מחוברים למסד הנתונים באמצעות חשבון משתמש עם הרשאת
RESOURCE_GROUP_ADMIN. למשתמש ברירת המחדלrootולכל חשבונות מסד הנתונים שהוקצה להם התפקידcloudsqlsuperuserיש את ההרשאה הזו כברירת מחדל.במכונה של Cloud SQL פועלת גרסת MySQL 8.0 ואילך.
יצירת קבוצת משאבים
יוצרים קבוצות משאבים ברמת המשתמש עם עדיפות שרשור בין 0 (העדיפות הגבוהה ביותר) ל-19 (העדיפות הנמוכה ביותר). עדיפות ברירת המחדל של השרשור לחיבורים רגילים היא 0.
כדי ליצור קבוצת משאבים, מריצים את ההצהרה הבאה:
CREATE RESOURCE GROUP GROUP_NAME TYPE = USER THREAD_PRIORITY = PRIORITY_VALUE;
מחליפים את מה שכתוב בשדות הבאים:
-
GROUP_NAME: השם של קבוצת המשאבים שרוצים ליצור. -
PRIORITY_VALUE: העדיפות של תזמון המעבד (CPU) לקבוצת המשאבים, מ-0(העדיפות הגבוהה ביותר) עד19(העדיפות הנמוכה ביותר).
שינוי העדיפות של קבוצת משאבים
כדי לשנות את עדיפות התזמון של המעבד (CPU) בקבוצת משאבים קיימת, מריצים את ההצהרה הבאה:
ALTER RESOURCE GROUP GROUP_NAME THREAD_PRIORITY = PRIORITY_VALUE;
מחליפים את מה שכתוב בשדות הבאים:
-
GROUP_NAME: השם של קבוצת המשאבים שרוצים לשנות. -
PRIORITY_VALUE: העדיפות החדשה לתזמון המשימות ב-CPU.
הסרת קבוצת משאבים
כדי להסיר קבוצת משאבים, מריצים את ההצהרה הבאה:
DROP RESOURCE GROUP GROUP_NAME;
מחליפים את מה שכתוב בשדות הבאים:
-
GROUP_NAME: השם של קבוצת המשאבים שרוצים למחוק.
הקצאת חיבורים ושאילתות לקבוצת משאבים
כדי לאכוף מגבלות על משאבים בעומס עבודה, מקצים חיבורים פעילים או שאילתות ספציפיות לקבוצות המשאבים של המשתמשים.
כדי להקצות חיבורים של סשנים לקבוצה:
נותנים הרשאה למשתמש של עומס העבודה:
GRANT RESOURCE_GROUP_USER ON *.* TO 'USERNAME'@'%';
מחליפים את מה שכתוב בשדות הבאים:
-
USERNAME: המשתמש במסד הנתונים שרוצים לתת לו את ההרשאה.
-
כשהמשתמש מתחבר, מריצים את הפקודה:
SET RESOURCE GROUP GROUP_NAME;
מחליפים את מה שכתוב בשדות הבאים:
-
GROUP_NAME: שם קבוצת המשאבים שאליה רוצים להקצות את החיבור.
או לציין מזהה שרשור ספציפי:
SET RESOURCE GROUP GROUP_NAME FOR THREAD_ID;
מחליפים את מה שכתוב בשדות הבאים:
-
GROUP_NAME: השם של קבוצת המשאבים שאליה רוצים להקצות את החיבור. -
THREAD_ID: המזהה של השרשור הספציפי במסד הנתונים שרוצים להקצות.
-
כדי להקצות שאילתה אחת לקבוצה (באמצעות רמז לאופטימיזציה):
משתמשים ברמז להערה של כלי האופטימיזציה RESOURCE_GROUP בתוך הצהרת ה-DML או ה-SELECT:
SELECT /*+ RESOURCE_GROUP(GROUP_NAME) */ COLUMN_NAME_1, SUM(COLUMN_NAME_2) FROM TABLE_NAME GROUP BY COLUMN_NAME_1;
מחליפים את מה שכתוב בשדות הבאים:
-
GROUP_NAME: השם של קבוצת המשאבים שרוצים להריץ את השאילתה במסגרתה. -
COLUMN_NAME_1: העמודה שלפיה רוצים לקבץ את התוצאות. -
COLUMN_NAME_2: ערך העמודה שרוצים לסכם. -
TABLE_NAME: הטבלה שרוצים לשלוח אליה שאילתה.
מעקב אחרי קבוצות של משאבים
כדי לבדוק את קבוצות המשאבים שהוגדרו:
SELECT * FROM INFORMATION_SCHEMA.RESOURCE_GROUPS;
כדי לראות את השרשורים של החיבורים הפעילים ואת קבוצות המשאבים שהוקצו להם, מריצים את השאילתה הבאה:
SELECT THREAD_ID, NAME, TYPE, RESOURCE_GROUP
FROM performance_schema.threads;
המאמרים הבאים
- מעקב אחרי מכונות של Cloud SQL
- שימוש בתובנות לגבי המערכת כדי לשפר את הביצועים שלה
- אופטימיזציה של שימוש גבוה במעבד (CPU)
- שימוש בתובנות לגבי שאילתות כדי לשפר את ביצועי השאילתות
- מעקב אחרי שאילתות פעילות