שיטות מומלצות לייבוא וייצוא של נתונים

בדף הזה מפורטות השיטות המומלצות לייבוא ולייצוא של נתונים באמצעות Cloud SQL. להוראות מפורטות לייבוא נתונים ל-Cloud SQL, ראו ייבוא נתונים. במאמר ייצוא נתונים תוכלו לקרוא הוראות מפורטות לייצוא נתונים, בין אם הם נמצאים ב-Cloud SQL או במכונה שאתם מנהלים.

שיטות מומלצות לייבוא ולייצוא

ריכזנו כאן כמה שיטות מומלצות שכדאי להביא בחשבון כשמייבאים ומייצאים נתונים:

אל תשתמשו בקטגוריות של Cloud Storage עם התכונה "מגיש הבקשה משלם"

אי אפשר להשתמש בקטגוריה של Cloud Storage שבה מופעלת התכונה מגיש הבקשה משלם לצורך ייבוא וייצוא מ-Cloud SQL.

דחיסת נתונים כדי להפחית את העלות

ב-Cloud SQL אפשר לייבא ולייצא קבצים דחוסים ולא דחוסים. דחיסה יכולה לחסוך מקום אחסון משמעותי ב-Cloud Storage ולהפחית את עלויות האחסון, במיוחד כשמייצאים מכונות גדולות.

כשמייצאים קובץ BAK, משתמשים בסיומת הקובץ .gz כדי לדחוס את הנתונים. כשמייבאים קובץ עם הסיומת .gz, הוא נפרס באופן אוטומטי.

צמצום תהליכי ייבוא וייצוא ארוכים

ייבוא ל-Cloud SQL וייצוא מ-Cloud SQL יכולים להימשך זמן רב, בהתאם לגודל הנתונים שמעובדים. יכולות להיות לכך ההשפעות הבאות:

  • אי אפשר לעצור פעולה של מכונת Cloud SQL שנמשכת זמן רב.
  • אפשר לבצע רק פעולת ייבוא או ייצוא אחת בכל פעם לכל מכונה, ופעולת ייבוא או ייצוא שנמשכת זמן רב חוסמת פעולות אחרות, כמו גיבויים אוטומטיים יומיים.

כדי לקצר את משך הזמן של כל פעולה, אפשר להשתמש בפונקציונליות הייבוא או הייצוא של Cloud SQL עם קבוצות קטנות יותר של נתונים.

כשמעבירים מסדי נתונים שלמים, בדרך כלל מומלץ להשתמש בקובצי BAK ולא בקובצי SQL לייבוא. בדרך כלל, ייבוא מקובץ SQL נמשך הרבה יותר זמן מאשר ייבוא מקובץ BAK.

שימוש ב-SqlPackage לייבוא ולייצוא של נתונים

אתם יכולים לייבא ולייצא נתונים ב-Cloud SQL באמצעות SqlPackage. הוא מאפשר לייצא מסד נתונים של SQL, כולל סכימה של מסד נתונים ונתוני משתמשים, לקובץ BACPAC‏ (‎.bacpac), ולייבא את נתוני הסכימה והטבלה מקובץ BACPAC למסד נתונים חדש של משתמשים.

‫SqlPackage משתמש בפרטי הכניסה שלכם כדי להתחבר ל-SQL Server ולייבא ולייצא מסדי נתונים. הוא מאפשר לכל משתמשי Cloud SQL לבצע העברות. כדי לבצע פעולות ייבוא וייצוא, צריך:

דוגמאות

ייבוא

כדי לייבא נתונים למסד נתונים AdventureWorks2017, מריצים את הפקודה הבאה:

c:\Program Files\Microsoft SQL Server\160\DAC\bin>SqlPackage
/Action:Import /tsn:myTargetServer /tdn:AdventureWorks2017
/tu:myUsername /sf:mySourceFile
/TargetTrustServerCertificate:True /tp:myPassword

כאן,

  • ‫mySourceFile הוא קובץ מקור שרוצים להשתמש בו כמקור לפעולה מהאחסון המקומי. אם משתמשים בפרמטר הזה, אי אפשר להשתמש בפרמטרים אחרים של מקור.
  • ‫myTargetServer הוא שם השרת שמארח את מסד הנתונים של היעד.
  • ‫myUsername הוא שם המשתמש ב-SQL Server שבו רוצים להשתמש כדי לגשת למסד הנתונים של היעד.
  • ‫myPassword היא הסיסמה שלכם בפרטי הכניסה.

מידע נוסף זמין במאמרי העזרה של Microsoft.

ייצוא

כדי לייצא נתונים ממסד נתונים AdventureWorks2017, מריצים את הפקודה הבאה:

c:\Program Files\Microsoft SQL Server\160\DAC\bin>SqlPackage
/Action:Export /TargetFile:"myTargetFile"
/ssn:mySourceServer /su:myUsername /sdn:AdventureWorks2017
/SourceTrustServerCertificate:True /sp:myPassword

כאן,

  • ‫myTargetFile הוא קובץ היעד (קובץ dacpac.) שבו רוצים להשתמש כיעד הפעולה במקום מסד נתונים. אם משתמשים בפרמטר הזה, אי אפשר להשתמש בפרמטרים אחרים של יעד. הפרמטר הזה לא תקין לפעולות שתומכות רק ביעדים של מסדי נתונים.
  • ‫myUsername הוא שם המשתמש ב-SQL Server שבו רוצים להשתמש כדי לגשת למסד הנתונים של המקור.
  • ‫mySourceServer הוא שם השרת שמארח את מסד הנתונים של המקור.
  • ‫myPassword היא הסיסמה שלכם בפרטי הכניסה.

מידע נוסף זמין במאמרי העזרה של Microsoft.

שימוש בכלי bcp לייבוא וייצוא של נתונים

אפשרות נוספת לייבוא וייצוא של נתונים ב-Cloud SQL היא להשתמש בכלי של תוכנית ההעתקה בכמות גדולה (bcp). באמצעות הכלי bcp, אתם יכולים לייצא נתונים ממסד נתונים של SQL Server לקובץ נתונים, ולייבא נתונים מקובץ נתונים למסד נתונים של SQL Server. כלי ה-bcp משתמש בפרטי הכניסה שלכם כדי להתחבר ל-SQL Server ולייבא ולייצא מסדי נתונים. הוא מאפשר העברות לכל משתמשי Cloud SQL. כדי לבצע פעולות ייבוא וייצוא, צריך:

דוגמאות

ייבוא

כדי לייבא נתונים מהקובץ person.csv לטבלה Person של מסד הנתונים AdventureWorks2017, מריצים את הפקודה הבאה:

bcp Person.Person in "person.csv" -d AdventureWorks2017 -U myLoginID -S myServer

כאן,

  • ‫myLoginID הוא מזהה ההתחברות שמשמש להתחברות ל-SQL Server.
  • ‫myServer היא המכונה של SQL Server שאליה רוצים להתחבר. אם לא מציינים שרת, כלי השירות bcp מתחבר למכונה שמוגדרת כברירת מחדל של SQL Server במחשב המקומי.

מידע נוסף זמין במאמרי העזרה של Microsoft.

ייצוא

כדי לייצא נתונים מהטבלה Person של מסד הנתונים AdventureWorks2017 לקובץ person.dat, מריצים את הפקודה הבאה:

bcp Person.Person out "person.dat" -U myLoginID -S myServer -d AdventureWorks2017

כאן,

  • ‫myLoginID הוא מזהה ההתחברות שמשמש להתחברות ל-SQL Server.
  • ‫myServer היא המכונה של SQL Server שאליה רוצים להתחבר. אם לא מציינים שרת, כלי השירות bcp מתחבר למכונה שמוגדרת כברירת מחדל של SQL Server במחשב המקומי.

מידע נוסף זמין במאמרי העזרה של Microsoft.

שימוש בהוספה בכמות גדולה לייבוא נתונים

הוספה בכמות גדולה מאפשרת לייבא נתונים למסד הנתונים של Cloud SQL ל-SQL Server מקובץ שמאוחסן ב-Cloud Storage.

הקטע הזה עוסק בנושאים הבאים:

תפקידים והרשאות נדרשים

כדי להגדיר הוספה בכמות גדולה, צריך:

  • ההרשאה CONTROL במסד הנתונים שאליו רוצים לייבא את הנתונים.
  • מפתח גישה של HMAC וסוד שממופה לחשבון IAM עם ההרשאות הבאות:

    • storage.buckets.get
    • ‫storage.objects.create ו-storage.multipartUploads.create לכתיבת יומני שגיאות ודוגמאות לנתונים לא תקינים.

    אפשר גם להשתמש בתפקידים הבאים:

    • Storage Object Viewer
    • Storage Object Creator לכתיבת יומני שגיאות ודוגמאות לנתונים לא תקינים.

כדי להשתמש בהוספה בכמות גדולה, צריך:

  • ההרשאה EXECUTE בתהליך המאוחסן msdb.dbo.gcloudsql_bulk_insert. ‫Cloud SQL יוצר את הפרוצדורה המאוחסנת אחרי שהוספה בכמות גדולה מופעלת במכונה. כברירת מחדל, Cloud SQL מעניק את ההרשאה EXECUTE לחשבון האדמין sqlserver.
  • ההרשאה INSERT באובייקט שאליו רוצים לייבא את הנתונים.

מידע נוסף על יצירת משתמשים להוספה בכמות גדולה זמין במאמר יצירה וניהול של משתמשים.

שיקולים כשמשתמשים בהוספה בכמות גדולה

בקטע הזה מפורטות המלצות לטיפול באבטחה, בביצועים ובאמינות של מכונות כשמשתמשים בהוספה בכמות גדולה.

אבטחה

‫Cloud SQL מצפין ומאחסן את מפתח הגישה והסוד של HMAC במכונה כפרטי כניסה ברמת מסד הנתונים. אי אפשר לגשת לערכים שלהם אחרי שהם נשמרים. כדי למחוק את המפתח והסוד ממכונה, אפשר להסיר את פרטי הכניסה ברמת מסד הנתונים באמצעות פקודת T-SQL. אם מבצעים גיבוי כשהמפתח והסוד מאוחסנים במכונה, הגיבוי יכיל את המפתח והסוד. אפשר גם להפוך את המפתח ללא חוקי על ידי השבתה ומחיקה של מפתח ה-HMAC.

הפעולות הבאות יכולות להעביר את מפתח הגישה והסוד בלי כוונה ולהפוך אותם לזמינים:

  • שכפול המכונה: המפתח והסוד זמינים במכונה המשוכפלת.
  • יצירת עותק לקריאה בלבד: המפתח והסוד זמינים בעותק לקריאה בלבד שנוצר.
  • שחזור מגיבוי: המפתח והסוד זמינים במכונה ששוחזרה מגיבוי.

מומלץ להסיר את המפתח והסוד ממכונת היעד אחרי ביצוע הפעולות האלה.

הוספה בכמות גדולה יכולה לכתוב נתונים שהיא לא יכולה לנתח לקובץ שמאוחסן בקטגוריה של Cloud Storage. אם אתם רוצים להגן על הנתונים של-bulk insert יש גישה אליהם, אתם צריכים להגדיר את VPC Service Controls.

ביצועים

כדי לצמצם את ההשפעה על הביצועים כשמשתמשים בהוספה בכמות גדולה, מומלץ:

  • כדאי לבדוק ולהגדיר ערך מתאים ל-@batchsize, כי כברירת מחדל, כל הנתונים מיובאים באצווה אחת.
  • כשמכניסים כמויות גדולות של נתונים, כדאי להשבית את האינדקסים באופן זמני כדי להאיץ את התהליך.
  • אם אפשר, כדאי להשתמש באפשרות @tablock כי היא יכולה לצמצם את התחרות על משאבים ולשפר את הביצועים של טעינת הנתונים.
  • משתמשים בפרמטר @ordercolumnsjson כדי לציין נתונים שממוינים לפי הסדר של האינדקס המקובץ. כך אפשר לשפר את הביצועים של המכונה.
אמינות

כדי לצמצם את ההשפעה על האמינות של המכונה כשמשתמשים בהוספה בכמות גדולה, מומלץ לבצע את הפעולות הבאות:

  • אם מתרחשת תקלה ומשתמשים ב-@batchsize, יכול להיות שהנתונים ייטענו באופן חלקי. יכול להיות שתצטרכו לנקות את הנתונים האלה באופן ידני במכונה שלכם.
  • אפשר להשתמש באפשרות @errorfile כדי לשמור יומן של שגיאות ודוגמאות לנתונים לא תקינים שזוהו במהלך תהליך הטעינה. כך קל יותר לזהות שורות שלא נטענו.

הוספה בכמות גדולה

כדי לבצע את פעולת ההוספה בכמות גדולה, אפשר להשתמש בפרוצדורה המאוחסנת הבאה:

msdb.dbo.gcloudsql_bulk_insert

מידע נוסף זמין במאמר פרוצדורה מאוחסנת לשימוש בהוספה בכמות גדולה.

דוגמה: ייבוא נתונים מקובץ ב-Cloud Storage וציון קובץ שגיאות
1. הפעלת הוספה בכמות גדולה

כדי להפעיל הוספה בכמות גדולה במכונה, מפעילים את הדגל cloud sql enable bulk insert.

gcloud sql instances patch INSTANCE_NAME --database-flags="cloud sql enable bulk insert"=on

מחליפים את INSTANCE_NAME בשם המכונה שרוצים להשתמש בה להוספה בכמות גדולה.

מידע נוסף זמין במאמר הגדרת דגלים לניהול מסדי נתונים.

אחרי שמפעילים את הדגל הזה במכונה, Cloud SQL מתקין את הפרוצדורה המאוחסנת של הוספה בכמות גדולה במכונה, ונותן לחשבון האדמין sqlserver הרשאות להפעיל אותה.

2. יצירת מפתח HMAC

אתם צריכים מפתח HMAC כדי לגשת לקטגוריה שלכם ב-Cloud Storage. מומלץ ליצור מפתח HMAC לחשבון שירות ולתת לחשבון השירות הרשאות לקטגוריות שבהן רוצים להשתמש להוספה בכמות גדולה. למידע נוסף ולשיקולי אבטחה, קראו את המאמר שיקולים כשמשתמשים בהוספה בכמות גדולה.

3. יצירת נתונים לדוגמה לייבוא
  1. בכלי לעריכת טקסט, יוצרים קובץ עם קידוד ANSI או UTF-16 שמכיל את הנתונים לדוגמה הבאים. שומרים את הקובץ בקטגוריה של Cloud Storage ונותנים לו שם, למשל bulkinsert.bcp.

    1,Elijah,Johnson,1962-03-21
    2,Anya,Smith,1982-01-15
    3,Daniel,Jones,1990-05-21
    
  2. יוצרים קובץ פורמט באמצעות הנתונים לדוגמה הבאים. שומרים את הקובץ בקטגוריה של Cloud Storage ונותנים לו שם, למשל bulkinsert.fmt. למידע נוסף על קובצי פורמט XML וקובצי פורמט שאינם XML ב-SQL Server, קראו את המאמר יצירת קובץ פורמט.

    13.0
    4
    1       SQLCHAR             0       7       ","      1     PersonID               ""
    2       SQLCHAR             0       25      ","      2     FirstName            SQL_Latin1_General_CP1_CI_AS
    3       SQLCHAR             0       30      ","      3     LastName            SQL_Latin1_General_CP1_CI_AS
    4       SQLCHAR             0       11      "\r\n"   4     BirthDate             ""
    
4. מריצים את התהליך המאוחסן
  1. מתחברים למכונה באמצעות המשתמש sqlserver ויוצרים מסד נתונים וטבלה לדוגמה להוספה בכמות גדולה.

    USE MASTER
    GO
    -- create test database
    DROP DATABASE IF EXISTS bulktest
    CREATE DATABASE bulktest
    GO
    
    -- create table to insert
    USE bulktest;
    GO
    CREATE TABLE dbo.myfirstimport(
    PersonID smallint,
    FirstName varchar(25),
    LastName varchar(30),
    BirthDate Date
    );
    
  2. יוצרים מפתח ראשי של מסד נתונים, פרטי כניסה ברמת מסד הנתונים ומקור נתונים חיצוני. מגדירים את הזהות בתור S3 Access Key.

      -- create master key
    CREATE MASTER KEY ENCRYPTION BY PASSWORD = 'YourStrongPassword1';
    
    -- create database scoped credential
    CREATE DATABASE SCOPED CREDENTIAL GCSCredential
    WITH IDENTITY = 'S3 Access Key',
    SECRET = '<Access key>:<Secret>';
    
    --create external data source
    CREATE EXTERNAL DATA SOURCE GCSStorage
    WITH ( TYPE = BLOB_STORAGE,
    LOCATION = 's3://storage.googleapis.com/bulk-insert-demo/'
    , CREDENTIAL = GCSCredential
    );
    
    CREATE EXTERNAL DATA SOURCE GCSStorageError
    WITH ( TYPE = BLOB_STORAGE,
    LOCATION = 's3://storage.googleapis.com/bulk-insert-demo/'
    , CREDENTIAL = GCSCredential
    );
    
  3. מריצים את הפרוצדורה המאוחסנת של הוספה בכמות גדולה כדי לייבא את הנתונים לדוגמה.

    EXEC msdb.dbo.gcloudsql_bulk_insert
    @database = 'bulktest',
    @schema = 'dbo',
    @object = 'myfirstimport',
    @file = 's3://storage.googleapis.com/bulk-insert-demo/bulkinsert.bcp',
    @formatfile = 's3://storage.googleapis.com/bulk-insert-demo/bulkinsert.fmt',
    @fieldquote = '"',
    @formatfiledatasource = 'GCSStorage',
    @ROWTERMINATOR = '0x0A',
    @fieldterminator = ',',
    @datasource ='GCSStorage',
    @errorfiledatasource = 'GCSStorageError',
    @errorfile = 's3://storage.googleapis.com/oom-data/bulkinsert/bulkinsert_sampleimport.log',
    @ordercolumnsjson =
    '[{"name": "PersonID","order": " asc "},{"name": "BirthDate","order": "asc"}]'
    

צפייה בנתונים שיובאו

כדי לראות את הנתונים שיובאו, אפשר להשתמש באחת מהשיטות הבאות:

  • מריצים את השאילתה הבאה:

    SELECT * FROM dbo.myfirstimport
    
  • ‫Cloud SQL מוסיף רשומה של התהליך הזה ליומן השגיאות של SQL. אפשר לראות את זה ב-Cloud Logging. אפשר גם לראות את זה בנתוני יומן השגיאות של SQL ב-SQL Server Management Studio (SSMS)‎.

השבתת הוספה בכמות גדולה

כדי להשבית את ההוספה בכמות גדולה, מסירים את הדגל cloud sql enable bulk insert:

  gcloud sql instances patch INSTANCE_NAME --database-flags="cloud sql enable bulk insert"=off
  

מחליפים את INSTANCE_NAME בשם המכונה שבה רוצים להסיר את ההרשאה להוספה בכמות גדולה.

לחלופין, אפשר להריץ את הפקודה הבאה כדי לנקות את כל הדגלים לניהול מסד הנתונים:

  gcloud sql instances patch INSTANCE_NAME --clear-database-flags
  

מחליפים את INSTANCE_NAME בשם המכונה שבה רוצים להסיר את ההוספה בכמות גדולה.

שימוש בייבוא ובייצוא של נתונים מפוצלים

כשמבצעים ייבוא או ייצוא של נתונים מחולקים, הפעולה מסתיימת מהר יותר ואפשר לייבא ולייצא מסדי נתונים שגדולים מ-5TB. מידע נוסף זמין במאמר ייצוא וייבוא באמצעות קובצי BAK.

אימות מסד הנתונים המיובא

אחרי שפעולת הייבוא מסתיימת, מתחברים למסד הנתונים ומריצים את הפקודות המתאימות כדי לוודא שהתוכן נכון. לדוגמה, להתחבר ולפרט את מסדי הנתונים, הטבלאות והרשומות הספציפיות.

מגבלות ידועות

רשימה של מגבלות ידועות מופיעה במאמר בעיות בייבוא ובייצוא של נתונים.

סיכוני אבטחה

ייבוא של קובץ גיבוי של SQL Server‏ (.bak) ממקור לא מהימן עלול לגרום לסיכוני אבטחה חמורים.

בדרך כלל אפשר לסמוך על קובצי גיבוי שנשארים בגבולות מהימנים, אבל ייבוא של קובץ גיבוי זדוני יכול לפגוע באבטחה של הסביבה כולה.

קובץ גיבוי זדוני (.bak) עלול לחשוף את האפליקציות שלכם לסיכוני האבטחה הבאים:

  • קובץ הגיבוי המיובא יכול לתפוס חלק גדול מהמכונה של SQL Server.
  • קובץ הגיבוי המיובא יכול להסלים הרשאות (privilege escalation) ולקבל גישה לא מורשית.

המתקפה הזו מתרחשת לפני שסקריפטים של אימות או בדיקות אבטחה יכולים לפעול, ולכן היא מסוכנת מאוד.

ייבוא של קובץ גיבוי לא מהימן שקול להרצת אפליקציות לא מהימנות בשרת קריטי או במכונה וירטואלית, ולהוספת הרצת קוד שרירותי לסביבה שלכם.

שיטות מומלצות

כדי לצמצם את האיום של קובצי גיבוי זדוניים בסביבות Cloud SQL ל-SQL Server, כדאי להשתמש בשיטות המומלצות הבאות לאבטחה:

  • פעולת ייבוא של קובץ גיבוי נחשבת לפעולה ב "סיכון גבוה".
  • כדי לצמצם את שטח השירות שחשוף לאיומים, כדאי להשתמש במכונות מבודדות.
  • השתמשו רק בקובצי גיבוי מהימנים. אף פעם אל תייבאו קובצי גיבוי ממקורות לא מוכרים או חיצוניים.
  • השתמשו רק בקובצי גיבוי שנשארו בגבולות מהימנים. חשוב לוודא שקובצי הגיבוי מגיעים מתוך הגבולות המהימנים שלכם.
  • אל תעקפו את אמצעי בקרת האבטחה רק כדי שיהיה לכם נוח.
  • כדי לתעד אירועים של ייבוא וקובצי גיבוי, וכדי לצמצם את הסיכון להתחמקות מביקורת, כדאי להפעיל ביקורת ברמת השרת.

מידע נוסף זמין במאמר סיכון אבטחה בשחזור גיבויים ממקורות לא מהימנים.

אוטומציה של פעולות ייצוא

למרות ש-Cloud SQL לא מספק דרך מובנית להפוך את הייצוא של מסדי נתונים לאוטומטי, אתם יכולים ליצור כלי אוטומציה משלכם באמצעות כמה רכיבים של Google Cloud. במדריך הזה יש מידע נוסף.

פתרון בעיות

בקטעים הבאים מוסבר איך לפתור בעיות שקשורות לפעולות ייבוא וייצוא.

פתרון בעיות בפעולות ייבוא

שגיאה פתרון בעיות
HTTP Error 409: Operation failed because another operation was already in progress. כבר יש פעולה בהמתנה במכונה. מותר לבצע פעולה אחת בלבד בכל פעם. כדאי לנסות לשלוח את הבקשה אחרי שהפעולה הנוכחית תסתיים.
פעולת הייבוא נמשכת יותר מדי זמן. יותר מדי חיבורים פעילים יכולים להפריע לפעולות הייבוא.

סוגרים פעולות שלא בשימוש. כדאי לבדוק את המעבד (CPU) ואת השימוש בזיכרון במכונת Cloud SQL, כדי לוודא שיש מספיק משאבים זמינים. הדרך הטובה ביותר לוודא שמשימת הייבוא מקבלת את מרב המשאבים היא להפעיל מחדש את המכונה לפני התחלת הפעולה.

הפעלה מחדש:

  • סגירת כל החיבורים.
  • סוגר את כל המשימות שעלולות לצרוך משאבים.
פעולת ייבוא יכולה להיכשל כשמשתמש אחד או יותר שמצוינים בקובץ ה-dump לא קיימים. לפני שמייבאים קובץ dump, כל המשתמשים במסד הנתונים שיש בבעלותם אובייקטים או שקיבלו הרשאות לאובייקטים במסד הנתונים שהושלך חייבים להיות קיימים במסד הנתונים של היעד. אם אין לו, פעולת הייבוא לא תצליח ליצור מחדש את האובייקטים עם הבעלות או ההרשאות המקוריות.

יוצרים את משתמשי מסד הנתונים לפני הייבוא.

אי-התאמה ב-LSN סדר הייבוא של הגיבויים של יומן העסקאות שגוי או ששרשרת יומן העסקאות נקטעה.
מייבאים את הגיבויים של יומן העסקאות באותו סדר שבו הם מופיעים בטבלת קבוצת הגיבויים.
‫StopAt מוקדם מדי השגיאה הזו מציינת שהיומן הראשון בקובץ יומן העסקאות הוא אחרי חותמת הזמן StopAt. לדוגמה, אם היומן הראשון בקובץ יומן הטרנזקציות הוא ב-2023-09-01T12:00:00 ובשדה StopAt יש את הערך 2023-09-01T11:00:00, אז Cloud SQL מחזיר את השגיאה הזו.
חשוב לוודא שאתם משתמשים בחותמת הזמן הנכונה של StopAt ובקובץ יומן העסקאות הנכון.

פתרון בעיות בפעולות ייצוא

שגיאה פתרון בעיות
HTTP Error 409: Operation failed because another operation was already in progress. כבר יש פעולה בהמתנה במכונה. מותר לבצע פעולה אחת בלבד בכל פעם. כדאי לנסות לשלוח את הבקשה אחרי שהפעולה הנוכחית תסתיים.
HTTP Error 403: The service account does not have the required permissions for the bucket. כדי לאפשר ייצוא לקטגוריה, צריך לוודא שהקטגוריה קיימת ושלחשבון השירות של מכונת Cloud SQL (שמבצעת את הייצוא) יש את התפקיד Storage Object Creator (roles/storage.objectCreator). תפקידי IAM ל-Cloud Storage
אתם רוצים שהייצוא יתבצע באופן אוטומטי. ב-Cloud SQL אין דרך לבצע ייצוא אוטומטי.

אתם יכולים ליצור מערכת ייצוא אוטומטית משלכם באמצעות מוצרי Google Cloudכמו Cloud Scheduler,‏ Pub/Sub ופונקציות Cloud Run, בדומה למאמר הזה בנושא אוטומציה של גיבויים.

המאמרים הבאים