איתור כתובות URL זדוניות באמצעות Web Risk
לפני שמתחילים
יוצרים Google Cloud פרויקט. איך יוצרים Google Cloud פרויקט
הגדרת אימות והפעלת Web Risk API
- נכנסים לחשבון Google Cloud . אם אתם משתמשים חדשים ב- Google Cloud, צרו חשבון כדי שתוכלו להעריך את הביצועים של המוצרים שלנו בתרחישים מהעולם האמיתי. לקוחות חדשים מקבלים בחינם גם קרדיט בשווי 300$ להרצה, לבדיקה ולפריסה של עומסי העבודה.
-
התקינו את ה-CLI של Google Cloud.
-
אם אתם משתמשים בספק זהויות חיצוני (IdP), קודם אתם צריכים להיכנס ל-CLI של gcloud באמצעות המאגר המאוחד לניהול זהויות.
-
כדי לאתחל את ה-CLI של gcloud, הריצו את הפקודה הבאה:
gcloud init -
יוצרים או בוחרים Google Cloud פרויקט.
תפקידים שנדרשים כדי לבחור או ליצור פרויקט
- Select a project: כדי לבחור פרויקט לא צריך תפקיד IAM ספציפי – אפשר לבחור כל פרויקט שקיבלתם בו תפקיד.
-
יצירת פרויקט: כדי ליצור פרויקט, צריך את התפקיד Project Creator (יצירת פרויקטים) (
roles/resourcemanager.projectCreator), שכולל את ההרשאהresourcemanager.projects.create. איך מקצים תפקידים
-
יוצרים Google Cloud פרויקט:
gcloud projects create PROJECT_ID
מחליפים את
PROJECT_IDבשם של פרויקט Google Cloud שיוצרים. -
בוחרים את הפרויקט שיצרתם: Google Cloud
gcloud config set project PROJECT_ID
מחליפים את
PROJECT_IDבשם הפרויקט ב- Google Cloud .
מפעילים את Web Risk API:
תפקידים שנדרשים להפעלת ממשקי API
כדי להפעיל ממשקי API, צריך את תפקיד ה-IAM 'אדמין של Service Usage' (
roles/serviceusage.serviceUsageAdmin), שכולל את ההרשאהserviceusage.services.enable. איך מקצים תפקידיםgcloud services enable webrisk.googleapis.com
-
התקינו את ה-CLI של Google Cloud.
-
אם אתם משתמשים בספק זהויות חיצוני (IdP), קודם אתם צריכים להיכנס ל-CLI של gcloud באמצעות המאגר המאוחד לניהול זהויות.
-
כדי לאתחל את ה-CLI של gcloud, הריצו את הפקודה הבאה:
gcloud init -
יוצרים או בוחרים Google Cloud פרויקט.
תפקידים שנדרשים כדי לבחור או ליצור פרויקט
- Select a project: כדי לבחור פרויקט לא צריך תפקיד IAM ספציפי – אפשר לבחור כל פרויקט שקיבלתם בו תפקיד.
-
יצירת פרויקט: כדי ליצור פרויקט, צריך את התפקיד Project Creator (יצירת פרויקטים) (
roles/resourcemanager.projectCreator), שכולל את ההרשאהresourcemanager.projects.create. איך מקצים תפקידים
-
יוצרים Google Cloud פרויקט:
gcloud projects create PROJECT_ID
מחליפים את
PROJECT_IDבשם של פרויקט Google Cloud שיוצרים. -
בוחרים את הפרויקט שיצרתם: Google Cloud
gcloud config set project PROJECT_ID
מחליפים את
PROJECT_IDבשם הפרויקט ב- Google Cloud .
מפעילים את Web Risk API:
תפקידים שנדרשים להפעלת ממשקי API
כדי להפעיל ממשקי API, צריך את תפקיד ה-IAM 'אדמין של Service Usage' (
roles/serviceusage.serviceUsageAdmin), שכולל את ההרשאהserviceusage.services.enable. איך מקצים תפקידיםgcloud services enable webrisk.googleapis.com
שימוש בממשקי ה-API
כשמשתמשים ב-Web Risk APIs, חשוב להכיר את הסכם רמת השירות ומגבלות השימוש של Web Risk.
כדי להתחיל להשתמש ב-Web Risk, אפשר לעיין בנושאים הבאים:
איזה API מתאים לי? חיפוש או עדכון?
שירות Web Risk מספק שני ממשקי API שונים שאפשר לשלב איתם. ממשקי ה-API האלה הם Lookup API ו-Update API. שני ממשקי ה-API האלה מספקים את אותו מידע. כלומר, אם כתובת URL זוהתה כזדונית. הכי קל להשתמש ב-Lookup API. באמצעות Lookup API, תשלחו שאילתה ל-Web Risk לגבי כל כתובת URL שתרצו לבדוק.
ה-API לעדכון מורכב יותר, אבל יש לו כמה מאפיינים רצויים. באמצעות Update API, תוכלו לשמור על מסד נתונים מקומי. יכול להיות שמסד הנתונים הזה ייבדק כדי לראות אם כתובת URL היא זדונית. מסד הנתונים הזה פועל כמסנן בלום. כלומר, יכול להיות שיהיו תוצאות חיוביות כוזבות (כתובת URL מזוהה כזדונית אבל היא לא כזו), אבל לא אמורות להיות תוצאות שליליות כוזבות (כתובת URL מזוהה כלא זדונית, אבל היא כן כזו). לכן, אנחנו יוצרים קשר עם השרתים של Web Risk לעיתים רחוקות, ורק כדי לאשר התאמות ולבטל תוצאות חיוביות שגויות. ברוב המקרים, כשבודקים כתובת URL באמצעות Update API, לא צריך ליצור קשר עם שרתי Web Risk בכלל. מצפים ממך ליצור קשר עם שרתי Web Risk רק כשמעדכנים את מסד הנתונים המקומי וכשמאשרים שכתובת URL מזיקה.
לסיכום, כדאי להשתמש ב-Lookup API אם רוצים להגדיר את התכונה במהירות ובקלות. אם אתם צריכים לבדוק כתובות URL עם זמן אחזור נמוך יותר, אתם יכולים להשתמש ב-Update API.
בחירת התכונות המתאימות ללקוח
אם בחרתם להשתמש ב-Update API, יכול להיות שלא תצטרכו להטמיע את כל המפרט. יש תכונות מסוימות שנועדו ללקוחות עם הפצה רחבה (כמו דפדפני אינטרנט), אבל הן לא מתאימות לשימוש במקרים רבים בעסקים.
יש תכונות שאפשר להתעלם מהן כדי להקל על השילוב.
אלה פתרונות לשילוב של Web Risk, לפי רמת המורכבות:
- שימוש ב-LookUp API
- לקוח API לעדכון בסיסי
- עדכון לקוח API באמצעות הבדלים
- עדכון לקוח API באמצעות RICE compressed diffs
שימוש ב-Lookup API
המורכבות הכי נמוכה היא בשימוש ב-Lookup API. בכל פעם שנתקלים בכתובת URL שיש לגביה חשד, פשוט מפעילים את Lookup API עם כתובת ה-URL כדי לראות את התוצאה. הקנוניזציה ועיצוב כתובת ה-URL מתבצעים על ידי שרת Web Risk. הפתרון הזה אמור להיות תקף לרוב הלקוחות, אלא אם זמן האחזור הממוצע חורג מהדרישות.
לקוח API לעדכון בסיסי
כדי להשתמש ב-Update API, צריך לנהל מסד נתונים מקומי וכתובות URL קנוניות לפני שמריצים שאילתות.
בדרך כלל, כשמשלבים לקוח עם Web Risk, הלקוח משתמש בהפרשי מסד הנתונים כדי להישאר מעודכן. יכול להיות שייקח זמן להטמיע את הלוגיקה של אפליקציית ההשוואה בצורה נכונה, ולכן במקרים הפשוטים ביותר מומלץ ללקוחות להתעלם מההשוואות ולבקש מסד נתונים חדש מלא מ-Web Risk בכל מחזור. מסד הנתונים הזה עדיין יאוחסן בזיכרון כדי לאפשר שאילתות יעילות. כדי לבקש איפוס מלא של מסד הנתונים, משאירים את השדה versionToken ריק בבקשת threatLists.computeDiff.
הפתרון הזה אמור להיות תקף ללקוחות, אלא אם רוחב הפס או זמן האחזור של סנכרון מסד הנתונים חורגים מהדרישות.
שימוש ב-Update API ובקשה לעדכוני diff
הפתרון הזה מורכב יותר כי צריך להחיל את לוגיקת ההשוואה על מסד הנתונים המקומי. מידע נוסף זמין במאמר בנושא השוואות בין מסדי נתונים. שימוש בהשוואות יקטין את רוחב הפס על חשבון המורכבות, בהשוואה לבקשה של מסד נתונים חדש בכל מחזור. עדכון מלא של מסד הנתונים יכול להיות בגודל של כמה מגה-בייט. הפתרון הזה אמור להספיק לרוב הלקוחות הארגוניים.
שימוש ב-Update API ובקשה לעדכוני diff מוצפנים ב-RICE
הפתרון הזה הוא השילוב הכי יעיל שאפשר לעשות בין לקוח לשרת. קידוד RICE דוחס את גודלי ה-DIFF ומקטין עוד יותר את רוחב הפס של העדכון. הפתרון הזה מיועד ללקוחות עם מגבלות רוחב פס. דוגמה למקרה שבו זה רלוונטי: אם שאילתות של Web Risk מוטמעות באפליקציה לטלפון. המשתמשים באפליקציה כזו בוודאי יעריכו פתרון שדורש פחות רוחב פס אם הם צריכים לעדכן את מסד הנתונים באמצעות נתונים מהטלפון. מידע נוסף זמין במאמר בנושא דחיסה.