AWS
-
למד AWS Incognito לאימות
בין אם אתה בונה אפליקציית אינטרנט, אפליקציה ניידת או API, הבנת כיצד ליישם אימות ואישור חזק היא מיומנות בסיסית. AWS Cognito הוא יכולת עוצמתית שמפשטת ניהול משתמשים, אימות ובקרת גישה, מה שהופך אותה לטכנולוגיה חיונית עבור מפתחים ועסקים כאחד. על ידי שליטה ב- AWS Cognito, תוכל לבנות אפליקציות מאובטחות וגמישות תוך שילוב בקלות עם שירותי AWS אחרים. אם אתה מחפש לשפר את היכולות שלך בתחום זה, יש לנו את המקור המושלם עבורך. פרסמנו לאחרונה קורס בערוץ ה-YouTube של freeCodeCamp.org על…
-
עיבוד נתונים בעננים עם DuckDB ו-AWS S3
DuckDb היא מסד נתונים עוצמתי בזיכרון המכיל יכולת עיבוד מקביל, שהופכת אותו לברירה טובה עבור קריאה / שינוי של נתוני אחסון בענן, במקרה זה AWS S3. הייתה לי המון הצלחה בשימוש בו ואסביר לך את השלבים ביישום זה. אני גם אצרף כמה לקחים ושיטות מומלצות. באמצעות DuckDb, httpfs תוסף ו- pyarrow, אנחנו יכולים לעבד קבצי Parquet מאוחסנים בדליי S3 ביעילות. בואו נתחיל: לפני תחילת ההתקנה של DuckDb, ודא שיש לך את הדרישות הבאות: Python 3.9 או גרסה גבוהה יותר מותקנת…
-
מדריך לאוטומטיזציה של פריסת תשתית AWS
כשזה מגיע לניהול תשתיות בענן, AWS מספקת מספר כלים רבי עוצמה שעוזרים לאוטומט את יצירת וניהול המשאבים. אחת הדרכים היעילות ביותר לטפל בפריסה היא באמצעות AWS CloudFormation. זה מאפשר לך להגדיר את התשתיות שלך בדרך הצהרתית, מה שמקל על אוטומציה של אספקת שירותי AWS, כולל Elastic Beanstalk, יישומים ללא שרת, מופעי EC2, קבוצות אבטחה, מאזן העומסים ועוד. במדריך הזה, נחקור איך להשתמש ב-AWS CloudFormation כדי לפרוס תשתיות בצורה תוכנית. נדבר גם על איך לפרוס משאבים ידנית באמצעות קונסולת ניהול AWS…
-
שליטה במעבר: מ-Amazon EMR ל-EMR על EKS
אמזון אלסטיק מפה-צמצום (EMR) היא פלטפורמה לעיבוד וניתוח נתונים גדולים. EMR המסורתי פועל על אשכול של מופעי אמזון EC2 המנוהלים על ידי AWS. זה כוללProvisioning של התשתית וטיפול במשימות כמו קנה מידה ומעקב. EMR על EKS משלב את אמזון EMR עם אמזון שירות קוברנטיס אלסטי (EKS). זה מאפשר למשתמשים את הגמישות להריץ עומסי עבודה של Spark על אשכול קוברנטיס. זה מביא גישה מאוחדת לניהול ולתיאום של משאבי מחשוב ואחסון. הבדלים מרכזיים בין EMR המסורתי ל-EMR על EKS EMR המסורתי ו-EMR…
-
כשמערכות יחסים עם (שירות טכנולוגי) לא מצליחות
חשוב על הימים ההם כשפגשת את אהבת חייך. התחושה הייתה הדדית. העולם נראה כמו מקום טוב יותר, והייתם במסע מרגש עם בן הזוג שלך. שניכם הייתם "בכל הלב" כשעשיתם תוכניות לחיים יחד. החיים היו מדהימים… עד שזה לא היה כך יותר. כשדברים לא מסתדרים כמו שמתכננים, אז אתה צריך לעשות את העבודה הקשה של לפרק את הקשר. לתקשר אחד עם השני ועם אחרים. למיין רכישות משותפות. להתקדם. בלה. תאמין או לא, הקשר שלנו עם טכנולוגיה לא כל כך שונה. להתפרק…
-
אוטומציה של בדיקת תשתיות AWS עם Terratest
ארגונים המאמצים תשתית כקוד (IaC) על AWS לעיתים קרובות מתקשים להבטיח שהתשתית שלהם לא רק מסופקת כראוי אלא גם מתפקדת כפי שהתכוונו לאחר שהועלתה. גם תקלות קונפיגורציה מינוריות יכולות להוביל להפסקות עלות, פגיעויות אבטחה או בעיות ביצועים. שיטות בדיקה מסורתיות – כמו בדיקה ידנית של משאבים או הסתמכות רק על ניתוח קוד סטטי – אינן מספקות ביטחון מספיק עבור סביבות ייצור. יש צורך דחוף בדרך אוטומטית ואמינה לאמת את שינויים בתשתית AWS לפני שהם נכנסים לפעולה. פתרון Terratest מספקת מסגרת…
-
אבטחת ענן AWS: רכיבים מרכזיים, פגיעויות נפוצות ושיטות עבודה מומלצות
עם הארגונים שעוברים במהירות לענן, אבטחת התשתית היא בעלת חשיבות עליונה בסדרי העדיפויות שלהם. למרות שאמזון ווב סרוויסס (AWS) מספקת מגוון רחב של כלים ושירותים הקשורים לאבטחה ולציות. ישנם גורמים נוספים מעבר לאבטחה. אבטחה אינה עוסקת רק בכלים אלא באסטרטגיה, עירנות, שיפור מתמשך, והתאמה לסטנדרטים לציות תעשייתי עבור סביבות מאובטחות, כולל GDPR, HIPAA ו-PCI DSS. במאמר זה נדון ברכיבי אבטחת AWS עם שיטות עבודה מומלצות המבוססות על ניתוח מעמיק. רכיבי אבטחת AWS לאמזון ווב סרוויסס יש סט עשיר של כלים…
-
קטלוגי אייסברג: מדריך למהנדסי נתונים
אפאצ'י אייסברג הפך לבחירה פופולרית לניהול מערכות נתונים גדולות עם גמישות וסקלאביליות. קטלוגים הם מרכזיים לפונקציות של אייסברג, מה שחשוב בארגון טבלאות, עקביות, וניהול מטא-דאטה. מאמר זה יחקור מה הם קטלוגים של אייסברג, יישומים שונים שלהם, מקרים לשימוש, וקונפיגורציות, ויספק הבנה של פתרונות הקטלוג המתאימים ביותר למקרים שונים של שימוש. מהו קטלוג אייסברג? באייסברג, קטלוג אחראי על ניהול נתיבי טבלאות, מצביע על קבצי המטא-דאטה הנוכחיים המייצגים את מצב הטבלה. הארכיטקטורה הזו חיונית מכיוון שהיא מאפשרת אטומיות, עקביות, ושאילתות יעילות על…
-
הגדרת אשכול ScyllaDB על AWS באמצעות Terraform
במאמר זה, אני מציג דוגמה של התקנה פשוטה ומהירה של ScyllaDB בענן של AWS באמצעות Terraform. מתחילים, כיוונתי ליצור תמונת AMI של ScyllaDB באמצעות HashiCorp Packer. אך מאוחר יותר גיליתי שתמונות רשמיות זמינות, שמאפשרות להגדיר את ScyllaDB בקלות במהלך אתחול המופע באמצעות user data. בפועל, user data יכולה להגדיר את כל הפרמטרים הנתמכים ב- scylla.yaml. אפשרויות נוספות ודוגמאות ניתן למצוא ב- מאגר הקוד של scylla-machine-image ב-GitHub. מה עוד עליכם לדעת? על מנת ש-ScyllaDB תגדיר ותתחיל באופן אוטומטי, עליכם להשתמש בסוגי…