עודכן לאחרונה: 20 באוג, 2026

Cloud-Native Geospatial Formats Explained - COG, GeoParquet, PMTiles & More

מהם פורמטים של GIS מבוססי ענן? מדריך למפתחים

אם אי פעם בנית צינור גיאוספיישל, אתה יודע את הכאב של “download-first”. באופן מסורתי, אם האפליקציה שלך צריכה תיבת גבול של 500x500 פיקסלים מתצלום לווייני של 15 ג’יגהבייט—או רוצה לסנן עשר שורות ממאגר נתוני חלקות עירוני של 4 ג’יגהבייט—היית צריך להוריד את כל הקובץ, לפרק אותו לזיכרון, ואז לחתוך את החלק שבאמת מעניין אותך.

פשוט העלאת קובץ Shapefile, GeoJSON, או GeoTIFF סטנדרטי ל‑bucket של Amazon S3 או ל‑Google Cloud Storage לא הופכת אותו ל‑cloud-native. זה רק שם קובץ ישן על הכונן הקשיח של מישהו אחר.

Cloud-native פורמטים של קבצי GIS פותרים בעיה זו על ידי ארגון מחדש של האופן שבו נתונים מרחביים מאורגנים על הדיסק. במקום לכפות על לקוחות לקרוא קבצים ברצף מההתחלה עד הסוף, פורמטים אלה מתוכננים לקריאות ישירות וחלקיות ברשת. עבור מפתחים, זה פותח ארכיטקטורות ללא שרת, מצמצם משמעותית את עלויות היציאה, ומאפשר ללקוחות ווב לשאול נתונים מסיביים ישירות מאחסון אובייקטים סטטי.

המכניקה: איך גאוגרפיה מבוססת ענן עובדת בפועל

לפני שנצלול להרחבות קבצים ספציפיות, זה עוזר להבין את תבנית ההנדסה הבסיסית שמפעילה אותן. כמעט כל פורמט גאוגרפי מבוסס ענן מסתמך על שלושה מנגנונים מרכזיים:

  1. בקשות טווח HTTP (GET עם כותרות Range): HTTP/1.1 ו-HTTP/2 סטנדרטיים תומכים בבקשת טווחי בתים ספציפיים מקובץ מרוחק (למשל, bytes=0-16383). חנויות אובייקטים בענן כמו AWS S3, Cloudflare R2, ו-Azure Blob Storage תומכות בזה באופן מובנה.
  2. מטא-נתונים ומפתחות מרחביים טעונים מראש (או צפויים): כדי לבקש את הבתים המדויקים המכסים אזור גאוגרפי, הלקוח צריך תחילה מפת פריסת הקובץ הפנימית. פורמטים מבוססי ענן מאחסנים את מטא-נתוני הכותרת ואת המפתחות המרחביים (כגון R-trees או היררכיות של תיבות גבול) במיקום צפוי—בדרך כלל בתחילת הקובץ או בסופו. הלקוח מבצע בקשה ראשונית קטנה כדי לקרוא את האינדקס, מחשב את ההזזות המדויקות של הבתים לאזור היעד, ומוריד רק את החלקים האלה.
  3. טילינג פנימי וחיתוך: במקום לאחסן רסטרים שורה אחרי שורה או וקטורים כקיר טקסט שטוח, הנתונים מחולקים לחסימות נפרדות, דחוסות (אריחים, קבוצות שורות, או חלקים רב-ממדיים) שניתן לאחזר ולפרוס באופן עצמאי.

הפורמטים המרכזיים של GIS מבוססי ענן

אין פורמט יחיד ששולט על כולם. בחירת הפורמט המתאים תלויה האם אתה מתמודד עם תמונות, וקטורים טבלאיים, אריחי מפה, מערכים רב-ממדיים, או ענני נקודות LiDAR.

1. GeoTIFF מותאם ענן (COG) — לתמונות רסטריות

קובץ COG אינו סוג קובץ קנייני חדש לחלוטין; הוא GeoTIFF סטנדרטי (.tif) עם פריסה פנימית קפדנית שאומצה כתקן רשמי של OGC. מכיוון שהוא עדיין GeoTIFF תקף, כלי שולחן עבודה ישנים כמו QGIS ו-ArcGIS עדיין יכולים לפתוח אותו ללא בעיות.

  • איך זה עובד: במקום לאחסן פיקסלים בקווי סריקה אופקיים על פני כל התמונה, COG מארגן פיקסלים באריחים פנימיים (בדרך כלל 512×512 פיקסלים). הוא גם משלב סקירות (פירמידות תמונה ברזולוציה נמוכה, מחושבות מראש) בתוך אותו קובץ. כאשר משתמש מתרחק במפת אינטרנט, הלקוח מושך אריחי סקירה ברזולוציה נמוכה; כאשר הוא מתקרב, הוא מושך רק את אריחי הרזולוציה הגבוהה החוצים את תצוגת המסך.
  • מתאים ל: תמונות לוויין, אורטומוזאיקות אוויריות, מודלים דיגיטליים של גובה (DEMs), ושרתים דינאמיים של אריחי רסטר (כמו TiTiler).

יצירת COG באמצעות GDAL:

gdal_translate input.tif output_cog.tif \
  -of COG \
  -co COMPRESS=DEFLATE \
  -co OVERVIEWS=IGNORE_EXISTING

2. GeoParquet — לניתוח וקטורי גדול ומחסני נתונים

אם זרימת העבודה שלך נראית יותר כמו הנדסת נתונים מאשר קרטוגרפיה מסורתית, GeoParquet (.parquet) הוא הפתרון החזק. מבוסס על Apache Parquet, הוא מאחסן גאומטריות כ‑Well‑Known Binary (WKB) לפי תקן ISO לצד תכונות טבלאיות עשירות.

  • איך זה עובד: בשונה מקבצי Shapefile או GeoJSON, השומרים נתונים שורה‑בשורה, Parquet הוא עמודי. אם אתה מריץ צבירה על עמודת population על פני 50 מיליון פוליגונים, המנוע מדלג על קריאת בתים כבדים של גאומטריה לחלוטין. GeoParquet גם משלב מטא‑נתוני תיבת‑גבול לכל קבוצת שורות ( ותומך במיון מרחבי באמצעות עקומות הילברט או אינדקסים H3 ), מה שמאפשר למנועי השאילתה לדלג על חלקים לא רלוונטיים.
  • מתאים ל: אנליטיקה מרחבית בקנה מידה גדול, מחסני נתונים בענן (Snowflake, BigQuery, Databricks), ומנועי SQL ללא שרת כמו DuckDB.

ביצוע שאילתות ל‑GeoParquet מרוחק ישירות עם DuckDB:

INSTALL spatial;
LOAD spatial;

SELECT land_use, COUNT(*) AS parcel_count
FROM read_parquet('s3://example-bucket/parcels.parquet')
WHERE ST_Intersects(geometry, ST_MakeEnvelope(-122.5, 37.7, -122.3, 37.8))
GROUP BY land_use;

3. FlatGeobuf — להזרמת תכונות וקטוריות לאינטרנט

בעוד GeoParquet מצטיין במנועים אנליטיים, המטא‑נתונים המבוססים על כותרת תחתונה והכיווניות בעמודות אינם תמיד אידיאליים לזרימת גאומטריות וקטוריות גולמיות ישירות למפת דפדפן. הכירו את FlatGeobuf (.fgb).

  • איך זה עובד: מבוסס על ספריית הסריאליזציה הבינארית FlatBuffers של גוגל, FlatGeobuf מציב אינדקס מרחבי Hilbert R-tree דחוס ממש בתחילת הקובץ. לקוחות רשת (כמו MapLibre GL JS, Leaflet או OpenLayers) יכולים לבצע שאילתת תיבת גבול באמצעות בקשות טווח HTTP ולהתחיל להציג תכונות על המסך בעוד שהבייטים הנותרים עדיין מוזרמים.
  • מתאים ל: החלפת קבצי GeoJSON מרובי מגהבייט ביישומי אינטרנט אינטראקטיביים ללא צורך בהקמת שרת PostGIS/GeoServer.

4. PMTiles — לבסיסי מפות וקטוריות ורסטר ללא שרת

במסורת, שירות אריחי מפה אינטראקטיביים (/{z}/{x}/{y}.pbf) דרש או הרצת שרת אריחים ייעודי (כמו Martin או Tileserver-GL) או העלאת מיליוני קבצי .pbf קטנים נפרדים ל‑S3 – סיוט לניהול הדלי ולעלויות בקשות ה‑API.

  • איך זה עובד: נוצר על ידי Protomaps, PMTiles (.pmtiles) אורז פירמידה שלמה של Mapbox Vector Tiles (MVT) או אריחי רסטר לקובץ ארכיון יחיד. הוא משתמש במבנה ספרייה מקובץ המותאם למיקום מרחבי של עקומת הילברט, מה שאומר שספריית מפות בדפדפן יכולה לאחזר אריחים ישירות מקובץ סטטי יחיד ב‑S3 או Cloudflare R2 באמצעות בקשות טווח HTTP.
  • מתאים ל: מפות בסיס מותאמות ללא שרת אחורי, מפות אינטרנט עם תעבורה גבוהה, ויישומי מיפוי ניידים ללא חיבור לאינטרנט.

5. Zarr — לנתונים מדעיים רב-ממדיים

NetCDF ו‑HDF5 שלטו במטאורולוגיה, אוקיאנוגרפיה, ובמודלים של שינויי אקלים במשך עשורים, אך מבני הקבצים המונוליטיים שלהם מתקשים בסביבות ענן מבוזרות. Zarr מדמיינת מחדש מערכים N‑ממדיים לאחסון אובייקטים.

  • איך זה עובד: חנות Zarr מחלקת מערכים מרובי‑ממדיים ענקיים (למשל time × latitude × longitude × altitude) לחתיכות קטנות, בעלות גודל אחיד, ומדחסות. כל חתיכה נשמרת כאובייקט נפרד (או מאוחדת באמצעות שידור של Zarr v3) עם מטא‑נתוני JSON המתארים את ממדי המערך. עשרות עובדים מקבילים יכולים לקרוא או לכתוב פרוסות זמן שונות במקביל ללא קונפליקטים של נעילת קבצים.
  • מתאים ל: קוביות נתונים לווייניות של סדרות זמן, תחזיות מזג אוויר, מודלים של אקלים, וצינורות מבוזרים של Xarray/Dask.

6. Cloud-Optimized Point Cloud (COPC) — ל‑LiDAR

נבנה כהרחבה לפורמט הלידאר הדחוס הסטנדרטי LAZ 1.4, COPC (.copc.laz) מארגן ענני נקודות תלת‑ממדיים למבנה אוקטרי מקובץ. כמו COG, הוא נשאר תואם לאחור עם קוראי LAS/LAZ קיימים תוך מתן אפשרות לצופי רשת (כגון Potree או deck.gl) להזרים נקודות על בסיס פריסטום המצלמה ורמת הפרטים ללא צורך בהורדת ענני נקודות של כמה גיגהבייט.

מטריצת החלטות למפתחים: איזו פורמט כדאי לבחור?

סוג נתוניםעומס עבודה ראשיהפורמט הטוב ביותרפורמט ישן שהוחלף
רסטר / דימויפריסת אריחים דינמית, ניתוח פיקסלים, ויזואליזציה ברשתCOG (.tif)GeoTIFF לא ממוין, JPEG2000
ווקטורSQL analytics, מחסני נתונים, חיבורים מסיבייםGeoParquet (.parquet)Shapefile, קובץ Geodatabase
ווקטורהזרמת תכונות גולמיות ישירות לדפדפןFlatGeobuf (.fgb)גדול GeoJSON, KML
אריחים מעוצבים מראשמפות אינטרנט אינטראקטיביות ללא שרת ו‑מובייל במצב לא מקווןPMTiles (.pmtiles)MBTiles, עצי תיקיות ZXY
מערכים N‑ממדייםנתוני אקלים, רסטרים של סדרות זמן, חישוב מקביליZarr (.zarr)NetCDF4, HDF5
ענני נקודותהדמיה תלת‑ממדית באינטרנט & חיתוך מרחבי של LiDARCOPC (.copc.laz)תקן LAS / LAZ

בעיות קריטיות בפריסה לייצור

מעבר לפורמטים מבוססי‑ענן מפשט את תשתית ה‑backend שלך, אך מעביר את אחריות הקונפיגורציה לשכבת האחסון בענן. היזהר משלוש המלכודות הנפוצות האלה:

  1. שכחת כותרות CORS: אם יישום דפדפן (משתמש ב‑MapLibre, OpenLayers, או geotiff.js) מבצע בקשת טווח HTTP (HTTP range request) לדלי S3 שלך, מדיניות ה‑Cross‑Origin Resource Sharing (CORS) של הדלי חייבת לאפשר במפורש את הכותרת Range ב‑AllowedHeaders ולחשוף את Content-Range, Content-Length, ו‑Accept-Ranges ב‑ExposeHeaders. ללא זאת, הבקשות יכשלו בשקט בדפדפן.
  2. קבוצות שורות GeoParquet לא ממוין: המרת קובץ Shapefile מבולגן ישירות ל-GeoParquet לא תגרום באופן אוטומטי לשאילתות תיבת-גבול להיות מהירות. אם תכונות מפוזרות באופן אקראי בין קבוצות השורות, מנוע השאילתות עדיין צריך לסרוק כל קבוצת שורות. תמיד מיין את הגאומטריות שלך מרחבית (למשל, באמצעות עקומת הילברט דרך geopandas או DuckDB לפני הכתיבה) כך שתכונות קרובות מרחבית יימצאו באותה קבוצת שורות.
  3. גודל חלקים/אריחים תת-אופטימלי: חלקים קטנים (למשל, 64×64 פיקסלים) גורמים לאלפי בקשות HTTP, מה שמגדיל את השיהוי ועלויות ה-API בענן. חלקים גדולים (למשל, 4096×4096 פיקסלים) מאלצים לקוחות להוריד יותר מדי נתונים. השתמש בערכי ברירת המחדל הסטנדרטיים—512×512 פיקסלים עבור COGs ו-10 MB עד 100 MB לכל חלק עבור קבוצות שורות Zarr או GeoParquet.

סיכום

פורמטים של קבצי GIS מבוססי ענן מייצגים שינוי יסודי מהעברת נתונים לחישוב לכיוון העברת חישוב (ובקשות טווח קלות) לנתונים. על ידי צימוד פורמטים כמו COG, GeoParquet, FlatGeobuf, ו-PMTiles עם מטא‑נתונים של STAC (SpatioTemporal Asset Catalog), מפתחים יכולים לבנות צינורות מיפוי וניתוח בקנה מידה גלובלי עמידים על גבי אחסון אובייקטים סטטי זול — ללא צורך במאגר נתונים מרחבי כבד.

שאלות נפוצות (FAQ)

שאלה 1. מה הופך את פורמט קובץ GIS "מבוסס ענן"? פורמט הוא מבוסס ענן כאשר הוא מצמיד אינדקס מרחבי טעון מראש עם טילינג או חלוקה פנימית, ומאפשר ללקוחות לקבל תתי‑קבוצות גאוגרפיות קטנות דרך בקשות טווח HTTP מבלי להוריד את כל הקובץ.

שאלה 2. האם אני צריך שרת GIS ייעודי כדי לארח קבצי COG, GeoParquet, או PMTiles? לא—ניתן לארח אותם על כל אחסון אובייקטים סטטי סטנדרטי התומך בבקשות טווח HTTP, כגון AWS S3, Google Cloud Storage, Azure Blob Storage, או Cloudflare R2.

שאלה 3. האם עליי להשתמש ב-GeoParquet או ב-FlatGeobuf עבור נתוני הווקטור שלי? השתמש ב-GeoParquet לשאילתות אנליטיות כבדות, מנועי SQL (כמו DuckDB) ומאגרי נתונים, והשתמש ב-FlatGeobuf כאשר משדרים תכונות וקטוריות גולמיות ישירות למפת דפדפן.

שאלה 4. האם קובץ GeoTIFF מותאם ענן (COG) תואם לתוכנות GIS שולחניות מסורתיות? כן, מכיוון ש-COG הוא פשוט GeoTIFF סטנדרטי עם אריחים פנימיים ופירמידות תצוגה מקדימה, הוא נפתח ללא בעיות בכלים הישנים כמו QGIS, ArcGIS Pro ו‑GDAL.

שאלה 5. איך PMTiles שונה מ‑MBTiles? MBTiles מתבסס על מסד נתונים SQLite (שדורש קוד בצד השרת כדי לבצע שאילתות ברשת), בעוד ש‑PMTiles מארגן אריחים בארכיון סטטי שהדפדפנים יכולים לקרוא ישירות באמצעות בקשות טווח HTTP.

ראה גם

הפורמטים הטובים של GIS לאפליקציות ניידות

פורמטים של קבצי GIS ב-FileFormat.com

חמשת פורמטי הקבצים המובילים של GIS עבור Google Maps

חדשות פורמט קבצים

פורומי פורמט קבצים