अंतिम अपडेट: 20 Aug, 2026

क्लाउड-नेटिव GIS फ़ाइल फ़ॉर्मेट क्या हैं? एक डेवलपर गाइड
यदि आपने कभी जियोस्पेशियल पाइपलाइन बनाई है, तो आप “डाउनलोड-फ़र्स्ट” बाधा के दर्द को जानते हैं। पारंपरिक रूप से, यदि आपके एप्लिकेशन को 15 GB सैटेलाइट सीन से 500x500 पिक्सेल का बाउंडिंग बॉक्स चाहिए था—या 4 GB नगरपालिका पार्सल डेटासेट से दस पंक्तियों को फ़िल्टर करना था—तो आपको पूरी फ़ाइल डाउनलोड करनी पड़ती थी, उसे मेमोरी में पार्स करना पड़ता था, और फिर उस हिस्से को निकालना पड़ता था जिसमें आपको वास्तव में रुचि थी।
केवल एक Shapefile, GeoJSON, या मानक GeoTIFF को Amazon S3 बकेट या Google Cloud Storage में अपलोड करने से वह क्लाउड-नेटिव नहीं बनता। यह केवल एक लेगेसी फ़ाइल को किसी और की हार्ड ड्राइव पर रखता है।
क्लाउड-नेटिव GIS file formats इस समस्या को हल करता है spatial data को डिस्क पर व्यवस्थित करने के तरीके को पुनर्संरचना करके। क्लाइंट्स को फ़ाइलों को शुरू से अंत तक क्रमिक रूप से पढ़ने के लिए मजबूर करने के बजाय, ये फ़ॉर्मेट नेटवर्क पर सीधे, आंशिक पढ़ने के लिए डिज़ाइन किए गए हैं। डेवलपर्स के लिए, यह सर्वरलेस आर्किटेक्चर को अनलॉक करता है, एग्रीस लागत को काफी घटाता है, और वेब क्लाइंट्स को स्थैतिक ऑब्जेक्ट स्टोरेज से सीधे बड़े डेटासेट को क्वेरी करने देता है।
मैकेनिक्स: क्लाउड-नेटिव जियोस्पेशियल वास्तव में कैसे काम करता है
विशिष्ट फ़ाइल एक्सटेंशन में गहराई से जाने से पहले, यह समझना मददगार होता है कि उन्हें काम करने वाला मूलभूत इंजीनियरिंग पैटर्न क्या है। लगभग हर क्लाउड-नेटिव जियोस्पेशियल फ़ॉर्मेट तीन मुख्य तंत्रों पर निर्भर करता है:
- HTTP रेंज अनुरोध (
GETwithRangeheaders): मानक HTTP/1.1 और HTTP/2 रिमोट फ़ाइल से विशिष्ट बाइट रेंज का अनुरोध करने का समर्थन करते हैं (उदाहरण के लिए,bytes=0-16383)। AWS S3, Cloudflare R2, और Azure Blob Storage जैसे क्लाउड ऑब्जेक्ट स्टोर्स इसे बॉक्स से बाहर बिना किसी अतिरिक्त कॉन्फ़िगरेशन के स्वाभाविक रूप से समर्थन करते हैं। - फ़्रंट-लोडेड (या प्रेडिक्टेबल) मेटाडेटा और स्पैशियल इंडेक्सेस: किसी भौगोलिक क्षेत्र को कवर करने वाले सटीक बाइट्स के लिए अनुरोध करने हेतु, क्लाइंट को पहले फ़ाइल की आंतरिक लेआउट का मानचित्र चाहिए होता है। क्लाउड-नेटिव फ़ॉर्मेट अपने हेडर मेटाडेटा और स्पैशियल इंडेक्सेस (जैसे R-ट्री या बाउंडिंग-बॉक्स हायरार्की) को एक पूर्वनिर्धारित स्थान पर संग्रहीत करते हैं—आमतौर पर फ़ाइल की बहुत शुरुआत या बहुत अंत में। क्लाइंट एक छोटा प्रारंभिक अनुरोध करके इंडेक्स पढ़ता है, लक्ष्य क्षेत्र के लिए सटीक बाइट ऑफ़सेट की गणना करता है, और केवल उन हिस्सों को प्राप्त करता है।
- आंतरिक टाइलिंग और चंकिंग: रास्टर को पंक्ति दर पंक्ति या वेक्टर को एक सपाट टेक्स्ट दीवार के रूप में संग्रहीत करने के बजाय, डेटा को स्व-निहित, संकुचित ब्लॉकों (टाइल्स, पंक्ति समूह, या N-आयामी चंक्स) में विभाजित किया जाता है, जिन्हें स्वतंत्र रूप से प्राप्त और डिकम्प्रेस किया जा सकता है।
मुख्य क्लाउड-नेटिव GIS फ़ाइल फ़ॉर्मेट्स
इन सभी को नियंत्रित करने वाला कोई एकल फ़ॉर्मेट नहीं है। सही फ़ॉर्मेट चुनना इस बात पर निर्भर करता है कि आप इमेजरी, तालिकीय वेक्टर, मानचित्र टाइल्स, बहु-आयामी एरेज़, या LiDAR पॉइंट क्लाउड्स के साथ काम कर रहे हैं या नहीं।
1. क्लाउड-ऑप्टिमाइज़्ड GeoTIFF (COG) — रास्टर इमेजरी के लिए
COG कोई नया स्वामित्व वाला फ़ाइल प्रकार नहीं है; यह एक मानक GeoTIFF (.tif) है जिसमें एक सख्त आंतरिक लेआउट है, जिसे आधिकारिक OGC मानक के रूप में अपनाया गया है। क्योंकि यह अभी भी एक वैध GeoTIFF है, QGIS और ArcGIS जैसे पुरानी डेस्कटॉप टूल्स इसे बिना किसी समस्या के खोल सकते हैं।
- यह कैसे काम करता है: पूरे चित्र में पिक्सेल को क्षैतिज स्कैनलाइन में संग्रहीत करने के बजाय, एक COG पिक्सेल को आंतरिक टाइल्स (आमतौर पर 512×512 पिक्सेल) में व्यवस्थित करता है। यह उसी फ़ाइल में ओवरव्यूज़ (पूर्व-गणना किए गए, कम-रिज़ॉल्यूशन वाले इमेज पिरामिड) को भी एम्बेड करता है। जब कोई उपयोगकर्ता वेब मानचित्र पर ज़ूम आउट करता है, तो क्लाइंट कम-रिज़ॉल्यूशन ओवरव्यू टाइल्स को लाता है; जब वह ज़ूम इन करता है, तो यह केवल उच्च-रिज़ॉल्यूशन टाइल्स को लाता है जो व्यूपोर्ट के साथ intersect करती हैं।
- सर्वोत्तम उपयोग: उपग्रह इमेजरी, हवाई ऑर्थोमोसेक्स, डिजिटल एलिवेशन मॉडल (DEMs), और डायनामिक रास्टर टाइल सर्वर (जैसे TiTiler).
GDAL के माध्यम से COG बनाना:
gdal_translate input.tif output_cog.tif \
-of COG \
-co COMPRESS=DEFLATE \
-co OVERVIEWS=IGNORE_EXISTING
2. GeoParquet — बड़े वेक्टर विश्लेषण और डेटा वेयरहाउस के लिए
यदि आपका कार्यप्रवाह पारंपरिक मानचित्रण की तुलना में डेटा इंजीनियरिंग के अधिक समान है, GeoParquet (.parquet) प्रमुख विकल्प है। Apache Parquet के ऊपर निर्मित, यह ज्यामितियों को ISO-मानक वेल-नॉन्स बाइनरी (WKB) के रूप में समृद्ध तालिकीय गुणों के साथ संग्रहीत करता है।
- यह कैसे काम करता है: Shapefiles या GeoJSON के विपरीत, जो डेटा को पंक्ति दर पंक्ति संग्रहीत करते हैं, Parquet कॉलम-आधारित है। यदि आप 50 मिलियन बहुभुजों में
populationकॉलम पर एक एग्रीगेशन चलाते हैं, तो इंजन भारी ज्यामिति बाइट्स को पूरी तरह पढ़ने से बच जाता है। GeoParquet प्रत्येक पंक्ति समूह के लिए बाउंडिंग-बॉक्स मेटाडेटा भी एम्बेड करता है (और Hilbert कर्व्स या H3 इंडेक्स के माध्यम से स्पेशल सॉर्टिंग का समर्थन करता है), जिससे क्वेरी इंजन अप्रासंगिक हिस्सों को छोड़ सकते हैं। - सर्वोत्तम उपयोग: बड़े पैमाने पर स्पेशल एनालिटिक्स, क्लाउड डेटा वेयरहाउस (Snowflake, BigQuery, Databricks), और DuckDB जैसे सर्वरलेस SQL इंजन।
DuckDB के साथ सीधे रिमोट GeoParquet क्वेरी करना:
INSTALL spatial;
LOAD spatial;
SELECT land_use, COUNT(*) AS parcel_count
FROM read_parquet('s3://example-bucket/parcels.parquet')
WHERE ST_Intersects(geometry, ST_MakeEnvelope(-122.5, 37.7, -122.3, 37.8))
GROUP BY land_use;
3. FlatGeobuf — वेब पर वेक्टर फीचर्स को स्ट्रीम करने के लिए
जबकि GeoParquet विश्लेषणात्मक इंजनों में चमकता है, इसका फुटर-आधारित मेटाडेटा और कॉलम अभिविन्यास हमेशा ब्राउज़र मानचित्र में सीधे कच्चे वेक्टर ज्योमेट्री को स्ट्रीम करने के लिए आदर्श नहीं होते। पेश है FlatGeobuf (.fgb).
- कैसे काम करता है: Google के FlatBuffers बाइनरी सीरियलाइज़ेशन लाइब्रेरी पर निर्मित, FlatGeobuf फ़ाइल के सामने एक पैक्ड हिल्बर्ट R-ट्री स्पेशियल इंडेक्स रखता है। वेब क्लाइंट (जैसे MapLibre GL JS, Leaflet, या OpenLayers) HTTP रेंज अनुरोधों के माध्यम से बाउंडिंग-बॉक्स क्वेरी चला सकते हैं और शेष बाइट्स अभी भी स्ट्रीम हो रहे हों, स्क्रीन पर फीचर्स रेंडर करना शुरू कर सकते हैं।
- उपयुक्त: इंटरैक्टिव वेब एप्लिकेशनों में मल्टी-मेगाबाइट GeoJSON फ़ाइलों को बदलना, बिना PostGIS/GeoServer बैकएंड को चलाए।
4. PMTiles — सर्वरलेस वेक्टर और रास्टर बेसमैप्स के लिए
परंपरागत रूप से, इंटरैक्टिव मैप टाइल्स (/{z}/{x}/{y}.pbf) सर्व करने के लिए या तो एक समर्पित टाइल सर्वर (जैसे Martin या Tileserver-GL) चलाना आवश्यक था या लाखों छोटे व्यक्तिगत .pbf फ़ाइलों को S3 पर अपलोड करना—बकेट प्रबंधन और API अनुरोध लागतों के लिए एक दुःस्वप्न।
- कैसे काम करता है: Protomaps द्वारा निर्मित, PMTiles (
.pmtiles) पूरी पिरामिड के Mapbox Vector Tiles (MVT) या रास्टर टाइल्स को एक ही अभिलेख फ़ाइल में पैक करता है। यह Hilbert-curve स्थानिक स्थानीयता के लिए अनुकूलित क्लस्टर्ड डायरेक्टरी संरचना का उपयोग करता है, जिसका अर्थ है कि ब्राउज़र मैप लाइब्रेरी HTTP रेंज अनुरोधों का उपयोग करके S3 या Cloudflare R2 पर एकल स्थिर फ़ाइल से सीधे टाइल्स प्राप्त कर सकती है। - उपयुक्त है: ज़ीरो-बैकएंड कस्टम बेसमैप्स, उच्च-ट्रैफ़िक वेब मैप्स, और ऑफ़लाइन मोबाइल मैपिंग एप्लिकेशन।
5. Zarr — बहु-आयामी वैज्ञानिक डेटा के लिए
NetCDF और HDF5 दशकों से मौसम विज्ञान, समुद्र विज्ञान, और जलवायु मॉडलिंग में प्रमुख रहे हैं, लेकिन उनके मोनोलिथिक फ़ाइल संरचनाएँ वितरित क्लाउड वातावरण में संघर्ष करती हैं। Zarr ऑब्जेक्ट स्टोरेज के लिए N-आयामी एरेज़ को पुनः कल्पना करता है।
- कैसे काम करता है: एक Zarr स्टोर विशाल बहु-आयामी एरेज़ (जैसे,
time × latitude × longitude × altitude) को छोटे, समान आकार के, संकुचित चंक्स में विभाजित करता है। प्रत्येक चंक को एक व्यक्तिगत ऑब्जेक्ट (या Zarr v3 शार्डिंग के माध्यम से एकीकृत) के रूप में JSON मेटाडेटा के साथ संग्रहीत किया जाता है जो एरे आयामों का वर्णन करता है। दर्जनों समानांतर कार्यकर्ता विभिन्न समय स्लाइस को एक साथ पढ़ या लिख सकते हैं बिना फ़ाइल-लॉकिंग संघर्षों के। - सर्वोत्तम उपयोग: टाइम-सीरीज़ सैटेलाइट डेटाक्यूब्स, मौसम पूर्वानुमान, जलवायु मॉडल, और वितरित Xarray/Dask पाइपलाइन्स।
6. क्लाउड-ऑप्टिमाइज़्ड पॉइंट क्लाउड (COPC) — LiDAR के लिए
मानक LAZ 1.4 संकुचित LiDAR फ़ॉर्मेट का विस्तार के रूप में निर्मित, COPC (.copc.laz) 3D पॉइंट क्लाउड्स को क्लस्टर्ड ऑक्ट्री संरचना में व्यवस्थित करता है। COG की तरह, यह मौजूदा LAS/LAZ रीडर्स के साथ बैकवर्ड-कम्पैटिबल रहता है जबकि वेब व्यूअर्स (जैसे Potree या deck.gl) को कैमरा फ्रस्टम और लेवल-ऑफ़-डिटेल के आधार पर पॉइंट्स को स्ट्रीम करने की अनुमति देता है, बिना मल्टी-गिगाबाइट पॉइंट क्लाउड्स को डाउनलोड किए।
डेवलपर निर्णय मैट्रिक्स: आपको कौन सा फ़ॉर्मेट चुनना चाहिए?
| डेटा प्रकार | प्राथमिक कार्यभार | सर्वोत्तम फ़ॉर्मेट | प्रतिस्थापित पुराना फ़ॉर्मेट |
|---|---|---|---|
| रास्टर / इमेजरी | डायनामिक टाइलिंग, पिक्सेल विश्लेषण, वेब विज़ुअलाइज़ेशन | COG (.tif) | असूचीबद्ध GeoTIFF, JPEG2000 |
| वेक्टर | SQL विश्लेषण, डेटा वेयरहाउस, वृहद जॉइन | GeoParquet (.parquet) | Shapefile, फ़ाइल जियोडेटाबेस |
| वेक्टर | कच्ची विशेषताओं को सीधे ब्राउज़र में स्ट्रीम करना | FlatGeobuf (.fgb) | बड़ा GeoJSON, KML |
| पूर्व-शैलीबद्ध टाइल्स | सर्वरलेस इंटरैक्टिव वेब मानचित्र & मोबाइल ऑफलाइन | PMTiles (.pmtiles) | MBTiles, ZXY फ़ोल्डर ट्रीज़ |
| N-D एरेज़ | जलवायु डेटा, समय-श्रृंखला रास्टर, समानांतर गणना | Zarr (.zarr) | NetCDF4, HDF5 |
| बिंदु बादल | 3D वेब विज़ुअलाइज़ेशन और स्थानिक LiDAR उपसेटिंग | COPC (.copc.laz) | मानक LAS / LAZ |
प्रोडक्शन में डिप्लॉय करते समय महत्वपूर्ण गोटचास
क्लाउड-नेटिव फॉर्मैट्स की ओर बढ़ना आपके बैकएंड को सरल बनाता है, लेकिन यह कॉन्फ़िगरेशन की ज़िम्मेदारी आपके क्लाउड स्टोरेज लेयर पर स्थानांतरित कर देता है। इन तीन सामान्य समस्याओं से सावधान रहें:
- CORS हेडर भूलना: यदि कोई ब्राउज़र एप्लिकेशन (MapLibre, OpenLayers, या
geotiff.jsका उपयोग करते हुए) आपके S3 बकेट को HTTP रेंज अनुरोध भेजता है, तो बकेट की क्रॉस-ऑरिजिन रिसोर्स शेयरिंग (CORS) नीति ज़रूर स्पष्ट रूप सेAllowedHeadersमेंRangeहेडर की अनुमति दे औरExposeHeadersमेंContent-Range,Content-Length, तथाAccept-Rangesको उजागर करे। इसके बिना, अनुरोध ब्राउज़र में चुपचाप विफल हो जाएंगे। - असॉर्टेड GeoParquet रो ग्रुप्स: एक गंदा Shapefile सीधे GeoParquet में बदलने से बाउंडिंग-बॉक्स क्वेरीज़ स्वचालित रूप से तेज़ नहीं हो जातीं। यदि फीचर रैंडम रूप से रो ग्रुप्स में बिखरे हों, तो क्वेरी इंजन को अभी भी प्रत्येक रो ग्रुप को स्कैन करना पड़ता है। हमेशा अपने ज्योमेट्रीज़ को स्थानिक रूप से सॉर्ट करें (उदाहरण के लिए,
geopandasयाDuckDBके माध्यम से Hilbert curve का उपयोग करके लिखने से पहले) ताकि स्थानिक रूप से निकटवर्ती फीचर एक ही रो ग्रुप में रहें। - अप्रभावी चंक/टाइल आकार: छोटे चंक्स (उदाहरण के लिए, 64×64 पिक्सेल) हजारों HTTP अनुरोधों को ट्रिगर करते हैं, जिससे लेटेंसी और क्लाउड API लागत बढ़ती है। बड़े चंक्स (उदाहरण के लिए, 4096×4096 पिक्सेल) क्लाइंट्स को डेटा अधिक मात्रा में लाने के लिए मजबूर करते हैं। मानक डिफ़ॉल्ट्स पर टिके रहें—COGs के लिए 512×512 पिक्सेल और Zarr या GeoParquet रो ग्रुप्स के लिए प्रति चंक 10 MB से 100 MB।
समापन
क्लाउड-नेटिव GIS फ़ाइल फ़ॉर्मेट डेटा को कंप्यूट तक ले जाना से कंप्यूट (और हल्के रेंज अनुरोध) को डेटा तक ले जाना की ओर एक मूलभूत बदलाव का प्रतिनिधित्व करते हैं। COG, GeoParquet, FlatGeobuf, और PMTiles जैसे फ़ॉर्मेट को STAC (SpatioTemporal Asset Catalog) मेटाडेटा के साथ जोड़कर, डेवलपर्स सस्ते स्थिर ऑब्जेक्ट स्टोरेज पर, बिना भारी स्पैशियल डेटाबेस की आवश्यकता के, लचीले, ग्रह-स्तरीय मैपिंग और एनालिटिक्स पाइपलाइन बना सकते हैं।
अक्सर पूछे जाने वाले प्रश्न (FAQ)
Q1. क्या चीज़ एक GIS फ़ाइल फ़ॉर्मेट "क्लाउड-नेटिव" बनाती है? एक फ़ॉर्मेट क्लाउड-नेटिव तब होता है जब वह एक अग्र-लोडेड स्पैशियल इंडेक्स को आंतरिक टाइलिंग या चंकिंग के साथ जोड़ता है, जिससे क्लाइंट्स HTTP रेंज अनुरोधों के माध्यम से पूरी फ़ाइल डाउनलोड किए बिना छोटे भौगोलिक उपसमुच्चय प्राप्त कर सकते हैं।
Q2. क्या मुझे COG, GeoParquet, या PMTiles फ़ाइलों को होस्ट करने के लिए एक समर्पित GIS सर्वर की आवश्यकता है? नहीं—आप इन्हें किसी भी मानक स्थिर ऑब्जेक्ट स्टोरेज पर होस्ट कर सकते हैं जो HTTP रेंज अनुरोधों का समर्थन करता है, जैसे AWS S3, Google Cloud Storage, Azure Blob Storage, या Cloudflare R2.
Q3. क्या मुझे अपने वेक्टर डेटा के लिए GeoParquet या FlatGeobuf का उपयोग करना चाहिए? भारी विश्लेषणात्मक क्वेरीज़, SQL इंजन (जैसे DuckDB), और डेटा वेयरहाउस के लिए GeoParquet का उपयोग करें, और जब कच्चे वेक्टर फीचर सीधे ब्राउज़र मानचित्र पर स्ट्रीम किए जा रहे हों तो FlatGeobuf का उपयोग करें।
Q4. क्या क्लाउड-ऑप्टिमाइज़्ड GeoTIFF (COG) पारंपरिक डेस्कटॉप GIS सॉफ़्टवेयर के साथ संगत है? हाँ, क्योंकि COG केवल एक मानक GeoTIFF है जिसमें आंतरिक टाइल्स और ओवरव्यू पिरामिड होते हैं, यह QGIS, ArcGIS Pro, और GDAL जैसे लेगेसी टूल्स में बिना किसी समस्या के खुलता है।
Q5. PMTiles MBTiles से कैसे अलग है? MBTiles एक SQLite डेटाबेस पर निर्भर करता है (जिसके लिए वेब पर क्वेरी करने हेतु सर्वर-साइड कोड की आवश्यकता होती है), जबकि PMTiles टाइल्स को एक स्थिर अभिलेख में व्यवस्थित करता है जिसे वेब ब्राउज़र HTTP रेंज अनुरोधों के माध्यम से सीधे पढ़ सकते हैं।
और देखें
मोबाइल ऐप्स के लिए सर्वोत्तम GIS फ़ाइल फ़ॉर्मेट
FileFormat.com पर GIS फ़ाइल फ़ॉर्मेट