Databricks ha portato in Public Preview (8 luglio 2026) la colonna _object_metadata, una colonna di metadati nascosta che espone le proprietà a livello di oggetto per i file in cloud storage. È disponibile a partire da Databricks Runtime 18.1.
Cosa contiene: MIME type, ETag, metadati chiave-valore definiti dall’utente, metadati definiti dal sistema e object tag. In altre parole, tutte quelle informazioni sul singolo oggetto in storage che finora bisognava recuperare con chiamate separate o pipeline ad hoc.
Perché è utile
Per chi ingerisce dati non strutturati — immagini, documenti, log grezzi — avere i metadati dell’oggetto esposti direttamente come colonna semplifica diversi pattern: filtrare per tipo di contenuto, tracciare la versione di un file tramite ETag, applicare logiche basate su tag senza uscire dal contesto della tabella. Essendo una colonna nascosta, non appesantisce lo schema visibile ma resta interrogabile quando serve.
Il rilascio si inserisce nel filone di miglioramenti di Databricks sull’ingestione e la gestione di dati non tabellari, dove anche il supporto nativo al formato Excel e ai file in cloud storage ha avuto diversi aggiornamenti recenti. Trattandosi di Public Preview, vale la solita cautela sulla stabilità e sulla disponibilità, che resta soggetta al rollout progressivo tipico della piattaforma.
In sintesi
- La colonna nascosta
_object_metadataè in Public Preview da Databricks Runtime 18.1. - Espone MIME type, ETag, metadati utente e di sistema e object tag per gli oggetti in cloud storage.
- Semplifica filtri, tracciamento versioni e logiche basate su tag per i dati non strutturati.
Fonte: Object metadata column is now in Public Preview — https://docs.databricks.com/aws/en/release-notes/product/2026/july#object-metadata-column-is-now-in-public-preview
Hai qualcosa da aggiungere? Unisciti alla discussione.