L'API Blobstore consente alla tua applicazione di pubblicare oggetti di dati, chiamati blob,molto più grandi delle dimensioni consentite per gli oggetti nel servizio Datastore. I BLOB sono utili per pubblicare file di grandi dimensioni, come file video o immagine, e per consentire agli utenti di caricare file di dati di grandi dimensioni. I blob vengono creati caricando un file tramite una richiesta HTTP. In genere, le tue applicazioni eseguono questa operazione presentando all'utente un modulo con un campo di caricamento file. Quando il modulo viene inviato, Blobstore crea un blob dai contenuti del file e restituisce un riferimento opaco al blob, chiamato chiave blob,che potrai utilizzare in un secondo momento per pubblicare il blob. L'applicazione può fornire il valore completo del blob in risposta a una richiesta dell'utente oppure può leggere il valore direttamente utilizzando un'interfaccia simile a un file in streaming.
Introduzione all'archivio BLOB
Google App Engine include il servizio Blobstore, che consente alle applicazioni di pubblicare oggetti dati limitati solo dalla quantità di dati che possono essere caricati o scaricati tramite una singola connessione HTTP. Questi oggetti sono chiamati valori Blobstore o blob. I valori dell'archivio BLOB vengono pubblicati come risposte dagli elaboratori delle richieste e vengono creati come caricamenti tramite moduli web. Le applicazioni non creano direttamente i dati dei blob, ma indirettamente tramite un modulo web inviato o un'altra richiesta HTTP POST
. I valori di Blobstore possono essere forniti all'utente o essere accessibili dall'applicazione in uno stream simile a un file utilizzando l'API Blobstore.
Per chiedere a un utente di caricare un valore Blobstore, la tua applicazione presenta un modulo web con un campo di caricamento file. L'applicazione genera l'URL di azione del modulo chiamando l'API Blobstore. Il browser dell'utente carica il file direttamente in Blobstore tramite l'URL generato. Blobstore archivia il blob, riscrive la richiesta in modo che contenga la chiave del blob e la passa a un percorso nell'applicazione. Un gestore delle richieste in quel percorso dell'applicazione può eseguire un'ulteriore elaborazione dei moduli.
Per pubblicare un blob, l'applicazione imposta un'intestazione nella risposta in uscita e App Engine sostituisce la risposta con il valore del blob.
I blob non possono essere modificati dopo la loro creazione, ma possono essere eliminati. A ogni blob è associato un record di informazioni sul blob, archiviato nel datastore, che fornisce dettagli sul blob, ad esempio la data e l'ora di creazione e il tipo di contenuti. Puoi utilizzare la chiave del blob per recuperare i record di informazioni del blob ed eseguire query sulle relative proprietà.
Un'applicazione può leggere un valore Blobstore una parte alla volta utilizzando una chiamata API. La dimensione della parte può essere pari alla dimensione massima di un valore restituito dall'API. Questa dimensione è leggermente inferiore a 32 megabyte, rappresentata in Java dalla costante com.google.appengine.api.blobstore.BlobstoreService.MAX_BLOB_FETCH_SIZE
. Un'applicazione non può creare o modificare i valori di Blobstore, tranne tramite i file caricati dall'utente.
Utilizzo di Blobstore
Le applicazioni possono utilizzare Blobstore per accettare file di grandi dimensioni come caricamenti da parte degli utenti e per pubblicarli. I file vengono chiamati blob una volta caricati. Le applicazioni non accedono direttamente ai blob. Le applicazioni, invece, lavorano con i blob tramite le entità di informazioni sui blob (rappresentate dalla classe BlobInfo
) nel datastore.
L'utente crea un blob inviando un modulo HTML che includa uno o più campi di immissione file. La tua applicazione imposta blobstoreService.createUploadUrl()
come destinazione (azione) di questo modulo, passando alla funzione un percorso URL di un gestore nella tua applicazione. Quando l'utente invia il modulo, il browser dell'utente carica i file specificati direttamente in Blobstore. Blobstore riscrive la richiesta dell'utente e archivia i dati del file caricato, sostituendo i dati del file caricato con una o più chiavi blob corrispondenti, quindi passa la richiesta riscritta al gestore nel percorso dell'URL che hai fornito a blobstoreService.createUploadUrl()
. Questo gestore può eseguire un'elaborazione aggiuntiva in base alla chiave del blob.
L'applicazione può leggere parti di un valore Blobstore utilizzando un'interfaccia di streaming simile a un file. Consulta la classe BlobstoreInputStream
.
Caricamento di un blob
Per creare e caricare un blob:
1. Creare un URL di caricamento
Chiama blobstoreService.createUploadUrl
per creare un URL di caricamento per il modulo che l'utente dovrà compilare, passando il percorso dell'applicazione da caricare al termine del POST
del modulo.
<body>
<form action="<%= blobstoreService.createUploadUrl("/upload") %>" method="post" enctype="multipart/form-data">
<input type="file" name="myFile">
<input type="submit" value="Submit">
</form>
</body>
Tieni presente che questo è l'aspetto che avrebbe il modulo di caricamento se fosse creato come JSP.
2. Creare un modulo di caricamento
Il modulo deve includere un campo di caricamento file e enctype
del modulo deve essere impostato su multipart/form-data
. Quando l'utente invia il modulo, POST
viene gestito dall'API Blobstore, che crea il blob. L'API crea anche un record di informazioni per il blob e lo archivia nel datastore, poi passa la richiesta riscritta all'applicazione nel percorso specificato come chiave blob.
3. Implementa il gestore dei caricamenti
In questo gestore, puoi memorizzare la chiave del blob con il resto del modello dei dati dell'applicazione. La chiave del blob rimane accessibile dall'entità di informazioni del blob nel datastore. Tieni presente che dopo che l'utente ha inviato il modulo e il gestore è stato chiamato, il blob è già stato salvato e le relative informazioni sono state aggiunte al datastore. Se la tua applicazione non vuole conservare il blob, devi eliminarlo immediatamente per evitare che diventi orfano:
Nel codice seguente, getUploads
restituisce un insieme di blob caricati. L'oggetto Map
è un elenco che associa i nomi dei campi di caricamento ai blob che contenevano.
Map<String, List<BlobKey>> blobs = blobstoreService.getUploads(req);
List<BlobKey> blobKeys = blobs.get("myFile");
if (blobKeys == null || blobKeys.isEmpty()) {
res.sendRedirect("/");
} else {
res.sendRedirect("/serve?blob-key=" + blobKeys.get(0).getKeyString());
}
Quando Blobstore riscrive la richiesta dell'utente, i corpi delle parti MIME dei file caricati vengono svuotati e la chiave blob viene aggiunta come intestazione della parte MIME. Tutti gli altri campi e parti del modulo vengono conservati e passati al gestore del caricamento. Se non specifichi un tipo di contenuti, Blobstore tenterà di dedurlo dall'estensione del file. Se non è possibile determinare il tipo di contenuti, al blob appena creato viene assegnato il tipo di contenuti application/octet-stream
.
Pubblicazione di un blob
Per pubblicare i blob, devi includere un gestore del download dei blob come percorso nell'applicazione. Questo gestore deve passare la chiave del blob per il blob desiderato a blobstoreService.serve(blobKey, res);
. In questo esempio, la chiave del blob viene passata al gestore del download come argomento URL (req.getParameter('blob-key'))
. In pratica, il gestore del download può recuperare la chiave del blob in qualsiasi modo tu scelga, ad esempio tramite un altro metodo o un'azione dell'utente.
public void doGet(HttpServletRequest req, HttpServletResponse res)
throws IOException {
BlobKey blobKey = new BlobKey(req.getParameter("blob-key"));
blobstoreService.serve(blobKey, res);
I blob possono essere pubblicati da qualsiasi URL dell'applicazione. Per pubblicare un blob nella tua applicazione, inserisci un'intestazione speciale nella risposta contenente la chiave del blob. App Engine sostituisce il corpo della risposta con i contenuti del blob.
Intervalli di byte dei blob
Blobstore supporta la pubblicazione di parte di un valore grande anziché del valore completo in risposta a una richiesta. Per pubblicare un valore parziale, includi l'intestazione X-AppEngine-BlobRange
nella risposta in uscita. Il relativo valore è un intervallo di byte HTTP standard. La numerazione dei byte è basata su zero. Un X-AppEngine-BlobRange
vuoto indica all'API di ignorare l'intestazione dell'intervallo e di pubblicare il blob completo. Ecco alcuni esempi di intervalli:
0-499
pubblica i primi 500 byte del valore (da 0 a 499 inclusi).500-999
serve 500 byte a partire dal 501° byte.500-
serve tutti i byte a partire dal 501esimo fino alla fine del valore.-500
pubblica gli ultimi 500 byte del valore.
Se l'intervallo di byte è valido per il valore Blobstore, Blobstore invia al client un codice di stato 206
Partial
Content
e l'intervallo di byte richiesto. Se l'intervallo non è valido per il valore, Blobstore invia 416
Requested
Range
Not
Satisfiable
.
Blobstore non supporta più intervalli di byte in una singola richiesta (ad esempio 100-199,200-299
), indipendentemente dal fatto che si sovrappongano o meno.
Applicazione di esempio completa
Nella seguente applicazione di esempio, l'URL principale dell'applicazione carica il modulo che chiede all'utente un file da caricare e il gestore del caricamento chiama immediatamente il gestore del download per pubblicare i dati. Questo per semplificare l'applicazione di esempio. In pratica, probabilmente non utilizzeresti l'URL principale per richiedere i dati di caricamento né pubblicheresti immediatamente un blob appena caricato.
// file Upload.java
import java.io.IOException;
import java.util.List;
import java.util.Map;
import javax.servlet.ServletException;
import javax.servlet.http.HttpServlet;
import javax.servlet.http.HttpServletRequest;
import javax.servlet.http.HttpServletResponse;
import com.google.appengine.api.blobstore.BlobKey;
import com.google.appengine.api.blobstore.BlobstoreService;
import com.google.appengine.api.blobstore.BlobstoreServiceFactory;
public class Upload extends HttpServlet {
private BlobstoreService blobstoreService = BlobstoreServiceFactory.getBlobstoreService();
@Override
public void doPost(HttpServletRequest req, HttpServletResponse res)
throws ServletException, IOException {
Map<String, List<BlobKey>> blobs = blobstoreService.getUploads(req);
List<BlobKey> blobKeys = blobs.get("myFile");
if (blobKeys == null || blobKeys.isEmpty()) {
res.sendRedirect("/");
} else {
res.sendRedirect("/serve?blob-key=" + blobKeys.get(0).getKeyString());
}
}
}
// file Serve.java
import java.io.IOException;
import javax.servlet.http.HttpServlet;
import javax.servlet.http.HttpServletRequest;
import javax.servlet.http.HttpServletResponse;
import com.google.appengine.api.blobstore.BlobKey;
import com.google.appengine.api.blobstore.BlobstoreService;
import com.google.appengine.api.blobstore.BlobstoreServiceFactory;
public class Serve extends HttpServlet {
private BlobstoreService blobstoreService = BlobstoreServiceFactory.getBlobstoreService();
@Override
public void doGet(HttpServletRequest req, HttpServletResponse res)
throws IOException {
BlobKey blobKey = new BlobKey(req.getParameter("blob-key"));
blobstoreService.serve(blobKey, res);
}
}
// file index.jsp
<%@ page import="com.google.appengine.api.blobstore.BlobstoreServiceFactory" %>
<%@ page import="com.google.appengine.api.blobstore.BlobstoreService" %>
<%
BlobstoreService blobstoreService = BlobstoreServiceFactory.getBlobstoreService();
%>
<html>
<head>
<title>Upload Test</title>
</head>
<body>
<form action="<%= blobstoreService.createUploadUrl("/upload") %>" method="post" enctype="multipart/form-data">
<input type="text" name="foo">
<input type="file" name="myFile">
<input type="submit" value="Submit">
</form>
</body>
</html>
// web.xml
<?xml version="1.0" encoding="utf-8"?>
<web-app xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xmlns="http://java.sun.com/xml/ns/javaee"
xmlns:web="http://java.sun.com/xml/ns/javaee/web-app_2_5.xsd"
xsi:schemaLocation="http://java.sun.com/xml/ns/javaee
http://java.sun.com/xml/ns/javaee/web-app_2_5.xsd" version="2.5">
<servlet>
<servlet-name>Upload</servlet-name>
<servlet-class>Upload</servlet-class>
</servlet>
<servlet>
<servlet-name>Serve</servlet-name>
<servlet-class>Serve</servlet-class>
</servlet>
<servlet-mapping>
<servlet-name>Upload</servlet-name>
<url-pattern>/upload</url-pattern>
</servlet-mapping>
<servlet-mapping>
<servlet-name>Serve</servlet-name>
<url-pattern>/serve</url-pattern>
</servlet-mapping>
</web-app>
Utilizzo del servizio Immagini con Blobstore
Il servizio Immagini può utilizzare un valore Blobstore come origine di una trasformazione. L'immagine di origine può avere le dimensioni massime per un valore Blobstore. Il servizio Immagini restituisce comunque l'immagine trasformata all'applicazione, pertanto l'immagine trasformata deve avere dimensioni inferiori a 32 megabyte. Questa opzione è utile per creare miniature di fotografie di grandi dimensioni caricate dagli utenti.
Per informazioni sull'utilizzo del servizio Immagini con i valori di Blobstore, consulta la documentazione del servizio Immagini.
Utilizzo dell'API Blobstore con Google Cloud Storage
Puoi utilizzare l'API Blobstore per archiviare i BLOB in Cloud Storage anziché in Blobstore. Devi configurare un bucket come descritto nella documentazione di Google Cloud Storage e specificare il bucket e il nome file in BlobstoreService
createUploadUrl,
specifica il nome del bucket nel parametro UploadOptions
. Nel gestore del caricamento, devi elaborare i metadati FileInfo restituiti e archiviare esplicitamente il nome file di Google Cloud Storage necessario per recuperare il blob in un secondo momento.
Puoi anche pubblicare oggetti Cloud Storage utilizzando l'API Blobstore.
I seguenti snippet di codice mostrano come eseguire questa operazione. Questo esempio si trova in un gestore delle richieste che recupera il nome del bucket e del nome dell'oggetto nella richiesta. Crea il servizio Blobstore e lo utilizza per creare una chiave blob per Google Cloud Storage, utilizzando il nome del bucket e dell'oggetto specificati:
BlobstoreService blobstoreService = BlobstoreServiceFactory.getBlobstoreService();
BlobKey blobKey = blobstoreService.createGsBlobKey(
"/gs/" + fileName.getBucketName() + "/" + fileName.getObjectName());
blobstoreService.serve(blobKey, resp);
Quote e limiti
Lo spazio utilizzato per i valori di Blobstore contribuisce alla quota Dati archiviati (fatturabili). Le entità di informazioni sui blob nel datastore vengono conteggiate ai fini dei limiti relativi al datastore. Tieni presente che Google Cloud Storage è un servizio a pagamento per utilizzo; ti verrà addebitato in base al listino prezzi di Cloud Storage.
Per ulteriori informazioni sulle quote di sicurezza a livello di sistema, consulta Quote.
Oltre alle quote di sicurezza a livello di sistema, si applicano i seguenti limiti specificamente all'utilizzo dell'archivio BLOB:
- La dimensione massima dei dati di Blobstore che possono essere letti dall'applicazione con una chiamata API è di 32 megabyte.
- Il numero massimo di file che possono essere caricati in un singolo post del modulo è 500.