Printemps - Comment diffuser de la grande multipart les uploads de fichier de base de données sans avoir à les stocker sur le système de fichiers local

Printemps de démarrage par défaut de MultiPartResolver interface gère le téléchargement de fichiers en plusieurs parties en les stockant sur le système de fichiers local. Avant la méthode de contrôleur est entré, l'ensemble du fichier en plusieurs parties doit terminer le téléchargement vers le serveur.

Nous sommes le stockage de tous nos fichiers téléchargés directement à une base de données et nos serveurs ont une très faible quota de disque, donc si un gros fichier est téléchargé, nous assistons à une IOExeption - Disk quota exceeded.

Est-il un moyen pour obtenir le stream directement depuis le client de la demande entrante avant le Printemps de l'MultiPartResolver stocke le fichier sur le système de fichiers local si l'on peut diffuser directement à notre db?

  • La base de données que vous utilisez?
  • Nous sommes à l'aide d'AWS S3
InformationsquelleAutor McLovin | 2016-06-16
  1. 16

    Vous pouvez utiliser apache directement, comme décrit ici https://commons.apache.org/proper/commons-fileupload/streaming.html.

    @Controller
public class UploadController {

    @RequestMapping("/upload")
    public String upload(HttpServletRequest request) throws IOException, FileUploadException {

        ServletFileUpload upload = new ServletFileUpload();

        FileItemIterator iterator = upload.getItemIterator(request);
        while (iterator.hasNext()) {
            FileItemStream item = iterator.next();

            if (!item.isFormField()) {
                InputStream inputStream = item.openStream();
                //...
            }
        }
    }
}

    Assurez-vous de désactiver les ressorts multi-parties de résoudre mécanisme.

    application.yml:

    spring:
   http:
      multipart:
         enabled: false
    InformationsquelleAutor Bernhard
  2. 7

    En fait ce n'est pas une tâche triviale. Si vous souhaitez écrire flux de droit du client à la base de données, vous avez à traiter la demande manuellement. Il y a quelques bibliothèques, qui peuvent rendre cette tâche plus simple. L'un d'eux est "Apache Commons FileUpload". Ci-dessous exemple très simple, comment pouvez-vous traiter multipart/form-data demande par cette bibliothèque.

    @Controller
public class Controller{

    @RequestMapping("/upload")
    public String upload(HttpServletRequest request){

        String boundary = extractBoundary(request);

        try {
            MultipartStream multipartStream = new MultipartStream(request.getInputStream(), 
                boundary.getBytes(), 1024, null);
            boolean nextPart = multipartStream.skipPreamble();
            while(nextPart) {
                String header = multipartStream.readHeaders();

                if(header.contains("filename")){
                    //if input is file
                    OutputStream output = createDbOutputStream();
                    multipartStream.readBodyData(output);
                    output.flush();
                    output.close();
                } else {
                    //if input is not file (text, checkbox etc)
                    ByteArrayOutputStream output = new ByteArrayOutputStream();
                    multipartStream.readBodyData(output);
                    String value = output.toString("utf-8");
                    //... do something with extracted value
                }
                nextPart = multipartStream.readBoundary();
            }
        } catch (IOException e) {
            throw new RuntimeException(e);
        }    
    }

    private String extractBoundary(HttpServletRequest request) {
        String boundaryHeader = "boundary=";
        int i = request.getContentType().indexOf(boundaryHeader)+
            boundaryHeader.length();
        return request.getContentType().substring(i);
    }    
}

    En-tête de champ de fichier ressemble à ceci:

    Content-Disposition: form-data; name="fieldName"; filename="fileName.jpg"
Content-Type: image/jpeg

    En-tête pour un simple champ ressemble:

    Content-Disposition: form-data; name="fieldName";

    Noter que ce morceau de code est juste simplifié exemple pour vous montrer la direction. Il n'y a pas de certains détails comme: extrait de nom de champ d'en-tête, créer la base de données de flux de sortie etc. Vous pouvez mettre en œuvre toutes ces choses par vous-même.
    Des exemples de plusieurs parties de la demande en-têtes de champ que vous pouvez trouver dans RFC1867. Informations sur multipart/form-data RFC2388.

    • J'ai eu ce travaillant surtout avec l'en-tête "Content-Type: multipart/form-data; boundary=----WebKitFormBoundary7MA4YWxkTrZu0gW" -F "filename=test" -F "[email protected]"
    InformationsquelleAutor Ken Bekov