Téléversements par Morceaux

Téléversez de gros fichiers en les divisant en morceaux plus petits. Cela permet :

• Le téléversement de fichiers plus gros que les limites du serveur
• Des téléversements reprenables après des pannes réseau
• Un meilleur suivi de la progression
• Une utilisation réduite de la mémoire

Téléversement par Morceaux de Base

import { useDropup, createChunkedUploader } from '@samithahansaka/dropup';

function ChunkedUploader() {
  const { files, actions, state, getDropProps, getInputProps } = useDropup({
    upload: createChunkedUploader({
      url: '/api/upload/chunk',
      chunkSize: 5 * 1024 * 1024, // Morceaux de 5MB
    }),
  });

  return (
    <div>
      <div {...getDropProps()} style={styles.dropzone}>
        <input {...getInputProps()} />
        <p>Déposez de gros fichiers ici - ils seront téléversés par morceaux</p>
      </div>

      {files.map(file => (
        <div key={file.id} style={styles.fileItem}>
          <span>{file.name}</span>
          <span>{(file.size / 1024 / 1024).toFixed(1)} MB</span>

          {file.status === 'uploading' && (
            <div style={styles.progressBar}>
              <div
                style={{
                  ...styles.progress,
                  width: `${file.progress}%`,
                }}
              />
            </div>
          )}

          <span>{file.status}</span>
        </div>
      ))}

      <button
        onClick={() => actions.upload()}
        disabled={state.isUploading}
      >
        Téléverser
      </button>
    </div>
  );
}

const styles = {
  dropzone: {
    border: '2px dashed #ccc',
    borderRadius: 8,
    padding: 40,
    textAlign: 'center' as const,
    marginBottom: 20,
  },
  fileItem: {
    display: 'flex',
    alignItems: 'center',
    gap: 12,
    padding: 12,
    borderBottom: '1px solid #eee',
  },
  progressBar: {
    flex: 1,
    height: 8,
    backgroundColor: '#eee',
    borderRadius: 4,
    overflow: 'hidden',
  },
  progress: {
    height: '100%',
    backgroundColor: '#4caf50',
    transition: 'width 0.2s',
  },
};

Options de Téléversement par Morceaux

createChunkedUploader({
  // Requis
  url: '/api/upload/chunk',

  // Paramètres optionnels
  chunkSize: 5 * 1024 * 1024,  // 5MB (par défaut)
  concurrency: 3,              // Morceaux parallèles (par défaut : 1)
  retries: 3,                  // Réessayer les morceaux échoués (par défaut : 3)

  // En-têtes pour toutes les requêtes de morceaux
  headers: {
    'Authorization': 'Bearer token',
  },

  // Métadonnées de morceau personnalisées
  getChunkMeta: (file, chunkIndex, totalChunks) => ({
    fileId: file.id,
    fileName: file.name,
    chunkIndex,
    totalChunks,
  }),
});

Gestion Côté Serveur

Votre serveur doit gérer les téléversements par morceaux et les réassembler.

Exemple : Node.js/Express

const express = require('express');
const multer = require('multer');
const fs = require('fs');
const path = require('path');

const app = express();
const upload = multer({ dest: 'chunks/' });

const uploadState = new Map();

app.post('/api/upload/chunk', upload.single('chunk'), (req, res) => {
  const { fileId, fileName, chunkIndex, totalChunks } = req.body;

  // Stocker les informations du morceau
  if (!uploadState.has(fileId)) {
    uploadState.set(fileId, {
      fileName,
      totalChunks: parseInt(totalChunks),
      chunks: [],
    });
  }

  const state = uploadState.get(fileId);
  state.chunks.push({
    index: parseInt(chunkIndex),
    path: req.file.path,
  });

  // Vérifier si tous les morceaux ont été reçus
  if (state.chunks.length === state.totalChunks) {
    // Trier les morceaux par index
    state.chunks.sort((a, b) => a.index - b.index);

    // Combiner les morceaux
    const finalPath = path.join('uploads', fileName);
    const writeStream = fs.createWriteStream(finalPath);

    for (const chunk of state.chunks) {
      const data = fs.readFileSync(chunk.path);
      writeStream.write(data);
      fs.unlinkSync(chunk.path); // Nettoyer le morceau
    }

    writeStream.end();
    uploadState.delete(fileId);

    return res.json({
      complete: true,
      url: `/uploads/${fileName}`,
    });
  }

  res.json({
    complete: false,
    received: state.chunks.length,
    total: state.totalChunks,
  });
});

Protocole tus

Pour des téléversements reprenables robustes, utilisez le protocole tus :

import { useDropup } from '@samithahansaka/dropup';
import { createTusUploader } from '@samithahansaka/dropup/tus';

function TusUploader() {
  const { files, actions, state, getDropProps, getInputProps } = useDropup({
    upload: createTusUploader({
      endpoint: 'https://tusd.tusdemo.net/files/',

      // Paramètres optionnels
      chunkSize: 5 * 1024 * 1024,
      retryDelays: [0, 1000, 3000, 5000],

      // Métadonnées pour le serveur
      metadata: {
        filetype: 'file.type',
        filename: 'file.name',
      },

      // Reprendre depuis localStorage
      storeFingerprintForResuming: true,
    }),

    onUploadComplete: (file) => {
      console.log('téléversement tus terminé :', file.uploadedUrl);
    },
  });

  return (
    <div>
      <div {...getDropProps()} style={styles.dropzone}>
        <input {...getInputProps()} />
        <p>Déposez des fichiers pour un téléversement reprenab</p>
      </div>

      {files.map(file => (
        <div key={file.id} style={styles.fileItem}>
          <span>{file.name}</span>
          <span>{file.progress}%</span>
          <span>{file.status}</span>
        </div>
      ))}

      <button onClick={() => actions.upload()}>
        Téléverser
      </button>
    </div>
  );
}

Pause et Reprise

Avec les téléversements par morceaux, vous pouvez mettre en pause et reprendre :

function PausableUploader() {
  const { files, actions, getDropProps, getInputProps } = useDropup({
    upload: createChunkedUploader({
      url: '/api/upload/chunk',
    }),
  });

  return (
    <div>
      <div {...getDropProps()}>
        <input {...getInputProps()} />
        <p>Déposez des fichiers ici</p>
      </div>

      {files.map(file => (
        <div key={file.id}>
          <span>{file.name}</span>
          <span>{file.progress}%</span>
          <span>{file.status}</span>

          {file.status === 'uploading' && (
            <button onClick={() => actions.cancel(file.id)}>
              Pause
            </button>
          )}

          {file.status === 'paused' && (
            <button onClick={() => actions.retry([file.id])}>
              Reprendre
            </button>
          )}
        </div>
      ))}

      <button onClick={() => actions.upload()}>
        Tout Démarrer
      </button>
    </div>
  );
}

Suivi de la Progression avec les Morceaux

import { useState } from 'react';

function DetailedChunkProgress() {
  const [chunkProgress, setChunkProgress] = useState<Map<string, number[]>>(
    new Map()
  );

  const { files, actions, getDropProps, getInputProps } = useDropup({
    upload: createChunkedUploader({
      url: '/api/upload/chunk',
      chunkSize: 1024 * 1024, // Morceaux de 1MB pour la visibilité

      onChunkProgress: (file, chunkIndex, progress) => {
        setChunkProgress(prev => {
          const next = new Map(prev);
          const fileProgress = next.get(file.id) || [];
          fileProgress[chunkIndex] = progress;
          next.set(file.id, fileProgress);
          return next;
        });
      },
    }),
  });

  return (
    <div>
      <div {...getDropProps()} style={styles.dropzone}>
        <input {...getInputProps()} />
        <p>Déposez des fichiers ici</p>
      </div>

      {files.map(file => {
        const chunks = chunkProgress.get(file.id) || [];
        const totalChunks = Math.ceil(file.size / (1024 * 1024));

        return (
          <div key={file.id} style={styles.fileCard}>
            <p>{file.name}</p>

            {/* Visualisation de la progression des morceaux */}
            <div style={styles.chunkGrid}>
              {Array.from({ length: totalChunks }).map((_, i) => (
                <div
                  key={i}
                  style={{
                    ...styles.chunkBlock,
                    backgroundColor: chunks[i] === 100
                      ? '#4caf50'
                      : chunks[i] > 0
                      ? '#8bc34a'
                      : '#eee',
                  }}
                  title={`Morceau ${i + 1} : ${chunks[i] || 0}%`}
                />
              ))}
            </div>

            <p>Globalement : {file.progress}%</p>
          </div>
        );
      })}

      <button onClick={() => actions.upload()}>
        Téléverser
      </button>
    </div>
  );
}

const styles = {
  dropzone: {
    border: '2px dashed #ccc',
    padding: 40,
    textAlign: 'center' as const,
    marginBottom: 20,
  },
  fileCard: {
    padding: 16,
    border: '1px solid #eee',
    borderRadius: 8,
    marginBottom: 12,
  },
  chunkGrid: {
    display: 'flex',
    flexWrap: 'wrap' as const,
    gap: 4,
    margin: '12px 0',
  },
  chunkBlock: {
    width: 20,
    height: 20,
    borderRadius: 4,
    transition: 'background-color 0.2s',
  },
};

Recommandations de Taille de Morceau

Taille du Fichier	Taille de Morceau Recommandée
< 10 MB	Pas besoin de découpage
10-100 MB	5 MB
100 MB - 1 GB	10 MB
> 1 GB	20-50 MB

Performance

Morceaux plus gros = moins de requêtes, mais récupération plus longue en cas d'échec. Morceaux plus petits = plus de surcharge, mais meilleure reprenabilité.