Chunked Uploads

විශාල ගොනු කුඩා chunks වලට බෙදා upload කරන්න. මෙය සක්‍රීය කරයි:

• Server limits වලට වඩා විශාල ගොනු upload කිරීම
• Network failures පසු resumable uploads
• වඩා හොඳ progress tracking
• අඩු memory භාවිතය

මූලික Chunked Upload

import { useDropup, createChunkedUploader } from '@samithahansaka/dropup';

function ChunkedUploader() {
  const { files, actions, state, getDropProps, getInputProps } = useDropup({
    upload: createChunkedUploader({
      url: '/api/upload/chunk',
      chunkSize: 5 * 1024 * 1024, // 5MB chunks
    }),
  });

  return (
    <div>
      <div {...getDropProps()} style={styles.dropzone}>
        <input {...getInputProps()} />
        <p>විශාල ගොනු මෙතැනට දමන්න - ඒවා chunks වලින් upload වේ</p>
      </div>

      {files.map(file => (
        <div key={file.id} style={styles.fileItem}>
          <span>{file.name}</span>
          <span>{(file.size / 1024 / 1024).toFixed(1)} MB</span>

          {file.status === 'uploading' && (
            <div style={styles.progressBar}>
              <div
                style={{
                  ...styles.progress,
                  width: `${file.progress}%`,
                }}
              />
            </div>
          )}

          <span>{file.status}</span>
        </div>
      ))}

      <button
        onClick={() => actions.upload()}
        disabled={state.isUploading}
      >
        Upload කරන්න
      </button>
    </div>
  );
}

const styles = {
  dropzone: {
    border: '2px dashed #ccc',
    borderRadius: 8,
    padding: 40,
    textAlign: 'center' as const,
    marginBottom: 20,
  },
  fileItem: {
    display: 'flex',
    alignItems: 'center',
    gap: 12,
    padding: 12,
    borderBottom: '1px solid #eee',
  },
  progressBar: {
    flex: 1,
    height: 8,
    backgroundColor: '#eee',
    borderRadius: 4,
    overflow: 'hidden',
  },
  progress: {
    height: '100%',
    backgroundColor: '#4caf50',
    transition: 'width 0.2s',
  },
};

Chunked Upload Options

createChunkedUploader({
  // අවශ්‍යයි
  url: '/api/upload/chunk',

  // විකල්ප settings
  chunkSize: 5 * 1024 * 1024,  // 5MB (පෙරනිමි)
  concurrency: 3,              // Parallel chunks (පෙරනිමි: 1)
  retries: 3,                  // Failed chunks නැවත උත්සාහ (පෙරනිමි: 3)

  // සියලුම chunk requests සඳහා Headers
  headers: {
    'Authorization': 'Bearer token',
  },

  // Custom chunk metadata
  getChunkMeta: (file, chunkIndex, totalChunks) => ({
    fileId: file.id,
    fileName: file.name,
    chunkIndex,
    totalChunks,
  }),
});

Server-Side Handling

ඔබගේ server එකට chunk uploads හසුරුවා ඒවා නැවත එකතු කිරීමට හැකි විය යුතුය.

උදාහරණය: Node.js/Express

const express = require('express');
const multer = require('multer');
const fs = require('fs');
const path = require('path');

const app = express();
const upload = multer({ dest: 'chunks/' });

const uploadState = new Map();

app.post('/api/upload/chunk', upload.single('chunk'), (req, res) => {
  const { fileId, fileName, chunkIndex, totalChunks } = req.body;

  // Chunk info ගබඩා කරන්න
  if (!uploadState.has(fileId)) {
    uploadState.set(fileId, {
      fileName,
      totalChunks: parseInt(totalChunks),
      chunks: [],
    });
  }

  const state = uploadState.get(fileId);
  state.chunks.push({
    index: parseInt(chunkIndex),
    path: req.file.path,
  });

  // සියලුම chunks ලැබුණාද පරීක්ෂා කරන්න
  if (state.chunks.length === state.totalChunks) {
    // Index අනුව chunks sort කරන්න
    state.chunks.sort((a, b) => a.index - b.index);

    // Chunks ඒකාබද්ධ කරන්න
    const finalPath = path.join('uploads', fileName);
    const writeStream = fs.createWriteStream(finalPath);

    for (const chunk of state.chunks) {
      const data = fs.readFileSync(chunk.path);
      writeStream.write(data);
      fs.unlinkSync(chunk.path); // Chunk cleanup
    }

    writeStream.end();
    uploadState.delete(fileId);

    return res.json({
      complete: true,
      url: `/uploads/${fileName}`,
    });
  }

  res.json({
    complete: false,
    received: state.chunks.length,
    total: state.totalChunks,
  });
});

tus Protocol

ශක්තිමත් resumable uploads සඳහා, tus protocol භාවිතා කරන්න:

import { useDropup } from '@samithahansaka/dropup';
import { createTusUploader } from '@samithahansaka/dropup/tus';

function TusUploader() {
  const { files, actions, state, getDropProps, getInputProps } = useDropup({
    upload: createTusUploader({
      endpoint: 'https://tusd.tusdemo.net/files/',

      // විකල්ප settings
      chunkSize: 5 * 1024 * 1024,
      retryDelays: [0, 1000, 3000, 5000],

      // Server සඳහා Metadata
      metadata: {
        filetype: 'file.type',
        filename: 'file.name',
      },

      // localStorage වලින් resume කරන්න
      storeFingerprintForResuming: true,
    }),

    onUploadComplete: (file) => {
      console.log('tus upload සම්පූර්ණයි:', file.uploadedUrl);
    },
  });

  return (
    <div>
      <div {...getDropProps()} style={styles.dropzone}>
        <input {...getInputProps()} />
        <p>Resumable upload සඳහා ගොනු දමන්න</p>
      </div>

      {files.map(file => (
        <div key={file.id} style={styles.fileItem}>
          <span>{file.name}</span>
          <span>{file.progress}%</span>
          <span>{file.status}</span>
        </div>
      ))}

      <button onClick={() => actions.upload()}>
        Upload කරන්න
      </button>
    </div>
  );
}

Pause සහ Resume

Chunked uploads සමඟ, ඔබට pause සහ resume කළ හැකිය:

function PausableUploader() {
  const { files, actions, getDropProps, getInputProps } = useDropup({
    upload: createChunkedUploader({
      url: '/api/upload/chunk',
    }),
  });

  return (
    <div>
      <div {...getDropProps()}>
        <input {...getInputProps()} />
        <p>ගොනු මෙතැනට දමන්න</p>
      </div>

      {files.map(file => (
        <div key={file.id}>
          <span>{file.name}</span>
          <span>{file.progress}%</span>
          <span>{file.status}</span>

          {file.status === 'uploading' && (
            <button onClick={() => actions.cancel(file.id)}>
              විරාම
            </button>
          )}

          {file.status === 'paused' && (
            <button onClick={() => actions.retry([file.id])}>
              නැවත ආරම්භ
            </button>
          )}
        </div>
      ))}

      <button onClick={() => actions.upload()}>
        සියල්ල ආරම්භ කරන්න
      </button>
    </div>
  );
}

Chunks සමඟ Progress Tracking

import { useState } from 'react';

function DetailedChunkProgress() {
  const [chunkProgress, setChunkProgress] = useState<Map<string, number[]>>(
    new Map()
  );

  const { files, actions, getDropProps, getInputProps } = useDropup({
    upload: createChunkedUploader({
      url: '/api/upload/chunk',
      chunkSize: 1024 * 1024, // දෘශ්‍යතාව සඳහා 1MB chunks

      onChunkProgress: (file, chunkIndex, progress) => {
        setChunkProgress(prev => {
          const next = new Map(prev);
          const fileProgress = next.get(file.id) || [];
          fileProgress[chunkIndex] = progress;
          next.set(file.id, fileProgress);
          return next;
        });
      },
    }),
  });

  return (
    <div>
      <div {...getDropProps()} style={styles.dropzone}>
        <input {...getInputProps()} />
        <p>ගොනු මෙතැනට දමන්න</p>
      </div>

      {files.map(file => {
        const chunks = chunkProgress.get(file.id) || [];
        const totalChunks = Math.ceil(file.size / (1024 * 1024));

        return (
          <div key={file.id} style={styles.fileCard}>
            <p>{file.name}</p>

            {/* Chunk progress visualization */}
            <div style={styles.chunkGrid}>
              {Array.from({ length: totalChunks }).map((_, i) => (
                <div
                  key={i}
                  style={{
                    ...styles.chunkBlock,
                    backgroundColor: chunks[i] === 100
                      ? '#4caf50'
                      : chunks[i] > 0
                      ? '#8bc34a'
                      : '#eee',
                  }}
                  title={`Chunk ${i + 1}: ${chunks[i] || 0}%`}
                />
              ))}
            </div>

            <p>සමස්ත: {file.progress}%</p>
          </div>
        );
      })}

      <button onClick={() => actions.upload()}>
        Upload කරන්න
      </button>
    </div>
  );
}

const styles = {
  dropzone: {
    border: '2px dashed #ccc',
    padding: 40,
    textAlign: 'center' as const,
    marginBottom: 20,
  },
  fileCard: {
    padding: 16,
    border: '1px solid #eee',
    borderRadius: 8,
    marginBottom: 12,
  },
  chunkGrid: {
    display: 'flex',
    flexWrap: 'wrap' as const,
    gap: 4,
    margin: '12px 0',
  },
  chunkBlock: {
    width: 20,
    height: 20,
    borderRadius: 4,
    transition: 'background-color 0.2s',
  },
};

Chunk Size නිර්දේශ

ගොනු ප්‍රමාණය	නිර්දේශිත Chunk Size
< 10 MB	Chunking අවශ්‍ය නැත
10-100 MB	5 MB
100 MB - 1 GB	10 MB
> 1 GB	20-50 MB

කාර්ය සාධනය

විශාල chunks = අඩු requests, නමුත් අසාර්ථකත්වයේදී දිගු recovery. කුඩා chunks = වැඩි overhead, නමුත් වඩා හොඳ resumability.