Socket.IO এর মাধ্যমে আপনি খুব সহজেই রিয়েল-টাইমে ফাইল ট্রান্সফার করতে পারেন। এটি ইভেন্ট-ভিত্তিক যোগাযোগের মাধ্যমে কাজ করে, এবং ফাইলটি ছোট সেগমেন্টে ভাগ করে ক্লায়েন্ট এবং সার্ভারের মধ্যে প্রেরণ করা হয়। এই প্রক্রিয়াটি সাধারনত binary data ট্রান্সফারের মাধ্যমে সম্পন্ন করা হয়।
এখানে আমরা Socket.IO ব্যবহার করে একটি বেসিক ফাইল ট্রান্সফার সিস্টেম তৈরি করব, যা ক্লায়েন্ট এবং সার্ভারের মধ্যে ফাইল প্রেরণ করতে সহায়তা করবে।
প্রোজেক্ট কাঠামো:
- Server-side (Node.js + Socket.IO)
- Client-side (HTML + JavaScript)
1. Server-Side (Node.js + Socket.IO) - ফাইল ট্রান্সফার সেটআপ
Step 1: প্রয়োজনীয় প্যাকেজ ইনস্টল করা
প্রথমে, Express, Socket.IO এবং fs প্যাকেজ ইনস্টল করতে হবে। যদি এটি না করা থাকে, টার্মিনালে নিচের কমান্ড রান করুন:
npm init -y
npm install express socket.ioStep 2: সার্ভার তৈরি করা
এখন, একটি নতুন server.js ফাইল তৈরি করুন এবং নিচের কোডটি যোগ করুন:
const express = require('express');
const http = require('http');
const socketIo = require('socket.io');
const fs = require('fs');
// Express অ্যাপ তৈরি করা
const app = express();
const server = http.createServer(app);
const io = socketIo(server);
// স্ট্যাটিক ফাইল সার্ভ করা (HTML, CSS, JS)
app.use(express.static('public'));
// ফাইল ট্রান্সফার ইভেন্ট হ্যান্ডল করা
io.on('connection', (socket) => {
console.log('A user connected');
// ক্লায়েন্ট থেকে ফাইল রিসিভ করা
socket.on('send file', (data) => {
console.log('Received file: ', data.fileName);
// ফাইল ডেটা সেভ করা
const filePath = `./uploads/${data.fileName}`;
fs.writeFile(filePath, data.fileData, 'binary', (err) => {
if (err) {
console.error('File saving error: ', err);
socket.emit('file error', 'Error saving file');
} else {
console.log('File saved successfully');
socket.emit('file received', `File ${data.fileName} received successfully`);
}
});
});
socket.on('disconnect', () => {
console.log('User disconnected');
});
});
server.listen(3000, () => {
console.log('Server running on http://localhost:3000');
});ব্যাখ্যা:
socket.on('send file', ...): ক্লায়েন্ট থেকে ফাইল ডেটা গ্রহণ করা হচ্ছে।fs.writeFile(): ফাইল ডেটাbinaryফরম্যাটে সেভ করা হচ্ছে।socket.emit('file received', ...): সার্ভার ক্লায়েন্টকে ফাইল সফলভাবে গ্রহণের মেসেজ পাঠাচ্ছে।
2. Client-Side (HTML + JavaScript) - ফাইল আপলোড এবং ট্রান্সফার
Step 1: HTML ফাইল তৈরি করা
একটি নতুন ফোল্ডার তৈরি করুন, যাকে আমরা public বলব, এবং সেখানে index.html ফাইল তৈরি করুন:
<!DOCTYPE html>
<html lang="en">
<head>
<meta charset="UTF-8">
<meta name="viewport" content="width=device-width, initial-scale=1.0">
<title>Socket.IO File Transfer</title>
<style>
#fileInput {
margin: 20px;
}
</style>
</head>
<body>
<h1>Socket.IO File Transfer</h1>
<input type="file" id="fileInput">
<button onclick="sendFile()">Upload File</button>
<p id="status"></p>
<script src="/socket.io/socket.io.js"></script>
<script>
const socket = io();
// ফাইল আপলোড ফাংশন
function sendFile() {
const fileInput = document.getElementById('fileInput');
const file = fileInput.files[0];
if (!file) {
alert('Please select a file first');
return;
}
const reader = new FileReader();
// ফাইল রিড করা
reader.onload = function(e) {
const fileData = e.target.result;
const fileName = file.name;
// সার্ভারে ফাইল পাঠানো
socket.emit('send file', {
fileName: fileName,
fileData: fileData
});
};
// ফাইল রিড করা (binary data)
reader.readAsBinaryString(file);
}
// সার্ভার থেকে ফাইল প্রাপ্তির তথ্য
socket.on('file received', (message) => {
document.getElementById('status').innerText = message;
});
// সার্ভার থেকে এরর মেসেজ গ্রহণ
socket.on('file error', (errorMessage) => {
document.getElementById('status').innerText = errorMessage;
});
</script>
</body>
</html>ব্যাখ্যা:
<input type="file" id="fileInput">: ব্যবহারকারী ফাইল আপলোড করতে এখানে ফাইল সিলেক্টর রয়েছে।FileReaderAPI: ফাইলটি binary string ফরম্যাটে রিড করা হচ্ছে, যেহেতু Socket.IO দিয়ে binary data ট্রান্সফার করা হয়।socket.emit('send file', ...): ফাইল ডেটা সার্ভারে পাঠানো হচ্ছে।
3. ফাইল আপলোড এবং ট্রান্সফার পরীক্ষা করা
এখন, আপনার server.js এবং index.html ফাইলগুলো ঠিকভাবে তৈরি হয়ে গেছে। server.js চালু করতে টার্মিনালে নিচের কমান্ডটি রান করুন:
node server.jsএটি সার্ভার চালু করবে, এবং আপনি http://localhost:3000-এ গিয়ে আপনার ফাইল আপলোড এবং ট্রান্সফার অ্যাপ্লিকেশন পরীক্ষা করতে পারবেন।
ফাইল সংরক্ষণ এবং নিরাপত্তা
- ফাইল সেভিং: এই উদাহরণে, ফাইলটি সিস্টেমে একটি
uploadsফোল্ডারে সেভ করা হচ্ছে। আপনাকে নিশ্চিত করতে হবে যে সার্ভারটি সেই ডিরেক্টরিতে লিখতে পারবে। - নিরাপত্তা: ফাইল আপলোড করার সময় বড় ফাইল সাইজ বা অস্বীকৃত ফাইল টাইপ পরীক্ষা করা উচিত। আপনি মাইম টাইপ যাচাই, ফাইল সাইজ যাচাই বা virus scanning ব্যবহার করতে পারেন।
সারসংক্ষেপ
- Socket.IO এর মাধ্যমে ফাইল ট্রান্সফার খুবই কার্যকরী এবং রিয়েল-টাইম।
- FileReader API ব্যবহার করে ফাইল ডেটা binary ফরম্যাটে রিড করা হয় এবং Socket.IO এর মাধ্যমে সার্ভারে পাঠানো হয়।
- ফাইল গ্রহণের পরে fs.writeFile ফাংশনের মাধ্যমে ফাইল সিস্টেমে সেভ করা হয়।
- এটি একটি বেসিক ফাইল ট্রান্সফার উদাহরণ, যেখানে আপনি বড় ফাইল, মাইম টাইপ যাচাই, বা উন্নত ফিচার যোগ করতে পারেন।
File Transfer হল একটি প্রক্রিয়া যা মাধ্যমে একটি সিস্টেম থেকে অন্য সিস্টেমে ফাইলগুলি স্থানান্তরিত করা হয়। এটি এক সিস্টেম থেকে অন্য সিস্টেমে ডেটা বা ফাইল সরানো, শেয়ার করা বা আপলোড/ডাউনলোড করা। ফাইল ট্রান্সফার প্রযুক্তি ইন্টারনেট এবং লোকাল নেটওয়ার্কে সিস্টেম বা ব্যবহারকারীদের মধ্যে ডেটা আদান-প্রদান করার জন্য ব্যবহৃত হয়।
ফাইল ট্রান্সফার ব্যবস্থাগুলি বিভিন্ন ধরনের ডেটা (যেমন ডকুমেন্ট, ছবি, অডিও, ভিডিও) স্থানান্তরের জন্য গুরুত্বপূর্ণ এবং আধুনিক ওয়েব অ্যাপ্লিকেশন, ক্লাউড সেবা, এবং অফিস সফটওয়্যার সিস্টেমে ব্যাপকভাবে ব্যবহৃত হয়।
File Transfer এর প্রয়োজনীয়তা
- ডেটা শেয়ারিং এবং এক্সচেঞ্জ:
- ফাইল ট্রান্সফার ব্যবস্থার মাধ্যমে ব্যবহারকারীরা নিজেদের মধ্যে বা বিভিন্ন সিস্টেমের মধ্যে ডেটা শেয়ার করতে পারে। এটি দলগত কাজ, পেশাদার বা একাডেমিক সিস্টেমে গুরুত্বপূর্ণ।
- Use Case: ক্লাউড স্টোরেজ সেবা যেমন Google Drive, Dropbox বা OneDrive-এ ফাইল শেয়ারিং।
- ব্যাকআপ এবং রিকভারি:
- ফাইল ট্রান্সফার সিস্টেম সিস্টেম ডেটা ব্যাকআপ এবং রিকভারি প্রক্রিয়া সহজ করে তোলে। এটি সিস্টেমের গুরুত্বপূর্ণ ফাইলগুলি সংরক্ষণ করার জন্য ব্যবহার হয়, যা হারিয়ে গেলে পুনরুদ্ধার করা যেতে পারে।
- Use Case: ফাইল সার্ভার থেকে ফাইল ব্যাকআপ নেওয়া বা ক্লাউডে ফাইল সিঙ্ক করা।
- ফাইল আপলোড এবং ডাউনলোড:
- ফাইল ট্রান্সফার প্রক্রিয়া ইন্টারনেটে বা লোকাল নেটওয়ার্কে ফাইল আপলোড এবং ডাউনলোড করার জন্য প্রয়োজনীয়। এটি ওয়েব সাইট, মোবাইল অ্যাপ, এবং সফটওয়্যারে ব্যবহৃত হয়।
- Use Case: ওয়েবসাইটে প্রোফাইল পিকচার আপলোড করা বা ডাউনলোড সেন্টার থেকে ফাইল ডাউনলোড করা।
- রিমোট অ্যাক্সেস:
- ফাইল ট্রান্সফারের মাধ্যমে ব্যবহারকারীরা রিমোট অবস্থান থেকে তাদের প্রয়োজনীয় ফাইল অ্যাক্সেস এবং ম্যানেজ করতে পারেন। এটি ভার্চুয়াল প্রাইভেট নেটওয়ার্ক (VPN) বা রিমোট ডেস্কটপের মাধ্যমে করা যেতে পারে।
- Use Case: কাজের ফাইলগুলি রিমোট অফিসে গিয়ে অ্যাক্সেস করা।
- প্রোডাক্ট ডেলিভারি:
- অনেক বাণিজ্যিক অ্যাপ্লিকেশন বা সার্ভিসে ফাইল ট্রান্সফার ব্যবহৃত হয় যেখানে ক্লায়েন্টকে একটি প্রোডাক্ট বা ডকুমেন্ট প্রদান করা হয়।
- Use Case: সফটওয়্যার ডাউনলোড বা ক্লাউড পরিষেবা প্রদানকারীদের মাধ্যমে প্রোডাক্ট বিতরণ।
- ক্লাউড সিঙ্ক এবং শেয়ারিং:
- ক্লাউড বেসড ফাইল ট্রান্সফার সিস্টেম ব্যবহারকারীদেরকে তাদের ফাইল সিঙ্ক করার, শেয়ার করার এবং রিমোট অবস্থান থেকে অ্যাক্সেস করার সুযোগ দেয়।
- Use Case: ক্লাউডে ফাইল আপলোড করা এবং অন্য ব্যবহারকারীদের সাথে শেয়ার করা।
File Transfer এর কৌশল
ফাইল ট্রান্সফার করার জন্য বিভিন্ন কৌশল এবং প্রযুক্তি ব্যবহার করা হয়, যা নির্ভর করে ট্রান্সফারের স্কেল, নিরাপত্তা এবং ট্রান্সফার স্পিডের উপর। নিচে কিছু সাধারণ কৌশল এবং প্রযুক্তি তুলে ধরা হল:
1. FTP (File Transfer Protocol)
- File Transfer Protocol (FTP) একটি প্রাচীন কিন্তু জনপ্রিয় কৌশল, যা ফাইল ট্রান্সফারের জন্য ব্যবহার করা হয়। এটি একটি ক্লায়েন্ট-সার্ভার প্রোটোকল যা ফাইল পাঠানো এবং গ্রহণ করার জন্য ব্যবহৃত হয়।
- Security: FTP তে নিরাপত্তা কম থাকে, তবে SFTP (Secure FTP) এবং FTPS ফাইল ট্রান্সফারের জন্য সুরক্ষা প্রদান করে।
- Use Case: ওয়েব সার্ভারের সাথে ফাইল আপলোড এবং ডাউনলোড করার জন্য FTP ব্যবহৃত হয়।
2. HTTP/HTTPS (Hypertext Transfer Protocol/Secure)
- HTTP এবং HTTPS হল ওয়ার্ল্ড ওয়াইড ওয়েবের প্রাথমিক প্রোটোকল। HTTP সিস্টেমে ফাইল ট্রান্সফারের জন্য ওয়েব সার্ভার এবং ক্লায়েন্ট (ব্রাউজার) এর মধ্যে ফাইল পাঠানো হয়। HTTPS হল HTTP এর নিরাপদ সংস্করণ যা এনক্রিপশনের মাধ্যমে সুরক্ষা নিশ্চিত করে।
- Security: HTTPS নিরাপদ ফাইল ট্রান্সফারের জন্য ব্যবহার করা হয়, বিশেষ করে যেখানে সংবেদনশীল ডেটা ট্রান্সফার করা হয়।
- Use Case: ওয়েব অ্যাপ্লিকেশন থেকে ফাইল ডাউনলোড বা আপলোড করার জন্য HTTP/HTTPS ব্যবহৃত হয়।
3. P2P (Peer-to-Peer) File Transfer
- P2P ফাইল ট্রান্সফারের মাধ্যমে সরাসরি দুটি ডিভাইসের মধ্যে ডেটা পাঠানো হয়। এখানে একটি মধ্যবর্তী সার্ভারের প্রয়োজন হয় না, ফলে ট্রান্সফারের গতি আরও দ্রুত হতে পারে।
- Use Case: BitTorrent এবং অন্যান্য ফাইল শেয়ারিং সিস্টেমে পি২পি ফাইল ট্রান্সফার ব্যবহৃত হয়।
4. SFTP (Secure File Transfer Protocol)
- SFTP হল FTP এর একটি সুরক্ষিত সংস্করণ যা SSH (Secure Shell) প্রোটোকল ব্যবহার করে। এটি ডেটা এনক্রিপশন প্রদান করে, যা ফাইল ট্রান্সফারকে নিরাপদ করে তোলে।
- Security: SFTP এনক্রিপশনের মাধ্যমে ডেটা সুরক্ষা নিশ্চিত করে এবং সাধারণ FTP এর চেয়ে অনেক বেশি নিরাপদ।
- Use Case: সুরক্ষিত ফাইল ট্রান্সফারের জন্য SFTP ব্যবহৃত হয়, যেমন একটি সিকিউর ফাইল শেয়ারিং সার্ভিস বা সিস্টেম।
5. Cloud-Based File Transfer
- Cloud storage services যেমন Google Drive, Dropbox, OneDrive ইত্যাদি ক্লাউড বেসড ফাইল ট্রান্সফারের জন্য জনপ্রিয় প্ল্যাটফর্ম। ব্যবহারকারীরা এই প্ল্যাটফর্মগুলো ব্যবহার করে ফাইল আপলোড, ডাউনলোড এবং শেয়ার করতে পারেন।
- Security: এই সেবা গুলি সাধারণত এনক্রিপশন সমর্থন করে এবং two-factor authentication (2FA) এর মাধ্যমে নিরাপত্তা নিশ্চিত করা হয়।
- Use Case: ডেটা সিঙ্ক, শেয়ার এবং রিমোট অ্যাক্সেসের জন্য ক্লাউড-ভিত্তিক ফাইল ট্রান্সফার ব্যবহৃত হয়।
6. USB বা Physical Storage Device
- USB drives এবং অন্যান্য ফিজিক্যাল স্টোরেজ ডিভাইস ব্যবহার করে ফাইল ট্রান্সফারও একটি প্রচলিত কৌশল। এটি প্রধানত স্থানীয় নেটওয়ার্কের বাইরে বা দ্রুত ট্রান্সফারের জন্য ব্যবহৃত হয়।
- Use Case: স্থানীয় কম্পিউটার বা ডিভাইসের মধ্যে ফাইল স্থানান্তরের জন্য USB বা অন্য ফিজিক্যাল ডিভাইস ব্যবহৃত হতে পারে।
File Transfer এর জন্য Best Practices
- ডেটা এনক্রিপশন: ফাইল ট্রান্সফারের সময় ডেটা এনক্রিপশন ব্যবহার করা উচিৎ, বিশেষ করে যদি সংবেদনশীল ডেটা ট্রান্সফার করা হয় (যেমন ফিনান্সিয়াল তথ্য, স্বাস্থ্য সম্পর্কিত ডেটা)।
- Error Handling: ফাইল ট্রান্সফার প্রক্রিয়ার মধ্যে কোনো ত্রুটি ঘটলে তা সঠিকভাবে হ্যান্ডল করতে হবে এবং ব্যবহারকারীদের উপযুক্ত বার্তা প্রদান করতে হবে।
- ব্যাচ ট্রান্সফার: যদি ফাইলগুলির আকার বড় হয়, তাহলে ব্যাচে ফাইলগুলি ট্রান্সফার করতে পারেন যাতে লোড ম্যানেজমেন্ট ভালো হয়।
- Network Efficiency: বড় ফাইল ট্রান্সফার করার সময় নেটওয়ার্ক ব্যান্ডউইথের উপর চাপ না ফেলতে পারলে ট্রান্সফার প্রক্রিয়া আরও কার্যকরী হবে।
- কমপ্লেক্সিটি কমানো: ফাইল ট্রান্সফারের প্রক্রিয়া যতটা সম্ভব সহজ এবং সোজা রাখতে হবে, যাতে ব্যবহারকারীরা জটিলতা অনুভব না করে।
সারসংক্ষেপ
File Transfer হল সিস্টেমে বা নেটওয়ার্কে ফাইল স্থানান্তরের একটি প্র
ক্রিয়া, যা দ্রুত, সুরক্ষিত এবং নির্ভরযোগ্য হতে হবে। ফাইল ট্রান্সফার প্রক্রিয়া বিভিন্ন প্রযুক্তি এবং কৌশলের মাধ্যমে সম্পন্ন হয়, যেমন FTP, SFTP, HTTP, P2P ফাইল শেয়ারিং, এবং Cloud Storage Services। সঠিক নিরাপত্তা ব্যবস্থাপনা এবং দক্ষ কৌশল ব্যবহার করে ফাইল ট্রান্সফার প্রক্রিয়া উন্নত করা সম্ভব।
Socket.IO এর মাধ্যমে binary data এবং buffer ব্যবহার করে ফাইল আদান-প্রদান করা সম্ভব। এটি বিশেষভাবে বড় ডেটা বা ফাইলের জন্য উপযোগী, যেখানে সাধারণ টেক্সট ডেটা এর চেয়ে বেশি জায়গা নেয়। ফাইল আদান-প্রদান করতে Buffer ব্যবহার করা হয়, যা Node.js তে বাইনারি ডেটাকে প্রক্রিয়া করতে সহায়তা করে।
এখানে Socket.IO এবং Buffer ব্যবহার করে কিভাবে ফাইল পাঠানো ও গ্রহণ করা যায় তা বিস্তারিত দেখানো হয়েছে।
1. Buffer কি?
Buffer হলো একটি এক্সটেনশন যেটি Node.js তে বাইনারি ডেটা প্রক্রিয়া করার জন্য ব্যবহৃত হয়। এটি মূলত মেমোরিতে বাইনারি ডেটা সঞ্চয় করতে সহায়তা করে, যা পরে ডিস্ট্রিবিউট বা প্রসেস করা যায়।
2. Socket.IO তে Binary Data ও Buffer ব্যবহার করে ফাইল পাঠানো
Socket.IO তে ফাইল পাঠাতে, সাধারণত binary data (যেমন একটি ছবি বা PDF ফাইল) Buffer হিসেবে পাঠানো হয়। Socket.IO দুইটি ফাংশন সরবরাহ করে, যা আপনার ফাইল বা বাইনারি ডেটা পাঠানোর জন্য কাজে আসে:
socket.emit()– ক্লায়েন্ট বা সার্ভার থেকে ডেটা পাঠানোর জন্য।socket.on()– ফাইল বা ডেটা গ্রহণ করার জন্য।
3. ফাইল পাঠানোর উদাহরণ
3.1 Server Side (Node.js)
ফাইল পাঠানো:
const http = require('http');
const socketIo = require('socket.io');
const fs = require('fs');
// HTTP সার্ভার তৈরি
const server = http.createServer((req, res) => {
res.writeHead(200, {'Content-Type': 'text/plain'});
res.end('Socket.IO Server');
});
// Socket.IO সার্ভার তৈরি
const io = socketIo(server);
// ক্লায়েন্ট কানেক্ট হলে
io.on('connection', (socket) => {
console.log('A user connected');
// ফাইল পাঠানোর জন্য
socket.on('sendFile', (filePath) => {
console.log('Sending file:', filePath);
// ফাইল থেকে বাইনারি ডেটা নেওয়া
fs.readFile(filePath, (err, data) => {
if (err) {
console.error('Error reading file:', err);
return;
}
// বাইনারি ডেটা পাঠানো
socket.emit('receiveFile', data);
});
});
socket.on('disconnect', () => {
console.log('A user disconnected');
});
});
// সার্ভার 3000 পোর্টে চলবে
server.listen(3000, () => {
console.log('Server running on http://localhost:3000');
});এখানে fs.readFile() ফাংশন ব্যবহার করে ফাইলের বাইনারি ডেটা Buffer আকারে পাঠানো হচ্ছে।
3.2 Client Side (HTML + JavaScript)
ফাইল গ্রহণ এবং ডিসপ্লে করা:
<!DOCTYPE html>
<html lang="en">
<head>
<meta charset="UTF-8">
<meta name="viewport" content="width=device-width, initial-scale=1.0">
<title>Socket.IO File Transfer</title>
<script src="/socket.io/socket.io.js"></script>
</head>
<body>
<h1>Socket.IO File Transfer</h1>
<button onclick="requestFile()">Request File</button>
<h2>Received File:</h2>
<img id="fileDisplay" src="" alt="File will appear here"/>
<script>
var socket = io();
// ফাইল রিকোয়েস্ট পাঠানো
function requestFile() {
socket.emit('sendFile', 'path/to/your/file.jpg'); // ফাইল পাথ সার্ভারে পাঠানো
}
// ফাইল গ্রহণ করা এবং ডিসপ্লে করা
socket.on('receiveFile', (fileBuffer) => {
console.log('Received file data:', fileBuffer);
// Image element এ ফাইলটি ডিসপ্লে করা
var arrayBufferView = new Uint8Array(fileBuffer);
var blob = new Blob([arrayBufferView], {type: 'image/jpeg'});
var urlCreator = window.URL || window.webkitURL;
var imageUrl = urlCreator.createObjectURL(blob);
document.getElementById('fileDisplay').src = imageUrl;
});
</script>
</body>
</html>এখানে, ক্লায়েন্ট socket.emit('sendFile') দিয়ে সার্ভারে ফাইল রিকোয়েস্ট পাঠাচ্ছে এবং সার্ভার socket.emit('receiveFile') দিয়ে ফাইলের বাইনারি ডেটা পাঠাচ্ছে। ক্লায়েন্ট এরপর Blob ব্যবহার করে এই বাইনারি ডেটাকে একটি ইমেজ হিসেবে প্রদর্শন করছে।
4. ফাইলের বড় সাইজ হ্যান্ডলিং
বড় সাইজের ফাইলের জন্য, Socket.IO তে buffer chunking বা streaming ব্যবহার করা উচিত। যদি আপনার ফাইল বড় হয়, তবে আপনি ফাইলকে ছোট ছোট অংশে (chunks) ভাগ করে পাঠাতে পারেন।
Chunked File Sending Example:
4.1 Server Side (Node.js with Chunking)
const CHUNK_SIZE = 1024 * 1024; // 1MB
socket.on('sendFile', (filePath) => {
const fileStats = fs.statSync(filePath);
const totalChunks = Math.ceil(fileStats.size / CHUNK_SIZE);
let currentChunk = 0;
// ফাইল পাঠানো chunk-wise
const stream = fs.createReadStream(filePath, { highWaterMark: CHUNK_SIZE });
stream.on('data', (chunk) => {
socket.emit('receiveFileChunk', { chunk, currentChunk, totalChunks });
currentChunk++;
});
stream.on('end', () => {
socket.emit('receiveFileComplete', 'File transfer complete');
});
});4.2 Client Side (Node.js with Chunking)
socket.on('receiveFileChunk', ({ chunk, currentChunk, totalChunks }) => {
console.log(`Received chunk ${currentChunk + 1} of ${totalChunks}`);
// File re-assembly can be done here if necessary
});
socket.on('receiveFileComplete', (message) => {
console.log(message); // "File transfer complete"
});এখানে highWaterMark এর মাধ্যমে আমরা ফাইলটিকে ছোট ছোট chunks এ ভাগ করে পাঠাচ্ছি, এবং ক্লায়েন্ট সেই chunks গ্রহণ করছে।
5. Error Handling
ফাইল পাঠানোর সময় কোনো ত্রুটি হলে তা হ্যান্ডেল করা জরুরি। আপনি try-catch ব্লক ব্যবহার করে এরকম ত্রুটি হ্যান্ডলিং করতে পারেন।
socket.on('sendFile', (filePath) => {
try {
fs.readFile(filePath, (err, data) => {
if (err) {
throw new Error('Error reading file');
}
socket.emit('receiveFile', data);
});
} catch (error) {
socket.emit('error', 'Failed to send file: ' + error.message);
}
});এখানে, readFile() এর মধ্যে ত্রুটি হলে সেটি ক্লায়েন্টকে জানানো হচ্ছে।
সারসংক্ষেপ
- Socket.IO তে binary data এবং Buffer ব্যবহার করে বড় ফাইল বা অন্যান্য বাইনারি ডেটা পাঠানো সম্ভব।
fs.readFile()ব্যবহার করে ফাইল থেকে বাইনারি ডেটা নেওয়া এবংsocket.emit()এর মাধ্যমে পাঠানো হয়।- Large file handling এর জন্য chunking বা streaming এর মাধ্যমে ফাইল ছোট ছোট অংশে পাঠানো হয়।
- Error handling এবং Buffer এর ব্যবহার ফাইল ট্রান্সফার প্রক্রিয়াকে আরো স্থিতিশীল ও নিরাপদ করে।
এইভাবে, আপনি Socket.IO ব্যবহার করে binary data এবং Buffer এর মাধ্যমে ফাইল পাঠাতে এবং গ্রহণ করতে পারেন।
বড় ফাইল ট্রান্সফার এমন একটি প্রক্রিয়া যেখানে ফাইলের বড় আকারের ডেটা ছোট ছোট অংশে (চাঙ্ক) ভাগ করে তা ট্রান্সফার করা হয়। এই টেকনিকটি বিশেষভাবে ব্যবহার করা হয় যখন ফাইলের আকার খুব বড় হয় এবং একবারে পুরো ফাইল ট্রান্সফার করা সম্ভব নয় বা নেটওয়ার্কের সমস্যা হতে পারে। চাঙ্কিং টেকনিকের মাধ্যমে ফাইলটি ছোট ছোট অংশে ভাগ হয়ে প্রতিটি অংশ আলাদাভাবে পাঠানো হয় এবং শেষে সেগুলোকে পুনরায় একত্রিত করা হয়।
এখানে চাঙ্কিং টেকনিক এবং বড় ফাইল ট্রান্সফার নিয়ে একটি Node.js এবং Socket.IO ব্যবহার করে উদাহরণ দেয়া হচ্ছে।
চাঙ্কিং প্রক্রিয়া: মৌলিক ধারণা
- ফাইলটিকে ছোট চাঙ্কে ভাগ করা: বড় ফাইলটিকে ছোট ছোট অংশে ভাগ করা হয় (যেমন, ১ এমবি চাঙ্ক)।
- প্রতিটি চাঙ্ক আলাদাভাবে ট্রান্সফার করা: চাঙ্কগুলো সার্ভার বা ক্লায়েন্টে একে একে পাঠানো হয়।
- ফাইলটিকে পুনরায় একত্রিত করা: সব চাঙ্ক ট্রান্সফার হওয়ার পর, সেগুলো পুনরায় একত্রিত করে মূল ফাইলটি তৈরি করা হয়।
Node.js এবং Socket.IO দিয়ে বড় ফাইল ট্রান্সফারের উদাহরণ
Step 1: ডিপেনডেন্সি ইনস্টল করা
প্রথমে Node.js এবং Socket.IO ইনস্টল করা হবে। নিচে কমান্ডগুলো দেয়া হলো:
Node.js প্রজেক্ট তৈরি করা:
mkdir chat-app cd chat-app npm init -yExpress এবং Socket.IO ইনস্টল করা:
npm install express socket.io fs
Step 2: Server-Side কোড (Node.js + Socket.IO)
এই সার্ভারে আমরা Socket.IO এর মাধ্যমে ফাইলের চাঙ্কগুলো গ্রহণ করব এবং প্রতিটি চাঙ্ককে একটি অস্থায়ী ফাইলে অ্যাপেন্ড (যৌক্তিকভাবে যোগ) করব।
server.js:
const express = require('express');
const http = require('http');
const socketIo = require('socket.io');
const fs = require('fs');
const path = require('path');
const app = express();
const server = http.createServer(app);
const io = socketIo(server);
// ফাইল রিসিভ করার লোকেশন
const filePath = path.join(__dirname, 'receivedFile.txt');
// চাঙ্কড ফাইল আপলোড হ্যান্ডলিং
io.on('connection', (socket) => {
console.log('A user connected');
// ফাইলটি রিসেট করা (আনেক সময় ফাইলটি তৈরি বা রিপ্লেস করা হয়)
fs.truncate(filePath, 0, (err) => {
if (err) throw err;
console.log('File reset');
});
// চাঙ্ক রিসিভ করা
socket.on('file-chunk', (chunk, index) => {
console.log(`Received chunk #${index}`);
// চাঙ্কটি ফাইলে অ্যাপেন্ড করা
fs.appendFile(filePath, chunk, (err) => {
if (err) throw err;
console.log(`Chunk #${index} appended successfully`);
});
});
// ফাইল ট্রান্সফার শেষ হলে
socket.on('transfer-complete', () => {
console.log('File transfer complete');
socket.emit('message', 'File received successfully');
});
socket.on('disconnect', () => {
console.log('User disconnected');
});
});
server.listen(3000, () => {
console.log('Server is running on http://localhost:3000');
});Step 3: Client-Side কোড (HTML + JavaScript)
এখানে ক্লায়েন্টে একটি ফাইল সিলেক্ট করার ইনপুট ফিল্ড থাকবে। ফাইলটি চাঙ্ক করে সার্ভারে পাঠানো হবে।
index.html:
<!DOCTYPE html>
<html lang="en">
<head>
<meta charset="UTF-8">
<meta name="viewport" content="width=device-width, initial-scale=1.0">
<title>Large File Transfer with Chunking</title>
<script src="/socket.io/socket.io.js"></script>
<script>
const socket = io('http://localhost:3000');
// ফাইল সিলেক্ট করার ফাংশন
function uploadFile(event) {
const file = event.target.files[0];
const chunkSize = 1024 * 1024; // 1MB চাঙ্ক
let offset = 0;
const totalChunks = Math.ceil(file.size / chunkSize);
// চাঙ্ক পাঠানো
function sendNextChunk() {
const reader = new FileReader();
const slice = file.slice(offset, offset + chunkSize);
reader.onload = () => {
socket.emit('file-chunk', reader.result, Math.floor(offset / chunkSize) + 1);
offset += chunkSize;
if (offset < file.size) {
sendNextChunk();
} else {
socket.emit('transfer-complete');
}
};
reader.readAsArrayBuffer(slice);
}
sendNextChunk();
}
// ফাইল আপলোড হবার পর সার্ভার থেকে বার্তা
socket.on('message', (message) => {
alert(message);
});
// ফাইল ইনপুট ইভেন্ট
document.getElementById('file-input').addEventListener('change', uploadFile);
</script>
</head>
<body>
<h2>Upload a Large File</h2>
<input type="file" id="file-input">
</body>
</html>Step 4: Application Run করা
সার্ভার চালু করুন:
node server.js- ক্লায়েন্টে ফাইল আপলোড করুন:
- ব্রাউজারে গিয়ে
index.htmlফাইলটি ওপেন করুন এবং একটি ফাইল সিলেক্ট করে আপলোড করুন।
- ব্রাউজারে গিয়ে
How It Works:
- Client Side:
- ব্যবহারকারী একটি ফাইল সিলেক্ট করেন, তারপর ফাইলটি 1MB চাঙ্কে ভাগ হয়ে সার্ভারে পাঠানো হয়।
- প্রতি চাঙ্ক পাঠানোর পর, সার্ভার সেই চাঙ্কটি ফাইলে অ্যাপেন্ড করে এবং পরবর্তী চাঙ্ক পাঠাতে অপেক্ষা করে।
- Server Side:
- সার্ভার ফাইলের চাঙ্কগুলো গ্রহণ করে এবং সেগুলোকে পুনরায় একত্রিত করে মূল ফাইলে তৈরি করে। যখন সব চাঙ্ক আসে, সার্ভার একটি কনফার্মেশন বার্তা পাঠায়।
Advantages of Chunking for Large File Transfers
- Error Recovery:
- যদি কোনো চাঙ্ক পাঠানোর সময় সমস্যা হয়, তখন শুধুমাত্র সেই চাঙ্কটি পুনরায় পাঠাতে হবে, পুরো ফাইল নয়।
- Memory Optimization:
- বড় ফাইলের পুরো কনটেন্ট একসাথে মেমোরিতে রাখতে না পারলেও, চাঙ্ক করে ট্রান্সফার করার কারণে কম মেমোরি ব্যবহার হয়।
- Network Efficiency:
- ছোট ছোট অংশ পাঠানোর মাধ্যমে নেটওয়ার্ক বেন্ডউইথের বেশি ব্যবহার করা যায় এবং ট্রান্সফার পারফরম্যান্স বাড়ানো যায়।
- Parallelization:
- একাধিক চাঙ্ককে একসাথে (প্যারালাল) পাঠানো বা গ্রহণ করা সম্ভব, যা দ্রুত ডেটা ট্রান্সফার নিশ্চিত করে।
Conclusion
এটি একটি বেসিক উদাহরণ ছিল যেখানে Node.js এবং Socket.IO ব্যবহার করে বড় ফাইল চাঙ্কিং এবং ট্রান্সফারের প্রক্রিয়া দেখানো হয়েছে। এই টেকনিকটি real-time file syncing, file sharing, এবং streaming এর মতো অ্যাপ্লিকেশনগুলির জন্য অত্যন্ত কার্যকরী।
ফাইল ট্রান্সফার একটি সাধারণ কাজ যা রিয়েল-টাইম অ্যাপ্লিকেশনে ব্যবহৃত হয়। Socket.IO ব্যবহার করে ক্লায়েন্ট এবং সার্ভারের মধ্যে দ্রুত এবং নিরাপদভাবে ফাইল পাঠানো সম্ভব। এখানে একটি উদাহরণ দেওয়া হলো যেখানে Node.js এবং Socket.IO ব্যবহার করা হয়েছে, এবং ফাইল ট্রান্সফারের জন্য কিছু নিরাপত্তা ব্যবস্থা যুক্ত করা হয়েছে।
ফাইল ট্রান্সফার এবং নিরাপত্তা ব্যবস্থা
- ফাইল সাইজ সীমাবদ্ধতা: বড় সাইজের ফাইল আপলোড প্রতিরোধ করতে ফাইল সাইজ সীমাবদ্ধ করা।
- ফাইল ধরনের যাচাই: শুধুমাত্র অনুমোদিত ফাইল টাইপ (যেমন ইমেজ, পিডিএফ) আপলোড করতে দেওয়া।
- ভাইরাস স্ক্যানিং: ফাইলটি সিস্টেমে সংরক্ষণ করার আগে ভাইরাস স্ক্যান করা।
- HTTPS ব্যবহার: নিরাপদ যোগাযোগের জন্য HTTPS ব্যবহার করা।
- অথেনটিকেশন এবং অথোরাইজেশন: শুধুমাত্র অথেনটিকেটেড ব্যবহারকারীরা ফাইল আপলোড বা ডাউনলোড করতে পারবে।
Step 1: Node.js এবং প্রয়োজনীয় প্যাকেজ ইনস্টলেশন
প্রথমে, Node.js প্রজেক্ট তৈরি করুন এবং প্রয়োজনীয় প্যাকেজ ইনস্টল করুন।
Node.js প্রজেক্ট তৈরি করা:
mkdir file-transfer-app cd file-transfer-app npm init -yপ্রয়োজনীয় প্যাকেজ ইনস্টল করা:
npm install express socket.io multer
- Express: HTTP রিকোয়েস্ট হ্যান্ডলিংয়ের জন্য।
- Socket.IO: রিয়েল-টাইম যোগাযোগের জন্য।
- Multer: ফাইল আপলোড হ্যান্ডলিংয়ের জন্য।
Step 2: সার্ভার সাইড কোড (Node.js, Express, Socket.IO)
এখন server.js ফাইল তৈরি করা হবে যাতে ফাইল ট্রান্সফার এবং নিরাপত্তা ব্যবস্থা যুক্ত থাকবে।
server.js:
const express = require('express');
const http = require('http');
const socketIo = require('socket.io');
const multer = require('multer');
const fs = require('fs');
// Express অ্যাপ এবং HTTP সার্ভার তৈরি
const app = express();
const server = http.createServer(app);
const io = socketIo(server);
// Multer কনফিগারেশন (ফাইল আপলোড)
const storage = multer.diskStorage({
destination: (req, file, cb) => {
cb(null, './uploads'); // ফাইল আপলোডের ডিরেক্টরি
},
filename: (req, file, cb) => {
cb(null, file.originalname); // মূল ফাইল নাম সংরক্ষণ করা
}
});
// ফাইল সাইজ এবং টাইপ যাচাই করা
const fileFilter = (req, file, cb) => {
const allowedTypes = /jpeg|jpg|png|gif|pdf/;
const mimeType = allowedTypes.test(file.mimetype);
const extname = allowedTypes.test(file.originalname.split('.').pop());
if (mimeType && extname) {
return cb(null, true);
} else {
cb(new Error('অনুমোদিত ফাইল টাইপ নয়! শুধুমাত্র JPEG, PNG, GIF এবং PDF অনুমোদিত.'));
}
};
const upload = multer({
storage,
limits: { fileSize: 5 * 1024 * 1024 }, // ৫MB ফাইল সাইজের সীমা
fileFilter
});
// স্ট্যাটিক ফাইল সার্ভ করা (uploads ডিরেক্টরি)
app.use(express.static('uploads'));
// ফাইল আপলোডের জন্য রাউট
app.post('/upload', upload.single('file'), (req, res) => {
res.send({ message: 'ফাইল সফলভাবে আপলোড হয়েছে!', filePath: `/uploads/${req.file.filename}` });
});
// Socket.IO কানেকশন এবং রিয়েল-টাইম ফাইল ট্রান্সফার
io.on('connection', (socket) => {
console.log('একজন ব্যবহারকারী সংযুক্ত হয়েছে');
socket.on('upload-file', (fileData) => {
console.log('ফাইল পাওয়া গেছে:', fileData.name);
// ফাইলটি সেভ করা
fs.writeFileSync(`./uploads/${fileData.name}`, fileData.data, 'base64');
io.emit('file-uploaded', { message: 'ফাইল সফলভাবে আপলোড হয়েছে!', fileName: fileData.name });
});
socket.on('disconnect', () => {
console.log('ব্যবহারকারী ডিসকানেক্ট হয়েছে');
});
});
// সার্ভার চালু করা
server.listen(3000, () => {
console.log('সার্ভার http://localhost:3000 এ চলছে');
});- Multer: এখানে Multer ব্যবহার করে ফাইল আপলোডের জন্য কনফিগারেশন করা হয়েছে। আমরা ফাইলের টাইপ যাচাই করেছি এবং ৫MB ফাইল সাইজের সীমা নির্ধারণ করেছি।
- Socket.IO: Socket.IO ব্যবহার করে ক্লায়েন্ট থেকে ফাইল আপলোড করা হলে সার্ভার সেই ফাইলটি
uploadsডিরেক্টরিতে সংরক্ষণ করে এবং সকল কানেক্টেড ক্লায়েন্টকেfile-uploadedবার্তা পাঠায়।
Step 3: ক্লায়েন্ট সাইড কোড (HTML, CSS, JavaScript)
এখন index.html ফাইল তৈরি করা হবে, যা ব্যবহারকারীদের ফাইল আপলোড করার অনুমতি দেবে এবং সার্ভারের কাছ থেকে লাইভ আপডেট পাবে।
public/index.html:
<!DOCTYPE html>
<html lang="en">
<head>
<meta charset="UTF-8">
<meta name="viewport" content="width=device-width, initial-scale=1.0">
<title>ফাইল ট্রান্সফার অ্যাপ</title>
<style>
body { font-family: Arial, sans-serif; margin: 20px; }
input[type="file"] { margin-bottom: 10px; }
</style>
</head>
<body>
<h2>ফাইল ট্রান্সফার</h2>
<input type="file" id="fileInput" />
<button onclick="uploadFile()">আপলোড করুন</button>
<ul id="fileList"></ul>
<script src="/socket.io/socket.io.js"></script>
<script>
const socket = io();
// ফাইল আপলোড করার ফাংশন
function uploadFile() {
const fileInput = document.getElementById('fileInput');
const file = fileInput.files[0];
if (file) {
const reader = new FileReader();
reader.onload = function(event) {
const fileData = {
name: file.name,
data: event.target.result.split(',')[1] // Base64 এনকোডেড ডেটা
};
socket.emit('upload-file', fileData);
};
reader.readAsDataURL(file);
} else {
alert('দয়া করে একটি ফাইল নির্বাচন করুন');
}
}
// ফাইল আপলোড সফল হলে লাইভ আপডেট
socket.on('file-uploaded', (data) => {
const fileList = document.getElementById('fileList');
const listItem = document.createElement('li');
listItem.textContent = `ফাইল আপলোড হয়েছে: ${data.fileName}`;
fileList.appendChild(listItem);
});
</script>
</body>
</html>- ফাইল আপলোড: ক্লায়েন্ট ফাইল সিলেক্ট করার পর, ফাইলটি base64 এনকোডিং ব্যবহার করে সার্ভারে পাঠানো হয়।
- লাইভ আপডেট: সার্ভার থেকে আসা
file-uploadedবার্তা ক্লায়েন্ট সাইডে দেখানো হয়।
Step 4: নিরাপত্তা ব্যবস্থা
নিরাপদ ফাইল ট্রান্সফারের জন্য কিছু নিরাপত্তা ব্যবস্থা:
- ফাইল টাইপ যাচাই:
- Multer ব্যবহারের মাধ্যমে শুধুমাত্র নির্দিষ্ট ফাইল টাইপ (যেমন JPEG, PNG, PDF) অনুমোদিত করা হয়েছে।
- ফাইল সাইজ সীমাবদ্ধতা:
- ফাইলের সাইজ ৫MB এর মধ্যে সীমাবদ্ধ রাখা হয়েছে।
- ভাইরাস স্ক্যানিং:
- ফাইলটি সেভ করার আগে, এটা স্ক্যান করা উচিত যেন কোন ম্যালওয়্যার বা ভাইরাস না থাকে। আপনি ClamAV বা অন্য কোনো ভাইরাস স্ক্যানিং টুল ব্যবহার করতে পারেন।
- HTTPS:
- প্রোডাকশন পরিবেশে, ফাইল ট্রান্সফার করার সময় HTTPS ব্যবহার করুন। এতে ডেটা এনক্রিপ্ট হয়ে সুরক্ষিতভাবে ট্রান্সফার হবে।
- অথেনটিকেশন:
- ফাইল আপলোড করার আগে, ইউজারের অথেনটিকেশন নিশ্চিত করুন
। JWT টোকেন বা সেশন ব্যবস্থাপনা ব্যবহার করে ইউজারকে অথেনটিকেট করুন।
Step 5: Running the Application
সার্ভার চালু করুন:
node server.js- ব্রাউজারে অ্যাপ্লিকেশন দেখুন:
- আপনার ব্রাউজারে http://localhost:3000 এ গিয়ে ফাইল আপলোড করুন।
সারসংক্ষেপ
এটি একটি বেসিক ফাইল ট্রান্সফার অ্যাপ্লিকেশন যা Socket.IO এবং Multer ব্যবহার করে তৈরি করা হয়েছে। ফাইল সাইজ সীমাবদ্ধতা, টাইপ যাচাই, এবং ভাইরাস স্ক্যানিংসহ নিরাপত্তা ব্যবস্থা অন্তর্ভুক্ত করা হয়েছে। এই সিস্টেমটি real-time file transfer এবং real-time notifications প্রদান করে, এবং HTTPS, অথেনটিকেশন এবং ভাইরাস স্ক্যানিং সহ নিরাপদভাবে ফাইল ট্রান্সফার করা সম্ভব।
Read more
