TensorFlow, PyTorch, এবং MXNet ব্যবহার করে মডেল ট্রেনিং

SageMaker এর বিল্ট-ইন অ্যালগরিদম এবং কাস্টম মডেল - সেইজমেকার (SageMaker) - Latest Technologies

267

TensorFlow, PyTorch, এবং MXNet হল তিনটি জনপ্রিয় মেশিন লার্নিং ফ্রেমওয়ার্ক যা ব্যবহারকারীদের মডেল তৈরি এবং প্রশিক্ষণের জন্য শক্তিশালী টুল সরবরাহ করে। নিচে প্রতিটি ফ্রেমওয়ার্ক ব্যবহার করে মডেল প্রশিক্ষণের প্রক্রিয়া বিস্তারিতভাবে আলোচনা করা হলো।

১. TensorFlow ব্যবহার করে মডেল ট্রেনিং

পদক্ষেপ ১: TensorFlow ইনস্টল করা

pip install tensorflow

পদক্ষেপ ২: ডেটা প্রস্তুতি

import tensorflow as tf
from tensorflow import keras
from tensorflow.keras import layers

# ডেটা লোড করুন (যেমন MNIST)
mnist = keras.datasets.mnist
(x_train, y_train), (x_test, y_test) = mnist.load_data()
x_train, x_test = x_train / 255.0, x_test / 255.0  # ডেটা স্কেল করুন

পদক্ষেপ ৩: মডেল তৈরি করা

model = keras.Sequential([
    layers.Flatten(input_shape=(28, 28)),
    layers.Dense(128, activation='relu'),
    layers.Dropout(0.2),
    layers.Dense(10, activation='softmax')
])

পদক্ষেপ ৪: মডেল কম্পাইল করা

model.compile(optimizer='adam',
              loss='sparse_categorical_crossentropy',
              metrics=['accuracy'])

পদক্ষেপ ৫: মডেল ট্রেনিং

model.fit(x_train, y_train, epochs=5)

পদক্ষেপ ৬: মডেল মূল্যায়ন

model.evaluate(x_test, y_test)

২. PyTorch ব্যবহার করে মডেল ট্রেনিং

পদক্ষেপ ১: PyTorch ইনস্টল করা

bash

Copy code

pip install torch torchvision

পদক্ষেপ ২: ডেটা প্রস্তুতি

import torch
import torchvision
import torchvision.transforms as transforms

# ডেটা লোড করুন (যেমন MNIST)
transform = transforms.Compose([transforms.ToTensor()])
trainset = torchvision.datasets.MNIST(root='./data', train=True, download=True, transform=transform)
trainloader = torch.utils.data.DataLoader(trainset, batch_size=64, shuffle=True)

পদক্ষেপ ৩: মডেল তৈরি করা

class Net(torch.nn.Module):
    def __init__(self):
        super(Net, self).__init__()
        self.fc1 = torch.nn.Linear(28 * 28, 128)
        self.fc2 = torch.nn.Linear(128, 10)

    def forward(self, x):
        x = x.view(-1, 28 * 28)
        x = torch.relu(self.fc1(x))
        x = self.fc2(x)
        return x

model = Net()

পদক্ষেপ ৪: লস ফাংশন এবং অপটিমাইজার নির্ধারণ করা

criterion = torch.nn.CrossEntropyLoss()
optimizer = torch.optim.Adam(model.parameters())

পদক্ষেপ ৫: মডেল ট্রেনিং

for epoch in range(5):
    for data in trainloader:
        inputs, labels = data
        optimizer.zero_grad()   # গ্রেডিয়েন্ট শূন্য করুন
        outputs = model(inputs) # মডেলের আউটপুট পেতে
        loss = criterion(outputs, labels) # লস হিসাব করা
        loss.backward()  # ব্যাকওয়ার্ড পাস
        optimizer.step() # অপটিমাইজার স্টেপ

৩. MXNet ব্যবহার করে মডেল ট্রেনিং

 

pip install mxnet

পদক্ষেপ ২: ডেটা প্রস্তুতি

import mxnet as mx
from mxnet import gluon

# ডেটা লোড করুন (যেমন MNIST)
mnist = gluon.data.vision.MNIST(train=True)
train_data = gluon.data.DataLoader(mnist.transform_first(gluon.data.vision.transforms.ToTensor()), batch_size=64, shuffle=True)

পদক্ষেপ ৩: মডেল তৈরি করা

from mxnet.gluon import nn

model = nn.Sequential()
model.add(nn.Flatten())
model.add(nn.Dense(128, activation='relu'))
model.add(nn.Dense(10))
model.initialize()

পদক্ষেপ ৪: লস ফাংশন এবং অপটিমাইজার নির্ধারণ করা

loss_fn = gluon.loss.SoftmaxCrossEntropyLoss()
trainer = gluon.Trainer(model.collect_params(), 'adam')

পদক্ষেপ ৫: মডেল ট্রেনিং

for epoch in range(5):
    for data in train_data:
        inputs, labels = data
        with mx.autograd.record():
            outputs = model(inputs)
            loss = loss_fn(outputs, labels)
        loss.backward()
        trainer.step(batch_size=64)

উপসংহার

TensorFlow, PyTorch, এবং MXNet এর মাধ্যমে মডেল প্রশিক্ষণ একটি কার্যকরী প্রক্রিয়া। প্রতিটি ফ্রেমওয়ার্কের নিজস্ব সুবিধা এবং বৈশিষ্ট্য রয়েছে, যা ব্যবহারকারীদের তাদের প্রয়োজন অনুসারে নির্বাচনের সুযোগ দেয়। এই উদাহরণগুলি ব্যবহার করে, আপনি সহজেই আপনার মডেল তৈরি এবং প্রশিক্ষণ শুরু করতে পারেন।

Promotion

Are you sure to start over?

Loading...