基於Pytorch實現邏輯回歸
本文實例為大傢分享瞭Pytorch實現邏輯回歸的具體代碼,供大傢參考,具體內容如下
1.邏輯回歸
線性回歸表面上看是“回歸問題”,實際上處理的問題是“分類”問題,邏輯回歸模型是一種廣義的回歸模型,其與線性回歸模型有很多的相似之處,模型的形式也基本相同,唯一不同的地方在於邏輯回歸會對y作用一個邏輯函數,將其轉化為一種概率的結果。邏輯函數也稱為Sigmoid函數,是邏輯回歸的核心。
2.基於Pytorch實現邏輯回歸
import torch as t import matplotlib.pyplot as plt from torch import nn from torch.autograd import Variable import numpy as np # 構造數據集 n_data = t.ones(100, 2) # normal()返回一個張量,張量裡面的隨機數是從相互獨立的正態分佈中隨機生成的。 x0 = t.normal(2*n_data, 1) y0 = t.zeros(100) x1 = t.normal(-2*n_data, 1) y1 = t.ones(100) # 把數據給合並以下,並且數據的形式必須是下面形式 x = t.cat((x0, x1), 0).type(t.FloatTensor) y = t.cat((y0, y1), 0).type(t.FloatTensor) # 觀察制造的數據 plt.scatter(x.data.numpy()[:, 0], x.data.numpy()[:, 1], c=y.data.numpy(), s=100, lw=0) plt.show() # 建立邏輯回歸 class LogisticRegression(nn.Module): def __init__(self): super(LogisticRegression, self).__init__() self.lr = nn.Linear(2, 1) self.sm = nn.Sigmoid() def forward(self, x): x = self.lr(x) x = self.sm(x) return x # 實例化 logistic_model = LogisticRegression() # 看GPU是否可使用,如果可以使用GPU否則不使用 if t.cuda.is_available(): logistic_model.cuda() # 定義損失函數和優化函數 criterion = nn.BCELoss() optimizer = t.optim.SGD(logistic_model.parameters(), lr=1e-3, momentum=0.9) # 訓練模型 for epoch in range(1000): if t.cuda.is_available(): x_data = Variable(x).cuda() y_data = Variable(y).cuda() else: x_data = Variable(x) y_data = Variable(y) out = logistic_model(x_data) loss = criterion(out, y_data) print_loss = loss.data.item() # 以0.5為閾值進行分類 mask = out.ge(0.5).float() # 計算正確預測樣本的個數 correct = (mask==y_data).sum() # 計算精度 acc = correct.item()/x_data.size(0) optimizer.zero_grad() loss.backward() optimizer.step() # 每個200個epoch打印一次當前的誤差和精度 if(epoch+1)%200==0: print('*'*10) # 迭代次數 print('epoch{}'.format(epoch+1)) # 誤差 print('loss is {:.4f}'.format((print_loss))) # 精度 print('acc is {:.4f}'.format(acc)) if __name__=="__main__": logistic_model.eval() w0, w1 = logistic_model.lr.weight[0] w0 = float(w0.item()) w1 = float(w1.item()) b = float(logistic_model.lr.bias.item()) plot_x = np.arange(-7, 7, 0.1) plot_y = (-w0*plot_x-b)/w1 plt.scatter(x.data.numpy()[:, 0], x.data.numpy()[:, 1], c=y.data.numpy(), s=100, lw=0) plt.plot(plot_x, plot_y) plt.show()
以上就是本文的全部內容,希望對大傢的學習有所幫助,也希望大傢多多支持WalkonNet。
推薦閱讀:
- pytorch 實現L2和L1正則化regularization的操作
- PyTorch實現線性回歸詳細過程
- pytorch中.numpy()、.item()、.cpu()、.detach()以及.data的使用方法
- 使用Pytorch實現two-head(多輸出)模型的操作
- 深入理解Pytorch微調torchvision模型