Reti neurali feedforward

Reti neurali feedforward

Una rete neurale feedforward è il tipo più semplice di rete neurale artificiale. In questa architettura, i dati fluiscono in una sola direzione, dallo strato di input allo strato di output, senza tornare indietro.

Le reti feedforward sono composte da:

• Strato di input: Riceve i dati grezzi.
• Strati nascosti: Eseguono calcoli ed estraggono caratteristiche.
• Strato di output: Produce il risultato finale.

Ogni strato è completamente connesso a quello successivo.

La propagazione in avanti è il processo di passaggio dei dati attraverso la rete:

1. Gli input vengono moltiplicati per i pesi e sommati ai bias.
2. Vengono applicate funzioni di attivazione per introdurre la non linearità.
3. L'output viene calcolato e passato allo strato successivo.

Creiamo una semplice rete feedforward utilizzando Python. La rete ha:

• 2 neuroni di input
• 1 strato nascosto con 3 neuroni
• 1 neurone di output

import numpy as np

# Define weights and biases
weights_input_hidden = np.array([[0.2, 0.8, -0.5], [0.5, -0.91, 0.26]])
bias_hidden = np.array([2, 3, 0.5])
weights_hidden_output = np.array([[0.1], [-0.14], [0.5]])
bias_output = np.array([0.1])

# Input data
inputs = np.array([1, 2])

# Forward pass
hidden_layer = np.dot(inputs, weights_input_hidden) + bias_hidden
output = np.dot(hidden_layer, weights_hidden_output) + bias_output

print("Output:", output)

L'addestramento consiste nel modificare pesi e bias per ridurre al minimo l'errore:

1. Calcolare l'errore, ovvero la differenza tra i valori previsti e quelli effettivi.
2. Utilizzare algoritmi di ottimizzazione come la discesa del gradiente per aggiornare i pesi.
3. Ripetere il processo per più iterazioni (epoche).

Le reti feedforward sono:

• Semplici e facili da implementare.
• Efficaci per attività come la regressione e la classificazione di base.
• Efficienti dal punto di vista computazionale per i piccoli dataset.

Le reti feedforward presentano alcuni svantaggi:

• Non dispongono di memoria per i dati sequenziali.
• Sono soggette all'overfitting quando i dati di addestramento sono pochi.
• Richiedono un'attenta regolazione degli iperparametri, come il tasso di apprendimento.

Le reti feedforward vengono utilizzate per:

• Diagnosi medica: Prevedere le malattie in base ai sintomi.
• Rilevamento delle frodi: Identificare attività sospette nelle transazioni finanziarie.
• Previsione dei prezzi delle azioni: Stimare i futuri valori delle azioni.

In questa lezione abbiamo:

• Esplorato la struttura e il funzionamento delle reti neurali feedforward.
• Costruito una semplice rete feedforward utilizzando Python.
• Discusso i vantaggi e le limitazioni di questa architettura.

In seguito analizzeremo in dettaglio l'algoritmo di backpropagation, che consente alle reti neurali di apprendere in modo efficace ottimizzando pesi e bias.