Digit Recognition Game

• Se primește de la modulul sunet un audio cu cifra, după care trebuie scris acel număr pe touchscreen. Astfel, proiectul va valida corectitudinea cifrei.
• Scopul proiectului este o implementare low-level de machine learning, o implementare pe un microcontroller cu puțină memorie RAM și Flash.
• Am vrut să creez un proiect pe low-level Machine Learning prin care să combin Machine Learning cu Hardware limitat. Am vrut și să înțeleg mai bine materia PM prin configurarea unui modul de sunet prin UART și a unui touchscreen prin I2C cu ajutorul datasheeturilor aferente.
• Este util pentru mine, deoarece mă ajută să înțeleg concepte din 2 arii diferite, și pentru alții deoarece arăt că este posibil chiar și pe un microcontroller mini ca este posibil să fac un proiect complex, care poate fi scalat pe unități hardware mai performante în concordanță cu capacitatea lor.

2. Etapa de Declanșare (Interrupt): Când desenul este finalizat, utilizatorul apasă butonul Recognize. Această acțiune generează o întrerupere hardware pe pinul INT0, semnalizând procesorului că trebuie să oprească modul de desenare și să înceapă procesarea datelor.

3. Etapa de Procesare (Inferență AI): ATmega328P preia matricea de pixeli formată pe ecran și rulează algoritmul de rețea neurală. Acesta calculează probabilitățile pentru fiecare clasă (cifrele 0-9) și determină care este cifra cu cel mai mare scor de încredere.

4. Etapa de Output (Feedback): Microcontrolerul trimite un pachet de date prin UART către DFPlayer Mini. Modulul caută pe cardul SD fișierul audio asociat cifrei identificate și redă vocea prin Difuzor.

5. Resetarea sistemului: Apăsarea butonului Clear (conectat la INT1) golește buffer-ul de memorie și trimite o comandă de “fill screen” către ecran, pregătind sistemul pentru o nouă introducere de date.

* Microcontroller: ATmega328P (XMINI)
* Modul Afișaj și Input: Ecran TFT LCD 2.8” cu controller ILI9341, comunicare prin interfață SPI, cu panou tactil rezistiv
* Modul Audio: DFPlayer Mini (TF-16P) care decodează fișiere MP3/WAV, comunicând cu MCU-ul prin interfața UART (Serial).
* Output Audio: Difuzor 8Ω / 3W conectat direct la amplificatorul intern al DFPlayer-ului.
* Interfață Control: Butoane tactile conectate la pinii de întreruperi externe (INT0, INT1) pentru funcțiile de “Recognize” și “Clear”.
* Stocare: Card MicroSD pentru salvarea fișierelor audio și a ponderilor rețelei neurale.

Scheme Electrice: TBC

• mediu de dezvoltare (if any) (e.g. AVR Studio, CodeVisionAVR)
• librării şi surse 3rd-party (e.g. Procyon AVRlib)
• algoritmi şi structuri pe care plănuiţi să le implementaţi
• (etapa 3) surse şi funcţii implementate