Acest proiect își propune construirea unui asistent pentru Piano Tiles bazat pe Arduino, capabil să joace complet autonom sau să sprijine un jucător uman prin notificări vizuale și audio în timp real. În modul autonom, sistemul folosește monede conductoare ale curentului electric pentru a simula apăsarea pe ecran prin impulsuri electrice; în modul asistat, îl ghidează pe jucător, indicând instantaneu unde și când a apărut o greșeală.

Scopul inițiativei este de a explora interacțiunea dintre automatizare și gameplay-ul uman, valorificând concepte de embedded systems. Ideea a pornit din dorința de a automatiza un joc mobil aparent banal (Piano Tiles) și de a-l extinde cu un asistent capabil să corecteze erorile, să rafineze sincronizarea prin feedback și chiar să concureze cu recordurile stabilite de oameni.

Proiectul oferă atât oportunitatea pentru experimenta cu senzori și cu logica de joc, ci și o fundație pentru sisteme asistive mai avansate în gaming, reabilitare sau instruire, permițând integrarea unor mecanisme elementare de învățare și adaptare prin machine learning. Combinația dintre distracție și valoare educativă transformă procesul de învățare într-o experiență mai eficientă și mai plăcută.

Assistant-ul de Gameplay pentru Piano Tiles este un proiect bazat pe Arduino ce îmbină automatizarea cu suportul activ pentru jucătorii acestui popular joc mobil. În modul autonom, sistemul folosește monede electromagnetice pentru a simula atingerile ecranului, iar în modul asistat oferă feedback vizual (LED-uri) și audio (buzzer) în timp real, ajutându-l pe utilizator să își corecteze greșelile. Scorul curent și highscore-ul sunt afișate pe un ecran LCD, iar selecția modului de joc se face simplu, prin două butoane (sânga sau dreapta).

Ideea a pornit din curiozitatea de a „păcăli” jocul cu ajutorul unui setup Arduino complet automatizat. Pe parcurs, conceptul s-a transformat într-un sistem interactiv și educativ, capabil nu doar să joace singur, ci și să-l asiste pe utilizator prin detectarea și corectarea erorilor. Asistentul încearcă permanent să depășească performanțele jucătorului, stabilind un scor de referință pe care acesta este provocat să îl bată.

• Plăcuță Arduino Uno R3 (https://www.optimusdigital.ro/ro/placi-avr/4561-placa-de-dezvoltare-compatibila-cu-arduino-uno-r3-atmega328p-atmega16u2-cablu-50-cm.html?search_query=Placa+de+Dezvoltare+Compatibila+cu+Arduino+UNO+R3+%28ATmega328p+++ATmega16u2%29+++Cablu+50+c&results=1)
• LCD 16×2 cu modul I2C (https://www.optimusdigital.ro/ro/optoelectronice-lcd-uri/2894-lcd-cu-interfata-i2c-si-backlight-albastru.html?search_query=0104110000003584&results=1)
• 4 × LED-uri roșii (https://www.optimusdigital.ro/ro/optoelectronice-led-uri/696-led-rou-de-3-mm-cu-lentile-difuze.html?search_query=0104210000006186&results=1)
• 1 × Buzzer (https://www.optimusdigital.ro/ro/audio-buzzere/12247-buzzer-pasiv-de-33v-sau-3v.html?search_query=0104210000081527&results=1)
• 2 × butoane (https://www.optimusdigital.ro/ro/butoane-i-comutatoare/1115-buton-cu-capac-rotund-alb.html?search_query=0104210000009590&results=1)
• 4 × rezistori 22 kΩ (https://www.optimusdigital.ro/ro/componente-electronice-rezistoare/848-rezistor-025w-22k.html?search_query=0104210000007374&results=1)
• 10 × rezistori 1,8 kΩ (https://www.optimusdigital.ro/ro/componente-electronice-rezistoare/858-rezistor-025w-18k.html?search_query=0104210000007466&results=1)
• 2 × rezistori 220 Ω (https://www.optimusdigital.ro/ro/componente-electronice-rezistoare/1097-rezistor-025w-220.html?search_query=0104210000010053&results=1)
• 1 × Breadboard (https://www.optimusdigital.ro/ro/prototipare-breadboard-uri/13249-breadboard-300-puncte.html?search_query=breadboard&results=125)
• 4 × fotorezistori (https://www.optimusdigital.ro/ro/componente-electronice-altele/1863-fotorezistor-tip-5528.html?search_query=Fotorezistor+%28tip+5528%29&results=1)
• Fire colorate tată-tată (https://www.optimusdigital.ro/ro/fire-fire-mufate/890-set-fire-tata-tata-40p-30-cm.html?search_query=0104210000007886&results=1)

• 4 × relee cu optocuplor (https://www.bitmi.ro/module-electronice/modul-releu-4-canale-cu-optocuplor-5v-low-level-10494.html)
• Fire colorate mamă-mamă (https://www.bitmi.ro/electronica/40-x-fire-dupont-mama-mama-20cm-10509.html)

Proiectul utilizează o placă Arduino Uno R3 ca unitate principală de procesare și control. Aceasta gestionează atât partea de detecție (fotosenzori), cât și partea de acționare (relee, buzzer, LED-uri, LCD, butoane). Funcționalitatea hardware este împărțită în două moduri principale:

• Mod autonom: Sistemul detectează tile-urile negre din joc prin fotosenzori și simulează apăsarea pe ecran activând monedele conductive prin relee.
• Mod asistat: Oferă feedback vizual prin aprinderea led-ului coresponzător tile-ului ratat și feedback sonor jucătorului atunci când un tile este ratat.

• Arduino UNO R3 → Microcontroller principal
• Fotorezistori → Detectare lumină/întuneric (tile-uri negre) ⇒ Intrări analogice
• LED-uri roșii → Feedback vizual (greșeală/activare tile) ⇒ I/O digitale (OUTPUT)
• Relee cu optocuplor → Acționare monede pentru apăsare pe ecran ⇒ I/O digitale (OUTPUT)
• Butoane → Selecție mod de joc ⇒ I/O digitale (INPUT_PULLUP)
• LCD 16×2 I2C → Afișare scor/mod de joc ⇒ I2C (SDA/A4, SCL/A5)
• Buzzer pasiv → Feedback audio ⇒ I/O digital (OUTPUT)
• Breadboard, rezistori, calburi → Conectare de componente, pull-up pentru butoane și fotorezistori

Fotorezistori → Citire valori de lumină pentru fiecare coloană

• F1 ⇔ A3
• F2 ⇔ A2
• F3 ⇔ A1
• F4 ⇔ A0

LED-uri → Feedback vizual la detecție de erori pe fiecare coloană

• LED1 ⇔ 4
• LED2 ⇔ 5
• LED3 ⇔ 6
• LED4 ⇔ 7

Relee → Activează simularea atingerii prin monede

• R1 ⇔ 10
• R2 ⇔ 11
• R3 ⇔ 12
• R4 ⇔ 13

Butoane → Selectare mod de joc (B1 → autonom/B2 → asistat)

• B1 ⇔ 3
• B2 ⇔ 2

Buzzer → Semnal audio la detecția de greșeli ⇔ 8

LCD → Comunicație I2C ⇒ SDA ⇔ A4; SCL ⇔ A5

Proiectul este dezvoltat în Arduino IDE, care oferă un mediu ușor de utilizat pentru programarea și încărcarea codului pe placa Arduino. Tot codul este scris în C++, folosind bibliotecile standard Arduino și logică personalizată.

Software-ul este organizat ca o mașină cu state finite (FSM) cu două stări principale:

• Mod Autonom – Asistentul joacă jocul pe diferite niveluri și grade de dificultate, trimițând impulsuri electrice către monede prin intermediul tranzistoarelor de fiecare dată când este detectat un tile neagru. Pe lângă scorul afișat pe ecranul dispozitivului, punctajul este gestionat intern, iar recordul este actualizat dacă este depășit.
• Mod Asistat – Jucătorul primește notificări prin LED-uri și buzzer în timp real. Dacă un tile este ratat, asistentul poate activa moneda corespunzătoare pentru a compensa.

Logică suplimentară:

• Navigare în meniu – Controlată prin butoane, jucătorul poate schimba modurile de joc.
• Managementul scorului – Scorul curent este afișat și comparat cu highscore-ul.
• Debouncing – Apăsările butoanelor sunt debounced în software, folosind logică de temporizare.

05.05.2025 - Am decis tema proiectului și am realizat descrierea inițială a acestuia.

09.05.2025 - Am realizat schema eletrică în Tinkercad.

10.05.2025 - Am comanda primele componente.

12.05.2025 - Am ridicat componentele și am asamblat prima parte a proiectului.

13.05.2025 - Am dat comandă de componentele lipsă.

15.05.2025 - Am ridicat restul componentelor.

18.05.2025 - Am asamblat întregul proiect și am testat funcționalitatea componentelor.