Show page

Differences

This shows you the differences between two versions of the page.

--- isrm:laboratoare:new:02 [2020/03/07 23:57]
vlad.traista [Date cu erori]
+++ isrm:laboratoare:new:02 [2021/03/15 13:55] (current)
dragos.niculescu
@@ Line 1: / Line 1: @@
-====== Laborator 02: Plotting, tracing ======
+====== Laborator 02: Scripting, plotting, tracing ======
@@ Line 10: / Line 10: @@
 {{:isrm:laboratoare:02:schema.png?600|}}
-Rularea succesiva cu argumente variabile/dinamice va putea fi automatizata prin intermediul unui script Bash. In mod ideal, acest script ar trebui sa salveze datele de interes intr-un fisier (.CSV preferabil) pentru a putea fi folosit ulterior pentru a obtine grafice.
+Rularea succesiva cu argumente variabile/dinamice va putea fi automatizata prin intermediul unui script ''Bash''. In mod ideal, acest script ar trebui sa salveze datele de interes intr-un fisier (.CSV preferabil) pentru a putea fi folosit ulterior pentru a obtine grafice.
-Pentru realizarea graficelor, ne vom folosi de limbajul [[https://www.python.org/downloads/|Python]], de modulul de Python [[https://matplotlib.org/|matplotlib]] si de pachetul [[https://jupyter.org/|Jupyter Notebook]] pentru o vizualizare mai usoara a graficelor. Jupyter Notebook este o aplicatie care porneste un server web local si care permite rularea de cod (Python, Java, etc) in cadrul unei pagini web locale care poarta numele de notebook.
+Pentru realizarea graficelor, ne vom folosi de limbajul [[https://www.python.org/downloads/|Python]], de modulul de ''Python'' [[https://matplotlib.org/|matplotlib]] si de pachetul [[https://jupyter.org/|Jupyter Notebook]] pentru o vizualizare mai usoara a graficelor. ''Jupyter Notebook'' este o aplicatie care porneste un server web local si care permite rularea de cod (''Python'', ''Java'', etc) in cadrul unei pagini web locale care poarta numele de ''notebook''.
-=====  Instalare si configurare =====
+=====  Jupyter notebook =====
-Pe calculatoare este deja instalat Python 3, astfel ca sunt suficienti urmatorii pasi pentru a instala pachetele necesare:
-<code bash>
-student@isrm-vm-2020:~$ sudo apt-get update
-student@isrm-vm-2020:~$ sudo apt-get install python3-pip
-student@isrm-vm-2020:~$ pip3 install matplotlib jupyter
-student@isrm-vm-2020:~$ sudo ln -s ~/.local/bin/jupyter-notebook /usr/bin/jupyter-notebook
-</code>
 Pentru a lansa aplicatia de Jupyter Notebook, rulati urmatoarea comanda:
@@ Line 43: / Line 34: @@
 Odata intrati pe pagina web, putem trece la crearea unui notebook (butonul **New** -> **Python3**)
+=====  Github classroom =====
+In cadrul laboratoarelor de ISRM, vom folosi Github classroom pentru a urca rezolvarile exercitiilor, pentru a primi feedback pe rezolvari/interpretari si pentru a primi nota pe laborator.
+Inainte de a porni cu laboratorul, urmati pasii mentionati [[https://ocw.cs.pub.ro/courses/smd/laboratoare/00#github_classroom_repository|aici]].
+Workflow-ul cu git va fi similar cu cel de [[https://ocw.cs.pub.ro/courses/smd/laboratoare/00#versioning|aici]].
+Fisierele de interes care vor trebui urcate intr-un pull request de Git incepand cu al treilea laborator sunt urmatoarele:
+  * scripturi bash sau alte fisiere prin care automatizati rularea
+  * fisierele de output in care salvati rezultatele obtinute in urma rularii scripturilor
+  * graficele (fisiere .png) / notebook-ul Jupyter aferent laboratorului
+  * un fisier README in care interpretati/analizati rezultatele obtinute
 ===== Plotarea datelor simple =====
@@ Line 398: / Line 403: @@
 </code>
-<code bash>
-awc() { awk "BEGIN{print $*}"; }
-for i in `seq 10 2 20`; do awc "$i / 10"; done
-</code>
 ====  Aritmetica în shell scripting ====
-Bash face toate calculele pe integer.
+Bash face **toate calculele pe integer**, deci nu poate fi folosit pentru a calcula medii (mean, median, standard deviation).
 <code bash>
-x=5; echo $(($x / 3))
+$ x=5; echo $(($x / 3))
 </code>
 <code bash>
-x=24
+$ x=24
-y=25
+$ y=25
-b=`expr $x = $y`         # Test equality.
+$ b=`expr $x = $y`         # Test equality.
-echo "b = $b"            # 0  ( $x -ne $y )
+$ echo "b = $b"            # 0  ( $x -ne $y )
-echo
+b = 0
 </code>
 Putem folosi utilitarul ''bc'' cu pipe pentru calcule în floating point:
 <code bash>
-echo '6.5 / 2.7' | bc
+$ echo '6.5 / 2.7' | bc
-echo 'scale=3; 6.5/2.7' | bc
+$ echo 'scale=3; 6.5/2.7' | bc
+.407
 </code>
+<code bash>
+$ awc() { awk "BEGIN{print $*}"; }
+$ for i in `seq 1 1 4`; do awc "$i + sqrt($i)"; done
+.41421
+.73205
+</code>
+===== Procesare multicore =====
+Majoritatea graficelor pe care dorim sa le plotăm se folosesc de același script de simulare pe care îl rulăm cu parametri diferiți, iar la final recoltăm din outputul lui una sau mai multe valori. Dacă simularea nu folosește resurse temporare care pot duce la race conditions, se poate rula în paralel pentru a putea folosi core-urile existente. Utilitarul ''GNU parallel'' este potrivit pentru acest job, întrucât detectează automat numărul de core-uri, și are multe opțiuni pentru scriptare (nu toate naturale).
+Exemple simple:
+<code bash>
+$ parallel echo "{1} a{2}" ::: $(seq 1 1 3) ::: $(seq 100 102)
+a100
+a101
+a102
+a100
+a101
+a102
+a100
+a101
+a102
+</code>
+Un gotcha este rularea mai multor comenzi shell care este posibilă doar prin înglobarea lor într-o funcție sau script separat:
+<code>
+$ cat > batch
+sleep $1
+echo $2
+$ parallel  ./batch ::: $(seq 3 -1 1) ::: $(seq 100 102)
+</code>
+Un altul este afișarea rezultatelor taskurilor în ordine secvențială, nu atunci când se termină fiecare:
+<code>
+$ parallel -k  bash ./batch ::: $(seq 3 -1 1) ::: $(seq 100 102)
+</code>
+Exemplu care poate fi adesea refolosit în acest semestru:
+<code>
+$ function run_fixed(){
+    echo  -n "$1 $2 "
+    ./waf --run "lab6-7-cw  --payloadSize=212  --ns=$1 --nd=$1 --minCw=$2 --maxCw=$2 --pcap=false" | tail -n1
+}
+$ export -f run_fixed
+$ parallel -k run_fixed {1} {2} ::: 4 6 7 20 40 ::: 3 7 15 31 63 127 255 511 1023 2047 4095
+</code>
+Acest exemplu rulează scriptul ns3 pentru toate combinațiile de parametri minCw si maxCw listate în secventele separate de :::
+Opțiunea -k asigură afișarea rezultatelor în ordine, chiar dacă în realitate se rulează în paralel pe mai multe core-uri, si unele taskuri se termină mai repede.
 ====  [OPȚIONAL] Trasare de grafice cu gnuplot ====

isrm/laboratoare/new/02.1583618250.txt.gz · Last modified: 2020/03/07 23:57 by vlad.traista

Show page Old revisions

Media Manager Back to top

Differences

Cursuri

Laboratoare

Resurse