ARGOMENTO:

Simone ha scritto:

sabayonino ha scritto:

dunque .

le prime (migliaia ? ) di WU si ciucciavano poco più di 400 Mega per WU

tutte quelle che mi sono andate in errore (e continuano ad andarci) sono da 1220 e passa mega (un leggero migliormaento confronto quelle da 1400 )

tutte in errore per mncanz< di allocamento memoria su tutti gli i7 con 8Gb di ram (ed uno da 16) per non parlare del daula da 8G ...

Questo non so proprio spiegarlo... L'applicazione va in errore perché non riesce ad allocare la memoria, ma tu a quanto pare di memoria ne hai, quindi non so proprio...

si... tutti i pc minimo hanno 8G ... ma se ogni WU me ne richiede almeno 1.2G , va da se che con 8 threads la memoria non basta

non capisco come mai le prime WU che ho scricato mi segnavano 432 Mega di ram utilizzata per ogni WU ... poi da non so quando (ero a lavoro) ne vuole almeno 1.2G

tempo di crisi ?

[edit] il piccolino dual da 6G sta ancora elaborando le WU da 400Mega

sabayonino ha scritto:

si... tutti i pc minimo hanno 8G ... ma se ogni WU me ne richiede almeno 1.2G , va da se che con 8 threads la memoria non basta

non capisco come mai le prime WU che ho scricato mi segnavano 432 Mega di ram utilizzata per ogni WU ... poi da non so quando (ero a lavoro) ne vuole almeno 1.2G
tempo di crisi ?

TI conviene togliere le immagini, c'è scritto l'ip del server del progetto...

danieleg ha scritto:

sabayonino ha scritto:

si... tutti i pc minimo hanno 8G ... ma se ogni WU me ne richiede almeno 1.2G , va da se che con 8 threads la memoria non basta

non capisco come mai le prime WU che ho scricato mi segnavano 432 Mega di ram utilizzata per ogni WU ... poi da non so quando (ero a lavoro) ne vuole almeno 1.2G
tempo di crisi ?

TI conviene togliere le immagini, c'è scritto l'ip del server del progetto...

dove ?

sabayonino ha scritto:

danieleg ha scritto:

sabayonino ha scritto:

si... tutti i pc minimo hanno 8G ... ma se ogni WU me ne richiede almeno 1.2G , va da se che con 8 threads la memoria non basta

non capisco come mai le prime WU che ho scricato mi segnavano 432 Mega di ram utilizzata per ogni WU ... poi da non so quando (ero a lavoro) ne vuole almeno 1.2G
tempo di crisi ?

TI conviene togliere le immagini, c'è scritto l'ip del server del progetto...

dove ?

astroale ha scritto:

boboviz ha scritto:

astroale ha scritto:

Ci saranno anche le WU da 1.4 Gb ?

Eh, non resta che provare :-P

Le prime 100 WU sono andate tutte in errore di DL
Le successive girano ma dopo 3 minuti iniziano a usare 1.2Gb, quindi per ora ne "snocciolo" a mano una alla volta altrimenti iniziano ad usare lo swap impastando l'HD del netbooke finendo miseramente con quest'errore:

19:44:08 (24124): wrapper: running .[CENSURA] ./.1.1.2_lnx32_1 (--cpu 1)
19:51:17 (24124): No heartbeat from client for 30 sec - exiting

che forse spiega anche i fail di PC con più RAM ... forse un timeout di soli 30 sec quando l'HD blocca tutto per lo swap massiccio sono troppo pochi
ad ogni modo meglio così che lasciare la CPU quasi ferma col disco che cerca di suicidarsi a martellate per ore

Sì, quell'errore salta fuori proprio quando comincia a swappare e si blocca tutto.... Anche sul mio pc succede e infatti faccio girare solo due wu alla volta invece che le 8 possibili
A Sabayonino invece l'applicazione gli stampa proprio "impossibile allocare la memoria" o.O

sabayonino ha scritto:

Simone ha scritto:

sabayonino ha scritto:

dunque .

le prime (migliaia ? ) di WU si ciucciavano poco più di 400 Mega per WU

tutte quelle che mi sono andate in errore (e continuano ad andarci) sono da 1220 e passa mega (un leggero migliormaento confronto quelle da 1400 )

tutte in errore per mncanz< di allocamento memoria su tutti gli i7 con 8Gb di ram (ed uno da 16) per non parlare del daula da 8G ...

Questo non so proprio spiegarlo... L'applicazione va in errore perché non riesce ad allocare la memoria, ma tu a quanto pare di memoria ne hai, quindi non so proprio...

si... tutti i pc minimo hanno 8G ... ma se ogni WU me ne richiede almeno 1.2G , va da se che con 8 threads la memoria non basta

non capisco come mai le prime WU che ho scricato mi segnavano 432 Mega di ram utilizzata per ogni WU ... poi da non so quando (ero a lavoro) ne vuole almeno 1.2G

tempo di crisi ?

[edit] il piccolino dual da 6G sta ancora elaborando le WU da 400Mega

Allora, questo del diverso uso della ram dovrebbe essere dovuto ai diversi input delle wu: certi vogliono molta ram (fino a 1.5GB) altri si accontentano di molto meno (400MB)
La questione è che non ho ancora capito quali richiedono molta ram e quali meno, altrimenti avrei creato le due applicazioni: una per quelle che necessitano molta ram, l'altra per quelle che gliene serve meno.



La possibile soluzione a questo 'problema ram' sarebbe quella di usare l'applicazione multi thread, ma ci sono diversi problemi:
1 - le wu sono già cortissime, se le parallelizziamo durano una manciata di secondi e probabilmente non parallelizzerebbero neanche chissà quanto... a 2 core/wu nei precedenti test sembrava andar bene, non saprei con più core
2 - come testato su SimOne@home quando parte l'app mt questa blocca l'elaborazione GPU. La soluzione sarebbe nel far decidere all'utente quanti thread lasciare all'app, ma questo non è implementato in boinc. Altrimenti bisogna ricorrere a soluzioni sporche tipo lanciare due istante del client: una che faccia lavorare la gpu e l'altra l'app mt
Forse la soluzione più facile è crearsi a mano un app_info specificando lì il numero di core da usare, ma non ho ancora avuto tempo di provare.... (se qualcuno ha tempo/voglia basta mettere nella riga di comando dell'eseguibile l'opzione --cpu n)

Se avete altri commenti/pareri sono sicuramente ben accetti

Io sono attualmente 31 fatte, 31 valide...

Uso Ubuntu virtualizzato 1 CPU con 2048 Mega di RAM, mi tengo l'altro core e il 50% di memoria per il sistema (Windows Vista 64)...

Avanti tutta!

sabayonino ha scritto:

non capisco come mai le prime WU che ho scricato mi segnavano 432 Mega di ram utilizzata per ogni WU ... poi da non so quando (ero a lavoro) ne vuole almeno 1.2G

Ho notato pure io questa cosa. Infatti molte mi sono andate in errore sulla vm nel tardo pomeriggio...

Simone ha scritto:

Sì, quell'errore salta fuori proprio quando comincia a swappare e si blocca tutto.... Anche sul mio pc succede e infatti faccio girare solo due wu alla volta invece che le 8 possibili
A Sabayonino invece l'applicazione gli stampa proprio "impossibile allocare la memoria" o.O

E' il momento di avere una versione a 64 bit....

app_config.xml


destinando 2 thread ora il peso delle WU si è ridotto a 755Mega per Wu
dove impostare il numero massimo di WU da destinare






per le MT da provare


[edit] Al momento impostando sull'i7 max_concurrent a 6 non sembra dare problemi. si ciuccia quasi 5Giga su 8

un valore equilibrato a seconda della ram installata potrebbe essere valori compresi tra 1 e 4-5

Con le wu accumulate per wcg (nei pc secondari molto poche) mi è stato difficile iniziare a scaricare lavoro. Avevo sempre il maledetto " Tasks won't finish in time: BOINC runs xx% of the time; computation is enabled 100.0% of that". Sono riuscito a scaricare solo dopo ever fatto un detach/attach su tutti i pc.

Mi sono beccato subito quelle da 1.2GB e quindi si sono intoppati tutti i pc tranne il principale dove ho 2GB per core.Adesso sto usando l'app_config per limitare i processi

Alcune mi sono andate in errore ma penso sia un problema del pc che è andato nel pallone come mi è successo altre volte e ho dovuto resettare con il pulsantino

Simone ha scritto:

La possibile soluzione a questo 'problema ram' sarebbe quella di usare l'applicazione multi thread, ma ci sono diversi problemi:
1 - le wu sono già cortissime, se le parallelizziamo durano una manciata di secondi e probabilmente non parallelizzerebbero neanche chissà quanto... a 2 core/wu nei precedenti test sembrava andar bene, non saprei con più core
2 - come testato su SimOne@home quando parte l'app mt questa blocca l'elaborazione GPU. La soluzione sarebbe nel far decidere all'utente quanti thread lasciare all'app, ma questo non è implementato in boinc. Altrimenti bisogna ricorrere a soluzioni sporche tipo lanciare due istante del client: una che faccia lavorare la gpu e l'altra l'app mt
Forse la soluzione più facile è crearsi a mano un app_info specificando lì il numero di core da usare, ma non ho ancora avuto tempo di provare.... (se qualcuno ha tempo/voglia basta mettere nella riga di comando dell'eseguibile l'opzione --cpu n)

Se avete altri commenti/pareri sono sicuramente ben accetti

Per ora sull'atom il mio problema sono i 2Gb di RAM.
Da pigro, per ora ho risolto stoppando gli altri progetti e limitando al 25% "dei processori" in modo che usi un solo core senza HT. Tanto ho notato che quelle poche volte che riesce a mandare in HT 2 WU sembra impiegare il doppio quindi ...
Se qualcuno mi manda un app_info per usare anche l'altro core (con altri progetti ovviamente) ... non ho voglia per un atom di mettere su 2 istanze di boinc come ho fatto sullo xeon per sfruttare con POEM le 2 GPU diverse (ati+nvidia).

Riguardo i suggerimenti data l'ora tarda vediamo ... prendetelo con le molle ...
se l'utilizzo della RAM resterà invariato per tutto il progetto potreste provare a utilizzare lo stato "wait for memory" che usava ECM (yoyo), anche lui aveva dei picchi a 1.8Gb eppure riuscivo ad elaborare con macchine con 1Gb per core ... quindi (se ECM usa il wrapper, sono abbastanza sicuro perchè la dir del progetto contiene ancora un file ecmwrapper_0.04_windows_x86_64.exe) suggerirei di contattare gli admin di yoyo per farvi dire come si fa a mettere in "wait for memory" un client wrappato.

EDIT
Cmq prima di lavorare sul "wait for memory" proverei a profilare l'uso della RAM nel tempo: se non è un semplice picco di utilizzo, quella la soluzione non serve a molto. Ad occhio mi sembra che su WU da 7 minuti i primi 3 lavori con soli 22Mb ma bisognerebbe avere una statistica migliore

@astroale sei ostinato a non usare app_config?

rattorosso ha scritto:

@astroale sei ostinato a non usare app_config?

<app_config>
   <app>
      <name>PROGETTO</name>
      <max_concurrent>1</max_concurrent>
   </app>
</app_config>

è che ho ancora la 7.0.28 ma forse sull'atom che non ha la GPU potrei fare l'upgrade ...
ok domani upgrade e ... vi faccio vedere io !!!

Ragazzi, io ve lo dico: siete mostruosi!!
Finite 30000 wu in meno di 24 ore in una decina di utenti attivi

campos ha scritto:

boboviz ha scritto:

Per chi?

Per i soliti noti

boboviz ha scritto:

Ragazzi, io ve lo dico: siete mostruosi!!
Finite 30000 wu in meno di 24 ore in una decina di utenti attivi

sarà ma ogni pc qua ha circa 3000 e passa WU scaricate

mi sa che se non riesco a spedirle tutte in tempo ve le rimando indietro

boboviz ha scritto:

Ragazzi, io ve lo dico: siete mostruosi!!
Finite 30000 wu in meno di 24 ore in una decina di utenti attivi

Ragà .. vi rispedisco circa 3000 WU ... abortite per i pc che terrò spento da qui ai prossimi 3-4 giorni

non sarei riuscito ad elaborarle in tempo

tutte vostre

me ne tengo 3000 per i pc H12-24

sabayonino ha scritto:

Ragà .. vi rispedisco circa 3000 WU ... abortite per i pc che terrò spento da qui ai prossimi 3-4 giorni

non sarei riuscito ad elaborarle in tempo

tutte vostre

me ne tengo 3000 per i pc H12-24

Grazie!!!!!!
Vedrò di spulciarne qualcuna