Difference: TestAMQ (13 vs. 14)

Revision 142010-11-16 - EnricoFattibene

Line: 1 to 1
 
META TOPICPARENT name="WebHome"

Test sul trasporto dati di DGAS tramite Active MQ

Line: 203 to 203
  Abbiamo effettuato il test L misurando il numero di job processati dal sistema in un giorno intero in diverse configurazioni. Il set di job utilizzato e' stato lo stesso per le diverse configurazioni. Di seguito i risultati.
Changed:
<
<
- HLR AMQ, SSL attivo
>
>
- HLR AMQ, SSL attivo, broker di Torino (dgas-broker.to.infn.it)
  Numero di record in jobTransSummary e in trans_in: 33371

Numero di record in trans_queue: 129918

Changed:
<
<
- HLR AMQ, SSL disattivo
>
>
- HLR AMQ, SSL disattivo, broker di Torino (dgas-broker.to.infn.it)
  Numero di record in jobTransSummary e in trans_in: 33955

Numero di record in trans_queue: 131391

Changed:
<
<
- HLR standard
>
>
- HLR standard, broker di Torino (dgas-broker.to.infn.it)
  Numero di record in jobTransSummary e in trans_in: 62590

Numero di record in trans_queue: 265748

Changed:
<
<
- HLR AMQ, SSL attivo, broker CERN (gridmsg001.cern.ch)
>
>
- HLR AMQ, SSL attivo, broker del CERN (gridmsg001.cern.ch)
  Numero di record in jobTransSummary e in trans_in: 34609

Numero di record in trans_queue: 134244

Added:
>
>

Considerazioni finali

Durante l'installazione sono stati riscontrati dei problemi di dipendenze, derivanti soprattutto dal fatto che non sono ancora disponibili i pacchetti RPM. Riteniamo che questi problemi si risolveranno con la disponibilita' di tali pacchetti.

In generale abbiamo notato che la dimensione dei log cresce molto velocemente, tanto da raggiungere una dimensione di ~10 GB in poche ore. In particolare i file di log che abbiamo notato crescere rapidamente sono:

- sul CE: pushdAscii.log

- sull'HLR: dgas-hlr-amq-manager.log ; hlr_qmgrd.log ; hlrd.log

Riteniamo utile poter settare il livello di verbosita' di questi log e la possibilita' di attivare/disattivare la registrazione di questi log. Nel corso di questi test abbiamo dovuto ruotare i log in questione per evitare un riempimento rapido del disco. Affinche' la rotazione avesse effetto abbiamo dovuto riavviare i servizi ad ogni giro di rotate; senza riavviare i servizi infatti, il servizio continuava a puntare al vecchio file descriptor e il nuovo file creato rimane vuoto (almeno questo e' quello che crediamo sia successo).

Inoltre abbiamo notato la mancanza della informazione relativa al broker contattato sia nei log del producer che del consumer: per evitare che l'hostname del broker sia ripetuto per ogni invio/richiesta di UR, potrebbe essere un'idea quella di annotare nel log la configurazione allo start del servizio (sia nel CE che nell'HLR).

 
META FILEATTACHMENT attachment="DGAS-AMQ-testplan.rtf" attr="" comment="" date="1285236902" name="DGAS-AMQ-testplan.rtf" path="DGAS-AMQ-testplan.rtf" size="67700" stream="DGAS-AMQ-testplan.rtf" tmpFilename="/usr/tmp/CGItemp15419" user="EnricoFattibene" version="1"
 
This site is powered by the TWiki collaboration platformCopyright © 2008-2020 by the contributing authors. All material on this collaboration platform is the property of the contributing authors.
Ideas, requests, problems regarding TWiki? Send feedback