Server metrics vid lasttester samt presentation

Jag undrar om någon känner till ett bra verktyg för att presentera data från testkörningar på ett smidigt sätt.
Det jag behöver är loggar, hur systemet mår etc.

Idag så kör jag en bibba perlscript som gör det som efterfrågas dvs.
Startar sar,top, tcpdumpar på alla maskiner som jag last testar.
När testet är klart så samlas all data ihop och packas ner i en zipfil för arkivering eller analys.

Jag har funderat på att scripta någon typ av SQLLIITE implementation så fyller upp en databas med primärnycklar som sitter ihop med testfallet och sen kanske sätta på nått gui som presenterar datan....

Tänkte bara kolla innan jag börjar rita på någon lösning om det finns nått verktyg som skulle kunna användas i dess ställe?

Nice, jag jobbar mest med interna applikationer men sen förväntar sig folk att man även ska hålla kolla på allt annat också. Även om jag inte har root på maskinerna....

Observium verkar nice och statsd tittade jag lite på också.
Vi har funderat lite på att köra graphite eller influxdb för lite andra metrics också.

Jo vi kickar lite på influxdb + Grafana för daily operations.
Vi har lite olika grejer idag som Datawatch etc etc. Men mest så kör vi allt i en egen SQL DB.

Får titta lite på Apiet för observium.

Ett av problem är att jag ofta kör multipla testfall i snabb följd och när man testat i en hel dag så börjar allt flyta samman vad det gäller tider etc. Så det jag gör idag är bara att jag sparar undan namnet på min Zipfil som har allt för just testet som gick bra och lagrar den i all framtid.

Blev fett imponerad av observarium, var enkelt att sätta upp dock så verkar snmp för Linux maskiner vara rätt begränsat.
Zenoss testade jag också att labba med och man ska visst kunna köra ssh hämtning där så man får lite mer information.

Observarium skulle jag iallafall vilja slänga upp på en av våra servrar måste bara övertyga säkerhets avdelningen...
Sen är influx + grafana nått som kommer skulle jag gissa på, när jag får tid att labba med det.
Får också tittat på statsd.

Dock tror jag inte att zenoss eller observarium klarar att polla tillräckligt ofta under testerna. Jag pollar varje sekund för att se hur allt ser ut hela tiden.