fix incosistent database on startup

[mariux]

collect jobs that are still running or not running anymore and save a resonable state in the database.

[mariux]

depends on #14

[mariux]

@donald sagte:

Hintergrund war, dass wir noch Karteileichen nach der Stromabschaltung
loswerden wollten. (Ist erledigt). Dafür könnte man bei Gelegenheit auch
ein Tool machen bzw, falls eine neue Instanz gestartet wird, könnte das
der neue mxqd selber machen.

[mariux]

quick fix:

update job_status=750 where job_status=200 and host_hostname like 'crahedhosthere%';

vor dem start des mxqd.. ansonsten noch

and date_start <= crashzeitpunkt.

[mariux]

@donald @wwwutz
to fix inconsistent database of a crashed host:

• a normal restart of mxqd on this host fixes the database.

to fix inconsistent database of a host that died forever:

• commit a7b0180 introduces option --hostname to mxqd

so

mxqd --hostname <diedhost> -m 1 --no-log

should do the trick and remove all died jobs on host <diedhost>... just ^C and done..
-m 1

(be sure to use fqdn)

root:thehawk:~/# /home/mariux/src/mxq.git/mxqd --memory=100 --max-memory-per-slot=100 -j 100 --hostname hal104.molgen.mpg.de --no-log 
2015-07-29 17:51:51 +0200 mxqd[3809]: mxqd - MXQ v0.9.0 (beta)
2015-07-29 17:51:51 +0200 mxqd[3809]:   by Marius Tolzmann <tolzmann@molgen.mpg.de> 2013-2015
2015-07-29 17:51:51 +0200 mxqd[3809]:   Max Planck Institute for Molecular Genetics - Berlin Dahlem
2015-07-29 17:51:51 +0200 mxqd[3809]: hostname=hal104.molgen.mpg.de server_id=main :: MXQ server started.
2015-07-29 17:51:51 +0200 mxqd[3809]: slots=100 memory_total=100 memory_avg_per_slot=1 memory_max_per_slot=100 :: server initialized.
2015-07-29 17:51:51 +0200 mxqd[3809]: hostname=hal104.molgen.mpg.de server_id=main :: recovered from previous crash: set job_status='unknown' for 17 jobs.
2015-07-29 17:51:51 +0200 mxqd[3809]: WARNING: total 6550464 jobs recovered from previous crash.

(warning in last line is fixed in 6d7649a)

[donald]

Perfekt.
Grüße vom Pool