Skoči na vsebino

Rešitve: načrt znanstvenega delovnega toka

1. Graf

Surovi podatki HDF5 in datoteka INI so vhod vsakega prilagajanja korelatorjev. Sedemnajst različnih prilagajanj izdela 68 kandidatnih datotek .jack. Vsi kandidati so vhod izbire, ki izdela štiri izbrane/preoblikovane energijske datoteke in diagnostični PDF. Štiri energijske datoteke in file.list so vhod prilagajanja disperzije s končnim PDF.

Sedemnajst različnih prilagajanj se lahko izvaja sočasno; izbira in disperzija sta odvisni od njihovih rezultatov. Izbira mora videti celotno množico kandidatov, saj jih med seboj primerja. Če bi navedli samo enega kandidata za vsako gibalno količino, bi lahko stekla prezgodaj.

2. Odvisnosti

Kot vhode navedemo INI, podatke HDF5 in program. Prva dva sta podatkovna oziroma nastavitvena odvisnost; tretji omogoča, da je sprememba programa vidna kot sprememba vhoda. Če navedemo samo INI, lahko zamenjava surovih podatkov pusti navidezno dokončane, a zastarele rezultate. V delovnem toku moramo predstaviti tudi datoteke, ki jih program bere posredno prek INI.

Snakemake spremlja tudi druge razloge za ponovni zagon, med njimi spremembe kode pravil in parametrov. To ne pomeni, da sam odkrije vsako datoteko, ki jo interno odpre program Python.

3. Manjkajoči vhodi in zastareli izhodi

  1. HDF5 ni deklariran kot vhod, zato njegova sprememba ni vidna v grafu odvisnosti. Če je vse, kar Snakemake spremlja, nespremenjeno, lahko ponovno uporabi zastarele izhode.
  2. Dodajte surovo datoteko HDF5 in program fit_correlator.py, poleg že navedenega INI. Ob novejših skupnih surovih podatkih je treba ponoviti vseh 17 različnih prilagajanj, nato izbiro energij in disperzijo. Tako sprememba vhoda doseže vse odvisne rezultate.
  3. Izrecna zahteva po manjkajočem izhodu zahteva njegovo opravilo. Program v enem zagonu izdela vse štiri izhode tega prilagajanja; preostalih 16 prilagajanj zaradi te manjkajoče datoteke ni treba ponoviti.

Dve datoteki INI opisujeta isti model in interval ter zato iste štiri izhodne poti. Učni delovni tok to prilagajanje izvede enkrat, da dve opravili ne pišeta v iste datoteke.

Nadaljujte z implementacijo in izvajanjem delovnega toka.