The IceProd Framework: Distributed Data Processing for the IceCube Neutrino Observatory
IceCube is a one-gigaton instrument located at the geographic South Pole, designed to detect cosmic neutrinos, iden- tify the particle nature of dark matter, and study high-energy neutrinos themselves. Simulation of the IceCube detector and processing of data require a significant amount of computat...
Main Authors: | , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , |
---|---|
Format: | Text |
Language: | unknown |
Published: |
arXiv
2013
|
Subjects: | |
Online Access: | https://dx.doi.org/10.48550/arxiv.1311.5904 https://arxiv.org/abs/1311.5904 |
id |
ftdatacite:10.48550/arxiv.1311.5904 |
---|---|
record_format |
openpolar |
institution |
Open Polar |
collection |
DataCite Metadata Store (German National Library of Science and Technology) |
op_collection_id |
ftdatacite |
language |
unknown |
topic |
Distributed, Parallel, and Cluster Computing cs.DC FOS Computer and information sciences |
spellingShingle |
Distributed, Parallel, and Cluster Computing cs.DC FOS Computer and information sciences Aartsen, M. G. Abbasi, R. Ackermann, M. Adams, J. Aguilar, J. A. Ahlers, M. Altmann, D. Arguelles, C. Auffenberg, J. Bai, X. Baker, M. Barwick, S. W. Baum, V. Bay, R. Beatty, J. J. Tjus, J. Becker Becker, K. -H. BenZvi, S. Berghaus, P. Berley, D. Bernardini, E. Bernhard, A. Besson, D. Z. Binder, G. Bindig, D. Bissok, M. Blaufuss, E. Blumenthal, J. Boersma, D. J. Bohm, C. Bose, D. Böser, S. Botner, O. Brayeur, L. Bretz, H. -P. Brown, A. M. Bruijn, R. Casey, J. Casier, M. Chirkin, D. Christov, A. Christy, B. Clark, K. Classen, L. Clevermann, F. Coenders, S. Cohen, S. Cowen, D. F. Silva, A. H. Cruz Danninger, M. Daughhetee, J. Davis, J. C. Day, M. De Clercq, C. De Ridder, S. Desiati, P. de Vries, K. D. de With, M. DeYoung, T. Díaz-Vélez, J. C. Dunkman, M. Eagan, R. Eberhardt, B. Eichmann, B. Eisch, J. Euler, S. Evenson, P. A. Fadiran, O. Fazely, A. R. Fedynitch, A. Feintzeig, J. Feusels, T. Filimonov, K. Finley, C. Fischer-Wasels, T. Flis, S. Franckowiak, A. Frantzen, K. Fuchs, T. Gaisser, T. K. Gallagher, J. Gerhardt, L. Gladstone, L. Glüsenkamp, T. Goldschmidt, A. Golup, G. Gonzalez, J. G. Goodman, J. A. Góra, D. Grandmont, D. T. Grant, D. Gretskov, P. Groh, J. C. Groß, A. Ha, C. Ismail, A. Haj Hallen, P. Hallgren, A. Halzen, F. Hanson, K. Hebecker, D. Heereman, D. Heinen, D. Helbing, K. Hellauer, R. Hickford, S. Hill, G. C. Hoffman, K. D. Hoffmann, R. Homeier, A. Hoshina, K. Huang, F. Huelsnitz, W. Hulth, P. O. Hultqvist, K. Hussain, S. Ishihara, A. Jacobi, E. Jacobsen, J. Jagielski, K. Japaridze, G. S. Jero, K. Jlelati, O. Kaminsky, B. Kappes, A. Karg, T. Karle, A. Kauer, M. Kelley, J. L. Kiryluk, J. Kläs, J. Klein, S. R. Köhne, J. -H. Kohnen, G. Kolanoski, H. Köpke, L. Kopper, C. Kopper, S. Koskinen, D. J. Kowalski, M. Krasberg, M. Kriesten, A. Krings, K. Kroll, G. Kunnen, J. Kurahashi, N. Kuwabara, T. Labare, M. Landsman, H. Larson, M. J. Lesiak-Bzdak, M. Leuermann, M. Leute, J. Lünemann, J. Macías, O. Madsen, J. Maggi, G. Maruyama, R. Mase, K. Matis, H. S. McNally, F. Meagher, K. Merck, M. Merino, G. Meures, T. Miarecki, S. Middell, E. Milke, N. Miller, J. Mohrmann, L. Montaruli, T. Morse, R. Nahnhauer, R. Naumann, U. Niederhausen, H. Nowicki, S. C. Nygren, D. R. Obertacke, A. Odrowski, S. Olivas, A. Omairat, A. O'Murchadha, A. Paul, L. Pepper, J. A. Heros, C. Pérez de los Pfendner, C. Pieloth, D. Pinat, E. Posselt, J. Price, P. B. Przybylski, G. T. Quinnan, M. ädel, L. R Rae, I. Rameez, M. Rawlins, K. Redl, P. Reimann, R. Resconi, E. Rhode, W. Ribordy, M. Richman, M. Riedel, B. Rodrigues, J. P. Rott, C. Ruhe, T. Ruzybayev, B. Ryckbosch, D. Saba, S. M. Sander, H. -G. Santander, M. Sarkar, S. Schatto, K. Scheriau, F. Schmidt, T. Schmitz, M. Schoenen, S. Schöneberg, S. Schönwald, A. Schukraft, A. Schulte, L. Schultz, D. Schulz, O. Seckel, D. Sestayo, Y. Seunarine, S. Shanidze, R. Sheremata, C. Smith, M. W. E. Soldin, D. Spiczak, G. M. Spiering, C. Stamatikos, M. Stanev, T. Stanisha, N. A. Stasik, A. Stezelberger, T. Stokstad, R. G. Stößl, A. Strahler, E. A. Ström, R. Strotjohann, N. L. Sullivan, G. W. Taavola, H. Taboada, I. Tamburro, A. Tepe, A. Ter-Antonyan, S. Tešić, G. Tilav, S. Toale, P. A. Tobin, M. N. Toscano, S. Tselengidou, M. Unger, E. Usner, M. Vallecorsa, S. van Eijndhoven, N. Van Overloop, A. van Santen, J. Vehring, M. Voge, M. Vraeghe, M. Walck, C. Waldenmaier, T. Wallraff, M. Weaver, Ch. Wellons, M. Wendt, C. Westerhoff, S. Whitehorn, N. Wiebe, K. Wiebusch, C. H. Williams, D. R. Wissing, H. Wolf, M. Wood, T. R. Woschnagg, K. Xu, D. L. Xu, X. W. Yanez, J. P. Yodh, G. Yoshida, S. Zarzhitsky, P. Ziemann, J. Zierke, S. Zoll, M. The IceProd Framework: Distributed Data Processing for the IceCube Neutrino Observatory |
topic_facet |
Distributed, Parallel, and Cluster Computing cs.DC FOS Computer and information sciences |
description |
IceCube is a one-gigaton instrument located at the geographic South Pole, designed to detect cosmic neutrinos, iden- tify the particle nature of dark matter, and study high-energy neutrinos themselves. Simulation of the IceCube detector and processing of data require a significant amount of computational resources. IceProd is a distributed management system based on Python, XML-RPC and GridFTP. It is driven by a central database in order to coordinate and admin- ister production of simulations and processing of data produced by the IceCube detector. IceProd runs as a separate layer on top of other middleware and can take advantage of a variety of computing resources, including grids and batch systems such as CREAM, Condor, and PBS. This is accomplished by a set of dedicated daemons that process job submission in a coordinated fashion through the use of middleware plugins that serve to abstract the details of job submission and job management from the framework. |
format |
Text |
author |
Aartsen, M. G. Abbasi, R. Ackermann, M. Adams, J. Aguilar, J. A. Ahlers, M. Altmann, D. Arguelles, C. Auffenberg, J. Bai, X. Baker, M. Barwick, S. W. Baum, V. Bay, R. Beatty, J. J. Tjus, J. Becker Becker, K. -H. BenZvi, S. Berghaus, P. Berley, D. Bernardini, E. Bernhard, A. Besson, D. Z. Binder, G. Bindig, D. Bissok, M. Blaufuss, E. Blumenthal, J. Boersma, D. J. Bohm, C. Bose, D. Böser, S. Botner, O. Brayeur, L. Bretz, H. -P. Brown, A. M. Bruijn, R. Casey, J. Casier, M. Chirkin, D. Christov, A. Christy, B. Clark, K. Classen, L. Clevermann, F. Coenders, S. Cohen, S. Cowen, D. F. Silva, A. H. Cruz Danninger, M. Daughhetee, J. Davis, J. C. Day, M. De Clercq, C. De Ridder, S. Desiati, P. de Vries, K. D. de With, M. DeYoung, T. Díaz-Vélez, J. C. Dunkman, M. Eagan, R. Eberhardt, B. Eichmann, B. Eisch, J. Euler, S. Evenson, P. A. Fadiran, O. Fazely, A. R. Fedynitch, A. Feintzeig, J. Feusels, T. Filimonov, K. Finley, C. Fischer-Wasels, T. Flis, S. Franckowiak, A. Frantzen, K. Fuchs, T. Gaisser, T. K. Gallagher, J. Gerhardt, L. Gladstone, L. Glüsenkamp, T. Goldschmidt, A. Golup, G. Gonzalez, J. G. Goodman, J. A. Góra, D. Grandmont, D. T. Grant, D. Gretskov, P. Groh, J. C. Groß, A. Ha, C. Ismail, A. Haj Hallen, P. Hallgren, A. Halzen, F. Hanson, K. Hebecker, D. Heereman, D. Heinen, D. Helbing, K. Hellauer, R. Hickford, S. Hill, G. C. Hoffman, K. D. Hoffmann, R. Homeier, A. Hoshina, K. Huang, F. Huelsnitz, W. Hulth, P. O. Hultqvist, K. Hussain, S. Ishihara, A. Jacobi, E. Jacobsen, J. Jagielski, K. Japaridze, G. S. Jero, K. Jlelati, O. Kaminsky, B. Kappes, A. Karg, T. Karle, A. Kauer, M. Kelley, J. L. Kiryluk, J. Kläs, J. Klein, S. R. Köhne, J. -H. Kohnen, G. Kolanoski, H. Köpke, L. Kopper, C. Kopper, S. Koskinen, D. J. Kowalski, M. Krasberg, M. Kriesten, A. Krings, K. Kroll, G. Kunnen, J. Kurahashi, N. Kuwabara, T. Labare, M. Landsman, H. Larson, M. J. Lesiak-Bzdak, M. Leuermann, M. Leute, J. Lünemann, J. Macías, O. Madsen, J. Maggi, G. Maruyama, R. Mase, K. Matis, H. S. McNally, F. Meagher, K. Merck, M. Merino, G. Meures, T. Miarecki, S. Middell, E. Milke, N. Miller, J. Mohrmann, L. Montaruli, T. Morse, R. Nahnhauer, R. Naumann, U. Niederhausen, H. Nowicki, S. C. Nygren, D. R. Obertacke, A. Odrowski, S. Olivas, A. Omairat, A. O'Murchadha, A. Paul, L. Pepper, J. A. Heros, C. Pérez de los Pfendner, C. Pieloth, D. Pinat, E. Posselt, J. Price, P. B. Przybylski, G. T. Quinnan, M. ädel, L. R Rae, I. Rameez, M. Rawlins, K. Redl, P. Reimann, R. Resconi, E. Rhode, W. Ribordy, M. Richman, M. Riedel, B. Rodrigues, J. P. Rott, C. Ruhe, T. Ruzybayev, B. Ryckbosch, D. Saba, S. M. Sander, H. -G. Santander, M. Sarkar, S. Schatto, K. Scheriau, F. Schmidt, T. Schmitz, M. Schoenen, S. Schöneberg, S. Schönwald, A. Schukraft, A. Schulte, L. Schultz, D. Schulz, O. Seckel, D. Sestayo, Y. Seunarine, S. Shanidze, R. Sheremata, C. Smith, M. W. E. Soldin, D. Spiczak, G. M. Spiering, C. Stamatikos, M. Stanev, T. Stanisha, N. A. Stasik, A. Stezelberger, T. Stokstad, R. G. Stößl, A. Strahler, E. A. Ström, R. Strotjohann, N. L. Sullivan, G. W. Taavola, H. Taboada, I. Tamburro, A. Tepe, A. Ter-Antonyan, S. Tešić, G. Tilav, S. Toale, P. A. Tobin, M. N. Toscano, S. Tselengidou, M. Unger, E. Usner, M. Vallecorsa, S. van Eijndhoven, N. Van Overloop, A. van Santen, J. Vehring, M. Voge, M. Vraeghe, M. Walck, C. Waldenmaier, T. Wallraff, M. Weaver, Ch. Wellons, M. Wendt, C. Westerhoff, S. Whitehorn, N. Wiebe, K. Wiebusch, C. H. Williams, D. R. Wissing, H. Wolf, M. Wood, T. R. Woschnagg, K. Xu, D. L. Xu, X. W. Yanez, J. P. Yodh, G. Yoshida, S. Zarzhitsky, P. Ziemann, J. Zierke, S. Zoll, M. |
author_facet |
Aartsen, M. G. Abbasi, R. Ackermann, M. Adams, J. Aguilar, J. A. Ahlers, M. Altmann, D. Arguelles, C. Auffenberg, J. Bai, X. Baker, M. Barwick, S. W. Baum, V. Bay, R. Beatty, J. J. Tjus, J. Becker Becker, K. -H. BenZvi, S. Berghaus, P. Berley, D. Bernardini, E. Bernhard, A. Besson, D. Z. Binder, G. Bindig, D. Bissok, M. Blaufuss, E. Blumenthal, J. Boersma, D. J. Bohm, C. Bose, D. Böser, S. Botner, O. Brayeur, L. Bretz, H. -P. Brown, A. M. Bruijn, R. Casey, J. Casier, M. Chirkin, D. Christov, A. Christy, B. Clark, K. Classen, L. Clevermann, F. Coenders, S. Cohen, S. Cowen, D. F. Silva, A. H. Cruz Danninger, M. Daughhetee, J. Davis, J. C. Day, M. De Clercq, C. De Ridder, S. Desiati, P. de Vries, K. D. de With, M. DeYoung, T. Díaz-Vélez, J. C. Dunkman, M. Eagan, R. Eberhardt, B. Eichmann, B. Eisch, J. Euler, S. Evenson, P. A. Fadiran, O. Fazely, A. R. Fedynitch, A. Feintzeig, J. Feusels, T. Filimonov, K. Finley, C. Fischer-Wasels, T. Flis, S. Franckowiak, A. Frantzen, K. Fuchs, T. Gaisser, T. K. Gallagher, J. Gerhardt, L. Gladstone, L. Glüsenkamp, T. Goldschmidt, A. Golup, G. Gonzalez, J. G. Goodman, J. A. Góra, D. Grandmont, D. T. Grant, D. Gretskov, P. Groh, J. C. Groß, A. Ha, C. Ismail, A. Haj Hallen, P. Hallgren, A. Halzen, F. Hanson, K. Hebecker, D. Heereman, D. Heinen, D. Helbing, K. Hellauer, R. Hickford, S. Hill, G. C. Hoffman, K. D. Hoffmann, R. Homeier, A. Hoshina, K. Huang, F. Huelsnitz, W. Hulth, P. O. Hultqvist, K. Hussain, S. Ishihara, A. Jacobi, E. Jacobsen, J. Jagielski, K. Japaridze, G. S. Jero, K. Jlelati, O. Kaminsky, B. Kappes, A. Karg, T. Karle, A. Kauer, M. Kelley, J. L. Kiryluk, J. Kläs, J. Klein, S. R. Köhne, J. -H. Kohnen, G. Kolanoski, H. Köpke, L. Kopper, C. Kopper, S. Koskinen, D. J. Kowalski, M. Krasberg, M. Kriesten, A. Krings, K. Kroll, G. Kunnen, J. Kurahashi, N. Kuwabara, T. Labare, M. Landsman, H. Larson, M. J. Lesiak-Bzdak, M. Leuermann, M. Leute, J. Lünemann, J. Macías, O. Madsen, J. Maggi, G. Maruyama, R. Mase, K. Matis, H. S. McNally, F. Meagher, K. Merck, M. Merino, G. Meures, T. Miarecki, S. Middell, E. Milke, N. Miller, J. Mohrmann, L. Montaruli, T. Morse, R. Nahnhauer, R. Naumann, U. Niederhausen, H. Nowicki, S. C. Nygren, D. R. Obertacke, A. Odrowski, S. Olivas, A. Omairat, A. O'Murchadha, A. Paul, L. Pepper, J. A. Heros, C. Pérez de los Pfendner, C. Pieloth, D. Pinat, E. Posselt, J. Price, P. B. Przybylski, G. T. Quinnan, M. ädel, L. R Rae, I. Rameez, M. Rawlins, K. Redl, P. Reimann, R. Resconi, E. Rhode, W. Ribordy, M. Richman, M. Riedel, B. Rodrigues, J. P. Rott, C. Ruhe, T. Ruzybayev, B. Ryckbosch, D. Saba, S. M. Sander, H. -G. Santander, M. Sarkar, S. Schatto, K. Scheriau, F. Schmidt, T. Schmitz, M. Schoenen, S. Schöneberg, S. Schönwald, A. Schukraft, A. Schulte, L. Schultz, D. Schulz, O. Seckel, D. Sestayo, Y. Seunarine, S. Shanidze, R. Sheremata, C. Smith, M. W. E. Soldin, D. Spiczak, G. M. Spiering, C. Stamatikos, M. Stanev, T. Stanisha, N. A. Stasik, A. Stezelberger, T. Stokstad, R. G. Stößl, A. Strahler, E. A. Ström, R. Strotjohann, N. L. Sullivan, G. W. Taavola, H. Taboada, I. Tamburro, A. Tepe, A. Ter-Antonyan, S. Tešić, G. Tilav, S. Toale, P. A. Tobin, M. N. Toscano, S. Tselengidou, M. Unger, E. Usner, M. Vallecorsa, S. van Eijndhoven, N. Van Overloop, A. van Santen, J. Vehring, M. Voge, M. Vraeghe, M. Walck, C. Waldenmaier, T. Wallraff, M. Weaver, Ch. Wellons, M. Wendt, C. Westerhoff, S. Whitehorn, N. Wiebe, K. Wiebusch, C. H. Williams, D. R. Wissing, H. Wolf, M. Wood, T. R. Woschnagg, K. Xu, D. L. Xu, X. W. Yanez, J. P. Yodh, G. Yoshida, S. Zarzhitsky, P. Ziemann, J. Zierke, S. Zoll, M. |
author_sort |
Aartsen, M. G. |
title |
The IceProd Framework: Distributed Data Processing for the IceCube Neutrino Observatory |
title_short |
The IceProd Framework: Distributed Data Processing for the IceCube Neutrino Observatory |
title_full |
The IceProd Framework: Distributed Data Processing for the IceCube Neutrino Observatory |
title_fullStr |
The IceProd Framework: Distributed Data Processing for the IceCube Neutrino Observatory |
title_full_unstemmed |
The IceProd Framework: Distributed Data Processing for the IceCube Neutrino Observatory |
title_sort |
iceprod framework: distributed data processing for the icecube neutrino observatory |
publisher |
arXiv |
publishDate |
2013 |
url |
https://dx.doi.org/10.48550/arxiv.1311.5904 https://arxiv.org/abs/1311.5904 |
geographic |
South Pole |
geographic_facet |
South Pole |
genre |
South pole |
genre_facet |
South pole |
op_relation |
https://dx.doi.org/10.1016/j.jpdc.2014.08.001 |
op_rights |
arXiv.org perpetual, non-exclusive license http://arxiv.org/licenses/nonexclusive-distrib/1.0/ |
op_doi |
https://doi.org/10.48550/arxiv.1311.5904 https://doi.org/10.1016/j.jpdc.2014.08.001 |
_version_ |
1766201938444025856 |
spelling |
ftdatacite:10.48550/arxiv.1311.5904 2023-05-15T18:22:32+02:00 The IceProd Framework: Distributed Data Processing for the IceCube Neutrino Observatory Aartsen, M. G. Abbasi, R. Ackermann, M. Adams, J. Aguilar, J. A. Ahlers, M. Altmann, D. Arguelles, C. Auffenberg, J. Bai, X. Baker, M. Barwick, S. W. Baum, V. Bay, R. Beatty, J. J. Tjus, J. Becker Becker, K. -H. BenZvi, S. Berghaus, P. Berley, D. Bernardini, E. Bernhard, A. Besson, D. Z. Binder, G. Bindig, D. Bissok, M. Blaufuss, E. Blumenthal, J. Boersma, D. J. Bohm, C. Bose, D. Böser, S. Botner, O. Brayeur, L. Bretz, H. -P. Brown, A. M. Bruijn, R. Casey, J. Casier, M. Chirkin, D. Christov, A. Christy, B. Clark, K. Classen, L. Clevermann, F. Coenders, S. Cohen, S. Cowen, D. F. Silva, A. H. Cruz Danninger, M. Daughhetee, J. Davis, J. C. Day, M. De Clercq, C. De Ridder, S. Desiati, P. de Vries, K. D. de With, M. DeYoung, T. Díaz-Vélez, J. C. Dunkman, M. Eagan, R. Eberhardt, B. Eichmann, B. Eisch, J. Euler, S. Evenson, P. A. Fadiran, O. Fazely, A. R. Fedynitch, A. Feintzeig, J. Feusels, T. Filimonov, K. Finley, C. Fischer-Wasels, T. Flis, S. Franckowiak, A. Frantzen, K. Fuchs, T. Gaisser, T. K. Gallagher, J. Gerhardt, L. Gladstone, L. Glüsenkamp, T. Goldschmidt, A. Golup, G. Gonzalez, J. G. Goodman, J. A. Góra, D. Grandmont, D. T. Grant, D. Gretskov, P. Groh, J. C. Groß, A. Ha, C. Ismail, A. Haj Hallen, P. Hallgren, A. Halzen, F. Hanson, K. Hebecker, D. Heereman, D. Heinen, D. Helbing, K. Hellauer, R. Hickford, S. Hill, G. C. Hoffman, K. D. Hoffmann, R. Homeier, A. Hoshina, K. Huang, F. Huelsnitz, W. Hulth, P. O. Hultqvist, K. Hussain, S. Ishihara, A. Jacobi, E. Jacobsen, J. Jagielski, K. Japaridze, G. S. Jero, K. Jlelati, O. Kaminsky, B. Kappes, A. Karg, T. Karle, A. Kauer, M. Kelley, J. L. Kiryluk, J. Kläs, J. Klein, S. R. Köhne, J. -H. Kohnen, G. Kolanoski, H. Köpke, L. Kopper, C. Kopper, S. Koskinen, D. J. Kowalski, M. Krasberg, M. Kriesten, A. Krings, K. Kroll, G. Kunnen, J. Kurahashi, N. Kuwabara, T. Labare, M. Landsman, H. Larson, M. J. Lesiak-Bzdak, M. Leuermann, M. Leute, J. Lünemann, J. Macías, O. Madsen, J. Maggi, G. Maruyama, R. Mase, K. Matis, H. S. McNally, F. Meagher, K. Merck, M. Merino, G. Meures, T. Miarecki, S. Middell, E. Milke, N. Miller, J. Mohrmann, L. Montaruli, T. Morse, R. Nahnhauer, R. Naumann, U. Niederhausen, H. Nowicki, S. C. Nygren, D. R. Obertacke, A. Odrowski, S. Olivas, A. Omairat, A. O'Murchadha, A. Paul, L. Pepper, J. A. Heros, C. Pérez de los Pfendner, C. Pieloth, D. Pinat, E. Posselt, J. Price, P. B. Przybylski, G. T. Quinnan, M. ädel, L. R Rae, I. Rameez, M. Rawlins, K. Redl, P. Reimann, R. Resconi, E. Rhode, W. Ribordy, M. Richman, M. Riedel, B. Rodrigues, J. P. Rott, C. Ruhe, T. Ruzybayev, B. Ryckbosch, D. Saba, S. M. Sander, H. -G. Santander, M. Sarkar, S. Schatto, K. Scheriau, F. Schmidt, T. Schmitz, M. Schoenen, S. Schöneberg, S. Schönwald, A. Schukraft, A. Schulte, L. Schultz, D. Schulz, O. Seckel, D. Sestayo, Y. Seunarine, S. Shanidze, R. Sheremata, C. Smith, M. W. E. Soldin, D. Spiczak, G. M. Spiering, C. Stamatikos, M. Stanev, T. Stanisha, N. A. Stasik, A. Stezelberger, T. Stokstad, R. G. Stößl, A. Strahler, E. A. Ström, R. Strotjohann, N. L. Sullivan, G. W. Taavola, H. Taboada, I. Tamburro, A. Tepe, A. Ter-Antonyan, S. Tešić, G. Tilav, S. Toale, P. A. Tobin, M. N. Toscano, S. Tselengidou, M. Unger, E. Usner, M. Vallecorsa, S. van Eijndhoven, N. Van Overloop, A. van Santen, J. Vehring, M. Voge, M. Vraeghe, M. Walck, C. Waldenmaier, T. Wallraff, M. Weaver, Ch. Wellons, M. Wendt, C. Westerhoff, S. Whitehorn, N. Wiebe, K. Wiebusch, C. H. Williams, D. R. Wissing, H. Wolf, M. Wood, T. R. Woschnagg, K. Xu, D. L. Xu, X. W. Yanez, J. P. Yodh, G. Yoshida, S. Zarzhitsky, P. Ziemann, J. Zierke, S. Zoll, M. 2013 https://dx.doi.org/10.48550/arxiv.1311.5904 https://arxiv.org/abs/1311.5904 unknown arXiv https://dx.doi.org/10.1016/j.jpdc.2014.08.001 arXiv.org perpetual, non-exclusive license http://arxiv.org/licenses/nonexclusive-distrib/1.0/ Distributed, Parallel, and Cluster Computing cs.DC FOS Computer and information sciences article-journal Article ScholarlyArticle Text 2013 ftdatacite https://doi.org/10.48550/arxiv.1311.5904 https://doi.org/10.1016/j.jpdc.2014.08.001 2022-04-01T13:18:32Z IceCube is a one-gigaton instrument located at the geographic South Pole, designed to detect cosmic neutrinos, iden- tify the particle nature of dark matter, and study high-energy neutrinos themselves. Simulation of the IceCube detector and processing of data require a significant amount of computational resources. IceProd is a distributed management system based on Python, XML-RPC and GridFTP. It is driven by a central database in order to coordinate and admin- ister production of simulations and processing of data produced by the IceCube detector. IceProd runs as a separate layer on top of other middleware and can take advantage of a variety of computing resources, including grids and batch systems such as CREAM, Condor, and PBS. This is accomplished by a set of dedicated daemons that process job submission in a coordinated fashion through the use of middleware plugins that serve to abstract the details of job submission and job management from the framework. Text South pole DataCite Metadata Store (German National Library of Science and Technology) South Pole |