Optimal operation of a low-temperature geothermal well pump network : a Dueling Deep Q-network approach

• Main Author: Friðrik Tryggvi Róbertsson 1997-
• Other Authors: Háskólinn í Reykjavík
• Format: Master Thesis
• Language: English
• Published: 2024
• Subjects: Vélaverkfræði; Meistaraprófsritgerðir; Jarðhitanýting; Bestun; Dælur; Orkunotkun; Mechanical engineering; Geothermal space heating; Mathematical optimization; Pumping machinery; Reinforcement Learning; Heating from central stations; Reykjahlíð; Reykjavík; Iceland
• Online Access: https://hdl.handle.net/1946/48707

District heating for the capital area of Iceland heavily relies on geothermal water, with one of the key components being the deep well pump network located in Reykjahlíð, Mosfellsdalur, near Reykjavík. However, the network’s operation is yet to be fully optimized for overall efficiency. The combination of electric submersible pumps (ESPs) and vertical shaft pumps (VSPs) presents a computationally intensive optimization challenge. This work addresses the challenge by integrating a hydraulic simulation model, developed using Epanet, with the Dueling Deep Q-network (DQN) architecture, in which the neural network functions as a core component, serving as a function approximator to optimize the complex, non-linear relationship between fluid flow and power consumption, achieving a multi-objective goal. Two distinct approaches are explored, with the more successful yielding a 6.5% reduction in the network’s power consumption compared to the current operation, while accurately meeting demand. This optimization is performed in near real-time, making it highly suitable for the fluctuating demand conditions typical of district heating systems. Hitaveitan á höfuðborgarsvæðinu byggir mikið á nýtingu jarðhita, einn af lykilþáttum hita veitunnar er djúpdælukerfi sem staðsett er í Reykjahlíð í Mosfellsdal. Enn á þó eftir að fullkomna virkni kerfisins til að ná fram hámarks heildarnýtni. Dælukerfið samanstendur af háspenntum djúpdælum og öxuldælum. Það að uppsetning dælukerfisins innihaldi mis munandi gerðir dæla með mismunandi stýringum gerir það að verkum að bestun kerfisins verður þung í útreikningi. Í þessari ritgerð er leitast við að ná fram hagræðingu með því að samþætta vökvahermilíkan, þróað með Epanet, við Dueling Deep Q-Network (DQN) að ferð, þar sem taugakerfið er notað sem nálgunarfall á flókna, ólínulega og ókúpta sambandi vatnsflæðis og orkunotkunar. Tvær útfærslur eru skoðaðar, sú árangursríkasta skilar 6,5% lækkun á orkunotkun kerfisins miðað við núverandi virkni, en uppfyllir jafnframt eftirspurn á nákvæman ...