ГІБРИДНА АРХІТЕКТУРА ML ТА RL В АДАПТИВНОМУ МОДЕЛЮВАННІ СКЛАДНИХ ФІЗИЧНИХ ПРОЦЕСІВ
Анотація
У роботі представлено методологію до адаптивного чисельного моделювання складних фізичних процесів із використанням методів машинного навчання. Основна увага зосереджена на інтеграції багатошарових нейронних мереж і алгоритмів навчання з підкріпленням у цикл чисельного розрахунку з метою досягнення оптимального балансу між точністю та обчислювальними витратами. Запропонована архітектура передбачає поєднання попереднього прогнозування параметрів дискретизації за допомогою нейромережі та динамічної корекції цих параметрів агентом підкріплювального навчання. У роботі сформульовано математичну постановку задачі, що враховує похибку чисельного розв’язку та вартість обчислень, розроблено функцію винагороди для RL-агента та побудовано блок-схему інтегрованої архітектури на основі алгоритму PPO. Апробація архітектури виконана на тестових задачах теплопровідності в неоднорідному середовищі та хвильового рівняння в обмеженій області. Результати показали, що використання адаптивної MLP + RL архітектури дозволяє зменшити похибку обчислень до рівня 1,2–1,6% за скорочення часу виконання в 6–8 разів порівняно з високоточними еталонними рішеннями. Порівняння з рівномірною сіткою підтвердило суттєве підвищення ефективності розробленого методу. Отримані дані свідчать про можливість автоматичного зосередження обчислювальних ресурсів у критичних зонах та збереження прийнятної швидкодії в більш однорідних областях. Отже, інтеграція методів машинного навчання в чисельному моделюванні відкриває перспективи створення універсальних адаптивних алгоритмів, здатних забезпечити високу точність без істотного зростання обчислювальних витрат. Подальший розвиток роботи пов’язаний із використанням фізично орієнтованих нейронних мереж (PINNs) та розширенням апробації на багатовимірні й нелінійні системи.
Посилання
2. Simos T. E. New Variable-Step Procedure for the Numerical Integration of the One-Dimensional Schrödinger Equation. Journal of Computational Physics. 1993. Vol. 108. Iss. 1. P. 175–179. https://doi.org/10.1006/jcph.1993.1172
3. Faegh M., Ghungrad S., Oliveira J. P., Rao P., Haghighi A. A review on physics-informed machine learning for process-structure-property modeling in additive manufacturing. Journal of Manufacturing Processes. 2025. Vol. 133. P. 524–555. https://doi.org/10.1016/j.jmapro.2024.11.066
4. Bilak Y. Information system based on a complex model using machine learning for spectral analysis. Bulletin of Taras Shevchenko National University of Kyiv. Physical and Mathematical Sciences. 2025. Vol. 80. № 1. P. 104–114. https://doi.org/10.17721/1812-5409.2025/1.14
5. Bilak Y. Modeling, optimization and AI-forecasting technology in Raman spectrometry. Problems of Control and Informatics. 2025. Vol. 70. № 2. P. 99–112. https://doi.org/10.34229/1028-0979-2025-2-9
6. Bilak Y. Y. Development of a combined model for analyzing gas mixtures using machine learning methods. Applied Aspects of Information Technology. 2025. Vol. 8, № 1. P. 24–37. https://doi.org/10.15276/aait.08.2025.2
7. Martín-Guerrero J., Lamata L. Reinforcement Learning and Physics. Applied Sciences. 2021. Vol. 11. Art. 8589. https://doi.org/10.3390/app11188589
8. Irigaray O., Ansa Z., Fernandez-Gamiz U., Larrinaga A., García-Fernandez R., Portal-Porras K. Adaptive mesh refinement (AMR) criteria comparison for the DrivAer model. Heliyon. 2024. Vol. 10. Iss. 11. P. e31966. https://doi.org/10.1016/j.heliyon.2024.e31966
9. Freymuth N., Dahlinger P., Würth T., Reisch S., Kärger L., Neumann G. Swarm reinforcement learning for adaptive mesh refinement. Advances in Neural Information Processing Systems. 2023. Vol. 36. P. 73312–73347.
10. Ranocha H., Dalcin L., Parsani M., Ketcheson D. Optimized Runge-Kutta Methods with Automatic Step Size Control for Compressible Computational Fluid Dynamics. Communications on Applied Mathematics and Computation. 2021. Vol. 4. https://doi.org/10.1007/s42967-021-00159-w
11. Henson V. Multigrid methods for nonlinear problems: An overview. Proceedings of SPIE – The International Society for Optical Engineering. 2003. https://doi.org/10.1117/12.499473
12. Raissi M., Perdikaris P., Karniadakis G. E. Physics-informed neural networks: A deep learning framework for solving forward and inverse problems involving nonlinear partial differential equations. Journal of Computational Physics. 2019. Vol. 378. P. 686–707. https://doi.org/10.1016/j.jcp.2018.10.045
13. Ger S., Jambunath Y. S., Klabjan D. Autoencoders and generative adversarial networks for imbalanced sequence classification. 2023 IEEE International Conference on Big Data (BigData). 2023. P. 1101–1108. https://doi.org/10.48550/arXiv.1901.02514
14. Ghojogh B., Ghodsi A., Karray F., Crowley M. Generative Adversarial Networks and Adversarial Autoencoders: Tutorial and Survey. ArXiv. 2021. abs/2111.13282. https://doi.org/10.48550/arXiv.2111.13282
15. Sutton R. S., Barto A. G. Reinforcement Learning. An Introduction. 2nd ed. Cambridge : A Bradford Book, 2018.
16. Zhang C., Lu Y. Study on artificial intelligence: The state of the art and future prospects. Journal of Industrial Information Integration. 2021. Vol. 23. P. 100224. https://doi.org/10.1016/j.jii.2021.100224
17. Strikwerda J. C. Finite Difference Schemes and Partial Differential Equations. 2nd ed. Philadelphia: Society for Industrial and Applied Mathematics, 2004. https://doi.org/10.1137/1.9780898717938
18. Leveque R. J. Finite Volume Methods for Hyperbolic Problems. Cambridge : Cambridge University Press, 2002. https://doi.org/10.1017/CBO9780511791253
19. Berger M. J., Colella P. Local adaptive mesh refinement for shock hydrodynamics. Journal of Computational Physics. 1989. Vol. 82. Iss. 1. P. 64–84. https://doi.org/10.1016/0021-9991(89)90035-1
20. Sutton R. S., Barto A. G. Reinforcement Learning: An Introduction. IEEE Transactions on Neural Networks. 1998. Vol. 9. № 5. P. 1054–1054. https://doi.org/10.1109/TNN.1998.712192
21. Heaton J. Ian Goodfellow, Yoshua Bengio, and Aaron Courville: Deep learning: The MIT Press, 2016, 800 p. Genetic Programming and Evolvable Machines. 2017. Vol. 19. https://doi.org/10.1007/s10710-017-9314-z
22. Ioffe S., Szegedy C. Batch normalization: Accelerating deep network training by reducing internal covariate shift. International Conference on Machine Learning. 2015. P. 448–456. https://doi.org/10.48550/arXiv.1502.03167
23. Schulman J., Wolski F., Dhariwal P., Radford A., Klimov O. Proximal policy optimization algorithms. arXiv preprint. 2017. arXiv : 1707.06347
24. Han J., Jentzen A., Ee W. Solving high-dimensional partial differential equations using deep learning. Proceedings of the National Academy of Sciences. 2017. Vol. 115. https://doi.org/10.1073/pnas.1718942115
25. Білак Ю., Геращенков Е. Багаторівнева декомпозиція для адаптивного чисельного моделювання складних фізичних процесів. Herald of Khmelnytskyi National University. Technical Sciences. 2025. Vol. 349. № 2. P. 51–62. https://doi.org/10.31891/2307-5732-2025-349-7

Ця робота ліцензується відповідно до Creative Commons Attribution 4.0 International License.
ISSN 



