Настройка цифровых двойников системы хранения данных методами обучения подкреплением
Белавин Владислав Сергеевич
Национальный исследовательский университет "Высшая школа экономики"Аннотация
В статье рассматривается задача настройки дискретно-событийного симулятора системы хранения данных с помощью нейроморфных алгоритмов и методов обучения с подкреплением. Симулятор обладает некоторым набором входных параметров, на которые можно влиять во время работы. Изменение этих параметров влияет на реалистичность поведения модели. Задача настройки симулятора состоит в поиске оптимальной стратегии воздействия на параметры модели с целью повышения реалистичности. В работе продемонстрирована состоятельность такого подхода и его возможность к обобщению имеющихся закономерностей. Таким образом объединение симулятора и искусственной нейронной сети позволяют значительно упросить разработку точных моделей систем и процессов.
Ключевые слова
Библиографический список
- Tao F., Cheng J., Qi Q., et al Digital twin-driven product design, manufacturing and service with big data // The International Journal of Advanced Manufacturing Technology, 94, 8 — 2018. — P. 3563–3576.
- Kincaid, Jason Google’s Go: A New Programming Language That’s Python Meets C++ // TechCrunch, 2009.
- Mnih V. at al. Playing Atari With Deep Reinforcement Learning // NIPS Deep Learning Workshop . — 2013.
- Silver D. at al. Deterministic Policy Gradient Algorithms // Proceedings of the 31st International Conference on International Conference on Machine Learning - Volume 32 . — 2014. — P. I-387–I-395.