<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="ru"><front><journal-meta><journal-id journal-id-type="publisher-id">tuzsut</journal-id><journal-title-group><journal-title xml:lang="ru">Труды учебных заведений связи</journal-title><trans-title-group xml:lang="en"><trans-title>Proceedings of Telecommunication Universities</trans-title></trans-title-group></journal-title-group><issn pub-type="ppub">1813-324X</issn><issn pub-type="epub">2712-8830</issn><publisher><publisher-name>СПбГУТ</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="doi">10.31854/1813-324X-2025-11-1-62-68</article-id><article-id custom-type="edn" pub-id-type="custom">RVENVC</article-id><article-id custom-type="elpub" pub-id-type="custom">tuzsut-654</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>ЭЛЕКТРОНИКА, ФОТОНИКА, ПРИБОРОСТРОЕНИЕ И СВЯЗЬ</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="en"><subject>ELECTRONICS, PHOTONICS, INSTRUMENTATION AND COMMUNICATIONS</subject></subj-group></article-categories><title-group><article-title>Оптимизация использования ресурсов воздушных базовых станций на основе методов искусственного интеллекта</article-title><trans-title-group xml:lang="en"><trans-title>Resource Optimization of Airborne Base Stations Using Artificial Intelligence Methods</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><contrib-id contrib-id-type="orcid">https://orcid.org/0009-0006-0080-9477</contrib-id><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Чан</surname><given-names>Т. З.</given-names></name><name name-style="western" xml:lang="en"><surname>Tran</surname><given-names>T. D.</given-names></name></name-alternatives><bio xml:lang="ru"><p>аспирант кафедры сетей связи и передачи данных Санкт-Петербургского государственного университета телекоммуникаций им. проф. М.А. Бонч-Бруевича</p></bio><email xlink:type="simple">chan.tz@sut.ru</email><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0003-4479-2479</contrib-id><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Кучерявый</surname><given-names>А. Е.</given-names></name><name name-style="western" xml:lang="en"><surname>Koucheryavy</surname><given-names>A. E.</given-names></name></name-alternatives><bio xml:lang="ru"><p>доктор технических наук, профессор, заведующий кафедрой сетей связи и передачи данных Санкт-Петербургского государственного университета телекоммуникаций им. проф. М.А. Бонч-Бруевича</p></bio><email xlink:type="simple">akouch@sut.ru</email><xref ref-type="aff" rid="aff-1"/></contrib></contrib-group><aff-alternatives id="aff-1"><aff xml:lang="ru">Санкт-Петербургский государственный университет телекоммуникаций им. проф. М.А. Бонч-Бруевича<country>Россия</country></aff><aff xml:lang="en">The Bonch-Bruevich Saint Petersburg State University of Telecommunications<country>Russian Federation</country></aff></aff-alternatives><pub-date pub-type="collection"><year>2025</year></pub-date><pub-date pub-type="epub"><day>28</day><month>02</month><year>2025</year></pub-date><volume>11</volume><issue>1</issue><fpage>62</fpage><lpage>68</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; Чан Т.З., Кучерявый А.Е., 2025</copyright-statement><copyright-year>2025</copyright-year><copyright-holder xml:lang="ru">Чан Т.З., Кучерявый А.Е.</copyright-holder><copyright-holder xml:lang="en">Tran T.D., Koucheryavy A.E.</copyright-holder><license license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>This work is licensed under a Creative Commons Attribution 4.0 License.</license-p></license></permissions><self-uri xlink:href="https://tuzs.sut.ru/jour/article/view/654">https://tuzs.sut.ru/jour/article/view/654</self-uri><abstract><p>В отдаленных областях и районах стихийных бедствий беспилотные летательные аппараты (БПЛА) могут выступать в качестве базовых станций, обеспечивающих беспроводную связь с наземными пользователями. Благодаря своей высокой мобильности, низкой стоимости, а также быстрому развертыванию и поиску, БПЛА могут изменять свое местоположение в трехмерном пространстве, улучшая беспроводное соединение и повышая скорость передачи данных. В этой статье исследуются проблемы развертывания воздушных базовых станций (ABS, аббр. от англ. Aerial Base Station) в трехмерном пространстве и распределения мощности в целях максимизации скорости передачи данных в системе. Для решения этих проблем предложено использовать алгоритм Q-learning, относящийся к методам обучения с подкреплением. Используя БПЛА в качестве агента, алгоритм позволяет ABS исследовать пространство состояний на основе политики ϵ-greedy (эпсилон жадный алгоритм) для определения местоположения в трехмерном пространстве и распределения мощности. Результаты моделирования показывают, что предложенный алгоритм превосходит известные методы размещения ABS в трехмерном пространстве и распределения мощности. Целью настоящей статьи является исследование эффективности применения современных методов искусственного интеллекта для оптимизации использования ресурсов воздушных базовых станций сетей связи общего пользования.</p><p>Сущность предлагаемого решения состоит в применении современных методов искусственного интеллекта, а именно: метода обучения Q-learning и эпсилон-жадного алгоритма ϵ-greedy для обеспечения совместной оптимизации размещения ABS и распределения мощности для максимизации скорости передачи данных. Система имеет реализацию в виде программы моделирования. Эксперименты при моделировании показали, что использование метода обучения с подкреплением Q-learning и эпсилон-жадного алгоритма e-greedy для совместной оптимизации обеспечивает более высокую общую скорость передачи данных в системе по сравнению с оптимизацией только местоположения или распределения мощности.</p><p>Научная новизна предложенного решения состоит в том, что совместная оптимизация размещения ABS и распределения мощности позволила, в отличие от известных результатов, выявить, что высота полета БПЛА с установленной на нем базовой станцией при оптимизации только местоположения будет выше, чем высота полета БПЛА при совместной оптимизации местоположения и распределения мощности.</p><p>Практическая значимость заключается в возможности разработки методики планирования сетей связи общего пользования при использовании ABS для получения более высокой общей скорости передачи данных на соответствующем фрагменте сети.</p></abstract><trans-abstract xml:lang="en"><p>In remote areas and disaster-stricken regions, unmanned aerial vehicles (UAVs) can serve as base stations, providing wireless communication to ground users. Due to their high mobility, low cost, and rapid deployment and retrieval capabilities, UAVs can continuously adjust their position in three-dimensional (3D) space, improving wireless connectivity and enhancing data transmission rates. In this paper, we investigate the problem of ABS (Aerial Base Station) deployment in 3D space and power allocation with the aim of maximizing the data transmission rate in the system. To address this non-convex problem, we propose Q-learning, a reinforcement learning algorithm. By using the ABS as an agent, the algorithm enables the ABS to explore the state space and take actions based on an ϵ-greedy policy (optimal epsilon value) to determine its 3D position and power allocation. Simulation results demonstrate that the proposed algorithm outperforms individual position optimization and power allocation optimization.</p><p>The purpose of this article is to study the efficiency of using modern artificial intelligence methods to optimize the use of resources of airborne base stations of public communication networks.</p><p>The essence of the proposed solution is to use modern artificial intelligence methods, namely: the Q-learning method and the epsilon-greedy ϵ-greedy algorithm to ensure joint optimization of the placement of airborne base stations and power distribution to maximize the data transfer rate. The system has an implementation in the form of a simulation program. Simulation experiments have shown that the use of the Q-learning reinforcement learning method and the epsilon-greedy e-greedy algorithm for joint optimization provides a higher overall data transfer rate in the system compared to optimizing only the location or power distribution.</p><p>The scientific novelty of the proposed solution is that joint optimization of the placement of an airborne base station and power distribution made it possible, in contrast to known results, to establish that the flight altitude of a UAV with a base station installed on it when optimizing only the location will be higher than the flight altitude of a UAV when jointly optimizing the location and power distribution.</p><p>The practical significance is the possibility of developing a methodology for planning public communication networks using airborne base stations to obtain a higher overall data transfer rate on the corresponding network fragment.</p><p> </p></trans-abstract><kwd-group xml:lang="ru"><kwd>воздушная базовая станция</kwd><kwd>трехмерное местоположение</kwd><kwd>распределение мощности</kwd><kwd>скорость передачи данных</kwd><kwd>Q-learning</kwd></kwd-group><kwd-group xml:lang="en"><kwd>ABS</kwd><kwd>3D positioning</kwd><kwd>power allocation</kwd><kwd>data transmission rate</kwd><kwd>Q-learning</kwd></kwd-group></article-meta></front><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Ding G., Wu Q., Zhang L., Lin Y., Tsiftsis T.A., Yao Y.D. An amateur drone surveillance system based on the cognitive Internet of Things // IEEE Communications Magazine. 2018. Vol. 56. Iss.1. PP. 29‒35. DOI:10.1109/MCOM.2017.1700452. EDN:YBEOMH</mixed-citation><mixed-citation xml:lang="en">Ding G., Wu Q., Zhang L., Lin Y., Tsiftsis T.A., Yao Y.D. An amateur drone surveillance system based on the cognitive Internet of Things. IEEE Communications Magazine. 2018;56(1):29‒35. DOI:10.1109/MCOM.2017.1700452. EDN:YBEOMH</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Rose K., Eldridge S., Chapin L. The internet of things: An overview // The internet society (ISOC). 2015. Vol. 80(15). PP. 1‒53.</mixed-citation><mixed-citation xml:lang="en">Rose K., Eldridge S., Chapin L. The internet of things: An overview. The internet society (ISOC). 2015;80(15):1‒53.</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Zhao N., Lu W., Sheng M., Chen Y., Tang J., Yu F.R., et al. UAV-Assisted Emergency Networks in Disasters // IEEE Wireless Communications. 2019. Vol. 26. Iss. 1. PP. 45‒51. DOI:10.1109/MWC.2018.1800160</mixed-citation><mixed-citation xml:lang="en">Zhao N., Lu W., Sheng M., Chen Y., Tang J., Yu F.R., et al. UAV-Assisted Emergency Networks in Disasters. IEEE Wireless Communications. 2019;26(1):45‒51. DOI:10.1109/MWC.2018.1800160</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Li B., Fei Z., Zhang Y. UAV communications for 5G and beyond: Recent advances and future trends // IEEE Internet of Things Journal. 2018. Vol. 6. Iss. 2. PP. 2241‒2263. DOI:10.1109/JIOT.2018.2887086. EDN:UPZMGQ</mixed-citation><mixed-citation xml:lang="en">Li B., Fei Z., Zhang Y. UAV communications for 5G and beyond: Recent advances and future trends. IEEE Internet of Things Journal. 2018;6(2):2241‒2263. DOI:10.1109/JIOT.2018.2887086. EDN:UPZMGQ</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">Shannon C.E. A mathematical theory of communication // The Bell System Technical Journal. 1948. Vol. 27. Iss. 3. PP. 379‒423. DOI:10.1002/j.1538-7305.1948.tb01338.x</mixed-citation><mixed-citation xml:lang="en">Shannon C.E. A mathematical theory of communication. The Bell System Technical Journal. 1948;27(3):379‒423. DOI:10.1002/j.1538-7305.1948.tb01338.x</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Sutton R.S. Reinforcement learning: An introduction. The MIT Press, 2018.</mixed-citation><mixed-citation xml:lang="en">Sutton R.S. Reinforcement learning: An introduction. The MIT Press; 2018.</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Jaakkola T., Jordan M., Singh S. Convergence of Stochastic Iterative Dynamic Programming Algorithms // Advances in Neural Information Processing Systems 6 (NIPS 1993). 1993.</mixed-citation><mixed-citation xml:lang="en">Jaakkola T., Jordan M., Singh S. Convergence of Stochastic Iterative Dynamic Programming Algorithms. Advances in Neural Information Processing Systems 6 (NIPS 1993). 1993.</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru"></mixed-citation><mixed-citation xml:lang="en"></mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
