<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="ru"><front><journal-meta><journal-id journal-id-type="publisher-id">izvestswsu</journal-id><journal-title-group><journal-title xml:lang="ru">Известия Юго-Западного государственного университета</journal-title><trans-title-group xml:lang="en"><trans-title>Proceedings of the Southwest State University</trans-title></trans-title-group></journal-title-group><issn pub-type="ppub">2223-1560</issn><issn pub-type="epub">2686-6757</issn><publisher><publisher-name>ЮЗГУ</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="doi">10.21869/2223-1560-2020-24-3-121-136</article-id><article-id custom-type="elpub" pub-id-type="custom">izvestswsu-797</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>Информатика, вычислительная техника и управление</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="en"><subject>Computer science, computer engineering and IT managment</subject></subj-group></article-categories><title-group><article-title>Метод и алгоритм выделения динамических объектов с подвижной платформы из изображений, полученных в разных спектральных диапазонах и данных лидара</article-title><trans-title-group xml:lang="en"><trans-title>Method and Algorithm for Recognition Dynamic Objects from a Mobile Platform, from Images Obtained in Different Spectral Ranges and Lidar Data</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Чернецкая</surname><given-names>И. Е.</given-names></name><name name-style="western" xml:lang="en"><surname>Cherneckaya</surname><given-names>I. E.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Чернецкая Ирина Евгеньевна, доктор технических наук, профессор кафедры вычислительной техники</p><p>ул. 50 лет Октября 94, г. Курск 305040</p></bio><bio xml:lang="en"><p>Irina E. Cherneckaya, Dr. of Sci. (Engineering), Professor, Professor of the Department of Computer Science</p><p>50 Let Oktyabrya str. 94, Kursk 305040</p></bio><email xlink:type="simple">white731@yandex.ru</email><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0003-1271-1275</contrib-id><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Спевакова</surname><given-names>С. В.</given-names></name><name name-style="western" xml:lang="en"><surname>Spevakova</surname><given-names>S. V.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Спевакова Светлана Викторовна, аспирант кафедры вычислительной техники</p><p>ул. 50 лет Октября 94, г. Курск 305040</p></bio><bio xml:lang="en"><p>Svetlana V. Spevakova, Post-Graduate Student of the Department of Computer Science</p><p>50 Let Oktyabrya str. 94, Kursk 305040</p></bio><email xlink:type="simple">sspev@yandex.ru</email><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Применко</surname><given-names>Д. В.</given-names></name><name name-style="western" xml:lang="en"><surname>Primenko</surname><given-names>D. V.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Применко Дмитрий Владимирович, аспирант кафедры вычислительной техники</p><p>ул. 50 лет Октября 94, г. Курск 305040</p></bio><bio xml:lang="en"><p>Dmitry V. Primenko, Post-Graduate Student, of the Department of Computer Science</p><p>50 Let Oktyabrya str. 94, Kursk 305040</p></bio><email xlink:type="simple">dima-primenko777@yandex.ru</email><xref ref-type="aff" rid="aff-1"/></contrib></contrib-group><aff-alternatives id="aff-1"><aff xml:lang="ru"><institution>Юго-Западный государственный университет</institution></aff><aff xml:lang="en"><institution>Southwest State University</institution></aff></aff-alternatives><pub-date pub-type="collection"><year>2020</year></pub-date><pub-date pub-type="epub"><day>06</day><month>12</month><year>2020</year></pub-date><volume>24</volume><issue>3</issue><fpage>121</fpage><lpage>136</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; Чернецкая И.Е., Спевакова С.В., Применко Д.В., 2020</copyright-statement><copyright-year>2020</copyright-year><copyright-holder xml:lang="ru">Чернецкая И.Е., Спевакова С.В., Применко Д.В.</copyright-holder><copyright-holder xml:lang="en">Cherneckaya I.E., Spevakova S.V., Primenko D.V.</copyright-holder><license xml:lang="ru" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>Данная работа распространяется под лицензией Creative Commons Attribution 4.0.</license-p></license><license xml:lang="en" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>This work is licensed under a Creative Commons Attribution 4.0 License.</license-p></license></permissions><self-uri xlink:href="https://izvestswsu.elpub.ru/jour/article/view/797">https://izvestswsu.elpub.ru/jour/article/view/797</self-uri><abstract><p>Цель исследования. В современных автоматических системах сбора информации все чаще используются автономные мобильные устройства, данные с которых могут быть получены в опасных для здоровья человека условиях с территориально удаленных мест, в сложной метеорологической обстановке, в режиме круглосуточного наблюдения. Для автономной работы подобных устройств необходимо использовать методы и алгоритмы, позволяющие строить карту местности, осуществлять привязку мобильной платформы на ней, определять маршрут к целевой точке, выделять препятствия на маршруте следования, производить корректировку маршрута с учетом обнаруженных препятствий. Методы. В статье предложен метод и алгоритм выделения динамических объектов с подвижной платформы, основанный на анализе данных, полученных от мультиспектральной камеры, что позволяет осуществлять выделение препятствий, таких, как водные, растительного происхождения, техногенного характера и т.д. со снижением вычислительной сложности. Для повышения точности определения координат обнаруженных объектов используется лазерный дальномер. Результаты. Рассмотрены известные методы распознавания мультиспектральных изображений, приведен их сравнительный анализ. Предложен метод и алгоритм выделения динамических объектов с подвижной платформы из изображений, полученных в разных спектральных диапазонах и данных лидара. Проведены экспериментальные исследования, позволяющие подтвердить адекватность математического обоснования метода, снизить погрешность вычисления координат объекта, на удалении до 100 метров до объекта, RMSE - 0,447%, MAPE - 0,397, повысить быстродействие, на выделение объекта и определение его координат было затрачено 0,04 секунды. Заключение. В статье проведен анализ современных методов распознавания мультиспектральных изображений, представлены принципы, на которых основан каждый метод, приведены достоинства и недостатки. Разработан метод и алгоритм, позволяющие выделять статические и динамические препятствия на маршруте следования подвижной платформы, по последовательности изображений, полученных в разных спектральных диапазонах. В ходе экспериментальных исследований, подтверждены работоспособность предложенных решений и соответствие заданным требованиям точности и достоверности.</p></abstract><trans-abstract xml:lang="en"><p>Purpose of research. In modern automatic information collection systems, autonomous mobile devices are increasingly used, data from which can be obtained in conditions hazardous to human health, from geographically remote places, in difficult meteorological conditions and in round-the-clock observation mode. For the autonomous operation of such devices, it is necessary to use methods and algorithms that allow you to build a map of the area, link a mobile platform to it, determine a route to a target point, highlight obstacles along the route and correct the route taking into account detected obstacles. Methods. The article proposes a method and an algorithm for the selection of dynamic objects from a mobile platform, based on the analysis of data obtained from a multispectral camera, which allows the selection of obstacles, such as water, plant origin, technogenic nature, etc. with reduced computational complexity. To improve the accuracy of determining the coordinates of detected objects, a laser rangefinder is used. Results. We consider the well-known methods of multispectral images recognition and present their comparative analysis. A method and an algorithm for recognition dynamic objects from a mobile platform, from images obtained in different spectral ranges and lidar data are proposed. Experimental studies were carried out to confirm the adequacy of the mathematical substantiation of the method, to reduce the error in calculating the coordinates of the object, at a distance of up to 100 meters to the object, RMSE - 0.447%, MAPE - 0.397, to increase the performance, it took 0, 04 seconds to select the object and determine its coordinates. Conclusion. The article analyzes modern methods for recognizing multispectral images, presents the principles on which each method is based, gives advantages and disadvantages. The authors have developed a method and an algorithm that make it possible to identify static and dynamic obstacles along the route of a mobile platform, based on a sequence of images obtained in different spectral ranges. In the course of experimental studies, the performance of the proposed solutions and compliance with the specified requirements for accuracy and reliability were confirmed.</p></trans-abstract><kwd-group xml:lang="ru"><kwd>алгоритм</kwd><kwd>метод</kwd><kwd>мультиспектральный</kwd><kwd>подвижная платформа</kwd><kwd>анализ изображений</kwd><kwd>динамические объекты</kwd></kwd-group><kwd-group xml:lang="en"><kwd>algorithm</kwd><kwd>method</kwd><kwd>multispectral</kwd><kwd>movable platform</kwd><kwd>image analysis</kwd><kwd>dynamic objects</kwd></kwd-group></article-meta></front><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Хафизов Р. Г., Охотников С. А. Распознавание непрерывных комплекснозначных контуров изображений // Известия высших учебных заведений. Приборостроение. 2012. Т. 55. №. 5.</mixed-citation><mixed-citation xml:lang="en">Hafizov R. G., Okhotnikov S. A. Raspoznavanie nepreryvnykh kompleksnoznachnykh konturov izobrazhenii [Recognition of continuous complex-valued image contours]. Izvestiya vysshikh uchebnykh zavedenii. Priborostroenie = News of higher educational institutions. Priborostroenie, 2012, vol. 55, no. 5 (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Дегтярев С.В., Спеваков А.Г., Типикин А.П. Определение координат движущихся объектов стереоскопической системой технического зрения // Телекоммуникации. 2004. № 8. С. 35 -36.</mixed-citation><mixed-citation xml:lang="en">Degtyarev S. V., Spevakov A. G., Tipikin A. P. Opredelenie koordinat dvizhushchikhsya ob"ektov stereoskopicheskoi sistemoi tekhnicheskogo zreniya [Determination of coordinates of moving objects by the stereoscopic system of technical vision]. Telekommunikatsii = Telecommunications, 2004, no. 8, pp. 35 -36 (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Ширабакина Т. А., Спеваков А. Г. Стереоскопическая оптико-электронная система определения параметров динамических объектов в реальном времени //Датчики и системы. 2004. №. 6. С. 65-67.</mixed-citation><mixed-citation xml:lang="en">Shirabakina T. A., Spevakov A. G. Stereoskopicheskaya optiko-elektronnaya si-stema opredeleniya parametrov dinamicheskikh ob"ektov v real'nom vremeni [Stereoscopic opticalelectronic system for determining parameters of dynamic objects in real time]. Datchiki i sistemy = Sensors and Systems, 2004, no. 6, pp. 65-67 (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Спевакова С. В. Построение маршрута мобильного робота на основе анализа мультиспектральных данных // Интеллектуальные и информационные системы. Интеллект-2019. Тула, 2019. С. 334-337.</mixed-citation><mixed-citation xml:lang="en">Spevakova S. V. [The route of a mobile robot based on the analysis of multispectral data, in the collection: intelligent and information systems]. Intellektual'nye i informatsionnye sistemy. Intellekt-2019 [Intellect-2019 Proceedings of the all-Russian scientific and technical conference]. Tula, 2019, pp. 334-337 (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">Спеваков А. Г., Рубанов А. Ф. Стереоскопическая оптико-электронная система слежения // Известия высших учебных заведений. Приборостроение. 2005. Т. 48. № 2. С. 62-67.</mixed-citation><mixed-citation xml:lang="en">Spevakov A. G., Rubanov A. F. Stereoskopicheskaya optiko-elektronnaya sistema slezheniya [Stereoscopic optical-electronic tracking system]. Izvestiya vysshikh uchebnykh zavedenii. Priborostroenie = News of Higher Educational Institutions. Priborostroenie, 2005, vol. 48, no. 2, pp. 62-67 (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Спеваков А. Г. Метод выделения движущихся объектов // Известия ЮгоЗападного государственного университета. Серия: Управление, вычислительная техника, информатика. Медицинское приборостроение. 2013. №. 1. С. 233-237.</mixed-citation><mixed-citation xml:lang="en">Spevakov A. G. Metod vydeleniya dvizhushchikhsya ob"ektov [Method of selection of moving objects]. Izvestiya Yugo-Zapadnogo gosudarstvennogo universiteta. Seriya: Upravlenie, vychislitel'naya tekhnika, informatika. Meditsinskoe priborostroenie = Proceedings of the Southwest State University. Series: Control, Computing Engineering, Information Science. Medical Instruments Engineering, 2013, no. 1, pp. 233-237 (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Davison A. J. et al. MonoSLAM: Real-time single camera SLAM // IEEE transactions on pattern analysis and machine intelligence. 2007. Т. 29. №. 6. P. 1052-1067.</mixed-citation><mixed-citation xml:lang="en">Davison A. J. et al. MonoSLAM: Real-time single camera SLAM. IEEE transactions on pattern analysis and machine intelligence, 2007, vol. 29, no. 6, pp. 1052-1067.</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru">Newcombe R. A. et al. KinectFusion: Real-time dense surface mapping and tracking // 10th IEEE International Symposium on Mixed and Augmented Reality. IEEE, 2011. P. 127-136.</mixed-citation><mixed-citation xml:lang="en">Newcombe R. A. et al. KinectFusion: Real-time dense surface mapping and tracking. 10th IEEE International Symposium on Mixed and Augmented Reality, IEEE, 2011, pp. 127-136.</mixed-citation></citation-alternatives></ref><ref id="cit9"><label>9</label><citation-alternatives><mixed-citation xml:lang="ru">Kerl C., Sturm J., Cremers D. Dense visual SLAM for RGB-D cameras. In Proceedings of the IEEE/RSJ International Conference on Intelligent Robots and Systems, Chicago, IL, USA, 14–18 September 2014. P. 2100–2106.</mixed-citation><mixed-citation xml:lang="en">Kerl C., Sturm J., Cremers D. Dense visual SLAM for RGB-D cameras. In Proceedings of the IEEE/RSJ International Conference on Intelligent Robots and Systems, Chicago, IL, USA, 14–18 September 2014, pp. 2100–2106.</mixed-citation></citation-alternatives></ref><ref id="cit10"><label>10</label><citation-alternatives><mixed-citation xml:lang="ru">Jiang G. et al. A simultaneous localization and mapping (SLAM) framework for 2.5 D map building based on low-cost LiDAR and vision fusion // Applied Sciences. 2019. Vol. 9. № 10. P. 2105.</mixed-citation><mixed-citation xml:lang="en">Jiang G. et al. A simultaneous localization and mapping (SLAM) framework for 2.5 D map building based on low-cost LiDAR and vision fusion. Applied Sciences, 2019, vol. 9, no. 10, pp. 2105.</mixed-citation></citation-alternatives></ref><ref id="cit11"><label>11</label><citation-alternatives><mixed-citation xml:lang="ru">Антюфеев В. И., Быков В. Н. Сравнительный анализ алгоритмов совмещения изображений в корреляционно-экстремальных системах навигации летательных аппаратов //Авиационно-космическая техника и технология. 2008. №. 1. С. 70-78.</mixed-citation><mixed-citation xml:lang="en">Antyufeev V. I., Bykov V. N. Sravnitel'nyi analiz algoritmov sovmeshcheniya izobrazhenii v korrelyatsionno-ekstremal'nykh sistemakh navigatsii letatel'nykh apparatov [Comparative analysis of image matching algorithms in correlation-extreme navigation systems of aircraft]. Aviatsionno-kosmicheskaya tekhnika i tekhnologiya = Aviation and Space Technology and Technology, 2008, no. 1, pp. 70-78 (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit12"><label>12</label><citation-alternatives><mixed-citation xml:lang="ru">Зубарев Ю.Б., Сагдуллаев Ю.С., Сагдуллаев Т.Ю. Спектрозональные методы и системы в космическом телевидении // Вопросы радиоэлектроники. Серия техника телевидения. 2009. Вып. 1. С. 47−64.</mixed-citation><mixed-citation xml:lang="en">Zubarev I. B., Sagdullaev I. S., Sagdullaev T. I. Spektrozonal'nye metody i sistemy v kosmicheskom televidenii [Spectrosonal methods and systems in space television]. Voprosy radioelektroniki. Seriya tekhnika televideniya = Questions of Radio Electronics. TV Technique Series, 2009, is. 1, pp. 47-64 (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit13"><label>13</label><citation-alternatives><mixed-citation xml:lang="ru">Бондаренко М. А., Дрынкин В. Н. Оценка информативности комбинированных изображений в мультиспектральных системах технического зрения // Программные системы и вычислительные методы. 2016. №. 1. С. 64-79.</mixed-citation><mixed-citation xml:lang="en">Bondarenko M. A., Drinkin V. N. Otsenka informativnosti kombinirovannykh izobrazhenii v mul'tispektral'nykh sistemakh tekhnicheskogo zreniya [Evaluation of the information content of combined images in multispectral systems of technical vision]. Programmnye sistemy i vychislitel'nye metody = Software Systems and Computational Methods, 2016, no. 1, pp. 64-79 (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit14"><label>14</label><citation-alternatives><mixed-citation xml:lang="ru">Krishnamoorthy S., Soman K. P. Implementation and comparative study of image fusion algorithms // International Journal of Computer Applications. 2010. Vol. 9. № 2. P. 25-35.</mixed-citation><mixed-citation xml:lang="en">Krishnamoorthy S., Soman K. P. Implementation and comparative study of image fusion algorithms. International Journal of Computer Applications, 2010, vol. 9, no. 2, pp. 25-35 (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit15"><label>15</label><citation-alternatives><mixed-citation xml:lang="ru">Калуцкий И.В., Матюшин Ю.С., Спевакова С.В. Анализ современных статических методов биометрической идентификации // Известия Юго-Западного государственного университета. 2019. Т. 23, № 1. С. 84-94. https://doi.org/10.21869/2223-1560-2019-23-1-84-94.</mixed-citation><mixed-citation xml:lang="en">Kaluutsky I. V., Matyushin Yu. S., Spevakova S. V. Analysis of Modern Static Methods of Biometric Identification. Izvestiya Yugo-Zapadnogo gosudarstvennogo universiteta = Proceedings of the Southwest State University. 2019; 23 (1): pp. 84-94. (In Russ.). https://doi.org/10.21869/2223-1560-2019-23-1-84-94.</mixed-citation></citation-alternatives></ref><ref id="cit16"><label>16</label><citation-alternatives><mixed-citation xml:lang="ru">Бехтин Ю. С., Емельянов С. Г., Титов Д. В. Теоретические основы цифровой обработки изображений встраиваемых оптико-электронных систем. Курск, 2016.</mixed-citation><mixed-citation xml:lang="en">Bekhtin Yu. S., Emelyanov S. G., Titov D. V. Teoreticheskie osnovy tsifrovoi obrabotki izobrazhenii vstraivaemykh optiko-elektronnykh sistem [Theoretical bases of digital image processing of embedded optical-electronic systems]. Kursk, 2016 (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit17"><label>17</label><citation-alternatives><mixed-citation xml:lang="ru">Пат. 2714603 Российская Федерация. Подвижное стереоскопическое устройство выделения динамических объектов / Спевакова С.В., Калуцкий И.В.; заявитель и патентообладатель: Федеральное государственное бюджетное образовательное учреждение высшего образования «Юго-Западный государственный университет». №2018147106; опубл. 18.02.2020, Бюл. №5.</mixed-citation><mixed-citation xml:lang="en">Spevakova S. V., Kalutsky I. V. Podvizhnoe stereoskopicheskoe ustroistvo vydeleniya dinamicheskikh ob"ektov [Mobile stereoscopic device for selecting dynamic objects]. Patent RF, no. 2018147106, 23.01.2020. (In Russ.).</mixed-citation></citation-alternatives></ref><ref id="cit18"><label>18</label><citation-alternatives><mixed-citation xml:lang="ru">Spevakova S. V., Matiushin I. S., Spevakov A. G. Detecting objects moving in space from a mobile vision system // Radio Electronics, Computer Science, Control. 2019. № 4. Р. 103-110.</mixed-citation><mixed-citation xml:lang="en">Spevakova S. V., Matiushin I. S., Spevakov A. G. Detecting objects moving in space from a mobile vision system. Radio Electronics, Computer Science, Control, 2019, no. 4, pp. 103-110.</mixed-citation></citation-alternatives></ref><ref id="cit19"><label>19</label><citation-alternatives><mixed-citation xml:lang="ru">Kalutskiy I., Spevakova S., Matiushin I. Method of Moving Object Detection from Mobile Vision System // 2019 International Russian Automation Conference (RusAutoCon). IEEE, 2019. Р. 1-5.</mixed-citation><mixed-citation xml:lang="en">Kalutskiy I., Spevakova S., Matiushin I. Method of Moving Object Detection from Mobile Vision System. International Russian Automation Conference (RusAutoCon). IEEE, 2019, pp. 1-5.</mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
