| 10.14489/vkit.2022.03.pp.015-022 |
|
DOI: 10.14489/vkit.2022.03.pp.015-022 Сакулин С. А. Аннотация. Предложен метод визуализации операторов агрегирования на основе применения трехмерной когнитивной графики. Свойства оператора агрегирования напрямую связаны со свойствами физического объекта, в отношении которого хорошо развито интуитивное представление. В качестве такого объекта выступает абсолютно твердая плоскость, закрепленная на линии опоры пружинами. Результату агрегирования соответствует угол отклонения плоскости от горизонта. Располагая грузы, соответствующие критериям и индексам их взаимодействия на этой плоскости, можно моделировать соответствующий оператор, в том числе средствами виртуальной реальности. Проведена оценка формальных свойств предложенного метода по сравнению с существующими методами визуализации на примере интеграла Шоке второго порядка. Показаны преимущества трехмерной модели баланса. Ключевые слова: социальные дилеммы; мультиагентное обучение; обучение с подкреплением; формализация экспертных знаний; трехмерная когнитивная графика; виртуальная реальность; операторы агрегирования.
Sakulin S. A. Abstract. To solve social dilemmas in multi-agent reinforcement learning it is necessary to formalize the corresponding reward functions in the form of aggregation operators. Such formalization encounters difficulties associated with the lack of an intuitive vision of the aggregation process among many practitioners. Various visualization methods have been proposed to overcome these difficulties. The proposed methods have disadvantages that prevent their wide application. The method proposed in the article differs from the existing ones by the use of a three-dimensional cognitive image which corresponds to a physical object with a well-developed intuitive spatial and physical perception. This method is based on the use of 3D cognitive graphics. The properties of the aggregation operator are directly related to the properties of the physical object which has a well-developed intuitive representation. An absolutely solid plane fixed on the support line by springs acts as such an object. The result of aggregation corresponds to the angle of deviation of the plane from the horizon. By placing loads that meet the criteria and indices of their interaction on this plane it is possible to simulate the corresponding operator including by means of virtual reality. A preliminary asessment of the formal properties of the proposed method was carried out in comparison with existing visualization methods using the example of the Choquet integral of the 2nd order. Based on the results of this assessment conclusions were drawn about the advantages of a three-dimensional balance model over existing visualization methods and the feasibility of continuing work in this direction. Keywords: Social dilemmas; Multi-agent learning; Reinforcement learning; Expert knowledge formalization; 3D cognitive graphics; Virtual reality; Aggregation operators.
РусС. А. Сакулин (Московский государственный технический университет имени Н. Э. Баумана (национальный исследовательский университет), Москва, Россия) E-mail: Этот e-mail адрес защищен от спам-ботов, для его просмотра у Вас должен быть включен Javascript EngS. A. Sakulin (Bauman Moscow State Technical University, Moscow, Russia) E-mail: Этот e-mail адрес защищен от спам-ботов, для его просмотра у Вас должен быть включен Javascript
Рус1. Kumar M., Dutt V. Understanding Decisions in Collective Risk Social Dilemma Games Using Reinforcement Learning // IEEE Transactions on Cognitive and Developmental Systems. 2020. V. 12, Nо. 4. Р. 824 – 840. Eng1. Kumar M., Dutt V. (2020). Understanding Decisions in Collective Risk Social Dilemma Games Using Reinforcement Learning. IEEE Transactions on Cognitive and Developmental Systems, Vol. 12, (4), pp. 824 – 840.
РусСтатью можно приобрести в электронном виде (PDF формат). DOI: 10.14489/vkit.2022.03.pp.015-022 Скопируйте DOI статьи и перейдите по ссылке https://id-spektr.ru/product/pokupka-elektronnoy-stati-iz-zhurnala-vestnik-kompyuternyh-i-informatsionnyh-tehnologiy В комментарии к заказу обязательно укажите DOI статьи. .
EngThis article is available in electronic format (PDF). DOI: 10.14489/vkit.2022.03.pp.015-022 Copy the article DOI and follow the link https://id-spektr.ru/product/pokupka-elektronnoy-stati-iz-zhurnala-vestnik-kompyuternyh-i-informatsionnyh-tehnologiy Please specify the article DOI in the order comments.
.
|
Current Issue
Разработка концепции и создание сайта - ООО «Издательский дом «СПЕКТР»