Simulation of Visual Ternary Comparisons to Increase the Reliability of Collective Decisions in the VisTerComp Environment
Keywords:
visual ternary comparisons, ranking of alternatives, information technology, VisTerComp web application, simulation, expert passivity, , randomness of assessments, , collective decisions, reliability of resultsAbstract
The analysis of a real dataset obtained using the VisTerComp web application developed by the authors was conducted, and two manifestations of unprofessionalism and expert dishonesty were identified: passivity of experts and randomness of the sassessments (H-manifestations). To study and reduce the negative impact of unreliable results of individual experts on the overall collective results of ranking alternatives, approaches to simulation modeling were developed and the corresponding simulation module was designed and implemented in the VisTerComp environment. Series of simulation experiments with zero and random visual ternary comparisons in different ratios were planned and conducted. Based on the analysis of the simulation results, tolerance areas in the space of parameters of passivity and contradiction of opinions for a different number of alternatives were determined. In order to increase the reliability of collective expert results and protect against H-manifestations in the VisTerComp information technology, a comparison of the calculated values of the indicators of incompetence, contradiction of opinions and passivity of experts with the specified maximum permissible values was proposed. Recommendations have been developed for selecting parameter values from tolerance areas, which allow filtering out unreliable individual results of experts with H-manifestations with a probability of up to 99%. A new option for excluding unreliable individual results has been proposed and implemented in the VisTerComp web application, which allows comparing the corresponding more reliable collective results of the examination with the general results for all experts. Further implementation of the VisTerComp web application in practice and in the educational process is planned for the purpose of the in-depth study of the impact of new options and settings on the reliability of collective expert decisions when using the information technology of ranking alternatives based on visual ternary comparisons.
References
V. V. Kolodny, and V. V. Zubko, “Method and information technology for ranking alternatives based on visual ternary comparisons,” Information Technologies and Computer Engineering, no. 59 (1), pp. 23-31, May. 2024. https://doi.org/10.31649/1999-9941-2024-59-1-23-31 .
В. В. Колодний, і В. В. Зубко, «Моделі і метрики для інформаційних технологій на основі візуальних тернарних порівнянь,» Вісник Вінницького політехнічного інституту, № 1, с. 113-120, 2025. https://doi.org/10.31649/1997-9266-2025-178-1-113-120 .
В. В. Колодний, «Трирівневі ранжування та їх застосування для виявлення переважань,» на VII Міжнародна конференція «Контроль і управління в складних системах (КУСС-2003)». Вінниця, Україна: «УНІВЕРСУМ-Вінниця», 2003, с. 238.
В. В. Колодний, і В. В. Зубко, «Метод некритеріального структурування множини альтернатив за допомогою аналізу тернарних трирівневих ранжувань,» Internet-Education-Science (IES-2014), Proceedings of the 9th International Scientific-Practical Conference . Вінниця, Україна: ВНТУ, 2014, с. 13-14.
В. В. Колодний, i В. В. Зубко, «Застосування гештальт-ранжувань для виявлення переваг ОПР,» Internet-Education-Science (IES-2016), Proceedings of the tenth international scientific-practical conference. Вінниця, Україна: ВНТУ, 2016, с. 43-44.
В. В. Колодний, і В. В. Зубко, «Система підтримки колективних експертиз на основі візуальних тернарних порівнянь (вебзастосунок VisTerComp),» Всеукраїнська науково-технічна конференція факультету інтелектуальних інформаційних технологій та автоматизації (2025). Вінниця, Україна: ВНТУ, 2025. [Електронний ресурс]. Режим доступу: https://conferences.vntu.edu.ua/index.php/all-fksa/all-fksa-2025/paper/view/23670/19530 .
В. В. Колодний, і В. В. Зубко, «Інформаційна технологія числової і логічної інтерпретації візуальних тернарних порівнянь,» Молодь в науці: дослідження, проблеми, перспективи (МН-2025). Вінниця, Україна: ВНТУ, 2024. [Електронний ресурс]. Режим доступу: https://conferences.vntu.edu.ua/index.php/mn/mn2025/paper/view/22224/18417 .
В. В. Зубко, і В. В. Колодний, «Аналіз впровадження вебзастосунку VisTerComp в навчальному процесі,» Молодь в науці: дослідження, проблеми, перспективи (МН-2025). Вінниця, Україна: ВНТУ, 2025. [Електронний ресурс]. Режим доступу: https://conferences.vntu.edu.ua/index.php/mn/mn2025/paper/viewFile/25363/20969 .
В. В. Зубко, «Інформаційна технологія для візуалізації та виявлення переважань,» Internet-Education-Science (IES-2016), Proceedings of the 10th International Scientific-Practical Conference. Вінниця, Україна: ВНТУ, 2016, с. 58-59.
В. В. Колодний, і В. В. Зубко, «Клас методів ранжування та некритеріального оцінювання об’єктів на основі візуальних тернарних порівнянь,» Молодь в науці: дослідження, проблеми, перспективи (МН-2024). Вінниця, Україна: ВНТУ, 2023. [Електронний ресурс]. Режим доступу: https://conferences.vntu.edu.ua/index.php/mn/mn2024/paper/viewFile/19021/15872 .
Published
How to Cite
Issue
Section
License
This work is licensed under a Creative Commons Attribution 4.0 International License.
Authors who publish with this journal agree to the following terms:
- Authors retain copyright and grant the journal right of first publication.
- Authors are able to enter into separate, additional contractual arrangements for the non-exclusive distribution of the journal's published version of the work (e.g., post it to an institutional repository or publish it in a book), with an acknowledgment of its initial publication in this journal.
- Authors are permitted and encouraged to post their work online (e.g., in institutional repositories or on their website) prior to and during the submission process, as it can lead to productive exchanges, as well as earlier and greater citation of published work (See The Effect of Open Access).
