stringtranslate.com

Система управления обучением

Система управления обучением ( LMS ) или виртуальная среда обучения ( VLE ) — это программное приложение для администрирования, документирования, отслеживания, отчетности, автоматизации и предоставления образовательных курсов, учебных программ, материалов или программ обучения и развития. [1] Концепция системы управления обучением возникла непосредственно из электронного обучения . Системы управления обучением составляют самый большой сегмент рынка систем обучения. Первое внедрение LMS произошло в конце 1990-х годов. [2] LMS были приняты почти всеми высшими учебными заведениями в англоязычном мире. [3] Системы управления обучением столкнулись с огромным ростом использования из-за акцента на дистанционное обучение во время пандемии COVID-19. [4]

Системы управления обучением были разработаны для выявления пробелов в обучении и обучении с использованием аналитических данных и отчетности. Системы управления обучением ориентированы на предоставление онлайн-обучения, но поддерживают ряд применений, выступая в качестве платформы для онлайн-контента, включая курсы, как асинхронные, так и синхронные. В сфере высшего образования система управления обучением может предлагать управление классом для обучения под руководством инструктора или перевернутого класса . [5] Современные системы управления обучением включают интеллектуальные алгоритмы для создания автоматизированных рекомендаций по курсам на основе профиля навыков пользователя, а также извлечения метаданных из учебных материалов, чтобы сделать такие рекомендации еще более точными. [6]

Характеристики

Цель

LMS предоставляет и управляет всеми типами контента, включая видео, курсы, семинары и документы. На рынках образования и высшего образования LMS будет включать в себя множество функций, которые похожи на корпоративные, но будут иметь такие функции, как рубрики, обучение с участием учителя и инструктора, дискуссионную доску и часто использование учебной программы. Учебная программа редко является функцией корпоративной LMS, хотя курсы могут начинаться с индекса на уровне заголовков, чтобы дать учащимся обзор охватываемых тем.

История

Существует несколько исторических этапов дистанционного образования, которые предшествовали развитию систем управления обучением.

Заочное обучение

Первый известный документ о заочном обучении датируется 1723 годом, когда в Boston Gazette появилась реклама Калеба Филлипса, профессора стенографии , предлагающего учебные материалы и руководства. [7] Первое свидетельство о двунаправленной коммуникации, организованной заочным курсом, пришло из Англии в 1840 году, когда Айзек Питман инициировал курс стенографии, в рамках которого он отправлял отрывок из Библии студентам, которые отправляли его обратно в полной транскрипции. Успех курса привел к основанию общества фонографической переписки в 1843 году. Пионерской вехой в дистанционном обучении языкам стало создание в 1856 году Шарля Туссена и Густава Лангеншайдта , которые основали первый в Европе институт дистанционного обучения. Это первый известный случай использования материалов для самостоятельного изучения языка. [8]

Мультимедийное обучение: возникновение и развитие идеи дистанционного обучения

Концепция электронного обучения начала развиваться в начале 20 века, что было отмечено появлением систем аудио- и видеосвязи, используемых для дистанционного обучения. [9] В 1909 году Э. М. Форстер опубликовал свой рассказ «Машина останавливается» и объяснил преимущества использования аудиосвязи для проведения лекций в удаленной аудитории. [10]

В 1924 году Сидни Л. Пресси разработал первую обучающую машину, которая предлагала несколько типов практических упражнений и форматов вопросов. Девять лет спустя профессор Университета Альберты М. Э. Зерте превратил эту машину в проблемный цилиндр, способный сравнивать проблемы и решения. [11]

Это, в некотором смысле, было «мультимедиа», потому что оно использовало несколько медиаформатов для охвата студентов и предоставления обучения. Позже, печатные материалы будут объединены с телефоном, радиопередачами, телепередачами, аудио- и видеокассетами. [12]

Самой ранней сетевой системой обучения была система управления обучением Plato (PLM), разработанная в 1970-х годах корпорацией Control Data.

Телематическое обучение

В 1980-х годах современные телекоммуникации начали использоваться в образовании. Компьютеры стали заметными в ежедневном использовании высших учебных заведений, а также инструментами для обучения студентов. Компьютерное обучение было направлено на интеграцию технических и образовательных средств. Затем тенденция сместилась в сторону видеосвязи, в результате чего Хьюстонский университет решил проводить телетрансляции занятий для своих студентов примерно 13–15 часов в неделю. Занятия проходили в 1953 году, а в 1956 году Робин Маккиннон Вуд и Гордон Паск выпустили первую адаптивную систему обучения для корпоративных сред SAKI. [13] Идея автоматизации учебных операций также вдохновила экспертов Иллинойсского университета на разработку своей программной логики для автоматизированных учебных операций (PLATO) , которая позволяла пользователям обмениваться контентом независимо от их местонахождения. [13] В период между 1970 и 1980 годами образовательные учреждения активно рассматривали идею компьютеризации курсов, включая Западный институт поведенческих наук в Калифорнии, который представил первую аккредитованную степень с онлайн-обучением.

Обучение через Интернет: появление первой системы управления обучением

История применения компьютеров в образовании наполнена широко описательными терминами, такими как компьютерное обучение (CMI) и интегрированные системы обучения (ILS), компьютерное обучение (CBI), компьютерное обучение (CAI) и компьютерное обучение (CAL). Эти термины описывают программы тренировок и практики, более сложные учебные пособия и более индивидуализированное обучение соответственно. [14] В настоящее время этот термин используется для описания ряда различных образовательных компьютерных приложений . [15] FirstClass от SoftArc, использовавшийся Открытым университетом Великобритании в 1990-х и 2000-х годах для предоставления онлайн-обучения по всей Европе, был одним из первых интернет-LMS. [16] [17]

Первая полнофункциональная система управления обучением (LMS) называлась EKKO , она была разработана и выпущена норвежской сетью дистанционного образования NKI в 1991 году. [18] Три года спустя сеть NB Learning Network из Нью-Брансуика представила аналогичную систему, разработанную для обучения на базе DOS и предназначенную исключительно для студентов, изучающих бизнес.

Технические аспекты

LMS может размещаться локально или поставщиком. Облачная система, размещенная поставщиком, как правило, следует модели SaaS (программное обеспечение как услуга). Все данные в системе, размещенной поставщиком, размещаются поставщиком и доступны пользователям через Интернет, на компьютере или мобильном устройстве. Системы, размещенные поставщиком, как правило, проще в использовании и требуют меньше технических знаний. LMS, размещенная локально, видит все данные, относящиеся к LMS, размещенные внутри на внутренних серверах пользователей. Программное обеспечение LMS, размещенное локально, часто будет иметь открытый исходный код, то есть пользователи будут приобретать (платно или бесплатно) программное обеспечение LMS и его код. Благодаря этому пользователь может изменять и поддерживать программное обеспечение с помощью внутренней команды. Отдельные лица и небольшие организации, как правило, придерживаются облачных систем из-за стоимости внутреннего хостинга и обслуживания. [19]

Существует множество стратегий интеграции для встраивания контента в системы управления обучением, включая AICC, xAPI (также называемый «жестяной банкой»), SCORM (модель ссылок на объекты общего контента) и LTI ( совместимость средств обучения ). [20] [21]

С помощью LMS преподаватели могут создавать и интегрировать учебные материалы, формулировать цели обучения, согласовывать содержание и оценки, отслеживать прогресс обучения и создавать индивидуальные тесты для студентов. LMS позволяет сообщать цели обучения и организовывать сроки обучения. Преимущество LMS в том, что она доставляет учебный контент и инструменты непосредственно учащимся, а оценка может быть автоматизирована. Она также может охватывать маргинализированные группы с помощью специальных настроек. Такие системы имеют встроенные настраиваемые функции, включая оценку и отслеживание. Таким образом, учащиеся могут видеть свой прогресс в режиме реального времени, а преподаватели могут контролировать и сообщать об эффективности обучения. [22] [23] Одной из важнейших функций LMS является попытка создать оптимизированную коммуникацию между учащимися и преподавателями. Такие системы, помимо содействия онлайн-обучению, отслеживания прогресса обучения, предоставления цифровых инструментов обучения, управления коммуникацией и, возможно, продажи контента, могут использоваться для предоставления различных функций коммуникации. [24]

Функции

Управление курсами, пользователями и ролями

Системы управления обучением могут использоваться для создания профессионально структурированного содержания курса. Преподаватель может добавлять текст, изображения, видео, файлы PDF, таблицы, ссылки и форматирование текста, интерактивные тесты, слайд-шоу и т. д. Более того, они могут создавать различные типы пользователей, такие как учителя, студенты, родители, посетители и редакторы (иерархии). Это помогает контролировать, к какому контенту студенты могут получить доступ, отслеживать прогресс обучения и вовлекать студентов с помощью контактных инструментов. Преподаватели могут управлять курсами и модулями, регистрировать студентов или настраивать самостоятельную регистрацию. [25]

Онлайн-оценка

LMS может позволить преподавателям создавать автоматизированные оценки и задания для учащихся, которые доступны и представлены онлайн. Большинство платформ допускают различные типы вопросов, такие как: однострочный/многострочный ответ; ответ с несколькими вариантами ответов; упорядочивание; свободный текст; сопоставление; эссе; правда или ложь/да или нет; заполнение пробелов; шкала согласия и офлайн-задания. [22]

Отзывы пользователей

Обмен отзывами студентов как с преподавателями, так и с их коллегами возможен через систему управления обучением. Преподаватели могут создавать дискуссионные группы, чтобы студенты могли получать отзывы, делиться своими знаниями по темам и повышать взаимодействие на курсе. Отзывы студентов — это инструмент, который помогает преподавателям улучшить свою работу, помогает определить, что добавить или удалить из курса, и обеспечивает студентам комфорт и вовлеченность. [2]

Синхронное и асинхронное обучение

Студенты могут обучаться асинхронно (по требованию, в собственном темпе) с помощью материалов курса, таких как предварительно записанные видео, PDF, SCORM (модель ссылок на объекты общего контента), форумы для обсуждения, или они могут проходить синхронное обучение, используя видеоконференции, живые обсуждения и чаты. [26]

Аналитика обучения

Системы управления обучением часто включают панели мониторинга для отслеживания прогресса студентов или пользователей. Затем они могут сообщать о ключевых элементах, таких как показатели завершения, данные о посещаемости и вероятность успеха. Использование этих показателей может помочь фасилитаторам лучше понять пробелы в знаниях пользователей. [27]

Индустрия управления обучением

На относительно новом рынке систем управления обучением коммерческие поставщики корпоративных приложений и образовательных услуг варьируются от новых участников до тех, кто вышел на рынок в 1990 году. Помимо коммерческих пакетов, доступно множество решений с открытым исходным кодом.

На рынке высшего образования США по состоянию на весну 2021 года тремя крупнейшими системами управления обучением по ряду учреждений были Canvas (38%), Blackboard (25%) и Moodle (15%). [28] Во всем мире картина была иной: Moodle занимала более 50% доли рынка в Европе, Латинской Америке и Океании. [29]

Многие пользователи систем управления обучением используют инструмент авторинга для создания контента, который затем размещается в системе управления обучением. В некоторых случаях системы управления обучением, которые используют стандарт, включают примитивный инструмент авторинга для базовой обработки контента. Более современные системы, в частности, решения SaaS, решили не принимать стандарт и имеют богатые инструменты авторинга курсов. Существует несколько стандартов для создания и интеграции сложного контента в систему управления обучением, включая AICC , SCORM , xAPI и совместимость средств обучения. Однако использование SCORM или альтернативного стандартизированного протокола курса не всегда требуется и может быть ограничительным при ненужном использовании. [30]

Оценка систем управления обучением является сложной задачей, и значительные исследования поддерживают различные формы оценки, включая итерационные процессы, в которых оцениваются опыт и подходы студентов к обучению. [31]

Преимущества и недостатки

Как сторонники, так и критики систем управления обучением признают важность развития навыков 21-го века ; однако спор заключается в том, являются ли они практичными как для учителей, так и для учеников. [32]

В одном исследовании система управления обучением (LMS) привела к более высокой компьютерной самоэффективности , в то время как участники сообщили о меньшей удовлетворенности процессом обучения, достигнутым в системе управления обучением (LMS). [33] Исследование среди индийских студентов показало, что негативный опыт работы с системой управления обучением (LMS) может оставить «учащегося с пассивным, неинтересным опытом, что приведет к неполному обучению и низкой производительности». [34]

Преимущества

Существует шесть основных преимуществ системы управления обучением, которые сами по себе составляют концепцию системы управления обучением. [22]

Недостатки

COVID-19 и системы управления обучением

Приостановка обучения в школах, вызванная пандемией COVID-19, положила начало резкому изменению того, как учителя и ученики на всех уровнях взаимодействуют друг с другом и учебными материалами. ЮНЕСКО подсчитала, что по состоянию на 25 мая 2020 года приблизительно 990 324 537 учащихся, или 56,6% от общего числа зачисленных учащихся, пострадали от закрытия школ, связанного с COVID-19. [40] Во многих странах онлайн-образование с использованием систем управления обучением стало центром преподавания и обучения. Например, статистические данные, взятые из системы управления обучением университета в начальный период закрытия школ (с марта по июнь 2020 года), показывают, что количество заявок и активность учащихся почти удвоились по сравнению с уровнем использования до пандемии. [41]

Удовлетворенность учащихся использованием LMS в этот период тесно связана с качеством информации, содержащейся в модулях LMS, и поддержанием самоэффективности учащихся . [42] С точки зрения учителей, исследование учителей K-12 в Финляндии показало высокий уровень принятия технологии LMS, однако поддержка обучения и разработка методов поддержания вовлеченности учащихся являются ключом к долгосрочному успеху. [43] В развивающихся странах переход к использованию LMS столкнулся со многими проблемами, в том числе с меньшим количеством колледжей и университетов, использовавших LMS до пандемии, ограничениями технологической инфраструктуры и негативным отношением к технологиям среди пользователей. [44]

Смотрите также

Ссылки

  1. ^ Эллис, Райанн К. (2024), Field Guide to Learning Management, Quora, заархивировано из оригинала 24 августа 2014 г. , извлечено 5 июля 2012 г.
  2. ^ ab Дэвис, Б., Кармин, К. и Вагнер, Э. (2009). «Эволюция системы управления обучением: от управления к обучению». Исследования ELearning Guild . 24 .{{cite journal}}: CS1 maint: несколько имен: список авторов ( ссылка )
  3. ^ "LMS Data – The First Year Update". Edutechnica . 23 сентября 2014 г. Получено 1 февраля 2015 г.
  4. ^ Раза С.А., Кази В., Хан К.А., Салам Дж. (апрель 2021 г.). «Социальная изоляция и принятие системы управления обучением (LMS) во время пандемии COVID-19: расширение модели UTAUT». Журнал образовательных компьютерных исследований . 59 (2): 183–208. дои : 10.1177/0735633120960421. ISSN  0735-6331. ПМЦ 7509242 . 
  5. ^ Филлипо, Джон (27 июня 2018 г.). «LMS: недостающее звено и великий помощник». NanoPDF . Получено 10 мая 2022 г. .
  6. ^ Aldahwan, Nouf; Alsaeed, Nourah I. (август 2020 г.). «Использование искусственного интеллекта в системе управления обучением (LMS): систематический обзор литературы». International Journal of Computer Applications . 175 (август 2020 г.): 16–26. doi : 10.5120/ijca2020920611 . S2CID  225363292 – через researchgate.net.
  7. ^ "Краткая история онлайн-образования". bear.warrington.ufl.edu . Архивировано из оригинала 13 февраля 2019 года . Получено 26 апреля 2018 года .
  8. ^ "История дистанционного обучения". www.godistancelearning.com . Архивировано из оригинала 16 февраля 2019 года . Получено 26 апреля 2018 года .
  9. ^ Хубачкова, Сарка (июнь 2015 г.). «История и перспективы электронного обучения». Procedia — Социальные и поведенческие науки . 191 : 1187–1190. doi : 10.1016/j.sbspro.2015.04.594 .
  10. EM Forster, «THE MACHINE STOPS» Архивировано 15 мая 2014 г. на Wayback Machine , archive.ncsa.illinois.edu .
  11. ^ Соломон Арулрадж ДЭВИД, «Критическое понимание системы управления обучением», academia.edu .
  12. ^ «Взаимодействие: выбор и использование средств массовой информации для открытого и дистанционного обучения».
  13. ^ ab Соломон Арулрадж ДЭВИД, «Обучающие машины», teachingmachin.es .
  14. ^ Парр, Джуди М.; Фанг, Ирен (3 октября 2006 г.). «Обзор литературы по компьютерному обучению, в частности интегрированным системам обучения, и результатам в отношении грамотности и счета». Министерство образования Новой Зеландии. Архивировано из оригинала 9 марта 2007 г. . Получено 13 февраля 2013 г.
  15. ^ Уотсон, Уильям Р. (2007). «Аргумент в пользу ясности: что такое системы управления обучением, чем они не являются и чем они должны стать?» (PDF) . TechTrends . 51 (2): 28–34. doi :10.1007/s11528-007-0023-y. S2CID  17043075 . Получено 13 февраля 2013 г. .
  16. ^ "История и тенденции развития системы управления обучением (инфографика)". Oxagile. 12 апреля 2016 г.
  17. ^ Ашок Шарма (4 мая 2015 г.). «История дистанционного обучения и LMS». Онлайн-обучение ELH стало проще.
  18. ^ «Интернет-колледж NKI: обзор 15-летней реализации 10 000 онлайн-курсов», irrodl.org ,.
  19. ^ Питер, Беркинг (2016). «Выбор системы управления обучением» (PDF) . Архивировано из оригинала (PDF) 9 июля 2021 г. . Получено 30 июня 2021 г. .
  20. ^ Лин, Санди (16 ноября 2015 г.). «Система управления обучением как услуга: является ли ваша система управления обучением действительно SaaS? - eLearning Industry». eLearning Industry . Получено 4 февраля 2017 г.
  21. ^ "Стандартная поддержка LMS" . Получено 4 февраля 2022 г.
  22. ^ abc Long, Phillip D. (2004). "Системы управления обучением (LMS)". Энциклопедия распределенного обучения . Thousand Oaks: SAGE Publications, Inc. стр. 291–293. doi :10.4135/9781412950596.n99. ISBN 9780761924517.
  23. ^ Ван, Циюнь; Ву, Хуай Лит; Куэк, Чун Лан; Ян, Юцинь; Лю, Мэй (9 июня 2011 г.). «Использование группы Facebook в качестве системы управления обучением: исследовательское исследование». British Journal of Educational Technology . 43 (3): 428–438. doi :10.1111/j.1467-8535.2011.01195.x. ISSN  0007-1013.
  24. ^ Chaiprasurt, Chantorn; Esichaikul, Vatcharaporn (5 июля 2013 г.). «Повышение мотивации на онлайн-курсах с поддержкой мобильных средств связи: сравнительное исследование». Международный обзор исследований в области открытого и дистанционного обучения . 14 (3): 377–401. doi : 10.19173/irrodl.v14i3.1416 . ISSN  1492-3831.
  25. ^ ab Schoonenboom, Judith (февраль 2014 г.). «Использование адаптированной модели принятия технологий на уровне задач для объяснения того, почему преподаватели в высших учебных заведениях намерены использовать некоторые инструменты системы управления обучением больше, чем другие». Компьютеры и образование . 71 : 247–256. doi :10.1016/j.compedu.2013.09.016. ISSN  0360-1315.
  26. ^ Брэдли, Вон Малкольм (2021). «Использование системы управления обучением (LMS) с онлайн-инструкцией». Международный журнал технологий в образовании . 4 (1): 68–92. doi : 10.46328/ijte.36 . ISSN  2689-2758.
  27. ^ Джонс, Кайл ML (2 июля 2019 г.). «Анализ обучения и высшее образование: предлагаемая модель для установления механизмов информированного согласия для содействия конфиденциальности и автономии студентов». Международный журнал образовательных технологий в высшем образовании . 16 (1): 24. doi : 10.1186/s41239-019-0155-0 . hdl : 1805/21571 . ISSN  2365-9440. S2CID  195766461.
  28. ^ Обновление данных LMS 2021 Весна 2021, 2021.
  29. ^ «Доля рынка академических систем управления обучением: взгляд на четыре глобальных региона». e-Literate . 29 июня 2017 г. Получено 30 мая 2019 г.
  30. ^ «SCORM мертв – какие есть альтернативы SCORM?». Plume . 22 августа 2018 г. Получено 21 февраля 2019 г.
  31. ^ Эллис, Р.; Кальво, Р.А. (2007), «Минимальные показатели для обеспечения качества смешанного обучения, поддерживаемого системами управления обучением» (PDF) , Журнал образовательных технологий и общества
  32. ^ Риз, Саша (сентябрь 2015 г.). «Среды онлайн-обучения в высшем образовании: коннективизм против диссоциации». Education Information Technology . 20 (3): 579–588. doi :10.1007/s10639-013-9303-7. S2CID  18160992.
  33. ^ Пикколи, Габриэле; Ахмад, Рами; Айвс, Блейк (декабрь 2001 г.). «Виртуальные среды обучения на основе веб-технологий: исследовательская структура и предварительная оценка эффективности обучения базовым навыкам в области ИТ». MIS Quarterly . 25 (4): 401–426. doi :10.2307/3250989. JSTOR  3250989. S2CID  6977479.
  34. ^ Йена, РК (2006). «Исследование взаимосвязи между установками, готовностью к обучению и стилями обучения в виртуальной среде обучения: исследование среди индийских студентов». EBSCO . Получено 30 сентября 2018 г.
  35. ^ «Чем системы управления обучением отличаются по доступности? | AccessComputing». www.washington.edu . Получено 25 августа 2022 г. .
  36. ^ Гонсалес, Хорхе Фонтенла; Родригес, Мануэль Каейро; Ламас, Мартин (октябрь 2009 г.). «Повышение возможности повторного использования в системах управления обучением за счет интеграции сторонних инструментов». 2009 39-я конференция IEEE «Границы в образовании» . стр. 1–6. дои : 10.1109/FIE.2009.5350672. ISBN 978-1-4244-4715-2. S2CID  5467495.
  37. ^ Отчеты, Оценки. «Рынок систем управления обучением (LMS) вырастет на 40360 миллионов долларов США к 2028 году при среднегодовом темпе роста 17,1% | Отчеты Оценки». www.prnewswire.com (пресс-релиз) . Получено 25 августа 2022 г.
  38. ^ Малаволта, Ивано; Вердеккья, Роберто; Филипович, Боян; Брунтинк, Магиель; Лаго, Патрисия (сентябрь 2018 г.). «Как развиваются проблемы поддерживаемости приложений Android». Международная конференция IEEE 2018 г. по обслуживанию и развитию программного обеспечения (ICSME). стр. 334–344. doi :10.1109/ICSME.2018.00042. hdl :1871.1/8e9af5ea-dcce-4511-97a5-15a22adab7b1. ISBN 978-1-5386-7870-1. S2CID  53285935.
  39. ^ Сантос, Лара Кристина де Пайва Лоуренсу душ Сантос (2008). Поддержка адаптивности в системе управления обучением (магистерская диссертация).
  40. ^ Toquero, Cathy Mae (16 апреля 2020 г.). «Проблемы и возможности высшего образования в условиях пандемии COVID-19: Филиппинский контекст». Педагогические исследования . 5 (4): em0063. doi : 10.29333/pr/7947 . ISSN  2468-4929. S2CID  218823128.
  41. ^ Прат, Джоана; Льоренс, Ариадна; Сальвадор, Франсеск; Альер, Марк; Амо, Даниэль (6 мая 2021 г.). «Методология изучения деятельности университета по онлайн-обучению с использованием показателей виртуальной платформы: влияние пандемии COVID-19 на Политехнический университет Каталонии». Устойчивость . 13 (9): 5177. doi : 10.3390/su13095177 .
  42. ^ Альзахрани, Латифа; Сет, Кавита Панвар (1 ноября 2021 г.). «Факторы, влияющие на удовлетворенность студентов постоянным использованием систем управления обучением во время пандемии COVID-19: эмпирическое исследование». Образование и информационные технологии . 26 (6): 6787–6805. doi :10.1007/s10639-021-10492-5. ISSN  1573-7608. PMC 8023780. PMID 33841029  . 
  43. ^ Диндар, Мухтерем; Суорса, Анна; Гермес, Ян; Карппинен, Паси; Няйкки, Пия (2021). «Сравнение принятия технологий учителями K-12 с опытом работы с системами управления обучением и без него: исследование пандемии COVID-19». Журнал компьютерного обучения . 37 (6): 1553–1565. doi : 10.1111/jcal.12552. ISSN  1365-2729. PMC 8447015. PMID 34548732  . 
  44. ^ Кавус, Надире; Мохаммед, Якубу; Якубу, Мохаммед Насиру (6 мая 2021 г.). «Детерминанты систем управления обучением во время пандемии COVID-19 для устойчивого образования». Устойчивость . 13 (9): 5189. doi : 10.3390/su13095189 .

Библиография

Дальнейшее чтение