Искусство в IT-технологиях...

Васильев Иван Анатольевич. Методы и инструментальные средства построения семантических WEB-порталов, 2006

4.2.4. Тестирование функции выработки рекомендации



Функция рекомендации объектов, похожих на исходный, тестировалась с целью выбора коэффициентов для семантического сравнения элементов онтологии, с целью установления порогового значения для рекомендации и с целью проверки качества отбора документов для рекомендации.

В целях тестирования трем тестерам было предложено 3 произвольных документа из 160-ти проаннотированных.
Семантические метаданные каждого из трех предложенных документов сравнивались тестером с семантическими метаданными оставшихся 159-ти документов. При этом тестер указывал близость элементов семантических метаданных в диапазоне (0;1], а также указывал, считает ли он семантические метаданные схожими (да/нет).
На основании полученных оценок близости элементов семантических метаданных были рассчитаны коэффициенты, используемые в методе вычисления семантической близости элементов онтологии (выражения 3.24, 3.28). Значения коэффициентов, вычисленные методом усреднения, приведены в таблице 4.9.
Таблица 4.9. Коэффициенты для категоризации

Коэффициенты для категоризации


Указанные значения коэффициентов были использованы для автоматического расчета схожести документов, выбранных тестерами, с остальными документами (рис. 4.18). Показателем схожести являлся показатель SMF0 (выражение 3.44).
Данные, полученные в результате автоматического расчета схожести, использовались для определения порогового значения для рекомендацгш. От этого значения зависит качество рекомендации, которое оценивалось аналогично поиску - через показатели формальной полноты и формальной точности. Чем больше пороговое значение для рекомендации, тем выше точность и меньше полнота. И наоборот, чем ниже пороговое значение для рекомендации, тем меньше точность и выше полнота.
Было принято решение обеспечить максимальное значение показателя полноты рекомендации. Поэтому при определении порогового значения для рекомендации вычислялось минимальное значение показателя схожести документов.

Процесс автоматического расчета показателя схожести документов


Рис. 4.18. Процесс автоматического расчета показателя схожести документов

Пусть - множество документов, а

множество семантических метаданных документов

- множество семантических метаданных этих документов.

множество семантических метаданных

— множество семантических метаданных из
множества

множество семантических метаданных

, которые тестер посчитал схожими с семантическими метаданными документа

семантические мета-данные документа

- минимальное значение показателя

показатель

при сравнении семантических метаданных документа

документ

с семантическими метаданными из множества

множество


минимальное значение показателя


В результате для каждого из девяти документов, обработанных тестерами, были получены минимальные значения показателя схожести (табл.
4.10).
Таблица 4.10. Значения показателя схожести документов

Значения показателя схожести документов


В качестве порогового значения для рекомендации было выбрано значение 0.4469, являющееся минимальным в тестовой выборке. При данном значении были определены формальная полнота и формальная точность (рис. 19, 20, 21) для восьми тестовых документов (для одного тестового документа второй тестер не указал схожих документов).

формальная полнота рекомендации


количество выданных алгоритмом семантических метаданных, которые тестер указал как схожие

- количество выданных алгоритмом семантических метаданных, которые тестер указал как схожие

количество не выданных алгоритмом семантических метаданных, которые тестер указал как схожие

- количество не выданных алгоритмом семантических метаданных, которые тестер указал как схожие

формальная точность рекомендации



количество выданных алгоритмом семантических метаданных, которые тестер указал как схожие

количество выданных алгоритмом семантических метаданных, которые тестер указал как схожие

количество выданных алгоритмом семантических метаданных, которые тестер не указал как схожие

количество выданных алгоритмом семантических метаданных, которые тестер не указал как схожие

Характеристики полноты и точности рекомендации по данным
первого тестера


Рис.
4.19. Характеристики полноты и точности рекомендации по данным
первого тестера

Характеристики полноты и точности рекомендации по данным
второго тестера


Рис. 4.20. Характеристики полноты и точности рекомендации по данным
второго тестера

Характеристики полноты и точности рекомендации по данным
третьего тестера


Рис. 4.21. Характеристики полноты и точности рекомендации по данным
третьего тестера
Для тестовой выборки из 9-и документов при пороговом значении для рекомендации равным 0.4469 формальная полнота рекомендации равна 1, а формальная точность варьируется от 0.333 до 1 и в среднем составляет 0.5646.
предыдущий следующий
= К содержанию =


4.2.4. Тестирование функции выработки рекомендации - релевантная информация:

  1. 2.5. Характеристика Web - сайта коммерческого банка как нового вида обслуживания в системе Интернет - банкинга
    тестирования, Web-cepBep может быть размещен в Интернете. После этого требуется решить вопро^ привлечения на него пользователей — текущих и потенциальных клиентов банка. Поэтому следующим этапом является проведения комплекса мероприятий по привлечению посетителей на сервер. Указанные три этапа завершает четвертый — подведение итогов на основе сравнения полученных результатов с запланированными в
  2. Положения, выносимые на защиту:
    функции должны быть возложены на ЮНСИТРАЛ. поскольку данный орган имеет большой опыт в области международной регламентации электронной коммерции, необходимые организационные, финансовые и шгтеллектуальные ресурсы. 6. Действующие правовые акты, прежде всего, международные соглашения, как правило, не рассчитаны на применение к отношениям с использованием электронного обмена данными. Препятствием
  3. Правила связи и передачи информации
    функция указанных организаций состоит в разработке регуляторов (прежде всего, различных стандартов), носящих рекомендательный характер и дополняющих существующую правовую базу. Отдельные правила со временем получают широкое распространение и становятся либо основой для соответствующих стандартов МСЭ или МОС либо приобретают характер правовых обычаев в области коммуникации, либо включаются в
  4. ВВЕДЕНИЕ
    тестированы в процессе практической реализации Web-порталов. Результаты исследования использовались при разработке и реализации Web-портала для «Центра профессиональной подготовки специалистов нефтегазового дела» ТПУ и Web-портала системы управления знаниями компании «ЭлеСи». Диссертационное исследование выполнялось в соответствии с проектом «Создание информационно-программной среды научно-
  5. 4.2. Тестирование семантического ядра портала
    функции: аннотирование объектов; семантический поиск; формирование списка объектов, связанных с исходным объектом; формирование списка объектов, похожих на исходный объект. Функция аннотирования упрощает процесс формирования семантических метаданных для объектов портала. Семантический поиск позволяет искать объекты портала с учетом их семантики. Формирование списка объектов, связанных с исходным
  6. 4.3.2. Портал «Корпоративная система управления знаниями»
    тестирования были зафиксированы высокие показатели качества выполнения алгоритмических процедур поиска, категоризации и предоставления рекомендаций. Результаты исследований современного уровня развития семантических технологий, разработка функциональной структуры и программная реализация компонентов семантического ядра способствуют практическому решению задачи создания семантического
  7. ЗАКЛЮЧЕНИЕ
    тестирование программного кода на сгенерированном множестве семантических метаданных. Разработанные структуры, методы и алгоритмы построения семантических Web-порталов, а также соответствующее программное обеспечение, внедрены в двух организациях (ЗЛО «ЭлеСи», Центр профессиональной переподготовки специалистов нефтегазового дела ТПУ) при создании для них семантических порталов различного
  8. 1.4. Государственное и межправительственное нормативно - правовое регулирование дистанционного банковского обслуживания.
    функционирования экономики. Это позволит защитить интересы любой из сторон, независимо от ее государственно-территориальной принадлежности, а государства должны будут стать участниками единого соглашения, содержащего нормы, регулирующие банковское обслуживание в мировом Интернет - пространстве. Одним из последних проектов Международной Торговой Палаты (МТП) является разработка по электронным
  9. Селиванов Сергей Александрович. Формирование и разбитие системы инфраструктурного обеспечения предпринимательской деятельности с использованием интернет-рекламы, 2005
    выработкой методик и рекомендация по разработке интернет-представительств фирм, их продвижение с использованием средств интернет-рекламы и оценки эффективности рекламных коммуникаций в
  10. Целью данной работы является
    выработкой методик и рекомендация по разработке интернет-представительств фирм, их продвижение с использованием средств интернет-рекламы и оценки эффективности рекламных коммуникаций в