ОЦЕНКА ЭЛЕКТРОННЫХ РЕСУРСОВ НАУКИ И ОБРАЗОВАНИЯ
ОФЭРНиО, принимая на регистрацию комплекты документов на электронные ресурсы (ЭР), осуществляет предварительную оценку электронных документов, а именно:
1. на полноту комплекта документов;
2. на соответствие оформления документов формальным признакам;
3. на качество документов, описывающих регистрируемую разработку;
4. на новизну, приорететность и научность регистрируемых разработок.
Для успешного прохождения процедуры регистрации авторы и организации-разработчики должны получить сообщение по электронной почте от ОФЭРНиО, что "Разработка допущена к регистрации".
Электронные документы на разработки, не допущенные к регистрации, в ОФЭРНиО не хранятся, что делает процедуру регистрации НЕВОЗМОЖНОЙ.
I. ОЦЕНКА ПОЛНОТЫ КОМПЛЕКТА ЭЛЕКТРОННЫХ ДОКУМЕНТОВ
НА РЕГИСТРИРУЕМЫЙ ЭЛЕКТРОННЫЙ РЕСУРС
Контролируется наличие в комплекте 5-ти файлов, соответствующих следующим документам:
1. Информационная карта алгоритмов и программ - ikap.doc;
2. Письмо (сопроводительное) - pismo.doc;
3. Рекламно-техническое описание - rto.doc;
4. Строка БД - bd.xls;
5. Информация на английском языке - engl-inforn.doc.
II. ОЦЕНКА СООТВЕТСТВИЯ ОФОРМЛЕНИЯ ЭЛЕКТРОННЫХ ДОКУМЕНТОВ ФОРМАЛЬНЫМ ПРИЗНАКАМ
При рассмотрении электронных документов осуществляется контроль оформления документов по формальным признакам:
1. Оформление "Информационной карты алгоритмов и программ" (ИКАП) контролируется в соответствии с "Требованиями к оформлению информационной карты алгоритмов и программ" (Приложение 3 к "Положению о предоставлении обязательного экземпляра алгоритмов и программ", утвержденного Миннауки России от 17 ноября 1997 года, № 125);
Контролируется:
· наличие кода по ЕСПД;
· наличие индексов УДК;
· наличие кодов ГРНТИ;
· объем реферата - не более 2048 символа;
· структура реферата;
· неконфликтность организационно-правововой формы взаимодействия авторов и организации-разработчика (организации, ведущей отделение ОФЭРНиО).
2. Оформление документа "Рекламно-техническое описание" контролируется в соответствии с "Требованиями к оформлению информационной карты алгоритмов и программ" (Приложение 2 к "Положению о предоставлении обязательного экземпляра алгоритмов и программ", утвержденного Миннауки России от 17 ноября 1997 года, № 125), ГОСТ 19.104-78* "Основные надписи", ГОСТ 7.32-91 "Отчет о НИР. Структура и правила оформления". Контролируется:
· соответствие кода по ЕСПД коду по ЕСПД в ИКАП,
· соответствие наименования разработки на титульном листе РТО с наименованием разработки в сопроводительном письме и информационной карте алгоритмов и программ;
· кол-во авторов и их ФИО в соответствии с количеством и ФИО авторов в ИКАП и сопроводительном письме;
· наличие следующих разделов в РТО:
- функциональное назначение продукта, область применения, его ограничения;
- используемые технические средства;
- специальные условия и требования организационного, технического и технологического характера;
- условия передачи документации или ее продажи.
- наличие требуемого объема документа - не менее 5000 символов.
3. Оформление сопроводительного письма.
Контролируется:
· форма письма в соответствии с выбранной формой регистрации (от имени автора-индивидуала, авторского коллектива, организации-разработчика);
· наличие и полнота раздела "Дополнительная информация";
· наличие контактной информации лица, оформившего документы.
·
4. Оформление текста на английском языке - engl-inform.doc. Контролируется наличие информации на английском языке:
· наименование разработки;
· реферат (из ИКАП);
· ФИО авторов;
· наименование организации-разработчика.
5. Оформление строки БД bd.xls:
Контролируется полное соответствие содержимого строки БД содержимому документов:
· Информационная карта алгоритмов и программ (ikap.doc);
· Рекламно-техническое описание (rto.doc);
· Сопроводитетельное письмо (pismo.doc);
· Текст на английском языке - engl-inform.doc.
III. ОЦЕНКА КАЧЕСТВА ЭЛЕКТРОННЫХ ДОКУМЕНТОВ
Методика оценки качества электронной документации (ЭД) устанавливает критерии, принципы, метрики и методы оценки качества ЭД электронных ресурсов образовательного и научного назначения.
Методика оценки качества ЭД (далее по тексту - методика) предназначена для использования разработчиками ЭД, а также разработчиками инструментальных ПС, обеспечивающих автоматизацию разработки и выпуска ЭД.
Разработчикам ЭД методика дает возможность получения количественной оценки качества ЭД, установления требований к уровню качества ЭД и разработки мероприятий, направленных на повышение качества ЭД.
Разработчикам инструментальных программных систем, обеспечивающих автоматизацию разработки и выпуска ЭД, методика дает возможность устанавливать требования к средствам автоматизации с учетом обеспечения повышения уровня качества разрабатываемой с их помощью ЭД, а также проводить сравнительный анализ имеющихся программных средств автоматизации разработки и выпуска ЭД.
Качество ЭД - есть совокупность свойств, обусловливающих ее пригодность удовлетворять определенные потребности разработчиков и пользователей, связанные с разработкой, использованием и сопровождением ЭД в соответствии с ее назначением.
В зависимости от возможностей, целей и задач оценки качества ЭД применяют следующие методы определения численных значений показателей качества ЭД:
· экспериментальный
· расчетный
· экспертный
· социологический
Экспериментальный метод основывается на непосредственном измерении показателей с помощью технических средств и для оценки ЭД его применение весьма затруднительно. Для оценки качества ЭД наиболее приемлемыми являются расчетный, экспертный и социологический методы получения численных значений.
Расчетный метод предполагает использование вычислений на основе известных теоретических и эмпирических зависимостей и данных, полученных другими методами, например экспертным.
Экспертный метод позволяет устанавливать величины показателей качества на основе решений, принимаемых группой специалистов-экспертов.
Социологический метод близко примыкает к экспертному методу и основывается на сборе и анализе мнений фактических или потенциальных пользователей электронного ресура и его ЭД.
Методика предлагает использование экспертного и расчетного методов, она содержит таблицы и анкету для оценки метрик качества ПД специалистами - экспертами и описание методов расчета качества ПД.
Методика предлагает использование экспертного и расчетного методов, она содержит таблицы и анкету для оценки метрик качества ЭД специалистами-экспертами и описание методов расчета качества ЭД:
· выбор конкретных свойств документа, характеризующих его качество, и выражающих потребности пользователей;
· детализацию этих характеристик до элементарных, которые могут быть выражены количественно;
· разработку системы показателей, соответствующих характеристикам качества документа;
· вычисление оценок отдельных характеристик и качества документа в целом.
Некоторые свойства, характеризующие качество электронного ресурса (завершенность, осмысленность, согласованность, структурированность), присущи и документам, разрабатываемым в процессе проектирования ЭР. Кроме того, документы обладают и рядом специфических свойств, отражающих качество документа:
Понятность. Документ обладает свойством понятности, если весь материал, изложенный в документе понятен читающему его лицу;
Завершенность. Документ обладает свойством завершенности, если в нем содержатся все необходимые элементы содержания, перечисленные в оглавлении, и это содержание с достаточной полнотой отражает аспекты принятых технических решений;
Осмысленность. Документ обладает свойством осмысленности, если он не содержит избыточной информации;
Согласованность. Документ обладает свойством согласованности, если он содержит единую нотацию, терминологию, символику, смысловую связь внутри и с другими документами;
Самоопределенность. Документ обладает свойством самоопределенности, если он содержит всю информацию, необходимую и достаточную для понимания его читающим лицом.
Структурированность. Документ обладает свойством структурированности, если его взаимосвязанные части (разделы и подразделы) организованы в единое целое определенным образом.
Полнота. Документ обладает свойством полноты, если он разработан в соответствии с требованиями к структуре и содержанию документа.
Идентифицируемость. Документ обладает свойством идентифицируемости, если он содержит всю информацию о полном наименовании документа, дате завершения разработки и о разработчике.
На основе приведенных выше свойств документов, характеризующих их качество, разработана четырехуровневая иерархическая схема показателей.
Значения предшествующего i-ого уровня определяются значениям соответствующих показателей (i + 1 ) -ого уровня.
Показатели 3-его уровня, соответствующие элементарным характеристикам, назовем метриками. Каждой метрике по определенному правилу может быть поставлено в соответствие число.
Настоящая методика оценки ЭД реализована в автоматизированной системе "Оценка качества ЭД" (OKED).
IV. ОЦЕНКА ПРИОРИТЕТНОСТИ РЕГИСТРИРУЕМЫХ ЭЛЕКТРОННЫХ РЕСУРСОВ
Оценка приоритетности регистрируемых электронных ресурсов осуществляется на основании контекстного поиска аналогов данной разработки с последующим уточнением даты окончания разработки.
V. ОЦЕНКА НОВИЗНЫ РЕГИСТРИРУЕМЫХ ЭЛЕКТРОННЫХ РЕСУРСОВ
Оценка новизны электронного ресурса осуществляется специалистами в области научной и образовательной информации с помощью лингвистических процессоров в федеральных и отраслевых базах данных.
VI. ОЦЕНКА ДОКУМЕНТОВ В ТВЕРДОЙ КОПИИ НА ЭЛЕКТРОННЫЙ РЕСУРС
1. Контролируется наличие в комплекте следующих документов:
· Письмо (сопроводительное) - 1 экз.,
· Информационная карта алгоритмов и программ - 3 экз.,
· Рекламно-техническое описание - 1 экз.,
· Конверт с обратным адресом и марками,
· Платежное поручение/квитанция (копия) об оплате услуг ОФЭРНиО.
2. наличие "живых" подписей и печатей.