Товары в корзине: 0 шт Оформить заказ
Стр. 1
 

48 страниц

517.00 ₽

Купить официальный бумажный документ с голограммой и синими печатями. подробнее

Официально распространяем нормативную документацию с 1999 года. Пробиваем чеки, платим налоги, принимаем к оплате все законные формы платежей без дополнительных процентов. Наши клиенты защищены Законом. ООО "ЦНТИ Нормоконтроль".

Наши цены ниже, чем в других местах, потому что мы работаем напрямую с поставщиками документов.

Способы доставки

  • Срочная курьерская доставка (1-3 дня)
  • Курьерская доставка (7 дней)
  • Самовывоз из московского офиса
  • Почта РФ

Определяет требования к испытательной лаборатории и к клиентам при выполнении процесса оценки соответствия. Эти требования необходимы для получения сопоставимых результатов тестирования сходных реализаций, полученных различными испытательными лабораториями. Настоящий стандарт содержит также некоторые руководящие материалы по процессу оценки соответствия.

К этим требованиям относятся:

а) требования к тестируемости реализации относительно методов абстрактного тестирования;

b) общие требования к испытательной лаборатории и к клиенту применительно к любому процессу аттестационного тестирования;

с) обмен технической и административной информацией;

d) взаимодействие между испытательной лабораторией и клиентом для достижения согласованности в определении тестируемой реализации (ТР);

е) требования к структуре и содержимому отчетов об аттестационном тестировании, в которых документируются результаты оценки соответствия

Показать даты введения Admin

Страница 1

ГОСТ Р ИСО./МЭК 9646-5-93

ГОСУДАРСТВЕННЫЙ СТАНДАРТ РОССИЙСКОЙ ФЕДЕРАЦИИ

■В——— ..........■    11    И    ■■Tin.»r»naaau«<]im—и» миш—и—

ИНФОРМАЦИОННАЯ ТЕХНОЛОГИЯ

ВЗАИМОСВЯЗЬ ОТКРЫТЫХ СИСТЕМ. МЕТОДОЛОГИЯ и основы АТТЕСТАЦИОННОГО ТЕСТИРОВАНИЯ

Часть 5. ТРЕБОВАНИЯ К ИСПЫТАТЕЛЬНЫМ ЛАБОРАТОРИЯМ И КЛИЕНТАМ В ПРОЦЕССЕ ОЦЕНКИ СООТВЕТСТВИЯ

Издание официальное

ВЗ 12—92/1163


ГОССТАНДАРТ РОССИИ Москва

Страница 2

ГОСТ Р ИСО-МЭК 9646—5—93

Предисловие

1    ПОДГОТОВЛЕН И ВНЕСЕН Техническим комитетом (ТК 22) «Информационная технология»

2    УТВЕРЖДЕН И ВВЕДЕН В ДЕЙСТВИЕ Постановлением Госстандарта России от 20.12.93 № 262

Настоящий стандарт подготовлен на основе применении аутентичного текста международного стандарта ИСОуМЭК 964В—5 «Информационная технология. Взаимосвязь открытых систем. Методология н основы аттестационного тестирования. Масть 5. Требования к испытательным лабораториям и клиентам в процессе оценки соответствий»

3    ВВЕДЕН ВПЕРВЫЕ

® Издательство стандартов. 1994

Настоящий стандарт не может быть полностью и.1и частично воспроизведен, тиражирован и распространен в качестве официального изаапия без разрешения

Госстандарта России.

II

Страница 3

ГОСТ Р ИСО/МЭК 9646 5-95

СОДЕРЖАНИЕ

1    Область применении    .    ..........t

2    Норма1ивные ссылки .    ....

3    Определения    ...........3

4    Сокращения    .    .    .....4

4.1    Сокращении, определенные    в ГОСТ Р ИСО/МЭК 9646—1    .    1

4 2 Прочно сокращения .    ........4

5    Общее описание процесса опенки    соответствия    ,    .5

5-1 Введение .    .    ....    5

5.2    Подготовка к тестированию............•>

S3 Операции тестирования    :    6

5.4 Разработка омета о тестировании    .    6

6    Подготовка к тестировании»    ...    ...    7

6.1    Введение..........7

6.2    Требования к тестированию    ТС........8

6.2.1    Роль кльенга    .    .    .....8

6.3    Взаимодействие между испытательной лабораторией и клиентом    10

6.3.1    Контрольные списки испытательной лаборатории и клиента .    10

6.32 Соглашения о методах тестирования и выбор тестового комплекта .    .    ........12

6.3.3    Адмииис1ративное управление техническими вопросами    .    13

6.4    Документация по опенке соответствии    .    ...    13

64.1    Общее описание .    .    .....13

6.4    2 Заявка о соответствии реализации протоколу (ЗСРП) .    .14

6.4.3    Дополнительная информации о реализации протокола для

тестирования (ДИРПТ> ....    ....    14

6.4    4 Заявка о соответствии системы (ЗСС).....!5

6    4,5 Заявка о реализации ПАУТ ...    ...    16

7    Оиерацни тестирования...........16

71    Введение.................16

72    Рассмотрение статического соответствия .    16

7    21 Роль испытательной лаборатории .    ...    16

7.2    2 Род*, клиента    .    ...........    .    18

7.2.3    Совместная роль .    ........18

7,3    Выбор геста................18

7.3.1    Роль испытательной лаборатории ....    .18

73.2    Роль клиента...........1»

7 4    Параммуи-зании тестов..........IS»

7.4.1    Роль испытательной лаборатории..........I»

7.4.2    Рать клиента...........СО

7.5    Верификация процедур скоординированного тестирования .    .    20

7.5.1    Введение ....    ............20

7.5.2    Совместная роль..........20

7.6    Тестовая кампания ...    ......20

7.61 Введение .    ....    ...    20

7.6.2    Роль испытательной, лаборатории......;Ч1

7.6.3    Роль клиента ....    ......22^

7.6 4 Совместная роль...............23

7.7    Согласованный выход нз тестовой кампании .    .    .    24

7.7.1    Использование согласованного выхода .    24'

7.7.2    Роль испытательной лаборатории......24

7.7.3    Роль клиент*...........24

Страница 4

ГОСТ Р ИСО/МЭК 9646-5-93

7.7.4 Совместная роль .    ....    .    24

8    Разработка отчета о тестировании........25

8.1    Отчеты об аттестационном тестировании    ....    .25

8.1.1    Введение............25

8.2    Отчет об аттестационном тестировании    системы    (ОАТС)    25

8.2.1    Родь испытательной лаборатории    ......25

8,2 2 Роль клиента    ..........26

8.2.3    Совместная роль...............    26

8.3    Отчет об аттестационной тестировании протокола    ЮЛТП1    26

8.3.1    Роль испытательной лаборатории......26

8.32    Роль клиента..........    .    £7

8.3.3    Совместная роль.............27

9    Согласованность............28

9.1    Роль испытательной лаборатории .    .28

9.2    Роль    клиенте    ...............    29

Приложение Л Отчет об аттестационном тестировании системы (ОЛТС) 30

A t Введение ............30

А-2 Форма ОАТС .............    3(1

Приложение В Отчет об аттестационной тестировании протокола (ОЛТП) 32 В.1 Введение ..........32

B.2    Форма ОЛТП    .......32

Приложение С Скелетная форма ДИРПТ    .    ....    35

C.I    Введение    ...........35

С.2 Форма ДИРПТ.........35

Приложение D Руководство по ДИРПТ ..........38

Приложение Е Сводный перечень документов по аттестационному тестированию ............■    .    .39

E.I Сокращения, используемые в данном приложении . 39 Е.2 Использование документов по аттестационному тести-

ронанию клиентом к испытательной лабораторией . 39

IV

Страница 5

ГОСТ Р ИСО/МЭК 9Мв—5 -ОТ

ВВЕДЕНИЕ

Аттестационное тестирование требует наличия взаимопонимания и согласия между испытательной лабораторией и клиентом. В настоящем стандарте описываются роли той или другой сторон при выполнении процесса оценки соответствия, необходимость взаимного соглашения между ними и требования к каждой из сторон.

Процесс оценки соответствия — это наиболее наблюдаемый процесс аттестационного тестирования, где результаты стандартизации тестовых комплектов получают практическое применение. Это также этап, на котором имеется возможность множества вариаций. Поскольку настоящий стандарт касается сравнительно формального процесса тестируемой реализации, важно, чтобы число и характер этих вариаций были максимально ограничены. Одна из основных целей стандартизации по аттестационному тестированию состоит в том, чтобы постичь приемлемой и полезной степени сопоставимости результатов оценок соответствия сходных реализаций. Для достижения этой цели должен использоваться не только один и тот же исходный материал тестирования (то есть определенный в стандартах), но и методы выбора и параметризации этих тестов, представления их результатов должны быть о основном одинаковыми.

В настоящем стандарте рассматриваются вопросы, которые должны учитываться как испытательной лабораторией, так и ее клиентами, при необходимости достижения согласованных оценох соответствия Основными объектами настоящего стандарта являются испытательные лаборатории и их клиенты.

Испытательная лаборатория несет ответственность за оценку соответствия конкретной реализации ВОС по запросу клиента. Обычно функции испытательных лабораторий выполняют:

a)    организации, разрабатывающие или поставляющие реализации ВОС (испытательные лаборатории первой стороны);

b)    организации, желающие сами проверить реализации ВОС перед их использованием (испытательные лаборатории второй стороны);

c)    организации независимых поставщиков или пользователей ВОС. основной сферой деятельности которых является тестирование таких реализаций (испытательные лаборатории третьей стороны).

Клиентами могут быть разработчики или поставщики реальных открытых систем или других систем ВОС, которые применяют их для своих собственных реализаций, подлежащих тестированию. Ими могут быть также владельцы этих реализаций или другие за-

V

Страница 6

ГОСТ Р ИСО/МЭК 964в-5-#3

интересованные стороны. Применимость настоящего стандарта не зависит от взаимоотношений между клиентами и реализацией. При выполнении процесса оценки соответствия клиент несет ответственность за заявки о соответствии, которые прилагаются к тестируемой системе (ТС), и за конфигурацию ТС.

Вторичными, но заинтересованными в настоящем стандарте сторонами, могут быть

a)    исполнители тестов;

b)    организации, ответственные за аккредитацию испытатель-ныл лабораторий первой, второй и третьей сторон;

c)    организации, ответственные за выдачу аттестационных сертификатов, которые основываются иа отчетах об аттестационном тестировании, выдаваемых испытательными лабораториями;

d)    читатели отчетов об аттестационном тестировании.

В настоящем стандарте процесс оценки соответствия, относящийся к испытательной лаборатории и к ее клиентам, подразделяется на три фазы:

a)    подготовка к тестированию;

b)    операции тестирования;

c)    разработка отчетов о тестировании.

Общее описание этих трех фаз приведено в разделе 5. В разделах 6—9 изложены требования к выполнению этих трех фаз.

В настоящем стандарте предполагается, что испытательная лаборатория доступна и готова к предоставлению услуг по оценке соответствия. Предполагается также, что испытательная лаборатория приобрела у исполнителя тестов (независимо от принадлежности последнего к той же организации) средства тестирования для одного или нескольких протоколов ВОС. которые соответствуют одному или нескольким методам абстрактного тестирования. В настоящем стандарте определяются требования к испытательной лаборатории относительно выполнения процесса оценки соответствия для конкретного клиента.

Точно также предполагается, что клиент готов к применению оценки соответствия для реализации ВОС. Считается, что клиент знаком с соответствующими стандартами, с принципами аттестационного тестирования и методами абстрактного тестирования и готов сотрудничать с испытательной лабораторией. В настоящем стандарте определяются требования к клиенту относительно тестируемости предложенной ТС и к выполнению процесса оценки соответствия.

Рекомендуется изучать настоящий стандарт в сочетании с ГОСТ Р ИСО/МЭК 9646 I.

Настоящий стандарт опубликован также в пиле рекомендации Х.294 (1991) МККТТ.

VI

Страница 7

ГОСТ Р ИСО'МЭК 9М6-Б-М ГОСУДАРСТВЕННЫЙ СТАНДАРТ РОССИЙСКОЙ ФЕДЕРАЦИИ

Информационная технология ВЗАИМОСВЯЗЬ ОТКРЫТЫХ СИСТЕМ. МЕТОДОЛОГИЯ И ОСНОВЫ АТТЕСТАЦИОННОГО ТЕСТИРОВАНИЯ Часть 5 Требования к испытательным лабораториям и клиентам в процессе оценки соответствия Information technology. Open Systems Interconnection. Conformance Testing Methodology and Framework.

Part 5: Requirements on Test Laboratories and Clients for the Conformance As»csmcnt Proccss

Дата введения 1994-07-01

I ОБЛАСТЬ ПРИМЕНЕНИЯ

Настоящий стандарт определяет требования к непитательной лаборатории и к клиентам при оыполнении процесса оценки соответствия. Эти требования необходимы для получения сопоставимых результатов тестирования сходных реализаций, полученных различными непитательными лабораториями. Настоящий стандарт содержит также некоторые руководящие материалы по процессу оценки соответствия.

К этим требованиям относятся:

a)    требования к тестируемости реализации относительно методов абстрактного тестирования;

b)    общие требования к испытательной лаборатории и к клиенту применительно к любому процессу аттестационного тестирования.

c)    обмен технической н административной информацией, включая заявку о соответствии системы (ЗСС), заявку о соответствии реализации протоколу (ЗСР11) для каждого соответствующего стандарта по протоколу ВОС и дополнительную информацию о реализации протокола для тестирования (ДИРПТ) для каждого комплекта абстрактных тестов (КАТ), которые должны использоваться для тестирования;

d)    взаимодействие между испытательной лабораторией и клиентом для достижения согласованности н определении тестируемой реализации <ТР), по используемым методам аттестационного тестирования, по комплектам аттестационных тестов и по условиям выполнения тестирования;

Издание официальное

1

Страница 8

ГОСТ Р ИСО/МЭК «<Мв—5-W

е) требования к структуре и содержимому отчетов об аттестационном тестировании, в которых документируются результаты оценки соответствия.

Настоящий стандарт применим в равной степени и к тем испытательным лабораториям, которые относится к поставщикам и владельцам, к к независимым непитательным лабораториям.

Настоящий стандарт применим к оценке соответствия тех реализаций ВОС и двухчастевых стандартов по протоколам ISDN, которые отвечают соответствующим требованиям ГОСТ Р ИСО/ МЭК 9646 —2 на тестируемость, основанным на стандартах по ат-тестаниононму тестированию, определенных в соответствии с ГОСТ Р ИСО/МЭК 9646—2 и использующих средства тестирования, соответствующие ГОСТ Р ИСО/МЭК 9646—4.

В предмет рассмотрения настоящего стандарта не входят:

и) выработка диагностической трассовой информации, дополнительно к той. которая содержится в журнале соответствия, в результате тестирования, проведенной испытательной лабораторией. и ее предоставление клиенту;

b)    те аспекты операций испытательной лаборатории, которые нсспеиифнчны для тестируемой реализации протоколов ВОС;

c)    аккредитация испытательной лаборатории:

(1J сертификация реализаций протоколов ВОС.

2 НОРМАТИВНЫЕ ССЫЛКИ

Нижеперечисленные стандарты содержат положения, которые путем ссылок на них в данном тексте образуют положения настоящего стандарта В момент публикации настоящего стандарта указанные издания стандартов были действующими. Все стандарты подвергаются пересмотрам, и участникам соглашений, основанных на настоящем стандарте, следует рассмотреть возможность применения самых последних изданий перечисленных ниже стандартов. Комитеты — члены МЭК и ИСО имеют списки международных стандартов, действующих на текущий момент.

ГОСТ 28906-91 (ИСО 7498) «Системы обработки информации. Взаимосвязь открытых систем. Базовая эталонная модель». (См. также рекомендацию Х.200 МККТТ).

ИСО/ТО 8509- 87 «Системы обра-ботки информации. Взаимосвязь открытых систем. Соглашения по услугам». (См. также ре комендацию X.2I0 МККТТ) 1\

1

До прямого применения данного документа 5 качестве государственного стандарта распространение его осуществляет секр«тарнат'ТК 22 «Информационная технология».

Страница 9

ГОСТ Р ИСО МЭК 9646—5—93

ГОСТ Р ИСО/МЭК 9646—1—93 «Информационная технология. Взаимосвязь открытых систем. «Методология и основы аттестационного тестирования Часть 1. Общие концепции» (См. также рекомендацию Х.294 (1991) МККТТ).

ИСО/МЭК 9646—3—92 «Информационная технология. Взаимосвязь открытых систем .Методология и основы аттестационного тестирования. Часть 3. Комбинированная древовидная и табличная нотация». (См. также рекомендацию Х.292 (199!) .МККТТ)11.

ГОСТ Р ИСО/МЭК 9646—2—93 «Информационная технология. Взаимосвязь открытых систем. Методология и основы аттестационного тестировании. Часть 2. Спецификация абстрактного тестового комплекта» (См. также рекомендацию X.29I    (1991)

МККТТ)

ГОСТ Р ИСО/МЭК 9646—4—93 «Информационная технология. Взаимосвязь открытых систем. Методология и основы аттестационного тестирования Часть 4. Реализация тестов» (См. также рекомендацию Х.293 (1991) МККТТ)

3 ОПРЕДЕЛЕНИЯ

Для целей настоящего стандарта применимы вес определения, приведенные в ГОСТ Р ИСО/МЭК 9646—1. Приводимые в данном разделе определения также применимы к настоящему стандарту.

3.1    Администратор клиента по тестированию — лицо, назначенное организацией клиента ответственным за все вопросы, относя-шнеся к аттестационному тестированию ТР.

3.2    Администратор испытательной лаборатории — лицо, назначенное испытательной лабораторией ответственным за все вопросы, относящиеся к операциям испытательной лаборатории.

3.3    Оператор тестирования — лицо или лица, назначенные испытательной лабораторией ответственным (и) за прогон аттестационных тестов относительно ТР.

3.4    Оператор ТС — лицо или лица, назначенное организацией клиента ответственным (и) за работу ТС во время операционного тестирования.

3.5    Согласованный выход (СВ) (из процесса оценки соответствия) — момент времени, в который испытательная лаборатория и клиент совместно решили закончить процесс оценки соответствия.

3

1

До прямого применения данного документа в качестве государственного стандарта распространение его осуществляет секретариат ГК22 «Информационна» технология»

» Згк. 250

Страница 10

ГОСТ Р ИСО'МЭК 9646—5—93

3.6    Контрольный список испытательной лаборатории — запись относящейся к тестированию информации, предоставляемая клиенту испытательной лабораторией на фазе подготовки к тестированию процесса оценки соответствия.

3.7    Контрольный список клиента запись относящейся к тестированию информации, предоставляемая клиентом для испытательной лаборатории на фазе подготовки к тестированию процесса оценки соответствия.

4 СОКРАЩЕНИЯ

4.1    Сокращения, определенные в ГОСТ РИС О/ МЭК 964 6 — 1

Для настоящего стандарта применимы следующие сокращения:

АСП — абстрактный сервисный примитив.

ВОС — взаимосвязь открытых систем.

ДИРПТ — дополнительная информация о реализации протокола для тестирования.

ЗСРП — заявки о соответствии реализации протоколу.

ЗСС - заявка о соответствии системы.

КАТ — комплект абстрактных тестов.

КВАТ — комплект выбранных абстрактных тестов.

КПВТ — комплект параметризованных выполнимых тестов.

МАТ — метод абстрактного тестирования.

ОАТП — отчет об аттестационном тестировании протокола.

ОАТС — отчет об аттестационном тестировании системы. ПБД-АУТ — протокольный блок данных административного управления тестированием.

ПДУ -- пункт доступа к услугам.

ПКН — пункт контроля и наблюдения.

СТ — средства тестирования.

ТОВ — тест основной азаимосвязи.

ТР — тестируемая реализация ТС — тестируемая система.

4.2    Прочие сокращения

Для настоящего стандарта применимо также следующее сокращенно:

СВ — согласованный выход.

4

Страница 11

ГОСТ Р ИСОМЭК »М6~5-93

5 ОЫЦЕЕ ОПИСАНИЕ ПРОЦЕССА ОЦЕНКИ СООТВЕТСТВИЯ

5.1 В а с д с н н е

На рисунки I показан процесс оценки соответствия. В 6.3 ГОСТ Р ИСО/МЭК 9646—1 содержится общее описание процесса оценки соответствия. В данном разделе в качестве руководящего материала приведено общее описание трех фаз этого процесса (подготовка к тестированию, операции тестирования и разработка отчета о тестировании)

— ПОТОК    ««формяци*,

)    -    ПОТОК    WW$*JpWKj*H    .

Рисунок I — вил происСса ои^нки Сомтвстст bum

5.2 Под готовка к тестированию

Фаза подготовки включает в себя:

a)    общие административные таги, например, подготовка задачи клиентом, подготовка документов испытательной лабораторией. описывающих общую политику, понятия и условия проведения оиераций тестирования, а также подготовка клиентом информации о ТС;

b)    проверка полноты документации, разработанной испытательной лабораторией (форма ДИРГ1Т), клиентом (ЗСРП, ДИРПТ, ЗСС), а также обмен контрольными списками между испытательной лабораторией и клиентом;

э

Страница 12

ГОСТ Р ИСО/МЭК 9Мв-5~М

c)    анализ конфигурации ТС и выбор стандарта(ов) по аттестационному тестированию по протоколу (ам) ВОС, подлежащему (нм) тестированию, либо соглашение о том, что как ТС. так Я СТ испытательной лаборатории способны обеспечить методы абстрактного тестирования или использовать согласованный выход в случае невозможности достигнуть соглашения;

d)    подготовка ТС и СТ для тестируемой конфигурации, которая образуется в результате выбора метода абстрактного тестирования.

Требования по подготовке к тестированию для испытательной лаборатории и клиента приведены в разделе 6.

5.3Операции тестирования

В ходе второй фазы выполняются операции тестирования. К ним относятся:

a)    рассмотрение статического соответствия, в ходе которого выполняется подробный анализ ЗСРП и ДИРПТ;

b)    выбор и параметризация теста применительно к комплекту выполнимых (или абстрактных) тестов; здесь определяется комплект параметризованных абстрактных п-стоа, которые 6yiyT выполняться;

c)    одна или несколько тестовых компаний, в ходе которых осуществляется прогон:

1)    тестов основной взаимосвязи (факультативно);

2)    теегов функциональных возможностей;

3)    тестов поведения.

Если выполнение операций тестирования сталкивается с трудностями, то клиент и испытательная лаборатория могут согласовать репетицию выполнения тестовой кампании полностью или частично. Они могут также осуществить согласованный выход из процесса оценки соответствия.

П р н и о ч а к и о — Причины сог.часоплннто выхода д<жуиенгнру<отся п неформальном отчстс о тестировании.

Требования к выполнению операций тестирования со стороны испытательной лаборатории и клиента приведены в разделе 7.

5.4 Р а зр а ботк а отчета о тестировании

После завершения операций тестирования наступает третья фаза: выполняется оценка соответствия реализации ВОС. Эта оценка регистрируется в отчетах о тестировании на соответствие системе н протоколу, формы которых приведены в приложениях А и В соответственно.

Требования к разработке отчета о тестировании приведены в разделе 8.

С

Страница 13

ГОСТ P. JtCO/МЭК 9646—5—93

6 ПОДГОТОВКА К ТЕСТИРОВАНИЮ

6.1 Введение

В разделе 6 определены требовании к фазе подготовки тестирования, относящиеся как к испытательной лаборатории, так и к клиенту. На рисунке 2 показана фаза подготовки процесса'оценки соответствия. В этой фазе обе стороны озабочены Text, чтобы необходимая документация (включая ЗСС. ЗСРП. ДИРПТ и контрольные списки) была заполнена к обоюдному согласию; а частности, те характеристики ТС, которые определяют ее конфигурации и влияют на выбор методов тестирования, должны быть точно

OVV*U«“* tfCIKOMNM* ICM ЖгмС" 3i

■    -    ПО’ОК    **»©0РМ»ЦИ«\

ПО'ОК ин©0|1*««ии*.

Ф - лупЮ гч}**-*гк* р«шо«*й

Рисунок 2 — Подготовка к тестированию

определены. Предполагается, что требования к тестируемости ТС обеспечены клиентом до его контакта с испытательной лабораторией.

В качестве предпосылки к операциям тестирования клиент, и испытательная лаборатория согласовывают метод абстрактного тестирования и условия проведения тестовой кампании. При. ДОС*

Страница 14

ГОСТ I» ИСО/МЭК 9646—5—93

тижении соглашения испытательная лаборатория выбирает СТ для выбранного метода тестирования и переходит к фазе операций тестирования; в противном случае может быть предпринят выход из тестирования.

6.2Требования к тестированию ТС

6.2.1    Роль клиента

6.2.1.1    Общие положения

Клиент должен обеспечить, чтобы ТС была тестируема с использованием, ъо меньшей мере, одного из методов абстрактного тестирования, определенных в ГОСТ Р ИСО/МЭК 9646 —2.

Примечание — Настоящая часть ИСО/МЭК 9646 не налагает на клиента ограничений d вопросе согласования какого-либо конкретного метода до тех пор. пока имеется возможность использовать один метод путем соотвегст-«укиисй организации ТС.

Каждый из методов, описанных в разделе 12 ГОСТ Р ИСО/ МЭК 9646—2, предъявляет конкретные требования к ТС относительно ее тестируемости. Эти требования варьируются в зависимости от метода тестирования.

Для того метода, который клиент объявляет пригодным для тестирования ТС, он должен предусмотреть, чтобы ТС обеспечивала необходимые средства контроля и наблюдения и чтобы она могла выполнять соответствующую процедуру скоординированного тестирования.

В следующих четырех подразделах определяются дальнейшие требования к тестируемости для каждого из методов абстрактного тестирования.

<Ь£.1.2 Метод локального тестирования

<6.2.1.2.1 При использовании локального метода тестирования -клиент должен обеспечить аппаратную реализацию верхнего интерфейса ТР'и его подключение к тестирующей системе.

Примечание — Единственные требования состоят в том. чтобы этот квтгрф>гЙ1: был стандартным и чтобы обеспечивалось четкое преобразование между соответствующими ДСП и »гим аппаратным интерфейсом.

6.2.1.2.2 К клиенту не предъявляется никаких требований по процедурам скоординированного тестирования.

6.2.1.3 М его д распределенного тестирования

6.2.1.3.1    Мри использовании метода распределенного тестирования клиент должен позаботиться о том, чтобы ТС содержала средства генерации АСП и индикации их приема для соответствующих пунктов контроля и наблюдения (ПКИ), подходящих для данной ТР.

я

Страница 15

rocr p исо/мэк 'jsw-ъ 1т

Примечания

1    Единственные требования состоят в том. чтобы в ТС были реализованы средств» контроля и наблюдений результатов действия соответствующих АСП к чтобы верхняя сервисная граница ТР представляла собой либо интерфейс с иОльзователем-человека, либо интерфейс со стандартным языком программирования.

2    Любая реализация может удовлетворяй, этим требованиям при условии, что соответствующие ДСП могут генерироваться и недвусмысленно обнаружн-лат!>ся. Примерами таких реализаций служат нажимаемые’ клавиши, наблюдение и j.oiiTjioib .ulieIнмii протоколов BOC, нсполыую;ии\ сервисные примимит. наблюдение действий периферийных устройств и др. Между этими средствами в ТС и АСП возможны отображения «один к одному», «один к пескольинм» или ♦ HI-CKO.lt.hO к одному».

6.2.1.3.2    Клиент должен позаботиться о том, чтобы оператор ТС мог уведомить оператора тестирования (в испытательной ла бора тории) о появлении событий АСИ в ТС, если это требуется процедурами скоординированного тестировании

Примечание - Способы передачи испытательной лаборатории у ведом-.тений о появлении сгенерированных к наблюдаемых событий АСП не входят » предмет рассмотрсиия настоящего стандарта. но они могут быть обсспеченм путем использовании отдельного канала обмена данными, например речевого, телефонного, канала данных и др. Способ обмена данными представляет собой часть неформальных процедур скоординированного тестирования и указывается клиентом II его контрольном списке, передаваемом не питательной лабораторией для оценки соответствия.

6.2.1.4 Метод скоординированного тест кроиа-н и я

6 2.1.4.1 При использовании метола скоординированного тестирования клиент должен поззботиться о том, чтобы ТС могла обеспечить. но меньшей мерс, один верхний тестер, который представляет собой реализацию стандартного протокола ад чин истратив ного управления тестированием (ПАУТ), соответствующего данной ТР.

Прммечан ие — Это требование не предполагает реализацию п ТС реальной сервисной границы ВОС с реальными сервисными примнтинамн.

6.2.1.4.2    После того ках в процессе подготовки к тестированию будет выбран КАТ для метода схоорднниронанного абстрактного тестирования, клиент должен позаботиться о том, чтобы ТС обеспечила верхний тестер, который реализует ПАУТ для данного КАТ.

Примечание — При подготовке к тестированию клиент может проконсультироваться у испытательной лаборатории по вопросам обеспечения »><>■.«> требовании Клиент может также предпочесть реализовать верхний тестц» п НАУТ для конкретного КЛТ в проверяемой ТР. прежде чем он обратили к «с питательной лаборатории с запросом оценки соответствия

1

Страница 16

ГОСТ Р НСО/МЭК 9646--5—93

(>.2.1.5 М е т о О удаленного тестирования ‘6:?.!.б.] При использовании метода удаленного тестирования после того, как будет выбран КАТ при подготовке к тестированию, клиент должен задокументировать в ДИРПТ ту степень контроля и наблюдения, которую могут достичь в ТС процедуры скоординированного тестирования, которые записаны неформально в стандартном КАТ.

Примечание — Из всех методов тестирования данный метод излагает ни 10 iii.iiMi HbUi ii- ограничения Предполагайся, однако, что 1C буич функиио-п цимпп- я с<от«пствии с тем. чго ьт явлено п ДИРПТ Эти лаяпмк чогут предполагать некоторую степень контроля, например, место, где ТС должна инициировать некоторое событие.

6.2.1    5.2 Для тех событий тестирования, для которых в ДИРПТ заявлена степень контроля или наблюдения, клиент должен обеспечить, чтобы о появлении в ТС таких событий оператор ТС уведомлял оператора тестирования (в той же испытательной лаборатории), если это требуется процедурами скоординированного тестирования.

Примечание — Способы передачи испытательной лаборатории уведом-.4iкип о иояменнн <"1’1крм|м>1«аньых и наблюдаемых тестовых событии не олодят п предмет рассмотрения настоящего стандарта, но их можно обеспечить с помощью отдельного канала Связи, например, речевого, телефонного ИДр канала данных и др. Способ осуществлении такой саядн составляет часть неформальных процедур Скоординированного тестирования и указывается клиентом и своем мк;рольном синеве при его owiiv.wVl «сиытлельичч лаборатории wx оцсинм СООТМ'ТСТВИЯ

6,3 Взаимодействие между испытательной ла-6ир а т о р и с и и клиентом

6.3.1    Контрольные списки испытательной лаборатории и клиента'

6.3.1.1    Введение

Во время подготовки к Операции тестирования испытательная лаборатория и клиент обмениваются относящейся к тестированию информацией с целью согласования определения ТР. выбора методами) абстрактного тестирования и комплекта(ов) абстрактных тестов для попользования в процессе тестирования. Эта информация, часть которой может быть собрана в результате обсуждений, записывается в контрольных списках испытательной лаборатории и клиента. В результате обмена контрольными списками и их рассмотрения обе стороны могут придти к соглашению о возможности или невозможности перехода к фазе подготовки тестирования. Соглашение может быть не достигнуто, если испытательная лаборатория окажется неспособной предложить услуги тестирования. сопмсстимые с представленной клиентом ТР. Если обе

Ю

Страница 17

ГОСТ Р ИСО/МЭК 964S-S—93

стороны согласились продолжать работу, они готовят документы, необходимые для оценки соответствия (см. 6.4).

6.3. \.2 Р ол ь испытательной лаборатории.

В фазе подготовки к тестированию процесса оценки соответствия испытательная лаборатория должна предоставить клиенту свой контрольный список, содержащий, по меньшей мере, следующую информацию:

a)    требования, предъявляемые испытательной лабораторией к клиенту относительно обеспечения ЗСС, ЗСРП и ДИРПТ;

b)    заявка о согласованности с настоящим стандартом;

c)    метод(ы) абстрактного тестирования, обеспеченный(ые) для каждого из протоколов ВОС, который предлагается для тестирования;

d)    заявка о соответствии стандартам по аттестационному тестированию. на соответствие которым предлагается тестирование;

e)    заявление об обеспечении нлн необеспечении испытательной лабораторией услуги исчерпывающего тестирования в соответствии с требованиями каждого применимого стандарта по аттестационному тестированию и ГОСТ Р ИСО/МЭК 9646—2;

f)    ограничения нижнего(нх) тестера (ов) (при его (их) наличии), налагаемые на обеспечиваемые методы тестирования ТС клиента;

g)    спецификация верхнего тестера (в 'применимых случаях) и процедур скоординированного тестирования для обеспечиваемых методов тестирования ТС клиента;

h)    описание процедур испытательной лаборатории, относящихся к прогону тестов в ходе тестовой кампании и к клиенту, в особенности тех. которые должны выполняться оператором ТС;

i)    ссылки на все документы, которые должны использоваться и разрабатываться испытательной лабораторией в ходе процесса оценки соответствия.

Прписчант — Ислшиильиаи лаборатория может нечастаmnii kw-*И*у:

я) информацию об услугах тестирования, предлагаемых л л я набора протоколов ВОС, пит?ресующих клиента;

b)    помощь в реализации верхнего тестера (при его использовании) для выбранного метода абстрактного тестирования;

c)    перечень тех. с «ем необходимо контактировать для получения форм ДИРПТ и другой необходимой информации;

d)    оценки времен, необходимых для выполнения фаз операций тестирования и psIработки отчетов о тестировании процесса оценки соответствии;

о mi к) об аккредитации нс-пы тельной лаборатории (при необходимости).

6.3.1.3 Роль клиента

В фазе подготовки к тестированию процесса оценки соответствия клиент должен предоставить испытательной лаборатории свой

11

Страница 18

ГОСТ Р ИСО'МЭК 9646—5—93

контрольный список, содержащий, по меньшей мере, следующую информацию:

a)    заявка о согласованности с настоящим стандартом;

b)    определение, какая часть ТС предлагается в качестве ТР и какие протоколы должны тестироваться;

c)    заявка о тестируемости ТС. основанная на конкретном (ых) методе(ах) абстрактного тестирования и/или на стандартах но аттестационному тестированию;

(I) перечень тех процедур скоординированного тестирования, которые пригодны для использования с этой ТР и которые соответствуют предложснному(ым) методу(ам) абстрактного тестирования.

11р it м <• ч а и н е Клиент может ripeдоставить кспытэтглыюй лаборатории:

a)    информацию о любых физических требованиях к ТР (например, занимаемая площадь, кондиционирование и лр), при необходимости, и любую другую нрамическую информацию, которая может потребоваться в процессе оценки соответствия;

b)    перечень тех, с кеч необходимо контактировать и процессе оценки соответствии

(>.3.2 Соглашения о мет<*)а.к тестирования и выбор тестового комплекта

6.3.2.1    Роль испытательной лаборатории

Испытательная лаборатория должна приспособить выбранный

клиентом метод абстрактного тестирования к каждому протоколу предложенной ТР (см. 6.3.2 2) к выбрать соответствующий эталонный стандартный КАТ (включая соответствующую спецификацию ПЛУТ), который должен использоваться в процессе оценки соответствия.

Дли каждого выбранного стандартного КАТ испытательная лаборатория должна идентифицировать и использовать СТ. согласованные со стандартным КАТ н ГОСТ Р И СО/М ЭК Ов-46 4.

Примечание — Используемый(ые) стандарт(ы) но аттестованному тес-

тнрочямию должеи(ны| иметь наибольший мл данный коми т статус сглндэрчиэ цни feu. раздел 5 ГОСТ Р ИСО/МЭК 9646-2].

6.3.2.2    Я ои ь клиента

Клиент должен рассмотреть контрольный список испытательной лаборатории и выбрать метод абстрактного тестирования, подлежащий использованию для каждого протокола предложенной ТР в соответствии с заявками о тестируемости ТС и с услугами тестирования. предложенными испытательной лабораторией.

Примечания

I Клиси*’ может no eiuH'wy ж«ланни1 ьмбрлть гакж! №*1од(ы) абстрактного /естнропаннч, которшЦые) ей предъявляет никаких дополнительных требований к ТС. кроме lex. которые содержатся з стандартах ВОС и СООтаегетвие которым

Страница 19

ГОСТ Р ИСО/МЭК 9646-5-93

ТС заявлено В подобных случаях клиент должен выбрать такую испытательную лабораторию, которая обеспечивает услуги исчерпывающего тестирования (См. 1172 ГОСТ Р ИСО/МЭК 5646—2 и 9.1 настоящего стандарта».

2 ТР может содержать один логический объект протокола пли несколько таких объектов Если ТР является многопротокольной, то методы оамоуропнего «строенного тестирования должны использоваться нарастающим способом. (См. 7 6 ГОСТ Р ИСО/МЭК 9646—1).

1 При йшол'лопдинн мегодоп встроенного одиоуротию тестировании К\Т ориентирован на отдельный протокол В ОС.

4 В ТС может быть определено несколько ТР, если в одной и тон же ТС для различных комбинаций протоколов и методой тестирования необходимо вы-• ...шить «имолы.и опенок соответствия

63.2.3    Совместная роль

После того, как обе стороны рассмотрят информацию, содержащуюся в контрольных списках, для продолжения процесса опенки соответствии обе стороны должны согласовать:

и} точность и достаточность информации, предусмотренной » контрольных списках;

b)    определение ТР;

c)    метод (и) абстрактного тестирования и соответствующий (не) КАТ. подлежащие использованию дли процесса оценки соответствия.

Если соглашение не может быть достигнуто, должен быть пред-ирч.игг гог.1<н'0»;.г1иый выход для завершения процесса опенки со ответствия. Если же соглашение достигнуто, то все согласованное должно быть зарегистрировано в отчете об аттестационном тестировании системы (ОАТС), создаваемом в конце процесса оценки соответствия.

6.3.3    АОм<шчстративное управление техническими вопросами

Не существует общих требований относительно процедур разрешения технических вопросов между клиентом и испытательной лабораторией, которые могут возникнуть в процессе оценки соот ветствня. Однако при обнаружении различий между стандартом по аттестационному тестированию и стандартом по протоколу и разрешении проблемы предпочтение следует отдать стандарту’по протоколу.

Примечание - Неразрешимые вопросы -технического характера, относи и иктя и инпрнрпаи.ш соот явствующих стандартов, могут бшь адресованы и соотвпс- вую.иую онр1-ле.1и-к.<ьнуи> группу по стандартам В ОС

I '{,. • \ м« ii г и ц и я п о оценке с о о т в е т с т в и я

М.] Общее описание

После тою, как испытательная лаборатория и клиент согласуют определения 'ГР. метод(ы) абстрактного тестирования и ком» лскт(ы) абстрактных тестов для использования в процессе оценки соответствия, они обмениваются подробной информацией относи-

13

Страница 20

ГОС Г P ИСО/МЭК 9Мв-5-93

Тельно ТС Эта информация содержится в четырех документах, относящихся к подготовке тестирования: ЗСРП, ДИРПТ, ЗСС и заявке о реализации ПАУТ. В четырех следующих подразделах устанавливаются требования к клиенту и испытательной лаборатории относительно разработки этих документов и обмена ими.

6.4.2    Заявка о соответствии реализации протоколу (ЗСРП)

0.4.2.{Содержимое ЗСРП

Подробная информация о роли и назначении ЗСРП приведена в 5.4 ГОСТ Р ИСО/МЭК 9646- I и и основных руководящих материалах по построению формы ЗСРП. приведенных в приложении С .ч ГОСТ 11СО/МЭК 9646—2.

Форма 3CPII содержится в каждом стандарте по протоколу ВОС и в стандарте по синтаксису передачи, который соответствует требованиям ГОСТ Р ИСО/МЭК 9646 2 на тестируемость.

1.4.2.2    Рол t, испытательной лаборатории

В вопросах обеспечения клиента формой ЗСРП требования к непитательной лаборатории не предъявляются. Однако исныта-те.шиая лаборатория можег, при необходимости, обеспечить копии соответствчющнх форм ЗСРП.

'1.4.2.3 Роль клиента

Клиент должен обеспечить ЗСРП для каждого стандарта по протоколу ВОС (и для каждого стандарта по синтаксису передачи в случае его применения), который реализован в ТР и на соответствие которому должно проводиться тестирование.

Клиент должен заполнить формы ЗСРП из соответствующих стандартов ВОС. Требования к информации, содержащиеся з ЗСРП, устанавливаются в соответствующих стандартах.

6.4.3 Дополнительная информация о реализации протокола для тестирования (ДИРПТ)

6.4.3.1    Содержимое ДИРПТ

Роль и назначение ДМР1П приведены в 6.2 ГОСТ Р ИСО/МЭК 9546 — 1. Требования и другие руководящие материалы по структуре и содержимому ДИРПТ приведены в приложениях С и D настоящего стандарта.

6.4.3.2    Роль испытательной лаборатории

Испытательная лаборатория должна разработать форму

ДИРПТ для каждого стандартного КАТ, предлагаемого для тестирования, в соответствии со скелетом формы, определенным в приложении С.

Каждая форма ДИРПТ должна содержать расширенную форму ДИРПТ. прилагаемую к СТ н соответствующую эталонному стандартному КАТ Она должна содержать также вопросы, необходимые для получения всей информации относительно ТС. ТР и

Страница 21

ГОСТ Р ИСО'МЭК 9646-5-93

соответствующих параметров КАТ, которая отсутствует в соответствующих ЗСС и 3CPI1. но которая необхотнма испытательной лаборатории для прогона выполнимых версий стандартных КАТ.

Испытательная лаборатория должна представить клиенту форму ДИРПТ для каждого КАТ. который должен использоваться в процессе оценки соответствия.

Примечание — На каждый протекал имеется один стандартный КАТ

прл Mi-fo.tax oaiivypnpH'.-Foro «1 встрсгнмого oai»o>'p<wnrP*)-o тестирования Таким образом, при нсполыомнии mix методов на каждый проюкол имеется одна форма ЛИРПТ

6.4.3.3 Роль клиента

Клиент должен обеспечить ДИРПТ на каждый КАТ. используемый при тестировании, путем заполнения соответствующей формы ДИРПТ, представленной испытательной лабораторией.

Примечание Если напрошенная мнформацив слишком обширна, в ДИРПТ можно ..зть ссы‘к> на другие документы. сь.нржан.ие иеобхчдиму информацию

0 4 4 Заявка о нютеега пии /истемы (ЗСС)

•>.4.4.1 Содержимое ЗСС

Роль н назначение ЗСС кратко упоминались т? 5.4 ГОСТ Р ИСО/МЭК 9646-*1. Формат ЗСС не стандартизован, однако ЗСС должна содержать, как минимум, следующую информацию:

a)    информацию о ТС н клиенте:

1)    административную информацию, идентифицирующую клиента;

2)    системную информацию, идентифицирующую ТС. например, наименование и номер версии;

b)    информацию, относящуюся а тем протоколам в ТС. для которых предусмотрена ЗСРП:

1)    идентификацию о стандартах по протоколу ВОС (и синтаксис передачи ВОС). включая номера версий;

2)    ссылку на соответствующую ЗСРП.

ЗСС факультативно может содержать сведении о том. доступны ли ОАТС и ОАТП, полученные из предыдущей оценки соответствия.

6.4.4.2    Роль испытательной лаборатории

К испытательной лаборатории не предъявляется требований по обеспечению формы ЗСС. Сама ЗСС содержит независимую от теста информацию относительно ТС.

6.4.4.3    Иол ь клиента

Клиент должен представить испытательной лаборатории ЗСС и соответствии с 6.4.4.1.

IS

Страница 22

ГОСТ Р ИСО/МЭК 9646-5-93

6.4.5    Заявка о реализации ПАУТ

6.4.5.1    Содержимое заявки о реализации ПАУТ

Роль н назначение заявки о реализации ПАУТ определены в

разделе 14 ГОСТ Р ИСО/МЭК 9646—2. Форма заявки о реализации ПАУТ содержится в части ПАУТ каждого стандарта но аттестационному тестированию, который использует метод скоординированного абстрактного тестирования.

6.4.5.2    Роль испытательной ,лаборатории

Испытательная лаборатория должна представить клиенту форму заявки о реализации ПЛУТ для каждого КАТ, основанного на методе скоординированного абстрактного тестирования, который должен использоваться в процессе оценки соответствия.

6.4.5    3 Р о л ь клиента

Клиент должен обеспечить заявку о реализации ПАУТ для каждого КАТ, который основан на методе скоординированного абстрактного тестирования и который должен использоваться для тестирования. Эго выполняется путем заполнения соответствующей формы, представленной испытательной лабораторией.

7 ОПЕРАЦИИ ТЕСТИРОВАНИЯ

7.1    Введение

В разделе 7 определены требования к операциям тестирования. На рисунке 3 показаны типичные операции тестирования. Для целей данного раздела предполагается, что однопротокольная ТР тестируется с использованием одного стандартного КАТ, одной ЗСРП н одной ДИРПТ. Однако и данном разделе не иctciючается и многопротокольная ТР, которая тестируется нарастающим способом с использованием набора одиопротокольных стандартных КАТ.

Если многопротокольная ТР должна тестироваться нарастающим способом, то стандартный КАТ будет использоваться для каждого тестируемого протокола и, тем самым, для каждого протокола будет своя ЗСРП и для каждого соответствующего стандартного КАТ — своя ДИРПТ.

7.2    Рассмотрение статического соответствия

7.2.1    Роль испытательной лаборатории

7.2.1.1    При рассмотрении статического соответствия испытательная лаборатория должна проанализировать ЗСРП согласно следующим критериям:

а) ЗСРП должна быть непротиворечивой;

Страница 23

ГОСТ Р ИСО/МЭК М4в-5-Ю

^зс*эОогowm

нчиИ

!Ш-СиШИИ« *•* иурим* M»»wtctw»n

■ ■ ■    Г>МОк vnpier»*^ua«" v*vJ*j(>rf4uvv

— »    - f»c»»or. И«*£орМ«14ИИ,

•    - iw**? ni)tWHI« (WUM/Й

Рисунок 3 — Типичны* операции тестирования

Ь) ЗСРГТ должна соответствовать требованиям к статическому соответствию, определенным в стандарте (ах) по протоколам BOCf, на соответствие которому заявлена ТР.

7.2.1.2 Чтобы убедиться во взаимной согласованности ЗСРП и требований к статическому соответствию, должны быть проведены, как минимум, следующие проверки:

•а) дли каждой позиции, которая н колонке «статус* указана как обязательная, проверить, что позиция указана как обеспечиваемая;

Ь) для каждой позиции, которая указана как факультативная н из которой может быть обеспечено определенное подмножество, проверить, что индикации обеспечения соответствуют требованиям;

17

Страница 24

ГОСТ Р ИСО'МЭК »Мв-5-93

c)    для каждой позиции, которая в колонке «статус» обозначена как условная, оценить условия для определения эффективного статуса и выполнить проверки, соответствующие этому статусу;

d)    провести дополнительные проверки статического соотвегст-ипн. ;;j>7.)pi,ie u «сьзнои .ни.' о ipe uVis пы л самой форме ЗСГп

7.2.1    3 Никаких дополнительных проверок не требуется для тех позиций, которые в колонке «статус* обозначены как:

a)    неквалифицированные функциональные возможности (бу-лево: выполнять или не выполнять);

b)    неиспользуемые.

7 2.1.4 Испытательная лаборатория должна также проверить согласованность информации, содержащейся в документах ЗСРП и ДИРПТ. представленных клиентом.

7.2.1.5 Испытательная лаборатория должна проинформировать клиента о результатах рассмотрения статического соответствия, прежде чем она продолжит процесс оценки соответствия.

7.2.2    Роль клиента

Клиент должен проанализировать результаты рассмотрения статического с<ютветствия.

7.2.3    Совместная роль

teлн результаты рассмотрения статического соответствия показали. что с точки зрения испытательной лаборатории или клиента продолжение тестирования будет непродуктивным, они могут пр01прп>1ять согласованный выход.

7.3    Выбор теста

7.3.1 Роль испытательной лаборатории

Испытательная лаборатория должна выбрать все те абстрактные тестовые примеры, которые соответствуют ТР. основываясь на информации, содержащейся в ЗСРП н ДИРПТ, в соответствии с документацией СТ и с требованиями эталонного стандартного КАТ. Это означает, что испьмательная лаборатория должна выбрать следующие тестовые примеры при условии, что они тестируемы согласно ДИРПТ:

а) все тестовые примеры функциональных возможностей для обязательных функциональных Возможностей;

М все шпоны.: i*pi,v* pw ф>н:.на011альиых жнчожностси мч факультативных илн условных функциональных возможностей, которые обеспечиваются ТР согласно ДИРПТ;

c)    все тестовые примеры повеления лля обязательных функциональных возможностей;

<1) все тестовые примеры поведения, которые согласуются с факультативными или условными функциональными возможностями, обеспечиваемыми ТР согласно ДИРПТ.

Страница 25

ГОСТ Р ИСО'МЭК !HH6-S-93

Выбранный набор абстрактных тестовых примеров представляет собой комплект выбранных абстрактных тестов (КВЛТ) для данной 'ГР. Фактически КВЛТ может и отсутствовать (см. раздел 5 ГОСТ ИСОуМЭК 9646- 4).

Если стандартный КАТ определяет перечень тестов основной взаимосвязи (ТОВ) и клиент желает выполнить тестирование основной взаимосвязи, испытательная лаборатория должна выбрать перечисленный набор ТОВ для выполнения тспнровпния основной взаимосвязи в начале тестовой кампании.

7.3.2 Роль клиента

Клиент должен проинформировать испытательную лабораторию о необходимости тестирования основной взаимосвязи во время тестовой кампании.

Примечание — Если стандартный КАТ не идентифицирует перечень ТОВ. то испытательная лаборатории не сможет выполнить этот запрос

7.4 Параметризация тестов

7.4.1    Роль испытательной лаборатории

7.4.1.1    После того как при выборе тестов будет определен на-г>ор тестовых примеров. должна быть игпольэдол'м информации ДИРПТ для определения соответствующих значений каждого параметра в этих тестовых примерах в соответствии с документа-иней СТ и с требованиями эталонного стандартного КАТ. Образованный в результате комплект параметризованных выполнимых тестов (КПВТ) готов к выполнению, либо к тому, чтобы быть сгенерированным по запросу.

В процессе параметризации используется информация из ДИРПТ (и. возможно, из ЗСРП).

Примерами типов параметризации служат:

а) значения сетевых адресов;

Ь| значения идентификаторов оконечных пунктов соединения;

с) значения счетчиков;

<1* значения тайм-аутов;

е) стратегии кодирования.

Примечание- Этот перечень не яаляетси исчериыаамшпм

7.1.1.2    Иосю выполнения параметризации испытательная лаборатория должна позаботиться о том, чтобы все тестовые примеры КВ АТ содержались в КПВТ.

Примечание - Результаты параметризации должны быть пронерены как можно скорее до т<ио. как произойдет тестирование функциональных возможностей, например, во время тестирования основной взаимосвязи.

19

Страница 26

ГОСТ Р ИСО.МЭК 9W6-5-93

7.4.2 Роль клиента

В процессе параметризации тестирования х клиенту никаких требований не предъявляется.

7.5    В ер иф и к а ц и я процедур скоординированного тестирования

7.5.1    Введение

Некоторый уровень процедур скоординированного тестирования явно или косвенно определен о каждом стандартном КАТ. После выполнения процесса параметризации следует проверить способность СТ и КАТ использовать требуемые процедуры скоординированного тестирования для выполнения тестовой кампании.

7.5.2    Совместная роль

Если для тестовой кампании должен использоваться метод абстрактного тестирования, который не является методом локального или скоординированного тестирования, испытательная лаборатория и клиент должны неформально выполнить процедуры скоординированного тестирования.

Если должен использоваться метод скоординированного тестирования, испытательная лаборатория должна проверить реализацию ПАУТ в ТР. Это можно сделать, выбрав подходящие тестовые примеры из стандартного КАТ в соответствии с заявкой о реализации 11A VT и выполнив их относительно верхнего тестера.

Если должен использоваться метод локального тестирования, то верификация процедур скоординированного тестирования может быть выполнена испытательной лабораторией как часть процедур верификации СТ.

Если результаты вернф|гкацнн процедур скоординированного тестирования не удовлетворяют ни испытательную лабораторию, ни клиента, то независимо от метода тестирования тестовая кампания не должна проводиться.

7.6    Тестовая кампания

7.6.1    Введение

Тестовая кампания представляет собой процесс выполнения КПВТ относительно конкретной ТР и выработку информации, необходимой для журнала соответствия.

7.6.2    Роль испытательной лаборатории

7.6.2.1 Общие положения

Испытательная лаборатория должна обеспечить наличие С'Г и оператора тестирования в течение всего согласованного периода проведения тестовой кампании, должна привлечь все тестовые примеры КПВТ н выработать информацию, необходимую для журнала соответствие.

20

Страница 27

ГОСТ Р ИСО .МЭК 9640-5-9»

7.6.2.2    Тестирование основной взаимосвязи

Если ТОВ выбраны, испытательная лаборатория должна привлечь эти тесты до прогона последующих тестов функциональных возможностей и поведения. Она должна проинформировать клиента о результатах выполнения ТОВ до прогона других тестовых примеров.

Примечание — После анализа результатов выполнения ТОВ клиент может пожелать выполнить согласованный выход.

7.6.2.3    Ан а л из назначения вердиктов

Во время тестовой кампании испытательная лаборатория должна определить для каждого тестового примера в К В АТ, какой из следующих результатов пригоден:

a)    вердикт прохождения;

b)    вердикт безуспешности;

c)    вердикт незавершенности;

d)    ошибка абстрактного тестового примера;

e)    ошибка выполнимого тестового примера;

f)    ненормальное завершение тестового примера.

Для каждого тестового примера, имеющего ошибку, испытательная лаборатория должна указать в ОАТП. что данный тесто вый пример не был выполнен, и указать причину невыполнения.

Примечание- 1 -- Испытательная лаборатория должна провссти обновление стандартного КАТ, чтобы зафиксировать ошибку, »|сколи»уя соошетстпую-ишс процедуры быстрое» вн-омин изменений.

Для каждого тестовою примера, в результате выполнения которого появилась либо ошибка выполнимого тестового примера, либо ненормальное завершение тестового примера, испытательная лаборатории должна повторить прогон этого тестового примера. Если получен тот же результат, испытательная лаборатория должна отметить в ОАТП. что тестовый пример не был выполнен и указать причину невыполнения.

Для каждого тестового примера, результату которого назначен вердикт «не завершен», испытательная лаборатория должна, по меньшей мере, один раз повторить прогон этого тестового примера. Если в результате последующего выполнения назначен вердикт «прохождение» или «безуспешно», этот вердикт должен быть зарегистрирован в ОАТП. Если же в результате последующего (их) выполнения (ни) этого тестового примера назначен вердикт «не завершен» и поведение тестового примера такое же, как и при предыдущем выполнении, то в ОАТП должен быть зарегистрирован вердикт «не завершен».

Для каждого тестового примера, результату которого назначен вердикт «безуспешно», испытательная лаборатория должна опрс-

21

Страница 28

ГОСТ Р ИСО'МЭК ав46—5—93

делить, обусловлен ли этот вердикт неилентнфинированным тестовым событием в этом абстрактном тестоном примере. Если нет, испытательная лаборатория должна зарегистрировать н ОАТП вердикт «безуспешно» для данного тестового примера. Однако, если это так, то исиытательная лаборатория должна определить, является ли это ошибкой абстрактного тестового примера, то есть, было ли событие, которое согласуется с невдентифицированным тестовым событием, действительным согласно протоколу и следует ли его определять в этом абстрактном тестовом примере. Если да, то испытательная лаборатория должна отметить в ОАТП. что данный тестовый пример не был выполнен и указать причину невыполнения.

Анализируя журнал соответствия относительно конкретного тестового примера, испытательная лаборатория может обнаружить такие значения в ПОД. полученных СТ. которые не были яи-но проверены в этом тестовом примере. Если абстрактный тестовый пример не содержит явных проверок этих значений, то испытательная лаборатория не должна изменять вердикта, назначенного в результате своего анализа.

Примечание 2 — Любые наблюдения, сделанные испытательной лабораторией, могут быть зарегистрированы в разделе 7 ОАТП (см приложение В), но они должны рассматриваться только как дополнии-льнам информации для клиента.

Прежде чем войти в фазу разработки отчета о тестировании, испытательная лаборатория должна проинформировать клиента о всех тех тестовых примерах, для которых она намерена записать в ОАТП вердикт «безуспешно».

7.6.2.4, Разработка журнала соответствия

Если клиент запросил журнал соответствия для проведения тестовой кампании, то испытательная лаборатория должна разработать его с тем, чтобы в нем можно было документировать результаты тестирования при каждом выполнении каждого тестового примера, запрошенного клиентом, включая любые повторные выполнения.

7.6.3 Роль клиента

7.63.1 Общие положения

Клиент должен обеспечить наличие СТ и, при необходимости, оператора СТ на весь согласованный период тестовой кампании. Клиент должен сотрудничать с испытательной лабораторией при внесении любых изменений в ТР или в ее функциональную среду, которые могут потребоваться для обеспечения выполнения всех тестовых примеров (см. 7.6.4 I), и должен рассмотреть документацию о всех таких изменениях.

22

Страница 29

ГОСТ Р ИСО'МЭК 9W6—*-93

7.6.32 Тестирование основной взаимосвязи

Если необходимо выполнить тестирование основной взаимосвязи, клиент должен рассмотреть результаты этого тестирования и проинформировать испытательную лабораторию при необходимости принятия согласованного выхода. Клиент должен сделать это до того, как испытательная лаборатория продолжит дальнейшее тестирование.

7.6.3.3 Анализ назначения вердиктов

К клиенту не предъявляется никаких требований относительно анализа назначения вердиктов. Однако во время тестовой кампании клиент может запросить повторный прогон любого тестового примера, который привел к вердикту «безуспешно», если он не убежден в том. что данный тестовый пример правильно продиагност и ров а л ошибку в ТР.

7.6.4 Совместная роль

7.6.4.1 Изменения функциональной среды тестирования

После начала тестовой кампании любые изменения в ТР. в ее функциональную среду, в нижний тестер и его функциональную среду или в верхний тестер могут вноситься только по взаимному согласованию между клиентом и испытательной лабораторией.

Для сохранения постоянства результатов тестирования такие изменения должны согласовываться только в том случае, если они не нарушэют результатов ранее выполнимых ь этой тестовой кам-«;: «•:: npv *сров Если изменения исобхоаимы ал и иго, чтобы пригнать тестовые примеры в выполнимой версии эталонного КАТ. го сам факт, что эти требования исходят из эталонного КАТ. является достаточной причиной полагать, что эти тестовые примеры не нарушают результатов ранее выполненных тестовых примеров.

Все изменения должны быть задокументированы испытательной лабораторией и рассмотрены как администратором испытательной чабораторин, так и администратором клиента по тестированию. На основе этого рассмотрения должно быть принято решение о дальнейшем выполнении тестовой кампании:

a)    повторный запуск;

b)    продолжение после необходимого пересмотра;

c)    прекращение по согласованному выходу.

7.6.4.2Анализ назначения вердиктов

Если клиент запросил повторный прогон тестового примера, который выработал вердикт «безуспешно», он должен вместе с испытательной лабораторией определить, был ли обусловлен этот результат некоторой ошибкой в ТР Если они не смогли определить наличие ошибки в ТР. испытательная лаборатория должна ис-

23

Страница 30

ГОСТ Р НСО/МЭК 9646—S—93

пользовать повторную процедуру для тестового примера, обусловившего вердикт «не завершен» (см. 7.G.2.2).

7.7 Согласованный выход из тестовой кампании

7.7.1    Использование согласованного выхода

Согласованный выход из тестовой кампании — это момент времени, в который испытательная лаборатория и клиент совместно решили, что полученные до этого времени результаты не оправдывают продолжения процесса тестирования. Запрос на согласованный выход может быть сделан любой стороной.

Если согласованный выход выполняется на основе обсуждения результата(ов) конкретного(ых) тсстового(ых) примера(ов). то он осуществляется до назначения вердикта (ов) рассматриваемому (ым) примеру(ам).

7.7.2    Роль испытательной лаборатории

Если обе стороны решили осуществить согласованный выход, то испытательная лаборатория должна предоставить клиенту по его запросу документацию, содержащую всю информацию, з’аре-гнетрированкую п процессе оценки соответствия. Эта документация должна, в случае запроса клиентом, содержать .журнал соответствия для выполненных тестовых примеров согласно 6.4 ГОСТ Р ИСО/МЭК 9646-4.

Кроме того, испытательная лаборатория должна представить неформальный отчет о тестировании, который не имеет статуса ОАТС или ОАТП. Он должен рассматриваться просто как руководящий материал для клиента по результатам выполненного тестирования. Этот неформальный отчет о тестировании должен указывать причину согласованного выхода.

Примечание — Если тестовая кампания заканчивается согласованным выхолим, то диагностическое тестирование может быть продолжено к клиенту может Сыть предоставлена последующая диагностическая трассовая информация, лополмителъмо к той. которая содержится а журнале соответствия. Однако этот вопрос не входи7 п предмет рассмотрения настоящего стан.гарта.

7.7.3    Роль клиента

После выполнения согласованного выхода никаких требований к клиенту не предъявляется.

Примечание — Клиент может запросить доку мента ипю. которая содержит информацию, зарегистрированную » процессе опенки соответствия, включая журнал соответствия.

7 7.-1 Совместная роль

После выполнения согласованного выхода аттестационное тестирование не может быть начато повторно, за исключением начала новой тестовой кампании или инициации нового процесса оценки соответствия.

24

Страница 31

ГОСТ Р ИСО'МЭК 9в46—3—W

8 РАЗРАБОТКА ОТЧЕТА О ТЕСТИРОВАНИИ

8.1    Отчеты об аттестационном тестировании

8.1.1    Введение

Лроцес оценки соответствия завершается разработкой испытательной лабораторией двух видов отчета для каждого протестированного протокола: отчета об аттестационном тестировании системы (ОАТС) и отчета об аттестационном тестировании протокола (OATI1).

Испытательная лаборатория может также разработать подробную диагностическую трассовую информацию, дополнительно к информация, содержащейся в журнале соответствия, которая по запросу может прилагаться к отчету'. Такая информация рассматривается как дополнение к самому отчету и настоящий стандарт не требует, чтобы испытательная лаборатория обеспечивала ее.

8.2 Отчет об аттестационном тестировании системы (ОАТС)

8.2.1    Роль испытательной лаборатории

Если при проведении тестовой кампании не был предпринят согласованный ныхол. испытательная лаборатории должна разработать ОАТС, в котором должны содержаться сводные результаты аттестационного тестирования ТС клиента. При этом испытательная лаборатория должна использовать форму ОАТС. приведенную в приложении А.

ОАТС должен содержать перечень эталонных стандартных КАТ, относительно которых проводилось тестирование, вместе с датой их опубликования, и в случае стандартов МСО/МЭК — подробные сведения о любых их изменениях или дополнениях, соответствие которым данной ТР заявлено.

В ОАТС должен быть кратко пояснен характер тестирования ВОС и. в частности, указано, что не гарантируется взаимодействие ТС. прошедшей все тесты, с другими реальными открытыми системами. (В форме ОАТС для этого предусмотрен отдельный абзац).

Если в каком-либо тестовом примере было выявлено несоответствие или если были замечены кахне-лнбо интересные моменты, в ОАТС должно быть четко указано об этом. Такие констатации должны быть ясными и недвусмысленными.

В 1.7 ОАТС должно быть записано соглашение между испытательной лабораторией и клиентом, определяющее ту часть или части ТС. которые рассматривались в процессе тестирования как ТР, и также используемый(ые) метод(ы) абстрактного тестирования и комплект (и) абстрактных тестов.

ОАТС должен быть предоставлен клиенту испытательной лабораторией в конце процесса оценки соответствия.

Страница 32

ГОСТ Р ИСО/МЭК 964в-5— Vi

8.2.2    Роль клиента

При разработке ОАТС к клиенту не предъявляется никаких требований.

Г11| и XI с ч а и и е — Клиент должен рассмотреть ТР н. в случае своего несогласия с испытательной лабораторией относительно его содержимого, записать свои замечании в 1 8 ОАТС .

8.2.3    Совместная роль

Испытательная лаборатория и клиент должны предусмотреть, чтобы d 1.6 ОАТС была записана информация, описывающая все ограничения, относящиеся к использованию клиентом ОАТС или к его разработке испытательной лабораторией.

8.3    Отчет об аттестационном тестировании протокола (ОАТП)

8.3.1 Роль испытательной лаборатории

Г1о запросу клиента испытательная лаборатория должна предоставить ему сопроводительный ОАТП для каждого протокола ВОС, аттестационное тестирование которого было проведено в процессе опенки соответствия. Испытательная лаборатория должна использовать форму ЗСРП. приведенную в приложении В.

В каждом ОАТП должен быть зарегистрирован статус соответствия ТР относительно протестированного протокола. В разделах 3 и 5 ОАТП испытательная лаборатория должна записать результаты рассмотрения статического соответствия. В разделе б испытательная лаборатория должна перечислить все абстрактные тестовые примеры в последовательности, определенной в стандартном КАТ. включая все выполненные ТОВ, с указанием следующей информации:

a)    абстрактные тестовые примеры, выбранные для включения в КПВТ;

b)    абстрактные тестовые примеры, для которых были выполнены соответствующие выполнимые тестовые примеры во время тестовой кампании.

Примечание — К тестовым примерам, которые были выбрани, но от* мечены в отчете как невыполнимые. относятся тс, которые дают в результате ошибку тестового примера или ненормальное завершение тестового примера;

c)    вердикты, назначенные тем тестовым примерам, которые были выполнены;

d)    наблюдения (при их наличии), выполненные испытательной лабораторией во время тестовой кампании.

Испытательная лаборатория должна обеспечить выполнение правильного набора тестовых примеров для данной ТР. Если в СТ выбран тест, который непригоден для данной ТР. то испытательная лаборатория не должна документировать в ОАТП результат

26

Страница 33

ГОСТ Р .ИСО/МЭК 9646—5—М

этого тестового примера, а указать, что тайный пример не был выполнен и пояснить причину.' Если в СТ не удалось выбрать тестовый пример, пригодный для данной ТР, то испытательная лаборатория должна отмстить в ОАТП, что тест выбран, но не выполнен, и указать причину.

Примечание ! — Испытательная лаборатория должна попытаться скорректировать ошибки либо в стандартном КАТ (направив извещение об ошибке), либо а СТ, а зависимости от ситуации.

Если в ОАТП не зарегистрирован вердикт «безуспешно», испытательная лаборатория должна заполнить раздел 4, указан, что «тестовая кампания не обнаружила ошибок в ТР». Если, кроме того, ЗСРП для данной ТР согласуется с требованиями к статическому соответствию, испытательная лаборатория должна заполнить раздел 1. указав, что «при оценке соответствия ТР не показала несоответствия заданному стандарту по протоколу».

По запросу клиента испытательная лаборатория должна также предоставить клиент)' любые необходимые или все журналы соответствия с руководящими материалами по :«х интерпретации

Примечание 2 — Как минимум, журналы соответствия должны быть ‘распечатаны на бумаге, одиако рекомендуете* подготовить их также з машинно-читаемом формате, пригодном для клиента

Испытательная лаборатория должна зарегистрировать в ОАТП срок хранения журналов соответствия.

Примечание 3 — Рекомендуется, чтобы до истечения срока хранения сохранялся либо упорядоченный список фактических тестовых событий, либо машимио читаемая версия журнала соотвсгствия (при со наличии).

8.3.2    Роль клиента

Клиент должен проинформировать испытателньую лабораторию о необходимости обеспечения ОАТП и соответствующих журналов соответствия.

Примечание - Клиент должен рассмотреть каждый ОАТ11 и, в случае несогласия с испытательной лабораторией относительно их содержимого, записать свои .замечания в раздел 1.5 ОАТП.

8.3.3    Совместная роль    1

Испытательная лаборатория и клиент должны обеспечить наличие в 1.4 ОАТП описания любых ограничений, относящихся к использованию клиентом ОАТП или к их снятию испытательной лабораторией.

27

Страница 34

ГОСТ Р ИСО'МЭК 9646-5—93

9 СОГЛАСОВАННОСТЬ

9.1 Роль испытательной лаборатории

Испытательная лаборатория, которая заявляет о согласии с настоящим стандартом, должна:

a)    для каждой ТС. оценку соответствия которой она проверила, выполнить требования, изложенные в подразделах «Роль испытательной лаборатории» и «Совместная роль» относительно:

1)    подготовки к тестированию согласно разделу 6 и приложению С,

2)    операций тестирования согласно разделу 7;

3)    разработка отчета о тестировании согласно разделу 8 и приложениям А н В;

b)    протестировать реализации протокола ВОС с использованием стандартов по аттестационному тестированию, согласующихся с ГОСТ Р ИСО/МЭК 9646—2. и с использованием СТ, соответствующих требованиям ГОСТ Р ИСО/МЭК 9646—4.

Кроме того, если испытательная лаборатория заявила об обеспечении услуги исчерпывающего тестирования для конкретного протокола ВОС. она должна обеспечить требования к услуге исчерпывающего тестирования, установленные в соответствующем (их) стандарте (ах) по аттестационному тестированию и в ГОСТ Р ИСО/МЭК 9646-2.

Примечания

1    Настоящий стандарт не требует, чтобы испытательная лабораторий ofioc-ттсчинала услугу исчерпывающего тестирования для каждого конкретного протокола.

2    В 11.7.2 ГОСТ Р ИСО;МЭК 9646—2 от разработчиков КАТ требуется, чтобы они предъявляли к испытательно»! лаборатории минимальные требования, позволяющие ей заявить об услуге исчерпывающего аттестационного тестирования соответствующего^» протокола(ов).

3    Если для одного н того же протокола имеется несколько стандартны! КАТ, го можно говорить о том. что испытательная лаборатория обеспечивает услугу исчерпывающего тестирования, даже сслн она выполняет требования к тякоЛ услуге только по одному из атих КАТ. Это может иметь место, например, если стандарт и рекомендации МКК1Т отличаются относительно одного и того же метода абстрактного тестирования и одного и того же протокола

Испытательная лаборатория, заявившая о соответствии стзи-ларту(ам) по аттестационному тестированию, используемому|ым) для оценки соответствия, должна (дополнительно к выполнению требований »того (этих) стандарта(ов)) удовлетворять требованиям подразделов «Роль испытательной лаборатории» и «Совместная роль* в вопросах:

28

Страница 35

ГОС Т Р И СО М ЭК 9M6-S-M

a)    выбора теста согласно 7.3.1;

b)    параметризации теста согласно 7.4.1;

c)    тестовой кампании согласно 7.5.2.

9.2 Роль клиента

Клиент, заявляющий о соответствии настоящему стандарту, должен для каждой СТ. 'представленной для оценки соответствия, выполнить требования подразделов «Роль клиента* и «Совместная роль* разделов 6. 7 и 8.

Страница 36

ГОСТ Р ИСО/МЭК 9646-S-M

ПРИЛОЖЕНИЕ А (обязательное)

ОТЧЕ1 ОБ АТТЕСТАЦИОННОМ ТЕСТИРОВАНИИ СИСТ1:>ЛЫ (OATCV A.I Введение

В данном приложении приведена форма ОАГС, которая должна применяться испытательной лабораторией с целью документирования резулылоа процесса оценки соответствия для конкретного клиента.

А.2 Форма ОАТС

ОАТС должен использовать следующую форму отчета:

ОТЧЕТ ОЬ АТТЕСТАЦИОННОМ ТЕСТИРОВАНИИ СИСТЕМЫ ДЛЯ

ИЛЛУГМОК.'ИЧС СТ

I СВОДКА ИДЕНТИФИКАТОРОВ

1! ОТЧЕТ Об АТТЕСТАЦИОННОМ ТЕСТИРОВАНИИ СИСТЕМЫ -

Номер ONTO Дата ОАТС:

Администратор непитательном лаборатории:    Имя

Подпись.    Полнись

12 ИСПЫТАТЕЛЬНАЯ ЛАБОРАТОРИЯ Идентификация

1.3    КЛИЕНТ Идентификация

1.4    ТЕСТИРУЕМАЯ СИСТЕМА Наименование:

Версия

Поставщик:

Даты тестирования Идентификатор ЗСС:

1.5    ХАРАКТЕР АТТЕСТАЦИОННОГО ТЕСТИРОВАНИЯ

Нель аттестационного т<ч-тировзнин состоит в том. чтобы увеличить вероятность взаимодействия различных реализаций. Однако сложность протоколов ВОС делает непрактичным исчерпывающее тестирование как но техническим, так и по жоиомнческим причинам. Более того, нет гарантии, что ТС. которзи прошла все необходимые тесты, соответствует спецификации. Her также никакой гарантии, что такая ТС будет взаимодействовать с другими реальными открытыми системами. Прохождение тестирования скорс-е дает уверенность в том, что функциональные возможности ТС установлены и что се поведение устойчиво соответствует а достаточно представительном числе сеансов обмена данными.

1 Авторское право на форму ОАТС.

Пользователи настоящего стандарта могут свободно воспроизводить форму ОАТС данного приложении дли использования в своих целях и в дальнейшем публиковать заполненный ОАТС.

30

Страница 37

ГОСТ Р ИСО.'МЭК 9646-5-93 16 ОГРАНИЧЕНИЯ И РЕЗЕРВИРОВАНИЯ

Здесь может быть дана дополнительная информация относительно технического содержимого или дальнейшего использования данного технического отчета, либо указаны права и обязанности испытательной лаборатории и клиента. В 5.7ой информации могут быть указаны ограничения и* публикацию отчета,

1    7 РЕГИСТРАЦИЯ СОГЛАШЕНИИ

Определение той части или частей ТС, которые рассматривались в процессе тестирования в качестве ТР, а также используемого (ых) метола(ов) абстрактного тестирования и комплекта(ов) абстрактных тестов.

18 КОММЕНТАРИЙ

Дополнительные комментарии могут быть даны клиентом или испытательной лабораторией по любому вопросу ОАТС, напрнмер, могут быть отмечены разногласия между двумя сторонами.

2    СВОДКА СИСТЕМНОГО ОТЧЕТА

Для каждого протестированного протокольного уроаия требуются сводные сведс-ния о состоянии тестирования и соответствия реализации этого уровня, где используются показанные ниже разделы формата.

2п СВОДКА О ТЕСТИРОВАНИИ УРОВНЯ ПРОТОКОЛА

■•„ииеландлме принтам

Идентификатор реализации:    Наименование н номер

версии

Ссылка на определение ТП:    Ссылка иа 1.7

Станд8рт/реком»ндаиия по протоколу:    Ссылка

ЗСРП.    Ссылка

ДНРГ1Т:    Ссылка

Номер ОАТГТ:    Ссылка

Дата ОАТП:    Дата ОДТП

Стаидарт/рекомендаиия по КАТ:    Ссылка

Метод абстрактною тестиронания-    Ссылка

Идентификатор средств тестирования'    Наименование и номер

версии

Статус соответствия:

Ошибки статического соотктстоия1    Да/нет

Ошибки динамического соответствия?    Да/кег

Прогон тестовых примеров:    Номер

Прохождение:    Номер

Безуспешно:    Номер

Не завершено:    Номер

Наблюдения (факультативно)•

Если ТС статически и динамически не соответствует протоколу, то по вопросам иесослве-гствия может быть дана дополнительная сводная информация. Здесь могут быть отмечены любые трудности, с которыми пришлось столкнуться.

31

Страница 38

ГОСТ Р ИСО'МЭК М4»-в—■от

ПРИЛОЖЕНИЕ В (обязательное)

ОТЧЕТ ОБ АТТЕСТАЦИОННОМ ТЕСТИРОВАНИИ ПРОТОКОЛА (ОАТП)' B.I Введение

В данном приложении приведена форма ОАТП, которая должна нспользо-магией испытательной лабораторией с цель» документирования результатов процесса оценки соответствия относительно конкретного протокола с использованием конкретного стандарта по КАТ для конкретного клиента

В 2 Форма ОАТП

ОАТП должен иегюльзовать следующую форму:

I СВОДКА ИДЕНТИФИКАТОРОВ

1.1    ОТЧЕТ ОБ АТТЕСТАЦИОННОМ ТЕСТИРОВАНИИ ПРОТОКОЛА

Номер ОАТП:

Дата ОАТП:    .

Соответствующий номер ОАТС:

Соответствующая дата ОАТС:

Администратор испытательной лаборатории:

Имя

Подпись

Подпись:

1.2    ТР Имя:

Версия:

Стандарт'рекомендация по протоколу:

Ссылка

Копия или ссылка

ЗСРП:

Предыдущий ОАТП, при его наличии ' (факультативно):    Ссылки

J.3 ФУНКЦИОНАЛЬНАЯ СРЕДА ТЕСТИРОВАНИЯ

ДИРПТ:

Стандарт/рекомендация по КАТ:

Метод абстрактного тестирования: Идентификация средств тсстироваиия: Информация о протоколе (факультативно)

Даты тестирования.

Ссылка (и) на журнал соответствия:

Копия или ссылка Ссылка

Тайм-ауты, параметры и др.

Информация, необходимая для получения журналов СООТВ*?1С1ВИЯ


Срок храпении для ссылок: на журнал соответствии:

1 Авторское право иа форму ОАТП.

Пользователи настоящего стандарта могут свободно воспроизводить форму ОАТП данного приложении для применения в своих целя* и в дальнейшем публиковать заполненный ОАТП,

Страница 39

ГОСТ Р ИСОМЭК жив-5-М

1    4 ОГРАНИЧЕНИЯ И РЕЗЕРВИРОВАНИЯ —

Здесь может быть дана дополнительная информация относительно технического содержимого или дальнейшего использования данного технического отчета либо укачаны праиа и обя»аниостн испытательной лаборатории и клиента. В этой информации могут быть укапаны ограничения на публикацию отчета

1.5 КОММЕНТАРИИ

Дополнительные комментарии могут быть даны клиентом или МСпыта-ель-ной лабораторией но любому попросу ОАТП, например могут бы1ь отмечены разногласия между двумя сторонами.

2    СТАТУС СООТВЕТСТВИЯ ТР

При оценке соответствия ТР проявила/ж- проявила тлсоот-тствня заданному стандарту/рекомендации по протоколу

(Подчеркните соответствующее слово в этом предложении; если ЗСРП дли данной ТР совместима с требованиями к статическому соответствию (согласно разделу 3 нестоящего отчета) и не зарегистрирован вердикт «безуспешно»! в разделе 6), подчеркните слово «проявила», в противном случае слово «не проявила»).

3    ЗАКЛЮЧЕНИЕ О СТАТИЧЕСКОМ СООТВЕТСТВИИ

ЗСРН для данной ТР соответствуст/ие соответствует требованиям к статическому соответствию, сланным » соответствующем стандарте/рекомендации

(Подчеркните нужное- слово з этом предложении).

4    ЗАКЛЮЧЕНИЕ О ДИНАМИЧЕСКОМ СООТВЕТСТВИИ

Тс-топая кампания обнаружила/не обнаружила ошибки в ТР

(Подчеркните нужное слово в «том предложении: если в разделе 6 настоящего отчета «е зарегистрировано вердиктов «безуспешно», подчеркните слово «не обнаружила», в протипиом случае — слово «обнаружила».

Кроме тою, может Оыгь дана описательная сводка результатов выполнения группы тестов. Подробные результаты тестирования приведены в таблице рачд 6; данный раздел дает возможность испытательной дабораюрин сделать заключение по указанным результатам, например. «Все тесты, относящиеся к сегментированной передаче данных, оказались безуспешными»)

5    ОТЧЕТ О РАССМОТРЕНИИ СТАТИЧЕСКОГО СООТВЕТСТВИЯ

Если н разделе 3 указано несоответствие, то в данном разделе перечисляемся расхождения между ЗСРП и требованиями к статическому соответствию определенного стандарта/рекомендации по протоколу

6    ОТЧЕТ О ТЕСТОВОЙ КАМПАНИИ

В этом разделе должна использоваться приводимая ниже таблица, в которой указаны как выбранные тестовые примеры, выполненные испытательной лабора торией, так н результаты тестирования. Последовательность, в которой абстрактные тестовые примеры должны быть представлены в этой таблице, определены я с(андарте, рекомендации по КАТ

33

Страница 40

ГОСТ Р ИСО'МЭК 9646 - 5-93

Примечаний к информации, которую жлытательна* лаборатория должна поместить в колонках, приведены ниже

Ссылка ли КАТ

ВьЧУплн.1

Вуаилчеи

Л0010И?

Вси^аоТ

Ийбла>а»иия

а)

Ь)

С»

dj

€1

я) Ссылка на абстрак!ный тестовый пример из стандарта/рскомендации по КАТ.

b)    Укалывается, выбран ли тест 5 соответствии с ЗСРГ1 и ДИРПТ. Если он ж- был выбран по причине информации ДИРПТ, указать, почему:

c)    Если гост выбран, указать, был ли выполнен его полный прогон Если ста1ус тесгя указан как «не выиолнеи», укалать почему (согласно 76231;

d)    Записать вердикт, назначенный во время тестовой кампании;

e)    Записать ссылку на наблюдения, записанные а разделе 7 настоящего отчета

7 НАБЛЮДЕНИЯ

Здесь может быть дана информация. о»иосящажя к техническому содержимому ОАТП

Страница 41

ГОСТ Р ИСОМЭК 9М6-8-93

ПРИЛОЖЕНИЕ С (обязательное)

СКЕЛЕТНАЯ ФОРМА ДИРПГ

C.I Введение

В данном приложении приведена скелетная структура формы ДИРПТ. Испытательная лаборатория должна использовать это приложение для разработки исчерпывающей формы ДИРПТ такой же структуры, относящейся л конкретному комплекту абстрактных тестов и к соответствую щи к средствам тестирования Исчерпывающая форма ДИРПТ должна быть предоставлена клиенту яла заполнения, если для тестирования ТР этого клиента должен кспольчовлться соответствующий комплект абстрактных тесто».

Примечание — Скелетная форма ДИРПТ не ориентирована на ьпкне-ю конкретные протоколы, методы абстрактного тестирования и средства тестирования и поэтому применительно к конкретным ситуациям она должна быть смо-дифициропана и расширена

Тскст курсивом лспОльзустся только для информационных комментариев и не должен входить s фактическую форму. Испытательная лаборатория должна прсдоставип. информацию, запрашиваемую в разделах I, 2 и 3, до передачи формы клиенту. Клиент должен предоставить информацию, запрашиваемую в разделах •» и 5, ло возвращения формы Обе стороны должны обеспечить информацию. запрашиваемую в остальных разделах.

С.2 Форма ДИРПТ

ДИРПТ должен использовать следующую форму:

ФОРМА ДИРПТ ДЛЯ___

ийкмспцвлйие компдеигл абсцык-тни» Ъч

1    СВОДКА ИДЕНТИФИКАЦИЯ

Номер ДИРПТ:

Номер испытательной лаборатории:

Дата издания:

Выдано:    Имя клиента

Испытательная лаборатория может включать в сводку идентификаций ссылку на клиента нлн на контракт.

2    СВОДКА КОМПЛЕКТА АБСТРАКТНЫХ ТЕСТОВ

Стандарт/рекомендация

по Протоколу;    Протоколам), подлежа

щий [не) тестированию

Стандарт/рекомендация по КАТ

Метод абстрактного тестирования.

* Авторское право на форму ДИРПТ.

Ппличопэтоли настоящего стандарта могут свободно воспроизводить Форму ДИРПТ данного приложения для применения в своих целях и а дальнейшем публиковать заполненную ДИРПТ.

Страница 42

ГОСТ Р ИСО.'МЭК !ХИв—5—93

3    ИСПЫТАТЕЛЬНАЯ ЛАБОРАТОРИЯ —

В этом разделе должна содержаться информация, идентифицирующая испытательную лабораторию к средства тестирования Обычно она содержит елв' дующее;

Идентификация испытательной лаборатории:    Наименование    и    подроб

ный адрес

Администратор испытательной лаборатории:    Имя

Средства тестирования.

Лдр«<*> ПДУ:    Для    тестирования    ТС

адресуется нижний тестер

Инструкции по заполнению:

(Испытательная лаборатория должна записать все специальные инструкции, необходимые для заполпеиия формы и ее передачи клиенту).

4    КЛИЕНТ

В этом разделе должна быть произведена информация, идентифицирующая клиента. Обычно она содержит следующее:

Идентификация клиента.    Ими    и    подробный    адрес

Администратор клиента.    Имя

Запрашиваемые средства тестирования:

Клиент должен перечислить конкретные средств». и<ч>бхолимые для тес* тироеания, или набор средств, предоставляемых испытательной лабораторией.

5    ТЕСТИРУЕМАЯ СИСТЕМА

Наименование:

Версия:

Номер ЗСС:

Машина, на мпчрон смонтирована ТС

При его наличии В соответствующих случаях

Машинная конфигурация

Идентификация операционной системы:

Идентификация го-рхмего Trcrcp.v Дата г.одтзерждения верхнего тестера:

Идентификатор ТР:

Ссылка в ДИРПТ на ТР:

Ограничения ТС:

Клиент может записать информацию, объясняющую, почему не могут быть выполнены абстрактные тесты, например, не реализованы ДСП при использовании метода удаленного тестирования Условия окружающей среды:

6    СЛУЖЕБНЫЕ ПРОТОКОЛЫ

В следующей таблице клиент должен записать соответствующую информацию относительно каждого служебного протокола ТС:

36

Страница 43

ГОСТ р ИСО'МЭК 9€48-5-М

Нацменом]'!'?

протокола

Номер

пепсин

Ccu.mii на ЗСРП

(фИ«у.1ЬТ1ТИММО)

Сги.*К4 И н д ирги

(Ф JK) Л1.ТЛИ1Ш01

Слильл iu ОАТП {факулктатмнмо)

Один раздел необходим для служебного протокола, входящего о ТС. которая отличается от самой ТР. Необходимая информация зависит от средств тестирования н от ТС и охватывае-г все адреса, значения параметров, тайм-аутов и услуги (относится к рекомендациям МККТТ) согласно ЗСРП для каждого прогокола.

7 ИНФОРМАЦИЯ О ПРОТОКОЛЬНЫХ УРОВНЯХ_

ИЛНМЯНО'ИИКГ П|Ю-ОкОД»

7.1    ИДЕНТИФИКАЦИЯ ПРОТОКОЛА

Наименование:

Версия

Ссылка на ЗСРП.

7 2 ИНФОРМАЦИЯ О ТР

(В это» раздел должны входить такие вопросы, как адресация. значения параметров и тайм аутов, необходимых для тестирования ТР Это должна был. информация, уточняющая 3CPI1 соответствующего протокола, но не противоречащая ей Билес того, она должна содержать параметры тестовых комплектов там. где они идентифицированы в спецификациях комплектов абстрактных или выполнимых тестов).

7.2.1    Адреса

В <Ж1ч разделе должны идентифицироваться адреса, подлежащие использованию.

a)    нижним тсстором для доступа к Тр (обеспечивается клиентом).

b)    тестируемой системой дли доступа к нижнему тестеру (обеспечивается испытательной лабораторией).

7.2.2    Значения параметром

млыисии

1 нп г %а

I’j iff t .JCITI

Л».>ч.) юн

II |!U4<-T|IIK>

.<н<ч«и.е

Клиент обеспечивает диапазон параметров и используемые значения параметров по согласованию с испытательной лабораторией.

7.2.3 Значения тайм-аутов

Страница 44

ГОСТ Р ИСО/МЭК 964в—3-93

[ип uiuutntixtsiHna тайм-ауТА

PjUM ACVII

и н

{•■.•чсяие

<Л|М-4>*М

7.2.4 Процедурная информация

В >том разделе должны определяться требования к тестированию, налагае-vij:' стандартом по КАТ. который может быть но реализуем тестируемой системой и который может обусловить такие тестовые примеры, которые не могут быть выполнены; например, лрк использовании метода удаленного тестирования — нереализуемое™ упр**леикя передачей конкретного Г1БД данной ТР, т. е. как это требуется заяькоА о косвенной передаче КДТ11-

38

Страница 45

ГОСТ Р ИСО'МЭК 9в4в 5 93

ПРИЛОЖЕНИЕ D (справочное)

РУКОВОДСТВО ПО ДИРПТ

Поскольку ДИРПТ обычно доажси «слользопаиси о сочетании с ЗСРП, -о необязательно дублировать информацию, отсиживаемую ЗСРП. кроме информации, идентифицирующей клиента, 'ГС и 1ф0К>к0л(ы), подлежащими?) тестированию В соогвстс-гзуюших случаях в ДИРПТ должны быть предусмотрены ссылки на разделы ЗСРП.

В тех случаях, когда клиент и испытательная лаборатория пришли к выводу о необходимости большою обгона информации для выполнения тестирования, в ДИРПТ не должна воспроизводиться эта информация, а даваться ссылка на нес.

Информация ДИРПТ должна о основном относится к протокольному уровню или уроним и, подлежащим тестированию. Но может потребоваться также н дополнительная информация, относящаяся к вспомогательным уровням (как выш< расположенным, так „ нижерасподоженяым), участвующим п тестировании ТР Назначение этой дополнительной информации булет зависеть сп тестируемою протокольною урочня. метода и средств тестировании, но она может со-т1| л; -> протокольную и адресную информацию для каждою веппмо.пте.тьчою уровня в ТС (см С 6 приложения С).

Несмотря на то, что ДИРПТ пр^ДОа’качена и основном для обеспечения испытательной лаборатории информацией о тестирояашш функциональной среды ТР. полезно также включить в ДИРПТ ту информацию (или ссылку на и<ч ). в которой нуждается клиент для подготовки ТС Испытательная лаборатория ййодит ;ту информацию н форму ДИРПТ. г. с. предоставляет се клиенту для использования Примерами служат информация нижнего тестера (например адреса, значения тайм аутон и параметров), а также конфигурация вспому гательиых уровней, используемая при тестировании

39

Страница 46

ГОСТ Р ИСО’МЭК 9646—5—93

ПРИЛОЖЕНИЕ Е (справочное)

СВОДНЫЙ ПЕРЕЧЕНЬ ДОКУМЕНТОВ ПО АТТЕСТАЦИОННОМУ ТЕСТИРОВАНИЮ

E.I Сокращения, используемы!’ в данном приложении

В данном приложение используются еледующие сокращения

a)    ссылка в пиле <5; М> означает ГОСТ Р ИСО/МЭК 9646— 5. при.тоже «но .4;

b)    «»сп. лаб* означает испытательная лаборатория

EJ» Использование документов по аттестационному тестированию клиентом и испытательной лабораторией

Форма ЗСРП ЗСРП «крмаЛИРПГ ДИРШ ЗОС

Обетпипшччгя CTail.ajUDM по протоколу

5; С чеп лаб клиентом Форма ОАТП

5; В

не л. л а 6.

Частично w полнясчеп:

Заполняется;    клиентом

Хранится:

псп. лаб ОДТС

Форма ОАТС

СКк-ак-'И'иэ.-тся •>; А

Частично ia-ЯОЛНЯсТСЙ*

Заполняется:

пси. лаб

Хранится:

псп лаб

«лтитом

клиснсом нсп. лаб исп лаб ОАТП Жури in

.иль.<■ «типи

пен. л л б нсп. лаб иси. лаб


40

Страница 47

ГОСТ Р ИСО/МЭК 9646-5-»3

УДК 681.324:006.354    П85

Ключевые слова: информационная технология, взаимосвязь открытых систем, методология, основы аттестационного тестирования, требования к испытательным лабораториям, клиент, процесс оценки соответствия, сопоставимые результаты тестирования, сходные реализации, методы абстрактного тестирования, заявка о соответствии системы, заявка о соответствии реализации протоколу

ОКСТУ 4002

Страница 48

Редактор Т. С Шеко Технический редактор В. Н Прусаком Корректор Н И. Гаврищук

Сдиио и набор 27.01.9». Поди а веч. Ж1.03.91. Уел. печ л. 2.79. Уел. «р.огт 2.79. Уч.-шд л 2.90 Тир 3« »*» С IUI

Орлена «Знак Почета» Н»4»тельси>о стандартов. 107076. .Москва. Колодемшв neo.. Н. Калужская типография стандартов уп .Московская. 25*. JaK -’50