Стр. 1
 

20 страниц

396.00 ₽

Купить официальный бумажный документ с голограммой и синими печатями. подробнее

Официально распространяем нормативную документацию с 1999 года. Пробиваем чеки, платим налоги, принимаем к оплате все законные формы платежей без дополнительных процентов. Наши клиенты защищены Законом. ООО "ЦНТИ Нормоконтроль".

Наши цены ниже, чем в других местах, потому что мы работаем напрямую с поставщиками документов.

Способы доставки

  • Срочная курьерская доставка (1-3 дня)
  • Курьерская доставка (7 дней)
  • Самовывоз из московского офиса
  • Почта РФ

Содержит требования и руководящие материалы относительно реализации средств тестирования ТР (тестируемая реализация), излагаемые в соответствии с указываемыми стандартизованными в рамках ВОС комплектами абстрактных тестов и определенными в соответствии с ГОСТ Р ИСО/МЭК 9646-2.

Эти требования ограничены теми аспектами средств тестирования, которые могут быть преобразованы в функции абстрактного тестирования, определенные в ГОСТ Р ИСО/МЭК 9646-1, или которые существенно важны для надлежащего использования стандартных комплектов абстрактных тестов (КАТ).

Вопросы приемки и установки средств тестирования не входят в предмет рассмотрения настоящего стандарта

Введен впервые (ИУС № 2-3-1994)

Оглавление

1 Область применения

2 Нормативные ссылки

3 Определения

4 Сокращения

5 Общее описание реализации тестов

6 Требования, относящиеся к реализации тестов

   6.1 Введение

   6.2 Требования, относящиеся к средствам тестирования

   6.3 Требования к созданию КВТ

      6.3.1 Введение

      6.3.2 Соответствие эталонному стандартному КАТ

      6.3.3 Соотношения между КАТ и КВТ

      6.3.4 Образование подмножеств КАТ

      6.3.5 Независимость процесса создания

   6.4 Требования, относящиеся к журналу соответствия

   6.5 Требования к развитию формы ДИРПТ

   6.6 Требования, относящиеся к другой документации

7 Согласованность

Приложение А (справочное) Дополнительные руководящие материалы по реализации тестов

   А.1 Дополнительные руководящие материалы по СТ

      А.1.1 Введение

      А.1.2 Реализация нижнего тестера

      А.1.3 Реализация верхнего тестера

      А.1.4 Реализация процедур скоординированного тестирования

   А.2 Дополнительные руководящие материалы по процессу создания КВТ

      А.2.1 Общее описание

      А.2.2 Исходные данные к процессу создания тестов

      А.2.3 Обслуживание КВТ

   А.3 Дополнительные руководящие материалы по журналу соответствия

   А.4 Дополнительные руководящие материалы по документации

      А.4.1 Введение

      А.4.2 Документ «Информация о тестирующей системе»

      А.4.3 Документ «Описание средств тестирования»

      А.4.4 Документ «Информация для клиента испытательной лаборатории»

      А.4.5 Документ «Рабочие инструкции испытательной лаборатории»

Показать даты введения Admin

Страница 1

ГОСТ Р ИСО/МЭК 9646-4-93

государственный стандарт российской федерации

ИНФОРМАЦИОННАЯ ТЕХНОЛОГИЯ

ВЗАИМОСВЯЗЬ ОТКРЫТЫХ СИСТЕМ. МЕТОДОЛОГИЯ И ОСНОВЫ АТТЕСТАЦИОННОГО ТЕСТИРОВАНИЯ

Часть 4 РЕАЛИЗАЦИЯ ТЕСТОВ

БЗ 12—92/1164


ГОССТАНДАРТ РОССИИ Москва

Страница 2

ror i •* Mco.'ivm 'hvik \ «u

II реднслопис

1    ПОД I 01OBJIEH И ВНЕСЕН Техническим комитетом (ГК 22) «Информационная технология»

2    УТВЕРЖДЕН И ВВЕДЕН В ДЕЙСТВИЕ Постановлением I ос стандарта России «it 20.12.91 № 262

Настоящий стандарт подготовлен на осиояе применения аутентичного теме га международного стандарта ИСО/МЭК %46—4 г Информационная технология. Взаимосвязь открытых систем. Методология и оснопы аттестационною тестирования. Част». 4.

Реализация гостов»

3    ВВЕДЕН ВПЕРВЫЕ

(g> Индатсчытпо uaujupToe, IM4

Иачоишим oan.oapi «с может Лмть жмно<тм» м.ти частично оскнроилеяе*. 1иражнр»аан п раенропранен в »aii'o*c официально»** шлаки*

•V» разрешении Гтсгандаро России.

II

Страница 3

ГОСТ Р ИСО/МЭК 9646 4-83

СОДЕРЖАНИЕ

1    Область при моления..................I

2    Нормативные ссылки .    .    ....    ....    I

3    Определении    ,    ....    2

4    Сокращения ..............................2

5    Общее описание реализации тестов    .    .    3

6    Требования, относящиеся к реализации гостов..........4

6.1 Введение .    .....................4

62 Требовании, опюешщл-ея к средствам тестирования *    .    .4

6.3    Требования к созданию КВТ.................    б

6.3    I Введение ......    ..........к

6 3.2 Соответствие эталонному' стандартному КАТ    .    .    б

6.3.3    Соотношения между KAf и КВТ .....    .    f,

6.3.4    Образование подмножеств КАТ    .    .    6

6.3.5    Независимость процесса создания..........7

6.4    Требования. относящиеся к журнале соответствии.....7

6.5    Требования к развитию формы ДИРЛТ .    8

6.6    Требования, отностциося к другой документации .    .    -9

7    Согласованность ....    ...........10

Приложение А (справочное) Дополнительные руководящие материалы м»

реализации тестов ...    .    ||

•\ I Дополнительные руководящие материалы по ОТ    .    .    .    и

Д. 1.1 Введение    .    ...    .11

А.1.2 Реализация нижнего    тестера    .    ...........    М

Д.1.3 Реализация верхнею тостера ....    II

А. 1.4 Реализация процедур скоординированного тестировании    .    . ,1В

А.2 Дополнительные руководящие материалы «о процессу создании КВТ А.2,1 Общее описание .    .    .    .    ...    1(2

А22 Исходные данные к процессу создании тестон .    12

А.2.3 Обслужи ни икс КВТ ..........12

Л 3 Дополнительные руководящие материалы по журналу соотнеплпни А.4 Дополнительные руководящие материалы по документации    .    14

А,4.1 Введение    ...................    14

А 4.2 Документ «Информация о тестирующей системе» .    14

А 4 3 Документ    «Описание    средств    тестирования»    .    ...    15

А.4.4 Документ    «Информация для    клиента    испытательной лаборатории» .    .    .    ..............15

А.4 5 Документ «Рабочие инструкции испытательной лаборатории»    15

2 Зак. 164

III

Страница 4

ВВЕДЕНИЕ

Стандарты ГОСТ Р ИСО/МЭК 9646—1 и ГОСТ Р ИСО/МЭК 9646—2 определяют общую методологию проверки соответствия реализации спецификациям протоколов и/или синтаксисов передачи ВОС. изданных в виде международных стандартов или рекомендаций МККТТ; эти стандарты содержат также требования к разработке стандартов по аттестационному тестированию и стан дартным комплектам абстрактных тестов (стандартным КАТ).

Часть ИСО/МЭК 9646—3 определяет стандартную тестовую нотацию — комбинированную древовидную и табличную нотации) (КДТН) для спецификации стандартных комплектов абстрактных тестов.

Как только стандарты по аттестационному тестированию и стандартные комплекты абстрактных тестов становятся доступны, результаты тестирования, полученные различными испытательными лабораториями, могут быть сопоставимы, если их операции основаны на одних и тех же ссылочных стандартных КАТ.

ГОСТ Р ИСО/МЭК 9646—5 содержит требования к процессу оценки соответствия с тем, чтобы результаты тестирования можно было сравнить с результатами, полученными другими испытательными лабораториями, и она может иметь широкое применение.

Настоящий стандарт касается промежуточного этапа тестирования. а именно реализации тестов. Прежде чем может начаться подготовка тестирования, должны стать доступными средства тестирования тестируемой реализации (ТР).

Исполнители тестирования -- это те организации, на которые возложена ответственность за обеспечение таких средств тестирования (СТ).

Настоящий стандарт налагает требования на реализацию тестов для гарантии того, что выполнение тестовых примеров отражает поведение, определенное в ссылочных стандартных КАТ. Таким образом достигается цель тестирования,

Настоящий стандгрт опубликован так же. как МККТТ. в виде рекомендации Y.2'tt (1991) МККТТ.

Настоящий стандарт опубликован также, как рекомендации Х.293 (1*ИИ) МККТТ.

г

IV'

Страница 5

ГОСТ Р ИСО/МЭК 9646—4—М ГОСУДАРСТВЕННЫЙ СТАНДАРТ РОССИЙСКОЙ ФЕДЕРАЦИИ

Информационная технология

ВЗАИМОСВЯЗЬ ОТКРЫТЫХ СИСТЕМ МЕТОДОЛОГИЯ И основы АТТЕСТАЦИОННОГО ТЕСТИРОВАНИЯ

Часть 4 Реализация тестов

Information technology — Open Systems Interconnection — Conformancc Testing Methodology and vomcv>>rk, Part 4: Test Realization

Дата нагдсиия НИМ—07-01

1    ОБЛАСТЬ ПРИМЕНЕНИЯ

Настоящий стандарт содержит требования и руководящие материалы отностиельно реализации средств тестирования ТР. излагаемые в соответствии с указываемыми стандартизованными в рамках ВОС комплектами абстрактных тестон и определенными н соответствии с ГОСТ р ИСО/МЭК 9646—2.

Примечание — Здесь ирсдиолыаетсп использование стандартных м>мч леото» абстрактных тестов (КЛТ) соглиско 3.6.31 ГОСТ Р ИСО/МЭК

Эти требования ограничены темн аспектами средств тестирования. которые могут быть преобразованы в функции абстрактного тестирования, определенные в ГОСТ Р ИСО/МЭК 9646—1. или которые существенно важны для надлежащего использования стандартных КАТ Такие аспекты могут содержать средстпз создания журналов соответствия или развития формы ДИРПТ. Другие подробные сведения о реализации тестирующих систем и верхних тестеров не входят н предмет рассмотрения настоящего стандарта.

Вопросы приемки и установки средств тестирования не входят в предмет рассмотрения настоящего стандарта.

2    НОРМАТИВНЫЕ ССЫЛКИ

Нижеперечисленные стандарты содержат положения, которые путем ссылок на них в данном т«кстс образуют положения настоящего стандарта. В момент публикации настоящего стандарта ука заииыо издания стандартов были действующими. Все стандарты подвергаются пересмотрам и участникам соглашений, основанных Иианнг официально*

1

Страница 6

ГОСТ Р И СО/М ЭК »мв- 4-9.1

на настоящем стандарте, следует рассмотреть возможность применения самых последних изданий перечисленных ниже стандартов. Комитеты-члены МЭК и ИСО имеют списки международных стандартов, действующих на текущий момент.

ГОСТ 28906-91 (ИСО/МЭК 7498—84). Системы обработки информации. Взаимосвязь открытых систем. Базовая эталонная модель. (См. также рекомендацию Х.200 МККТТ).

ГОСТ Р ИСО/МЭК 9646—1—93. Информационная технология. Взаимосвязь открытых систем. Методология и основы аттестационного тестирования. Часть 1. Общие концепции (См. также реко мендацню Х.290 (1991) МККТТ).

ГОСТ Р ИСО/МЭК 9646—2—93. Информационная технология. Вазимосвязь открытых систем. Методология и основы аттестационного тестирования. Часть 2. Спецификация абстрактного тестового комплекта (См. также рекомендацию Х.291 (1991) МККТТ).

ГОСТ Р ИСО/МЭК 9646—5—93. Информационная технология. Вазимосвязь открытых систем. Методология и основы аттестационного тестирования. Часть 5. Требования к испытательным лабораториях! и клиентам в процессе оценки соответствия (См. также рекомендацию Х.294 (1991) МККТТ).

ИСО/МЭК 9646—3—91. Информационная технология. Взаимосвязь открытых систем. Методология и основы аттестационного тестирования. Часть 3. Комбинированная древовидная и табличная нотация (См. также рекомендацию X 292 (1991) МККТТ)1

3 ОПРЕДЕЛЕНИЯ

Для настоящего стандарта применимы все определения, приведенные в ГОСТ Р ИСО/МЭК 9646--1.

4 СОКРАЩЕНИЯ

В настоящем стандарте использукггся следующие сокращения, приведенные в разделе 4 ГОСТ Р ИСО/МЭК 9646—1:

АСИ    абстрактный сервисный приннгнв

ВОС    взаимосвязь открытых систем

ДИРПТ    дополнительная информация о реализации    прото

кола для тестирования

ЗСРГ1    заявка о соответствии реализации протоколу

КАТ    комплект абстрактных тестов

1

До прямою применения данного документа в качестве ГОСТ распространив его осуществляет секретариат ТК 22 «Информационная технология*.

Страница 7

ГОСТ Р ИСО/МЭК 9646—4—93

КВАТ    комплект выбранных абстрактных тестов

КВВТ    комплект выбранных выполнимых тестов

КВТ    комплект выполнимых тестов

КДТН    комбинированная древовидная и табличная нотация

КПЛТ    комплект параметризованных абстрактных тестов

КПВТ    комплект параметризованных выполнимых тестов

IIБД    протокольный блок данных

11КН    пункт контроля н наблюдения

СТ    средства тестирования

ТОВ    тест основной взаимосвязи

ТР    тестируемая реализация

ТС    тестируемая система

5 ОБШЕЕ ОПИСАНИЕ РЕАЛИЗАЦИИ ТЕСТОВ

5.1.    Реализация тестов -- это процесс разработки средств тестирования (СТ) тестируемых реализации на соответствие спецификациям протоколов ВОС. который «>сноиыоаетси на стандарте но аттестационному тестированию и на КАТ.

5.2.    Средства тестирования • . =»то совокупность оборудования и процедур, способных выполнять:

a)    создание;

b)    выбор;

c)    параметризацию и

d)    выполнение

тестовых примеров в соответствии с указанным стандартным КА Г. и также вырабатывать журнал соответствия.

5.3.    В процессе создания абстрактные тестовые примеры эта* лонного стандартного КАТ преобразуются таким образом, чтобы они могли быть выполнены в тестирующей системе.

В процессе выбора выбираются соответствующие тестовые примеры для ТР согласно содержимому ЗСРП и ДИРПТ.

В процессе параметризации параметрам выбранных тестовых примеров придаются соответствующие значения согласно содержимому ДИРПТ (и. возможно, ЗСРГ1).

После этого при выполнении процесса оценки соответствия ТР используются СТ. что приводит а результате к выработке журнала соответствия.

Результат процесса создания называется «комплектом выполнимых тестов» (КВТ). Он состоит из выполнимых тестовых примеров.

5.4 Могут быть созданы, но не обязательно, промежуточные формы тестовых комплектов в зависимости от того, когда происходит процесс создания

1

Страница 8

ГОСТ Р ИСО/МЭК 964в—4—93

Такие промежуточные формы получили названия:

a)    КВАТ    --    комплект выбранных абстрактных тестов;

b)    КВВТ    —    комплект выбранных выполнимых тестов;

c)    КПАТ    —    комплект параметризованных абстрактных    тестон;

d)    КГ1ВТ    —    комплект параметризованных выполнимых    тестой.

5.5. Из всех этих разнообразных форм только комплекты абст

рактных тестов явно необходимы.

Некоторые СТ могут генерировать КПВТ автоматически из эталонных стандартных КАТ (при наличии ЗСРП и ДИРПТ) во время фактического прогона тестовых примеров. Такие СТ не проявляют в явном виде ни КВТ. ни КВВТ, ни КПВТ.

Однако всегда выполняется КПВТ.

6 ТРЕБОВАНИЯ. ОТНОСЯЩИЙСЯ К РЕАЛИЗАЦИИ ТЕСТОВ

6.1    Введение

Требования, относящиеся к реализации тестов, касаются:

a)    СТ как единого целого;

b)    процесса создания выполнимых тестовых примеров из абстрактных;

c)    средств выработки журнала соответствия;

d)    развития формы ЗСРП.

e)    других документов.

6.2    Требовании, относящиеся к средствам тестирования

6.2.1. Средстна тестирования реализаций протоколов ВОС должны обеспечиваться в контексте одного стандартного КАТ и соответствия с ГОСТ Р ИСО/МЭК 9646—2. Исполнитель теста должен использовать ту версию спецификации КАТ. которая имеет наивысшин статус стандартизации (например, предпочтительнее проект международного стандарта (IIMC), чем проект предложе-ня (ПП) или проект комитета (ПК).

СТ должны обеспечивать:

a)    реализацию нижнего тестера;

b)    спецификацию верхнего тестера н той степени, в какой она требуется методом абстрактного тестирования.

c)    реализацию верхнего тестера для метода локального тестирования;

d)    реализацию верхнего тестера для методов скоординированного и распределенного тестирования, факультативно,

с) спецификацию процедур скоординированного тестирования н соответствии с требованиями, определенными в стандартном КАТ;

4

Страница 9

ГОСТ Р ИСО/МЭК «646 -4-93

f)    реализацию процедур скоординированного тестирования внутри тестирующей системы для метода локального тестирования;

g)    реализацию протокола административного управления тестированием внутри тестирующей системы для метода скоординированного тестирования.

|См. 7.4 ГОСТ Р ИСО/МЭК 9646-1 и 12.3 ГОСТ Р ИСО/МЭК 9646—2).]

6 2.2. СТ может содержать либо выполнимые тестовые примеры, созданные из тестовых примеров эталонного стандартного КАТ, либо средства их создания.

СТ должны быть реализованы в соответствии с семантикой тестовой нотации, выработанной в эталонном стандартном КАТ.

СТ должны обеспечить средства выбора и параметризации тестовых примеров (будь онн на абстрактном или на выполнимом уровне) согласно соответствующей информации ЗСРП и ДИРПТ. предоставляемой вместе с ТР (см. 7.3 и 7.4 ГОСТ Р ИСО/МЭК 9646-5).

6.2.3. СТ должны обеспечит» средства выбора тестовых примеров функциональных возможностей или поведения, упомянутых в перечне тестов основной взаимосвязи (перечень ТОВ), если таковой определен в эталонном стандартном КАТ, и должен предусмотреть средства их прогона, сначала в целом, до выполнения тестов функциональных возможностей и поведения.

СТ должны обеспечить так же возможность опускать из набора тестовых примеров, выбранных для тестирования функциональных возможностей и поведения, те тестовые примеры, которые указаны в перечне ТОП.

6.2.4 СТ должны обеспечивать возможности выполнения параметризованных выполнимых тестовых примеров, образуемых в результате выполнения процессов создания, выбора и параметризации.

6.2 5 Исполнитель теста должен составить заявку в соответствии средств тестирования эталонному стандартному КАТ, указав то подмножество КАТ. которое не обеспечивается (см. 6.3.4).

Исполнитель теста должен идентифицировать все ограничения, налагаемые СТ на выполнение теста, помимо определенных эталонным стандартом КАТ (например, ограниченные диапазоны значений, предусмотренных в ДИРПТ).

Примечание — Исполнитель теста должен отметить требования к услуге исчерпывающего тестирования, установленный в стандартном КЛТ. Он может рыразить пожелание разработать СТ для каждого из требуемых методов абстрактного тестирования с тем, чтобы испытательная лаборатория могла обеспечить услугу исчсрпывахчцего тестирования.

5

Страница 10

ГОСТ Р ИСО/МЭК &646--4 - 93

6.2.6 СТ должны обеспечивать возможность создания журнала соответствия (см. 6.4).

6.3 Требования к созданию КВТ

6.3.1    Введение

Требования 6.3 должны относиться ко всем комплектам выполнимых тестов, включая К.ВВТ и КПВТ независимо от их реального наличия.

6.3.2    Соответствие эталонному стандартному КЛТ

КВТ должны создаваться из одного эталонного стандартного КАТ.

Дли того, чтобы КВТ соответствовал эталонному стандартному КЛТ. он должен отвечать требованиям 6.3.3 -6.3.5. Он должен от печать также требованиям, установленным в самом эталонном стандартном КАТ, а также в других частях многочастевого стандарта по аттестационному тестированию, если таковой применим {например, ПЛУТ)

6.3.3    Соотношение между КЛТ и КВТ

Каждый выполнимый тестовый пример должен представлять собой реализацию отдельного абстрактного тестового примера и должен выбираться для выполнения на индивидуальной основе.

Все последовательности тестовых событий, образующие абстрак-ный тестовый пример, должны быть реализуемы в выполнимом тестовом примере.

Цель тестирования и назначения вердиктов каждого абстракт кого тестового примера должны обеспечиваться в соответствующем выполнимом тестовом примере.

СТ должны выполнить проверку действительности параметров ПБД. полученных из ТР, дополнительно к проверкам, определенным в абстрактном тестовом примере. Любые другие проверки, которые могла бы выполнять тестирующая система, не входят в предмет рассмотрения настоящего стандарта и не должны влиять на назначение вердиктов результатам выполнения каждого тестового примера.

Стандартный КАТ охватывает преобразование абстрактного тестового примера или примеров в позиции формы ЗСРП и ДИРПТ (см раздел 15 ГОСТ Р ИСО/МЭК 9646—2 в КВТ.

6.3.4. Образование подмножеств КАТ

Процесс создания КВТ в общем случае приводит к создания» всех тестовых примеров эталонного стандартного КЛТ. Однако мо жет оказаться полезным создать КВТ для некоторого подмножества КЛТ. Если такое подмножество создано, то исключение набора

Страница 11

ГОСТ Р ИСО/МЭК 9646-4-93

тестовых примеров должно происходить согласованно с процессом выбора тестов для ТР относительно преобразования между познци-* ями формы ЗСРГ1 (и ДИРПТ)’ И тестовыми примерами в КАТ.

Примечаинс — Это означает, что те тестовые примем, которые обаятельны для всех ТР. всегда будут входкть в это подмножество. однако исполнитель тсс га может предпочесть не реализовывать те конкретные наборы wcimsux примеров, которые являются факультативный» или условными н. следовяте.ч.ин, они могут не потребоваться для некоторых конкретных классов ТР.

Таким образом, то подмножество эталонного стандартного КЛТ. которое реализовано, должно бить эквивалентно одному или нескольким эквивалентным КВАТ.

6.3.5. Независимость процесса создания

В ТС процесс Создания должен приводить к одному и тому же КПВТ, выполняемому дли данной ТР. независимо от того, когда происходит процесс создания относительно процессов выбора и параметризации.

Прим с ч а и и с — См. Л 2.1 и рисунок Л.1.

Применение процессов выбора и параметризации к конкретной ТР — это вопрос, за который отвечает испытательная лаборатория на этапе подготовки к тестированию.

6.4 Требования, относящиеся к журналу соответствия

Как показано в 6.2, СТ могут обеепчить возможность создания журнала соответствия.

Журнал соответствия представляет собой запись визуально читаемой информации, выработанной в результате тестовой кампании и достаточной для записи наблюдаемых результатов тестирования н проверки назначения вердиктов тестирования.

В этой информации объединены результаты наблюдений фактических событий тестирования, происходящих при прогоне КПВТ относительно ТР. с информацией, которая соотносит угн события е рассматриваемыми абстрактными тестовыми примерами.

Журнал соответствия может использоваться при выработке отчетов об аттестационном тестировании н разрешении споров и вопросов, которые могут возникнуть при выполнении или после выполнении процесса оценки соответствия.

Журнал соответствия должен содержать:

а) уникальный идентификатор журнала соответствия, который содержит время и дату начала выполнения КПВТ;

1>) идентификатор СТ, дату создания, номер версии и идентификатор КВТ (при его наличии);

с) индикацию начала и окончания прогона каждого тестового примера, включая уникальную ссылку на абстрактный тестовый

7

Страница 12

ГОСТ Р ИСО/МЭК 9S46 4-93

пример так. как определено в КАТ (напрмкер, указатель тестового примера КДТН или идентификатор теста);

d) ПБД, посылаемый нижним тестером в ТР и получаемый нижним тестером из ТР. включая запись подробной информации, содержащейся в параметрах ПБД и данных пользователя;

с) абстрактные тестовые события, определенные н соотвстству ющем абстрактном тестовом примере; к ним относятся все абстрактные сервисные примитивы, наблюдаемые нижним тестером, нее тестовые события, полученные через процедуру скоординированного тестирования ннжннм тестером, который содержит информацию, полученную из верхнего тестера, и идентификацию соответствующих пунктов контроля н наблюдения (ПКИ);

f)    запись результата каждого тестового примера; что будет либо назначение вердикта, либо ошибка абстрактного или выполнимого тестового примера, либо ненормальное завершение тестового примера:

g)    отметку времени или упорядоченную последовательность всех тестовых событий, зарегистрированных нижним тестером в той последовательности. в которой они наблюдаются;

h)    любую дополнительную ннформаиию. необходимую для эталонного стандартного КАТ.

И |> л м <• ч а н in- J - Пример h отмоется к случаю. кси'да aOctpaitinuA и стгпый пример, таписаинын в КДТН. определяет, что информации а промгжуточ ныл результатах (о колонке «вердикт») иди метки (а колонке «метка») должны быть ларегнетрировдиы в журнале соответствия при появлении соответствующею тгеюного события.

Журнал соотпстетпи» должен отражать все наимемоиании, аббрениатуры н чиачтия с игнользоаднкеи крмшюлогии и соглашений, «ишсдслсииых и опии фиьации протокола, синтаксис nqxaaw (при ею исполью'ианин) н.<к подомный стандартный КАТ (с лреллоч-чннсм первым двум и? норечнеленных).

СТ должны <1&я5зат1> способностью вырабатывать на 6)м»жном носителе журнал соответствия Рекомендуется также, чтобы была доступна мвшкиМоЧктяс-май форма журнала есютоетстиим е мвизалевтиым содержимым

Примечание 2 — Рукинодмпне материалы но сш данию журнала сиот встетвия см. в приложении А, А З

6 5 Требования к развитию формы ДИРПТ

Неполная форма ДИРПТ, определенная в эталонном стандартном КАТ, должна быть развита с учетом средств тестирования. Для этого исполнитель теста должен добавить в неполную форму ДИРПТ те дополнительные вопросы, на которые необходимо дать ответы с целью подготовки СТ дли конкретной ТР.

Исполнитель теста должен включить в расширенную форму ДИРПТ всю информацию, относящуюся к реализации эталонного

Страница 13

ГОСТ Р ИСО/МЭК М44-4-93

стандартного КЛТ. которая необходима клиенту для заполнения ДИРПТ.

Исполнитель теста должен обратиться к приложению С ГОСТ Р ИСО/МЭК 9646—5 и разработать расширенную фирму ДИРПТ и соответствии с этим приложением.

Полученная в результате расширенная форма ДИРПТ должна быть предоставлена испытательной лаборатории с тем, чтобы она могла ввести в нее требования, определенные в 6.4.3 и приложении С к ГОСТ Р ИСО/МЭК 9646-5.

6.6 Требования, относящиеся к другой документации

С'Г должны сопровождаться документацией для того, чтобы испытательная лаборатория могла выполнять операции тестирования в соответствии с эталонным стандартным КАТ и с требованиями ГОСТ Р ИСО/МЭК 9646—5 относительно информации, которая должна быть предоставлена клиенту.

Эта документация должна содержать:

a)    идентификацию СТ. дату создания, номер версии и идентификацию КВТ (при его наличии);

b)    наименование и номер версии международного стандарта или рекомендацию МКК'ГТ по спецификации протокола (и. в соот ветствующих случаях, по определению услуг); наименование и номер версии эталонного стандартного КАТ в сочетании с перечнем принятых технических поправок;

c)    описание СТ (см. руководящие материалы в А.4);

d)    спецификацию процедур скоординированного тестирования н верхнего тестера в соответствии с требованиями эталонного стандартного КАТ;

e)    тестовые примеры (при наличии таковых), которые не могут быть выполнены вследствие ограничений СТ.

II р и м рч а н и «■ Такие ограничении должны бмп. ксклхтнними н могут MMc-tb vicio ro.u>*o п случаях, когла конкре тные тестовые примеры не могут Own. иросто рсалюоваиы;

f)    описание тех процедур выполнения тестов, которые должны выполняться испытательной лабораторией и/или клиентом, и которые специфичны для данных СТ;

g)    заявка о соответствии эталонному стандартному КАТ;

h)    заявка о согласованности с настоящим стандартом;

ij руководящие материалы по интерпретации журнала соответствия.

Если исполнитель теста обнаруживает ошибку в каком-либо абстрактном тестовом примере или обнаруживает какой-либо абстрактный тестовой пример, который ориентирован на ошибочные

9

Страница 14

ГОСТ Р ИСО/МЭК 9646 -4-93

или неоднозначные требования в спецификации протокола, он д<ы жен идентифицировать такие тестовые примеры в документации сопроводительной для СТ.

Прмксчанис -- Исполнители ттрг» лолжми также нвпрзплять и coot (лгтетвующнй ксмито» ИСО/МЭК «ли МККТТ «лишения об ошибках. котор’* идектифиинруют проблему.

7 СОГЛАСОВ^НОСТЬ

Средства тестирования ТР согласуются с настоящим стандартом только в том случае, если выполнимы все требования раздала 6.

И {Ml U I ч д н п с — Основные способы проверки ТОГО. ЧТО СТ ргали ;уы1 четыре функции, спляиные <’ |калилз|уи‘!1 /гстоя |7. е создание, пыбор. пярдот ризаин» г Ruiio.tiK-iiHcl, содс-ржатся « журнале гоотвртстпня.

10

Страница 15

ГОСТ Р ИСО/МЭК 5X546 - 4-93

ПРИЛОЖЕНИИ Л (спрамчнос)

ДОПОЛНИТЕЛЬНЫЕ РУКОВОДЯЩИЕ МАТЕРИАЛЫ ПО РЕАЛИЗАЦИИ

ТЕСТОВ

А I Дополнительные руководящие материалы но СТ

4*1.1 В lit* леи к«

U ,ч.1 я кии ирндожеинп содержатся руководящие материалы о iд«х’оОах реализации я ТС трех абстрактных функции теетиронания, определенных п 7 1 ГОСТ Р ИСО.'.Ч;-!К У646 I. а ичеин'г нижнего тсстсра, BipxiKiu тестера и

Щ Дур СКООрДПННрОШ1НиОГО ТССТЯрОНЗНИЯ

Примечание - Тестирующая енсп u;i должна обладать пкм-обппСтмо ■ :.-'iuip<Hiari<K к pit тличнич ОТ

A.J2 Реализация и и ж не j о не I о р а

Для каждою метода абстрактною ьоироивини, определенною п !'<Х‘Т I* ||С.О/ЧЭК    ОСНОВНЫМ обЫ'МОМ ДЛЯ КОор.ЫНИНКИ И КОЬТрОДЧ ТеСПфОЯЛ-

мин яилистги нижний тестер. Функции имжнт» теек-ри с<кмоит и том. ч-тобм

з) прогонять выполнимые тестовые примеры, которые обратимся и* лбе 1 ракгиых тестовых примеров;

Ь) вырабатывать индикации вердиктов в соотпгтстми с ладонным стандарт-т*м КАТ;

cl коитно.шрошнь и наблшДиТЬ tvciouw событии, которые i'xo \*т i> а Ост • «лыиый тестовый пример (к ^тич событиям относятся генерация и прием ПБД. :Ое-'рактпые cvpaiiciibii приятней, тирании и прием 11БД адмишктративиог** ^ирвлення тестированием, события. относящиеся к процедурам скоординированно-т«стирования|

Нижний тигл-р представляет собой часть независимой реальной счетами, усматриваемой как тестирующая система Как данная тестирующая система, так и ТС обесиемииают иижерасположе-иные услуги ниже самого нижнею урокия 1*Р«>ТОКОЛОП 1 ТР

А.1,2.^ Дотчееки»- объекты ВОТ н нижнем потере мо;ут «означаться ра-* яичными способами, например

aJ кодер/декодер — просто кодирует АСИ и ПБД в соотвстствли с потреб-nciR’JH прогоняемою ттета. не иплиясь реализацией рассматринаомою протокола;

Ь) расширенная реализации — реализации рассматриваемого протокол*, ^модифицированная добавлением генератора ошибок, модули конфигураций иди другого подобного устройства для того, чтобы можно было гарантировать. что исдсйсгви те.1Ы1 ые или необычные ДСП «ли ПБД будут генерироваться о соотпет <-тп«14 с потребностями прогоняемою истового примера.

А.1.3 Реализация верхнем* тестера

С'Г обеспечивают реализацию или спецификацию функций верхнего тестера *< соответствии с методом абстрактного пеги роения, используемым и эгвлошюм •хйидартном КАТ.

Верх a nit тестер может принимать различные формы, например:

a)    программная реализация (которая можег Сыть, но не обямиелимо. не»;! висимоб от построения ТС или ТР). содержащаяся в ТС над ТР. с регионом яре ••братова и ий. который сопрягается с локальной реализацией ДСП;

b)    человек-оператор — функции верхнего тестера выполняет физическое ли по, имеющее доступ к интерфейсу с пользователем, который отображается на

II

Страница 16

ГОСТ Р ИСО/МЭК 9646- 4-93

сервисную границу ТР. имеет доступ к реализации соопм-тствуимцих ACII и ма пипулируст ими.

с) концептуальный верхний тестер, т. е. для реализации функции верхнею тестера используются верхние уровни ТС без использовании каких-либо дополни тельных механизмов (»тот вид верхнего тестера может использоваться только дли реализации метода удаленного абстрактного тестирований).

AJ.4 Реализация процедур скоординированного тестирования

Существует множество способов взаимодействии нижнего и верхнего тестера. ианример. с синхронизацией или бет, с использованием канала обмена данными дополнительно к каналу, используемому между ннжнкм тестером п ТР ИЛИ бел 7ЭКОООГО, И др.

Можно идентифицировать несколько общих типов реализации: в) человек-оператор — функции перхкего тестера выполняет физическое лицо, имеющее доступ к интерфейсу с пользователем, который отображаете и па сервисную границу ТР; &тот оператор осуществляет синхронизацию работу ииж него тестера, ход которой может быть обнаружен различными средствами, пап ример, наборам пробных сообщений от интерфейса пользователя нижието тестера;

bj интерпретатор сценария — верхний тестер реализуется удаленным ииг«р претатором сценария; он воспринимает его инструкции из генерируемых фай.км а сочетании с установкой нижнего тестера и с регионом преобразивиий между ним и сервисное границей ТР,

с) Протокол админ негативного управлении тестированием — верхний тестер синхронизирован с нижним тестером с пометы» протокола администратии кого управления тестированием, который использует услуги, «рехостапляемые ТР и ниже расположенными уровнями, а также соответст вующие функции ним него тестера.

Л.2 Дополнительные руководящие материалы по процессу создания КВТ

Л,21 Общее описание

Процесс создании может происходить п следующих случаях

a)    во время реализации теста;

b)    со время установки СТ испытательной лабораторией;

c)    на стадии подгогонки tecta, чередующейся с процессами гыборо и на;>а метризации, для конкретной ТР;

d)    во время операций тестирования п результате интерпретации или ■ омни лнции эталонного КАТ.

11а рисунке А I показаны различные возможности комбинировании нроц-т-го» создания, выбора, параметризации и выполнения теста, которые ониепиы п разделе Б и требования к которым описаны и раздел- в

А.2.2 Исходные данные к процессу создании тсс то и Исполнитель теста должен рассмотреть следующие исходные данные а) эталонный стандартный КАТ для конкретного протокола ВОС, основанный на конкретном методе абстрактного тестировании и содержащий спецификацию процедур скоординированного тестирования;

Ь» форма ЗСРП для протокола ВОС;

с) неполная форма ЛИРПТ. обычно прилшаемвя к эталонному стандартному КАТ.

А.2.3 Обслуживание КВТ

Как только возможность выполнения КПВТ будет реализована н СТ и <-Т начнут нспользочатьсн. к исполнителю теста могут поступать из испытательной лаборатории отчеты о возникающих проблемах. Проблемы могут возникать < процедурами выполнении или относительно еоопк-тствмл эталонному стандарт

I -2

Страница 17

ГОСТ Р ИСО/МЭК 9046 4-**

INJMy КАТ. Н 72КИЛ С»гтуациях исполнитель госта должен ОбгСПСЧНВЛЬ С00ПК7С1 и> ющие коррекции.

ИСПОЛГМГСЛЬ Г<‘С7.1 должен 1ЭКЖ0 обоснсчиоатг* обиоплешк* Ст при кэл.л* оГшолдсики ятаионього стандартного КАТ

кнт

(XeiiaKR лило, им* мык TTVTU*»

I

Вь#5о/.

ЭСРП <* ДИР1Ш *

ВХ*Г I cutifUiutM* КИП

ПфЫСТИИШ»*.

rvxui)*ib ЛИРИ Г

исш ЭСПП

ПКЙТ

111^м< 1р««К<Ч>ННУМ

ькет>

HfHiKw 1к:н*< IIKBT


С*ш w


->


Учыоты* М*Т

I

IWCop. «*»•>;«;» **РП <N ДКРЛИ t

вКАТ (Приник КЛТ*1

уI

Ihpiwrrp^iuM».

•n.it.v»с» ДИРПТ (*.«ЗСРП>

4*

П1САТ <П»о*1*стр«*«>-•м«им* ВХАГ»

4

пквт


(VauiK

- ('ova


PmCVIiAK \ I Процесс con щии^/выиолкомия ПКВТ

АЛ Дополнительны* руководящие материалы но журналу соотвстстяим

Для йырабигк» журнала соотвсгсгвня исходиио следующее.

л) регистрировать фах7М'КСМи* tvkVHUlo события п п1х*;1сд|)п9тс^|/11<:с; и ».г инхиления в процесс*' рынилнемия КПВТ;

W анализировать информацию спвоситслыш соответствующих ныбраи ИЫ.Ч II НарЛМсТрНгОКиПНЫХ 1ГСТЧ>ЙМД ПрИИорие. 1ЦКТ>6рачуИ фаКТЦ«К*СКИО Ь'СТОИЫ» события п абстрактные ivctohlu события н рписгрир)* пс*> *ру;уи> тоблоди мук> информации.

Требовании нредт.нрляянея гальки ч информации. коллежаики записи i журнал cooTfo-ivrniifl, и к сносей у <ч представлении

Дна л ил упоридинспипго перечни флх'П'кскич n<*iwm событий ч<ж.ч *v и строен и каждый гестоаьй пример и выполняться 1и>сл1 вылалиенля ооследн**.ъ либо о»! М1Ш11 нмтииит&ся нач отдолът*»* прочссс нос.ч выполнения КИОТ либо on WO/K44 бми» пополнен iicM/n.ni/M сочетайте *тих дочмов. Г.к« г* г»ы нМнолнгиня этого анилин и ирекенл *\о пытхтигинм относительны прехии ..м полпенни КПВТ Lf CittiMopmwudiibJ.

Как определено и б \ ОТ должны облагать сштсойиопьи* лыри.ъчшам курка* <чют*стс7оир на бумажном носителе Рекомендуется также предусмотрел машинно-читаемый журнал сослпстсыич эквнпалензного содержания.

ПрокеСС С001ЛНИЯ журиилл Сч*ОТв* ГС7ЯИЯ ЗИОЖИО коIVlUUTyЗЛЫ 10 иокйлагь На приш'ро рисунка А.2.

Страница 18

ГОСТ Р ИСО/МЭК 9в4«-4-93

ОЛлжи'циш

шшатшя} Позок уп^ш.1«и>шг4 «нфирк*ли»

') Потс* 0б»4«КМЬ»мЯ тф.'рмлш*»

Л

---) Потс« 4июмгооис« вяфоршкяи

Рисунок А 2 — Создание журнала соответствия

Примечание -« КеоОхолимо, чтобы кспытатын.изя лаборатория сохраняла. как минимум, либо упорядоченный перечень фактических событий теспцюиа ник. либо машинно-читаемую версию журнала соответствия.

А.4 Дополнительные руководящие материалы но документации

А.4П Цвел сине

Помимо соблюдения требований, определенных в 64 и G.5. рекомендуется подготовить следующие документы:

а( информацию о тестирующей системе,

b)    описание СТ;

c)    информацию о клиенте непитательной лаборатории;

<1) рабочие инструкции испытательной лвбораторки.

А.4.2 Документ «Информация о тестирующее системе»

СТ приспособлены к конкретной тестирующей системе. Этот документ должен содержать следующую иифорхаиию. относящуюся к данной тестирующей системе:

з> оборудование (тестирующей системы);

b)    наименование и номер персик операционной системы (тестирующей системы);

c)    наименование и номер версии нижнего тестера;

d)    наименование и номер ьерсии верхнего тестера (при его наличии);

/

Страница 19

ГОСТ Р ИСО МЭК Н46-4-93

<•1 оборудование и/или процедуры, необходимые для .а»1к ми я.коту тестера с ТР для целей тестирования (т. с. (N--I)-услуге);

f) оборудование я/или процедуры, необходимы? д-iv счплк и-рхисо тестера (при ого наличии I с ТР для целей тестирования;

р) наименование, место расположения и контактная информация организации, отвечающей за обслуживание СТ и КАТ и выдач;- консультаций по ним А.4.3 Документ (Описание с р с дет и ' тестировании» Этот документ должен содержать описание следующих аспектов СТ. отн*> ся1цихся к эталонному стандартному КАТ:

a)    нижний тестер; описание нотации выполнимого *vc-прования и cv преобразование о нотацию абстрактного тестирования Iнапример, п КДТН) Описа ни* способов контроля, наблюдения и хранения ДСП и демонстрация того, что пыбранимй метод реализует правила упорядочении. :< и.) мод я тис I. абстрактным 7ССЮЙЫМ примерам;

b)    верхний тестер:    описание    способов контроля. наблюдения и хранения

АСП (за исключением метода удаленного тестирования), поканянакмцме степень соблюдения требований к функциям верхнего тссп-ра.

c)    координация тестирования описание преобразования процедур скоорди нироиаиною тестирования: п их реализацию, требования к ним определены в эталонном стандартном КАТ;

d)    процесс выбора: описание ислольюнапия ЗСРП и ДИРПТ при выборе абстрактных тестовых примеров, пригодных для тестировании ТР.

с) процесс параметризации: описание использования ЗСРП и ЛИ РИТ ь параметризованных выполнимых тестовых примерах при ’тестировании ТР. f) средства выработки журнала соответствия

А.-4.4 Документ «Информация для клиента непитательной лаборатории»

В >том документе исполнитель тестз должен обеспинть следующую ннфор манию, позволяющую испытательной лаборатории информнровать клиента о степени готовности ТС для тестирования:

a)    верхний тестер: если »тот компонент предусмотрен . это описание способа отображения его интерфейса на соответствующую реализацию сервисной границы, любые предположения о реализации определения услуг, либо о функционалы! ых возможностях или ресурсах, доступных и ТС; если же верхний тестер не предусмотрен, то это описание того, каким образом следует охватить его рса лизанию; такое описание содержит протокол административного управления тес тнроваиием, прн его наличии;

b)    координатор тестирования: что должен делать клиент для реализации процедур скоординированного тестирования — описан ж- способа выполнения любой ручной координации взаимодействия между ТС и нижним тестером, при ее необходимости, — любая соответствующая информация о синхронизации, на пример, ожидаемые рабочие параметры протокола административного управления тестированием;

c)    нижерасположеиные услуги; указать, что клиент должен обеспечить достаточно надежную (N—11 -услугу и, по возможности, пояснить, каким образом этого можно достичь (не обращаясь к конкретному компьютеру)

А 4.5 Документ «Рабочие инструкции испытательной лаборатории»

В этом документе исполнитель тес га должен предусмотреть информацию, Которая может стать пособием и руководящим материалом для испытательной лаборатории прн выполнении тестирования с помощью СТ. диагностике проблем к повторном прогоне тестов в случае необходимости. Сюда может относиться: а) подготовка тестирования: способ использования ЗСРП и ДИРПТ для выполнения процессов выборки и параметризации тестов с помощью СТ;

15

Страница 20

ГОСТ Р ИСО/МЭК 964в-4-93

Ь) выполнение тестировании: описание процесса прогона recto# я мижием тсстсрс н анэлюа результатов,

о кок; роди выполнения- определение степени детализации контроля при выполнении тестовых примеров: рабочие инструкции должны описывать, капни образдм выполняются тесюпмс примеры и. тем самым, косвенно определять ко личество тестовых примеров. которые viol у г быть выполнены ь виае одной исполняемой гдннппы. крайним случаем является наличие одной единственной команды на всю 1егюв>ю кампанию (тгети основной вчанмоевмчи. тесгы функциональных возможностей и тесты поведения)-, другой крайний случай — наличие команды на каждый отдельный шаг тестирования я каждом отдельном тестовом при--мерс КВТ.

d > создание журнала соответствия; контроль его создания, возможность обратного отображения журнала соответствия на стандартные тестовые примеры о спевнфикаики эталонного КАТ.

е! верхний lectep: описание любых исходных доверительных тестов, подлежащих выполнению на ьажнем тестере и способа получения хранимых тестовых событий на верхнего тестера;

I) процедуры скоордйиипопанчого тестирования, описание ручного способа осуществления координации между нижним и верхним тестерами н случае необходимости.

УДК 681 324 006.354    П85

Ключевые слова: информационная технология, взаимосвязь открытых систем, методология, основы, аттестационное тестирование. реализация тестов, средства тестирования, комплект абстрактных тестов, функции абстрактного тестирования, журнал соответствия, тестирующие системы

око У <002

Редактор В П. Огурцов Технический редактор О. Н. Никитина Корректор Н. И. Галрищук

Ся»ио ■ м»0 к 01.94. Пол». о псч. 2«.0*94. Уел. я л. 1.:$ Уел. nii. oir 1.16 Уч-ам. a. J.JO.

Тир» ж 368 жа С ИЖГ.

0*at*a .Hi.*» Пэтгт»» Издательство сч»иа*цтов. 107070 Моста КЪлаХ»>иы* пгр. 14. Ктужена* типографии стиц^гои уа Москоаскщ. 2Ы 3*к IW