Экзаменационные процедуры с использованием тестовых технологий реализуются уже другой системой – сетью так называемых авторизованных центров тестирования, представляющих специализированные компании, суть бизнеса которых состоит именно в обеспечении реализации процедуры тестирования, обеспечивающей легитимность ее результатов. Крупнейшие мировые IT-вендоры, как правило, доверяют проведение экзаменов по своим тестам одной из двух известных компаний такого рода – Prometric и Pearson VUE, реализующих процедуры тестирования через обширную сеть своих центров, распределенных по всему миру, в том числе и в нашей стране. Эти центры фактически решают задачу независимой дистанционной, отделенной от владельца теста проверки уровня подготовленности испытуемых. Надежность реализуемой ими экзаменационной процедуры обеспечивает авторитет и мировое признание выдаваемых по результатам экзаменов профессиональных сертификатов. Эта надежность обеспечивается комплексом весьма жестких требований, предъявляемых компаниями Prometric (http://www.prometric.com) и Pearson VUE (http://www.vue.com) к своим Центрам тестирования, и системой контроля их деятельности.
Приведем выдержки из требований Prometric к своим Центрам тестирования.
Prometric осуществляет бизнес в области разработки и администрирования компьютеризированных заданий для различных академических и профессиональных, корпоративных и ИТ-клиентов. Для этого Prometric осуществляет управление сетью компьютеризированных центров тестирования во всем мире, предназначенных для проведения таких тестов.
Авторизованный центр тестирования (ATPC) Prometric – это то место, где предоставляется услуга проведения тестов под маркой «Авторизованный Prometric Центр Тестирования». Этот центр выполняет свои функции согласно контракту. Услугами центра является планирование, проведение и управление всеми тестами, предлагаемыми и предоставляемыми кандидатам через АТРС, а также оценка и другие процедуры, выполняемые по требованию Prometric.
Администратор центра тестирования – это персона, которая специально обучена для управления тестами и работе над программным обеспечением Prometric, удовлетворяющая требованиям Prometric предъявляемым к администраторам центра тестирования. Prometric осуществляет программу подготовки, сертификации и переобучения работников АРТС, которые будут нести ответственность за функционирование АРТС, удовлетворяя стандартам, предъявляемым к данным услугам со стороны Prometric или тестирующего клиента. Эти персоны сертифицируются в Prometric как сертифицированные АРТС администраторы и несут главную ответственность за работу центра, а также обучение других работников центра. Администратор должен проходить пересертификацию каждый год.
АРТС обязан обеспечить условия, удобные для кандидатов (включая инвалидов) и обеспечивающие безопасность тестирования, как это определено в Руководстве Prometric. Комната, в которой проводится тестирование («Лаборатория»), должна удовлетворять следующим требованиям:
- Это должна быть замыкаемая непроходная комната.
- Лаборатория должна иметь окно наблюдения и(или) камеры постоянного наблюдения через монитор за всеми кандидатами.
- Комната администратора должна находиться отдельно от лаборатории. Администратор не должен располагаться в лаборатории.
- Рабочие станции должны размещаться таким образом, чтобы кандидаты не могли видеть экраны друг друга, для этого должны установить перегородки.
- В лаборатории не должно быть никаких полок и шкафчиков, доступных кандидатам.
Кроме того, необходимо придерживаться следующих важных процедур обеспечения безопасности:
- АРТС должен содержать в штате, по крайней мере, одного сертифицированного администратора. Если центр проводит тест для более чем 10-ти кандидатов одновременно, то должны присутствовать минимум два администратора.
- АРТС должен обеспечить конфиденциальность содержания тестов и защищать материалы от копирования.
- Файловый сервер должен находиться в защищенном месте, вне лаборатории и быть доступен только сотрудникам управления центром.
- АРТС должен обеспечить сохранность персональных вещей кандидатов, которые не разрешается вносить в лабораторию (кошельки, дипломаты, мобильники, пейджеры, электронные записные книжки и т.п.).
- АРТС обязуется принимать любые дополнительные меры безопасности по инструкции Prometric или тестирующих клиентов.
- АРТС обязуется известить Prometric о любых брешах, обнаруженных в системе безопасности.
- АРТС обязуется не давать никаких гарантий прохождения теста и сертификации кандидатов.
Prometric предъявляет следующие требования к администратору АРТС:
- Должен быть старше 18 лет.
- Не должен допускать к экзаменам или администрировать экзамен для своих родственников и членов семьи.
- Должен соблюдать процедуру, установленную Prometric для всех кандидатов, включая работников АРТС.
- Не должен иметь на данный момент какой-либо ИТ-сертификат, не должен обучаться в классах ИТ-сертификации в течении последних двух лет. Кроме того, не должен подавать на ИТ-серти-фикацию, пока работает администратором АРТС.
- Не должен помогать кандидатам, разглашая вопросы тестов, включая, например, такие методы, как: копирование, фотографирование, печать экрана, цифровая передача, рукописная передача, аудио- и видеозапись, любые электронные средства и технологии, или просто пересказывая словами.
- Не должен предоставлять возможность тестирования любому кандидату, не прошедшему стандартный процесс регистрации в Prometric.
Prometric имеет право на проведение технического и финансового аудита APTC. Prometric и каждый тестовый клиент (компания, по тестам которой проводятся экзамены в APTC) резервируют право послать наблюдателя в APTC с надлежащей идентификацией путем фотографирования наблюдений (мониторинга) сеансов обучения персонала APTC, администрирования процедуры тестирования, периодов пред- и посттестирования, проверять меры безопасности APTC. Prometric также резервирует право послать к APTC независимого наблюдателя, действующего под видом кандидата, для того чтобы наблюдать администрирование тестированием пред- и постпериодов тестирования и проверять меры безопасности в любое время в течение срока соглашения Prometric с APTC.
Prometric может расторгнуть соглашение с оператором APTC в случае любых действий, вызывающих неустранимое бросание тени на репутацию Prometric, репутацию любого клиента-лицензиара Prometric или тестируемого кандидата, включая создание или публикацию замечаний или инструкций, отличных от Prometric, и других APTC-центров, которые являются критическими или унижающими любой элемент отношений между оператором и Prometric, а также в случаях любого фактического или потенциального нарушения секретности или проведения тестирования, определенное Prometric по собственному усмотрению, которое может приводить к любой потере целостности программ тестовых клиентов, тестовым данным, результатам тестирования, или любой части системы тестирования Prometric, или других конфиденциальных или частных вопросов.
Приведенные выше требования Prometric к своим центрам тестирования, в большой степени совпадающие с требованиями компании Pearson VUE и других компаний, занимающихся аналогичным бизнесом, большой практический опыт функционирования такого рода центров, наконец, отечественный опыт развертывания Пунктов приема Единого государственного экзамена (ЕГЭ), показывают принципиальную возможность обеспечения объективной оценки уровня подготовки лиц, обучаемых дистанционно, вне стен реализующего процесс обучения образовательного учреждения, и при отсутствии очного, аудиторного общения обучаемых с ведущими учебный процесс преподавателями.
Суть этого решения состоит в том, что ведущему дистанционный учебный процесс образовательному учреждению необходимо иметь в населенном пункте проживания удаленного контингента его студентов некий центр, с которым устанавливается степень доверительности, позволяющая использовать результаты дистанционного тестирования в качестве базы для объективного оценивания обучаемых. Юридическое оформление гарантий необходимой степени такой доверительности осуществляется путем оформления соглашения между образовательным учреждением и оператором, осуществляющим тестирование, которое определяет требования к техническому обеспечению и регламентам процедуры тестирования, а также к системе контроля корректности их исполнения. Очевидно, что организация такого рода центра требует определенных материальных затрат со стороны вуза, ведущего дистанционный образовательный процесс. Тем не менее, учитывая иной, в отличие от приведенного выше примера центров Prometric, масштаб деятельности, затраты могут быть снижены за счет реализации приведенного в примере комплекса условий не в полной мере, а в допустимом разумном объеме, определяемом реальной ситуацией. То, что к персоналу центра не предъявляется никаких требований, касающихся владения предметом учебных дисциплин, по которым может производиться тестирование, также упрощает организацию тестового центра и подбор его персонала. В современных условиях такой центр может быть развернут, к примеру, даже на базе типового имеющего доступ в Интернет школьного компьютерного класса, при соответствующем, естественно, его техническом дооснащении, например, средствами видеонаблюдения, и дооборудовании рабочих мест. Во всяком случае, организация и содержание такого центра является существенно более простой задачей, чем организация филиала или представительства вуза, ведущих учебный процесс вне головного вуза, и является, на наш взгляд, вполне реальной задачей, позволяющей обеспечить важную составляющую распределенной системы непрерывного образования – объективный дистанционный контроль уровня усвоения изучаемого материала, проходящими обучение лицами.