Методы построения многоканальных многопроцессорных систем сбора данных для экспериментальных установок ЛВЭ ОИЯИ тема автореферата и диссертации по физике, 01.04.01 ВАК РФ

1. Характеристика экспериментов, проводимых в физике высоких энергий и релятивистской ядерной физике.

1.1. Характеристика систем сбора данных (ССД).

1.2. Этапы развития архитектуры систем сбора данных.

1.2.1. Однопроцессорные системы.

1.2.2. Многопроцессорные системы централизованного типа.

1.2.3. Многопроцессорные системы с распределенными вычислительными ресурсами.

1.3. Средства построения систем сбора данных.

1.3.1. Магистрально-модульные системы.

1.3.2. Процессорные элементы в системах сбора данных.

1.3.2.1. Микропроцессоры.

1.3.2.2. Одноплатные процессоры.

1.3.2.3. Процессорные фермы.

1.4. Архитектура современных систем сбора данных.

1.4.1. Большой электрон-позитронный коллайдер LEP.

1.4.2. Ускоритель Тэватрон.

1.4.3. Ускоритель HERA.

1.4.4. Большой адронный коллайдер LHC.

1.4.5. Релятивистский ядерный коллайдер RHIC.

1.5. Выводы.

2. Организация многоканальных систем сбора данных в Лаборатории высоких энергий ОИЯИ.

2.1. Постановка задачи.

2.2. Системы сбора данных с централизованным управлением.

2.2.1. Организация системы сбора данных на основе мини-ЭВМ.

2.2.1.1. Описание архитектурных особенностей системы сбора данных.

2.2.1.2. Минимизация времени считывания.

2.2.1.3. Средства синхронизации.

2.2.1.4. Средства контроля и управления.

2.2.1.5. Экспериментальный результат, полученный с помощью ССД установки ФОТОН.

2.2.2. Основные методические результаты.

2.2.3. Использование ССД на основе мини-ЭВМ с системой радиального подключения периферийных устройств для других исследований.

2.2.4. Организация многоканальных систем сбора данных на базе микроЭВМ.

2.2.4.1. Описание драйвера ветви.

2.2.4.2. Архитектура автоматизированной системы контроля триггера установки ГИБС.

2.2.4.3. ССД для переднего детектора установки СФЕРА.

2.2.4.4. Организация стендов.

2.3. Выводы.

3. Организация многопроцессорных систем сбора данных.

3.1. Системный крейт САМАС как средство организации ССД.

3.1.1. Назначение.

3.1.2. Магистраль системного крейта САМАС (СКК).

3.1.3. Арбитраж ресурсов магистрали СКК.

3.1.4. Передача данных.

3.1.5. Организация прерываний.

3.2. Использование многопроцессорного режима работы в ССД.

3.3. Организация двухуровневой многопроцессорной системы для построения системы контроля и управления параметрами медленного вывода пучка из синхрофазотрона ОИЯИ.

3.4. Использование СКК для построения ССД и сжатия экспериментальной информации на установках БИС-2 и АЛЬФА.

3.5. Использование СКК для проведения экспериментов СЯО, ДИСК и Кристалл на линии с ЕС ЭВМ.

3.6. Выводы.

4. Организация ССД на основе магистрально-модульной шины VME.

4.1. Описание системного контроллера шины VME.

4.2. Устройство сопряжения магистрали Qbus с шиной VME.

4.3. Использование VME в подсистеме управления циклом сверхпроводящего синхротрона.

4.4. Структура микропрограммного драйвера ветви САМ АС.

4.5. Использование аппаратуры в стандарте VME для установки СФЕРА.

5. Характеристика многопроцессорных систем для параллельных вычислений.

5.1. Оценка эффективности многопроцессорной обработки задач.

5.2. Многопроцессорная параллельная обработка событий.

5.3. Расчет эффективности использования микроЭВМ 168/Е для обработки экспериментальной информации.

5.4. Создание системы параллельной обработки экспериментальных данных на основе аппаратуры в стандарте VME.

5.5. Исследование прототипа многопроцессорной системы обработки данных.

5.6. Выводы.

Экспериментальные исследования, проводимые в Лаборатории высоких энергий ОИЯИ на протяжении последних 25 лет в области физики частиц высоких энергий (ФВЭ) и релятивистской ядерной физики (РЯФ), явились основным стимулом исследований по созданию новых методов и средств организации многоканальных многопроцессорных систем сбора данных.

В начале 70-х годов в Лаборатории высоких энергий ОИЯИ для проведения исследований на синхрофазотроне и синхротроне ИФВЭ (Протвино) стал создаваться ряд экспериментальных физических установок нового типа с использованием электронных методов регистрации информации, получаемой с детекторов. В практике физического эксперимента начали широко использоваться (1) такие многоканальные детекторы, как проволочные камеры, сцин-тилляционные, черенковские и полупроводниковые годоскопические системы; (2) малые ЭВМ, специализированные для процессов управления, и (3) электронно-вычислительная аппаратура модульного типа для регистрации информации с детекторов, ее преобразования в цифровой код и передачи в ЭВМ.

На протяжении последующих лет происходило непрерывное совершенствование технических средств эксперимента, которое было направлено (1) на достижение более высокой точности в определении основных величин, характеризующих взаимодействие частиц и ядер, (2) на регистрацию процессов с высокой множественностью появления вторичных частиц и (3) на выделение редких событий в условиях высокого фона. Именно эти факторы обусловили рост числа каналов регистрации и соответствующее увеличение объема электронной аппаратуры в системах сбора данных (ССД), увеличение скорости регистрации событий, усовершенствование средств синхронизации и оперативного контроля за ходом эксперимента.

Все это привело к необходимости дальнейшего развития и совершенствования методов построения ССД и определило цели настоящего исследования:

• выработку архитектурных принципов построения многоканальных многопроцессорных систем сбора данных;

• проведение исследований, направленных на уменьшение мертвого времени установки;

• организацию параллельных каналов считывания информации с детекторов установки;

• создание алгоритмов и средств, обеспечивающих проведение операций по упаковке данных и их первичной сортировке в реальном масштабе времени;

• создание средств организации многоканальных многопроцессорных систем сбора данных;

• разработку средств объединения модулей ядерной электроники, вычислительной техники и всех используемых компьютеров и процессорных модулей в единый комплекс;

• создание аппаратуры, алгоритмов и программ, предназначенных для организации первичной обработки информации, а также организации оперативного контроля за ходом проводимых экспериментов.

Диссертация написана на основе работ, выполненных в течение 1973-1998 годов в Лаборатории высоких энергий ОИЯИ [1-49].

Экспериментальные исследования, проводимые в ЛВЭ ОИЯИ, всегда были направлены на решение самых современных задач в области ФВЭ и РЯФ. Актуальность этих исследований во многом определялась развитием ускорительной базы Лаборатории. В начале 70-х годов в Лаборатории на синхрофазотроне впервые были получены пучки релятивистских дейтронов. В последующие годы на синхрофазотроне были ускорены пучки релятивистских ядер.и поляризованных дейтронов. В 1993 г. в Лаборатории высоких энергий введен в действие первый специализированный сверхпроводящий ускоритель ядер на высокие энергии НУКЛОТРОН. Все это определило актуальность разработки и создания аппаратных и программных средств, обеспечивших построение систем автоматизации и сбора данных для ряда уникальных экспериментальных физических установок, а также ряда систем и стендов базовых установок Лаборатории высоких энергий ОИЯИ. Это - ФОТОН, АЛЬФА, БИС, КРИСТАЛЛ, ДИСК, СЯО, ГИБС, СФЕРА, медленный вывод пучка частиц из синхрофазотрона и др.

Уровень требований к организации систем сбора данных во многом определяет обширная программа исследований Лаборатории, а также широкое участие ученых ЛВЭ в работе международных коллективов при проведении исследований в ЛВЭ, ИФВЭ (Протвино) и ряде других ведущих научных центров (ЦЕРН, ФНАЛ, ДЕЗИ и др.). Экспериментальные установки Лаборатории создавались для проведения исследований на ускорителях заряженных частиц и были ориентированы на импульсный анализ и идентификацию множества вторичных частиц в области энергий от 100 МэВ до нескольких десятков ГэВ. Эти обстоятельства привели к необходимости построения высокопроизводительных ССД, которые позволили бы регистрировать достаточное количество событий изучаемого физического процесса за минимально возможное время ее экспозиции на ускорителе. Строгость задания заранее определенной выборки с детекторов в некотором интервале времени определяет долю полезных событий, которая содержится во множестве всех зарегистрированных событий. Ужесточение критериев отбора ведет к увеличению доли полезных событий, но при этом может привести к потере или не регистрации значительной части актов изучаемого физического процесса. Компромисс в выборе критериев первичного отбора возможен лишь при тщательном анализе специфических особенностей конкретной физической установки и изучаемого явления.

Основной задачей ССД является регистрация максимально возможного количества полезных событий. На этот процесс в первую очередь влияют эффективность отбора событий и время, затрачиваемое на чтение данных о событии, что во многом зависит от способа организации ССД.

Следует отметить, что каждая экспериментальная установка является уникальным сооружением, основанным на индивидуальном наборе детекторов, и предназначена для проведения ряда специфических исследований. Архитектура ССД, создаваемых для этих установок, должна отражать их специфику и уникальность, а также нести в себе элементы универсальности и возможности перестройки под решение новой экспериментальной задачи.

Научная новизна и значимость диссертационной работы заключаются в предложении и реализации ряда новых крупных оригинальных методических решений и создании на их основе уникальной экспериментальной аппаратуры. Внедрение этих решений внесло значительный вклад в организацию высоко3 производительного сбора данных с экспериментальных установок, работающих по программе исследований ЛВЭ ОИЯИ, и тем самым способствовало ускорению научно-технического прогресса в области физики частиц высоких энергий и релятивистской ядерной физики.

Предложены оригинальные методы построения многоканальных многопроцессорных ССД в виде единой информационной системы. ССД объединяет электронные модули, ответственные за регистрацию сигналов с детекторов и их преобразование в цифровой код, аппаратные процессоры и запоминающие устройства, необходимые для осуществления предварительной обработки зарегистрированной информации. Особое место играют методы передачи информации между модулями системы, которые реализованы за счет разработки интерфейсов ЭВМ и каналов внешней сети, разнообразных контроллеров, модулей синхронизации и других вспомогательных модулей. В системе предусмотрены специальные меры по обеспечению необходимого информационного пространства. Предложены средства по объединению однородных информационных каналов, выполненных в одном и том же стандарте, и магистралей, выполненных в различных стандартах. В качестве отдельных сегментов информационных каналов используются такие стандартные магистрали, как САМАС, УМЕ, РавШиэ и др. Для установок с требованиями, превышающими возможности стандартных средств, разработаны специализированные средства передачи информации. Решены проблемы по созданию интерфейсов, ориентированных на максимальное использование таких ресурсов каналов ввода-вывода ЭВМ, как пропускная способность и время отклика на сигналы прерывания. Обеспечено выполнение условий для приема максимально возможного количества событий изучаемых в эксперименте процессов. Для этого обеспечено решение проблем, связанных с минимизацией мертвого времени при приеме информации на одно событие. Предложены методы синхронизации процесса сбора данных по сигналам ускорителя, управляющих процессоров, подсистем отбора событий и командам оператора. Разработаны методы и средства контроля за ходом эксперимента в реальном масштабе времени. Методические исследования, связанные с разработкой аппаратных и программных средств организации многоканальных ССД в Лаборатории высоких энергий, проводились для архитектуры ССД как с централизованным, так и с распределенным управлением.

Практическая ценность полученных результатов состоит в решении проблем по организации многоканальных многопроцессорных систем сбора данных реального времени для экспериментальных установок, предназначенных для работы на ускорителях заряженных частиц.

Методы синхронизации процесса сбора данных по сигналам ускорителя, систем отбора событий и командам оператора, разработанные для первых систем сбора данных на линии с мини-ЭВМ, используются до настоящего времени.

Системный крейт САМАС послужил основой для создания следующих систем: измерения и контроля параметров на Синхрофазотроне; сбора данных для экспериментальных установок ЛВЭ БИС-2, Альфа, Кристалл, СЯО, ДИСК-2 и прототипа адронного калориметра установки ДЕЛФИ (ЦЕРН); автоматизации бустерного синхротрона в ИФВЭ (Протвино). Функциональные возможности многопроцессорной магистрали системного крейта КАМАК стимулировали разработку для него ряда дополнительных модулей, которые обеспечивали выполнение специфических функций управления потоками принимаемых данных на установке БИС-2 и прототипе адронного калориметра установки ДЕЛФИ.

Проведение экспериментов на установках, которые были созданы с использованием средств, рассматриваемых в диссертационной работе, позволило получить целый ряд фундаментальных результатов в областях ФВЭ и РЯФ:

• дифференциальные сечения рождения 11-мезонов при 3,3 ГэВ/с (установка ФОТОН);

• обнаружение частиц с ненулевым квантовым числом "очарование", характеристики рождения нейтронами с энергией 40 ГэВ Ас гиперонов, антигиперонов, очарованных барионов и узкого барионного резонанса N(1960) на установке БИС-2;

• спектры фрагментации релятивистских ядер дейтерия и гелия и данные по возбуждению дельта изобар в ядрах в процессе перезарядки 3Не в тритий на установке АЛЬФА;

• сечения кумулятивного рождения мезонов, протонов и барионных систем на установке ДИСК-2;

• характеристики процессов упругого и неупругого взаимодействия легких ядер, обнаружение высоковозбужденных состояний и дифференциальные сечения выхода 4Не на установке СЯО;

• экспериментальные доказательства о возможности отклонения пучка протонов с энергией 8,4 ГэВ изогнутым монокристаллом на установке КРИСТАЛЛ;

• свойства образования экзотических ядер (гиперядер, дельта-ядер) на установке ГИБС;

• величины А-зависимости сечений фрагментации релятивистских дейтронов в кумулятивные % -мезоны на ядрах углерода, алюминия, меди и свинца; спектры быстрых кумулятивных п -мезонов в зависимости от множественности сопровождающих заряженных частиц на установке СФЕРА.

Создание средств измерения и контроля параметров на Синхрофазотроне обеспечило сокращение времени, необходимого для настройки ускорителя и для перехода с одного режима работы на другой. Это в значительной степени способствовало улучшению параметров пучка частиц, выводимого на физические установки. Ряд разработок обеспечил создание стенда по организации автоматизированного измерения температуры сверхпроводящего модельного синхротрона СПИН и тем самым способствовал развитию методов по организации криогенных ускорителей. Использование драйвера ветви САМАС для шины ОЬиэ позволило создать систему управления функционированием источника Полярис - криогенного источника поляризованных дейтронов для ускорительного комплекса ЛВЭ.

Автор защищает настоящей работой:

1. Создание новых, научно обоснованных технических решений по разработке архитектурных принципов построения многоканальных многопроцессорных систем сбора данных для экспериментальных установок, работающих в области физики частиц высоких энергий и релятивистской ядерной физики. Внедрение этих решений вносит значительный вклад в ускорение научно-технического прогресса.

2. Разработку первого в странах-участницах ОИЯИ устройства с управлением от многочисленных источников (оригинальный системный крейт САМАС), которое обеспечивает создание универсальных многоканальных многопроцессорных систем сбора данных, ориентированных на работу в реальном масштабе времени в экспериментальных установках в областях ФВЭ и РЯФ.

3. Создание многоканального многопроцессорного информационного комплекса реального времени, являющегося основой для организации системы контроля и управления параметрами медленного вывода пучка частиц Синхрофазотрона.

4. Разработку и создание многоканальной системы сбора данных и комплекса аппаратных и программных средств, впервые в странах-участницах ОИЯИ обеспечивши регистрацию экспериментальных данных на линии с малой ЭВМ в реальном масштабе времени при проведении исследований радиационных распадов резонансов на экспериментальной установке ФОТОН.

5. Разработку высоконадежного и экономически целесообразного устройства для широкого круга лабораторных применений по организации однопроцессорных многоканальных информационных систем, управляемых микроЭВМ с магистралью Qbus.

6. Разработку алгоритма работы и создание аппаратного процессора по управлению процессами сжатия информационно-избыточных данных и перекодировки данных с детекторов годоскопического типа в режиме реального времени. Работы по интеграции этого процессора в состав систем сбора данных экспериментальных установок БИС-2 и АЛЬФА.

7. Создание впервые в странах-участницах ОИЯИ нового способа организации систем сбора данных с использованием магистрально-модульной шины VME, что обеспечивает управление системой от многочисленных источников и организацию параллельной работы нескольких процессорных устройств, а также позволяет объединять в рамках единой информационной системы электронную аппаратуру, выполненную в различных стандартах (САМАС, FASTBAS, VME). Организацию системы сбора данных спектрометра СФЕРА на одном из этапов ее создания на основе этого способа.

8. Разработку комплекса аппаратуры в стандарте VME и внедрение его в состав системы сбора данных спектрометра СФЕРА и многопроцессорной подсистемы управления циклом сверхпроводящего синхротрона СПИН.

9. Результаты исследований по созданию многоцелевого микропрограммируе-мого драйвера ветви САМАС в стандарте VME, позволяющего образовывать 7 до восьми стандартных ветвей САМАС и выполнять расширенный ряд операций по ускорению передачи массивов данных из модулей регистрации.

10. Разработку алгоритмов ускоренной передачи информации из групп регистров. Анализ и теоретическое обоснование методов, направленных на значительное уменьшение (в несколько раз) мертвого времени экспериментальных установок при приеме информации о событии за счет ускорения передачи экспериментальных данных и сжатия информационно-избыточных данных.

11. Проведение анализа многопроцессорных систем, ориентированных на параллельную обработку событий. Разработку варианта системы параллельной обработки экспериментальных данных на основе одноплатных процессоров в стандарте VME. Создание прототипа системы параллельной обработки данных, состоящего из трех процессоров, и исследование его работы при выполнении типичных задач обработки данных, полученных со спектрометров элементарных частиц в ФВЭ.

Основные результаты, изложенные в диссертационной работе, докладывались на международных симпозиумах по ядерной электронике в Будапеште (1973), Дубне (1975 и 1985), Братиславе (1983), Варшаве (1990 и 1992), Варне (1994 и 1997), на совещании по программированию и математическим методам решения физических задач в Дубне (1973), на всесоюзном совещании по автоматизации научных исследований в ядерной физике в Киеве (1976), на международном симпозиуме "Electronic Instrumentation in Physics" в Дубне (1991), на международных конференциях "OPEN BUS SYSTEMS'92 in Research and Industry" в Цюрихе (1992) и "REAL TIME DATA 1994 with emphasison DISTRIBUTED FRONTEND PROCESSING" в Дубне (1994), на международном совещании "Релятивистская ядерная физика: от сотен МэВ до ТэВ", в Варне (1998). Материалы диссертации отражены в 49 печатных работах [1-49] в виде препринтов и сообщений ОИЯИ, статей в сборниках "Краткие сообщения ОИЯИ", "Физика элементарных частиц и атомного ядра", журналах ПТЭ, САМАС Bulletin, Нуклеоника, IEEE Trans, on Nucl. Science, Nuclear Instruments and Methods, Nucl. Instr. and Meth. in Physics Research, а также в сборниках трудов совещаний, симпозиумов и конференций.

Основные результаты диссертации опубликованы в работах [1-49].

В заключение хочу выразить глубокую благодарность руководству Лаборатории высоких энергий ОИЯИ за содействие в проведении работ по теме диссертации. Я очень благодарен руководителям и сотрудникам коллективов экспериментальных и базовых установок Лаборатории ФОТОН, Медленный вывод, БИС-2, АЛЬФА, ДИСК-2, СЯО, КРИСТАЛЛ, ГИБС, СФЕРА, СПИН, ПОЛЯ

159

РИС, с помощью которых были внедрены в практику физического эксперимента и в состав подсистем ускорительного комплекса большинство исследований, выполненных по тематике данной работы. Я очень признателен своим коллегам по работе в отделе новых научных разработок и научном отделе автоматизации физических исследований за их многолетнюю большую помощь в создании аппаратуры, разработанной в рамках проводимых исследований. Особую благодарность я выражаю профессору КОЛПАКОВУ Игорю Филипповичу за многолетнюю поддержку в проведении большинства выполненных в данной работе исследований. Самую искреннюю благодарность я выражаю своим соавторам за помощь, оказанную мне при создании систем сбора данных и подсистем автоматизации для установок Лаборатории.

Заключение.

1. Смирнов В.А. Средства организации систем сбора данных для проведения экспериментов в области физики высоких энергий. - ЭЧАЯ, 1997, том 28, вып. 5, с. 1295.

2. Смирнов В.А. Использование "открытых" стандартов электроники для физических исследований. Краткие сообщения ОИЯИ, 1997, №4(84)-97, с. 71.

3. Смирнов В.А. Современные средства архивации данных в экспериментах ФВЭ. В кн.: Труды Международного совещания "Релятивистская ядерная физика: от сотен МэВ до ТэВ", Болгария, Варна, 26 - 31 мая 1998г. Дубна: ОИЯИ, 1998, с. 268.

4. Колпаков И.Ф., Смирнов В.А., Хмелевски Е. Современное состояние системы САМАС (обзор). ПТЭ, 1975, № 2, с. 24.

5. Смирнов В.А. Возможности использования микропроцессоров в аппаратуре для физических исследований (обзор). В кн.: Труды VIII Международного симпозиума по ядерной электронике, Дубна, 1975. Дубна: ОИЯИ, 1975, D13-9287, с. 238.

6. Колпаков И.Ф., Никитюк Н.М., Смирнов В.А., Черных Е.В. Многокрейтная система в стандарте КАМАК на линии с ЭВМ НР2116В. В кн.: Труды VII Международного симпозиума по ядерной электронике, 17-23 сентября 1973, Будапешт. Дубна: ОИЯИ, 1974, Д13-7616, с. 163.

7. Chernykh E.V., Kolpakov I.F., Nikityuk N.M., Smirnov V.A. CAMAC Multicrate System on-line to an HP2116B Computer. CAMAC Bulletin, 1974, № 10, p. 21.

8. Никитюк H.M., Смирнов B.A., Черных E.B. Блок для организации ветви в стандарте КАМАК на ЭВМ НР2116В. Препринт ОИЯИ 10-7914, Дубна, 1974.

9. Chernenko S.P.,., Smirnov V.A., Yu.V.Zanevsky. А САМАС Seven-Crate System on-line with an HP2116B Computer. In: Proceedings of the 2-nd ISPRA Nuclear Electronics Sympozium, Stress., Italy, May 20-23, 1975. Luxemburg, 1975, p. 117.

10. Смирнов В. А., Черных E.B. Программные средства сопряжения многокрейтной системы в стандарте КАМАК. Препринт ОИЯИ 10-8333, Дубна, 1974.

11. Говорун H.H., Иванченко И.Н., Кулаков Б.А. Смирнов В.А. и др. Вкн.: Труды совещания по программированию и математическим методам решения физических задач, Дубна, 30 окт,- 4 ноября 1973. Дубна: ОИЯИ, 1974, Д10-7707, с. 445.

12. Смирнов В.А. Использование дисплея ТЕКТРОНИКС 611 на линии с ЭВМ НР2116В. ПТЭ, 1976, № 5, с. 83.

13. Смирнов В.А. Подключение дисплея ВТ-340 в качестве пульта оператора к ЭВМ НР2116В. ПТЭ, 1976, № 4, с. 94.

14. Аствацатуров Р.Г., Архипов В.В., Бойцова Л.С., ., Смирнов В.А. и др.

15. Дифференциальное сечение реакций Ц р °п при импульсе 3,3 ГэВ/с. Препринт ОИЯИ 1-10600, Дубна, 1977.

16. Тлачала В., Басиладзе С.Г., Смирнов В.А. Цифровой измеритель временных интервалов. Нуклеоника, 1974, в19, № 9, с. 85.

17. Смирнов В.А., Хоанг Као Зунг. Организация ветви КАМАК на линии с ЭВМ LSI-11, "Электроника-60" и МЕРА-60. Сообщение ОИЯИ 10-81-528, Дубна, 1981.

18. Смирнов В.А., Хмелевски Е., Черных Е.В. Блочная передача данных в стандарте КАМАК (обзор). Препринт ОИЯИ 10-8614, Дубна, 1975.

19. Смирнов В.А., Хмелевски Е., Черных Е.В. Чтение регистров с ненулевой информацией в модулях КАМАК в режиме сканирования адреса. Препринт ОИЯИ 10-8615, Дубна, 1975.

20. Chernykh E.V., Chmiliewsky J., Smirnov V.A. Faster Address-Scan by Reading only non-Zero Data. CAMAC Bulletin, 1975, № 13, p. 23.

21. Базылев С.Н., Беликов Ю.А., Голохвастов А.И. Смирнов В.А. и др.

22. Автоматизированная система контроля триггера установки ГИБС. Сообщение ОИЯИ Р10-90-533, Дубна, 1990.

23. Afanasiev S.V., Anisimov Yu.S., Arkhipov V.V.Smirnov V.A. et al. The

24. Data Acquisition and Trigger Systems for the Forward Detector of the Spectrometer Sphere. In: Proceedings of the international symposium "Electronic Instrumentation in Physics" Dubna, 14-17 May, 1991. Dubna: JINR, 1991, E13-91-321, p. 85.

25. Нгуен Фук, Смирнов B.A. Универсальный драйвер ветви в стандарте КАМАК. В кн.: Труды VIII Международного симпозиума по ядерной электронике, Дубна, 1975. Дубна: ОИЯИ, 1975, D13-9287, с. 190.

26. Нгуен Фук, Смирнов В.А. Модуль управления и модуль задания приоритетов универсального драйвера ветви в стандарте КАМАК. ПТЭ, 1976, № 3, с. 67.

27. Нгуен Фук, Смирнов В.А., Хмелевски Е. Модуль организации ветви универсального драйвера в стандарте КАМАК. ПТЭ, 1976, № 3, с. 65.

28. Нгуен Вьет Зунг, Нгуен Фук, Смирнов В.А., Черных Е.В. Модуль источника управления универсальным драйвером в стандарте КАМАК от ЭВМ ЕС-1010. Препринт ОИЯИ 10-8971, Дубна, 1975.

29. Волков В.И.,Смирнов В.А., Нгуен Фук. Система контроля и управления параметрами медленного вывода пучка из синхрофазотрона ОИЯИ. -Сообщение ОИЯИ 9-8910, Дубна, 1975.

30. Волков В.И., Куликов И.И., Смирнов В.А. Организация связи ЭВМ ЕС-1010 с дисплейной станцией ГД-71. Препринт ОИЯИ 11-10024, Дубна, 1976.

31. Айхнер Г., Алеев A.A., Арефьев В.А., ., Смирнов В.А. и др.

32. Регистрирующая аппаратура спектрометра БИС-2 ОИЯИ. Препринт ОИЯИ 1080-433, Дубна, 1980.

33. Аблеев В.Г., Арефьев В.А., Басиладзе С.Г. Смирнов В.А. и др.

34. Система на 2500 каналов с пропорциональными и дрейфовыми камерами для исследования рассеяния адронов. Препринт ОИЯИ 13-8967, Дубна, 1975, 12с.

35. Басиладзе С.Г., Смирнов В.А., Юдин В.К. Блок для кодирования и чтения данных с годоскопических систем регистрации в стандарте КАМАК. ПТЭ, 1977, № 4, с. 97.

36. Basiladze S.G., Smirnov V.A., Yudin V. К. A coding and reading data unit from hodoscopic recording systems in the CAMAC standard. Nuclear Instruments and Methods, 1977, № 146, p. 587.

37. Базылев С.Н., Ефимов Л.Г., Колпаков И.Ф. Смирнов В.А. и др.

38. Организация экспериментов релятивистской ядерной физики на линии с ЭВМ ЕС-1040 в ЛВЭ ОИЯИ. Сообщение ОИЯИ 10-83-276, Дубна, 1983.

39. Смирнов В.А. Организация систем сбора данных на основе аппаратуры, выполненной в разных стандартах. В сб.: XVI международный симпозиум ОИЯИ по ядерной электронике, 12-18 сентября 1994, Варна, Болгария. Дубна: ОИЯИ, 1995, D13-94-491, с. 68.

40. Базылев С.Н., Смирнов В.А. Системный контроллер шины VME. -Сообщение ОИЯИ Р10-91 -32, Дубна, 1991.

41. Смирнов В.А. Устройство сопряжения канала микроЭВМ типа "Электроника-60", "МЕРА-60" и "LSI-11" с шиной VME. Сообщение ОИЯИ Р10-91-33, Дубна, 1991.

42. Базылева Н.П., Базылев С.Н., Ефимов Л.Г. Смирнов В.А.

43. Применение шины VME и персонального компьютера Правец-16 в подсистеме управления циклом сверхпроводящего синхротрона. Краткие сообщения ОИЯИ, 1987, № 626.-87, с. 12.

44. Ли Тхе Хва, Смирнов В.А., Энхболд Д. Драйвер ветви КАМАК в стандарте VME. В кн.: XIV Международный симпозиум по ядерной электронике и Международный семинар КАМАК-90, Варшава, 25-28 сентября 1990. Дубна: ОИЯИ, 1990, Д13-90-600, с. 136.

45. Afanasiev S.V., Anisimov Yu.S„, Bazylev S.N., ., Smirnov V.A. et al. Anexperiment to search cumulative muon pairs with low invariant mass. JINR Rapid Communication, 1990, №746.-90, p.6.

46. Anisimov Yu. S., Kuznetzov V.A., Malakhov A.I., ., Smirnov V.A. et al.

47. Development of a data acquisition system for the SPHERE spectrometer. Nucl. Instr. and Meth. in Physics Research, 1995, A 367, p.432.

48. Смирнов В.А. Использование процессорных ферм для отбора событий высокого уровня. В кн.: Труды XVII Международного симпозиума по ядерной электронике, Варна, 15 -21 сентября 1997 года. Дубна: ОИЯИ, 1998, Д13-98-66, с. 91.

49. Смирнов В.А. Использование микро-ЭВМ 168/Е для обработки экспериментальной информации. В кн.: Труды XI Международного симпозиума по ядерной электронике, 6-12 сентября 1983, Братислава. Дубна: ОИЯИ, 1984, Д13-84-53, с. 184.

50. Kolpakov I.F., Senner А.Е., Smirnov V.A. A Supercomputer for Parallel Data Analysis. Communication of JINR E10-87-378, Dubna, 1987.

51. Сеннер А.Е., Смирнов В.А., Трофимов В.В. Многопроцессорная система обработки данных в стандарте VME (прототип). Краткие сообщения ОИЯИ, 1990, 7(46)-90, с.58.

52. Davies H.E. In: Proc. of The Meeting on Technology Arising from High-Energy Physics, Geneva, 24-26 April 1974. Geneva: CERN, 1974, Vol.1, p. 76.

53. CAMAC A Modular Instrumentation System for Data Handling. Revised Description and Specification. Commission of the European Communities, 1972, Report EUR 4100e.

54. Stuckenberg H. -J. In: Proc. of the 2nd International Symposium on CAMAC in Computer Application, Brussels, October 14-16 1975. Commission of the European Communities, 1976, Report EUR 5485e, p. 39.

55. Kirsten F.A. IEEE Trans. Nucl. Sci., 1971, v. 18, No.2, p. 39.

56. Klessmann H. In: Proc. of the 2nd International Symposium on CAMAC in Computer Application, Brussels, October 14-16 1975. Commission of the European Communities, 1976, Report EUR 5485e, p. 51.

57. Costrell L. IEEE Trans. Nucl. Sci., 1974, v. 21, No.1, p. 870.

58. Strauss M.G., Lenkszus F.R., Brenner R. et al. IEEE Trans. Nucl. Sci., 1971, v. 18, No.2, p. 46.

59. Barnes R.C.M. IEEE Trans. Nucl. Sci., 1975, v. 22, No.1, p. 526.

60. Никитюк H.M., Смирнов В.A. Препринт ОИЯИ, 10-6485, Дубна, 1972.

61. Bertolucci В., Carman R., Faust J. et al. IEEE Trans. Nucl. Sci., 1971, v. 18, No.2, p. 53.

62. Eichholz J.J., Lenkszus F.R., Strauss M.G. IEEE Trans. Nucl. Sci., 1971, v. 18, No.1, p. 292.

63. Klaisner L.A., Stephenson Jr.J.M. IEEE Trans. Nucl. Sei., 1971, v. 18, No.1, p.299.

64. CAMAC Organisation of Multi-Crate Systems. Specification of the Branch Highway and CAMAC Crate Controller Type A. Commission of the European Communities, 1972, Report EUR4600e.

65. Yale NAL CAMAC System. IEEE Trans. Nucl. Sei., 1971, v. 18, H.2, p. 65.

66. Dhawan S. IEEE Trans. Nucl. Sei., 1972, v. 19, No.1, p.721.

67. Verkerk C. In: Proc. of the 1978 CERN School of Computing, Jadwisin, Poland, 28 May-10 June 1978, Geneva: CERN, 1978, 78-13, p.65.

68. P. Le DU. In: Proc. of the Intern. Conf. on Computing in High Energy Physics '91, Tsukuba, Japan March 11-15, 1991, Tokio: Universal Academy Press, Inc., 1991, p.45.

69. P. Le Du. ln:RT93 Conference Record of the Eighth Conference on Real-Time Computer Applications in Nuclear, Particle and Plasma Physics, Vancouver, June 811 1993. Vancouver: TRIUMF Publications Office, 1993, TRI-93-1, p. 202.

70. Muller K. D. IEEE Trans, on Nucl. Sc., 1985, Vol. NS-32, No. 1, p. 262.

71. IEEE Standard FASTBUS Modular High-Speed Data Acquisition and Control System, ANSI/IEEE Std 960-1986. New York: The Institute of Electrical and Electronics Engineers (IEEE), 1986.

72. STRUCK Product Summary 1990. Germany: Tangstedt/Hamburg, 1990.

73. Parkman C. In: The Proc. of the International Conference «VMEbus in RESEARCH», Zurich, Switzerland, 11-13 October 1988. Amsterdam: North-Holland, 1988, p. 9.

74. Berners-Lee T., Parkman C., Perrin Y. et al. IEEE Trans. Nucl. Sei., 1987, Vol. 34, No. 4, p. 835.

75. Essel H.G., Hoffmann J., Ott W. et al. In: IEEE Seventh Conference REAL TIME'91 on Computer Applications in Nuclear, Particle and Plasma Physics Conference Record, June 24-28 1991, Jülich, Fed. Rep. of Germany. New York: IEEE Inc., 1991, p. 383.

76. Parkman C. ONLINE - The Newsletter of Data Acquisition and Computing For Experiments, 1993, Geneva: CERN, No.6, p. 26.

77. Parkman C. In: IEEE Seventh Conference REAL TIME'91 on Computer Applications in Nuclear, Particle and Plasma Physics Conference Record, June 2428 1991, Jülich, Fed. Rep. of Germany. New York: IEEE Inc., 1991, p. 424.

78. Hiebert R.E. Jr. In: Proceedings of the international symposium "Electronic Instrumentation in Physics", Dubna, 14-17 May, 1991. Dubna: JINR, 1991, E13-91-321, p. 123.

79. Muller H., Bogaerts A., Buytaert J. et al. In: RT93 Conference Record of the Eighth Conference on Real-Time Computer Applications in Nuclear, Particle and Plasma Physics, Vancouver, June 8-11 1993. Vancouver: TRIUMF, 1993, TRI-93-1, p. 16.

80. Tolmie D.E. In: Proc. of the International Conference on "Computing in High Energy Physics'92", Annecy, France, 21-25 September 1992. GENEVA: CERN, 1992, 92-07, p. 681.

81. Bozzoli W., Matheys J-P., McLaren R.A. et al. In: Proc. of the International Conference on "Computing in High Energy Physics'92", Annecy, France, 21-25 September 1992. GENEVA: CERN, 1992, 92-07, p. 192.

82. Bozzoli W., McLaren R.A., Matheys J-P. et al. ONLINE - The Newsletter of Data Acquisition & Computing For Experiments, Geneva: CERN, 1993, No. 7, p. 8.

83. Letheren M. F. In: Proc. of 1995 CERN School of Computing, Aries, France 20 August-2 Sept. 1995. Geneve; CERN, 1995, 95-05, p. 245.

84. Fibre Channel Applications. http://www.cern.ch/HSI/fcs/applic/applic.htm.

85. Morrison J. In: Proc. of the International Conference on "Computing in High Energy Physics'92", Annecy, France, 21-25 September 1992. GENEVA: CERN, 1992, 92-07, p. 57.

86. Togawa H., Sugaya Y., Nomachi M. In: Proc. of the International Conference on "Computing in High Energy Physics'97", Berlin, April 7-11 1997. Berlin, 1997, p. 392.

87. Steinberg P., Cole B., Markacs S. In: Proc.of the Intern. Conf. on Computing in High Energy Physics '98, Chicago, August 31 - September 4 1998. http://www.hep.net/chep98/PDF/212.pdf, 1998.

88. Groves R.D. In: Proc. of 1995 CERN School of Computing, Arles, France 20 August-2 Sept. 1995. Geneve: CERN, 1995, 95-05, p. 147.

89. Maley P.D., Dobinson R.W., Heeley R. In: Proc. of the International Conference on " Computing in High Energy Physics'97", Berlin, April 7-11 1997. Berlin, 1997, p. 249.

90. Ferran P.M., Fucci A., Gallno P. et al. In: Proc. of the Intern. Conf. on Computing in High Energy Physics '85, Amsterdam, 25-28 June 1985. Amsterdam: North-Holland, 1986, p. 322.

91. Nash T., Areti H., Biel J. et al. In: Proc. of the Intern. Conf. on Computing in High Energy Physics '85, Amsterdam, 25-28 June 1985, Amsterdam: North-Holland, 1986, p.375.

92. Pavel T.J. In: Proc.of the Intern. Conf. on Computing in High Energy Physics '98, Chicago, August 31 - September 4 1998. http://www.hep.net/chep98/PDF/32.pdf, 1998.

93. Cittolin S. In: Proc. of 1994 CERN School of Computing, Sopron, Hungary 28 August-10 September 1994. CERN 95-01, Geneva, 1995, p. 299.

94. Ludlam T.W. and A.J. Stevens. A Brief Description of the Relativistic Heavy Ion Collider Facility, RHIC, June 1993. BNL-49177 Informal report, Brookhaven National Laboratory, 1993.

95. Thresher J.J. In: Proc. of 1988 CERN School of Computing, Oxford, United Kingdom, 15-26 August 1988. Geneva: CERN, 1989, 89-06, p. 260.169

96. Allaby J.V. In: Proc. of 1987 CERN School of Computing, Troia, Portugal, 1326 September 1987. Geneva: CERN, 1988, 88-03, p. 240.

97. Downing R. In: Proc. of the First Annual Conference on Electronics for Future Colliders, Chestnut Ridge, New York, May 22-23 1991. New York: LeCroy Corporation, 1991, p. 75.

98. Adye T., Aalbert J.N., Bassi A. et al. In: Proc. of the Intern. Conf. on Computing in High Energy Physics '91, Tsukuba, Japan, March 11-15 1991. Tokio: Universal Academy Press Inc., 1991, p. 619.

99. Adam W., Beneteau L., Bouquet B. et al. In: Proc. of the Intern. Conf. on Computing in High Energy Physics '91, Tsukuba, Japan, March 11-15 1991. Tokio: Universal Academy Press Inc., 1991, p. 643.

100. Verweij H. IEEE Trans, on Nucl. Sci., 1986, Vol. 33, No.1, p. 764.

101. AngelovT. etal. Nucl. Instr. and Meth., 1991, Vol. A306, No.3, p. 536.

102. Baehler P., Bosco N., Lingjaerde T. et al. In: Proc. of the Intern. Conf. on Computing in High Energy Physics '85, Amsterdam, 25-28 June, 1985. Amsterdam: North-Holland, 1986, p. 283.

103. Brisson J.C., Farthouat Ph., Gandois B. et al. IEEE Trans, on Nucl. Sci., 1986, Vol. 33, No.1, p. 102.

104. Bukckhart H.J., Charlton D.G., Heijers F. et al. In. Proc. of the Intern. Conf. on Computing in High Energy Physics '91, Tsukuba, Japan, March 11-15 1991. Tokio: Universal Academy Press Inc., 1991, p. 673.

105. The top in sight. CERN Courier June 1994, Geneva: CERN, 1994, p. 1.

106. Abe F., Amidei D., Apollinari G. et al. Nucl. Instr. and Meth., 1988, Vol. A271, No. 3, p. 387.

107. Amidei D., Campbell M., Frisch M. et al. IEEE Trans, on Nucl. Sci., 1986, Vol. 33, No.1, p. 63.

108. CDF Collaboration. IEEE Trans, on Nucl. Sci., 1986, Vol. 33, No.1, p. 40.

109. Goodwin R., Florian R., Johnson M. et al. FERMILAB-Conf-89/230, Batavia: Fermilab, 1989.

110. Cutts D. In: Proc. of the International Conference on "Computing in High Energy Physics'92", Annecy, France, 21-25 September 1992. Geneva: CERN, 1992, 92-07, p.262.

111. Gibbard B. In: Proc. of the International Conference on "Computing in High Energy Physics'92", Annecy, France, 21-25 September 1992. Geneva: CERN, 1992, 92-07, p. 265.

112. Haynes W.J. In.Proc. 1989 CERN School of Computing, Bad Herrenalb, Federal Republic of Germany, 20 August-2 September 1989. Geneva: CERN, 1990, 90-06, p. 179.

113. Gellrich A., Dippei R., Legrand I. C. et al. In: Proc. of the International Conference on " Computing in High Energy Physics'97", Berlin, April 7-11 1997. Berlin, 1997, p. 260.

114. Park I.H. ln:RT93 Conference Record of the Eighth Conference on Real-Time Computer Applications in Nuclear, Particle and Plasma Physics, Vancouver, June 811 1993. Vancouver: TRIUMF Publications Office, 1993, TRI-93-1, p. 342.

115. Youngman C. In: Proc. of the International Conference on "Computing in High Energy Physics'92", Annecy, France, 21-25 September 1992. Geneva: CERN, 1992, 92-07, p. 145.

116. W.J. Haynes. In: Proc. of the Intern. Conf. on Computing in High Energy Physics '91, Tsukuba, Japan, March 11-15 1991. Tokio: Universal Academy Press Inc., 1991, p. 627.

117. A.J.Campbell. In: IEEE Seventh Conference REAL TIME'91 on Computer Applications in Nuclear, Particle and Plasma Physics Conference Record, June 2428 1991, Julich, Fed. Rep. of Germany. New York: IEEE Inc, 1991, p. 207.

118. N. Ellis. In: Proc. of the International Conference on "Computing in High Energy Physics'92", Annecy, France, 21-25 September 1992. Geneva: CERN, 1992, 92-07, p.51.

119. Mapelli L. In: Proc. of 1992 CERN School of Computing, L'Aquila, Italy, 30 August-12 September 1992. Geneva: CERN, 1993, 93-03, p.237.

120. Ambrosini G., Burckhart D., Caprini M. et al. Comp. Phys. Comm., 1998, Vol. 110, p. 95.

121. LHC data acquisition. CERN LHC News, Geneva; CERN, 1994, № 6, p. 18.

122. ALICE Collaboration. Letter of Intent for A Large Ion Collider Experiment, Geneva: CERN, 1993, CERN/LHCC/93-16, LHCC/I 4, 1 March 1993, Rev. 31.

123. PHENIX Collaboration. PHENIX Conceptual Design Report, January 23, 1993. Brookhaven National Laboratory, 1993, p. 11-1.

124. Lindenstruth V., Crawford H., Judd E. et al. In: Proc. of the International Conference on " Computing in High Energy Physics'97", Berlin, April 7-11 1997. Berlin, 1997, p. 257.

125. STAR Collaboration. STAR - Conceptual Design Report for the Solenoidal Tracker At RHIC. Berkeley: University of California, PUB-5347, 1992.

126. Аствацатуров Р.Г., Бал дин A.M., Басиладзе С.Г. Смирнов В. А. и др.- Препринт ОИЯИ, 13-6184, Дубна, 1971.

127. Бутцев B.C., Васильев С.Е., Саламатин A.B., ., Смирнов В.А. и др.

128. Сообщение ОИЯИ, Р1-85-438, Дубна, 1985.

129. Аверичев С.А., Анищенко Н.Г., Балдин A.M., ., Смирнов В.А. и др.

130. Сообщение ОИЯИ, Р1-85-512, Дубна, 1985.

131. Afanasiev S.V., Anisimov Yu.S., Bazylev S.N.Smirnov V.A. et al. JINR

132. Rapid Communications, 1990, 7(46)-90, p.6.

133. Afanasiev S.V., Anisimov Yu.S., Arkhipov V.V. Smirnov V.A. et al.

134. JINR Rapid Communications, 1991, 5(51 )-91, p. 3.

135. Afanasiev S.V., Anisimov Yu.S., Bondarev V.K., Smirnov V.A. et al.

136. JINR Rapid Communications, 1993, 3(60)-93, Dubna, p. 40.

137. Жигулин И.В., Шутов В.Б. Препринт ОИЯИ, Р11-88-608, Дубна, 1988.

138. Ефимов Л.Г., Какурина В.И., Королев B.C., ., Смирнов В.А. В кн.: Труды десятого всесоюзного совещания по ускорителям заряженных частиц, 21-23 октября 1986 Дубна. Дубна: ОИЯИ, 1987, Том 1, Д9-87-105, с. 100.

139. GEC Elliott System Crate Philosophy. Leicaster: GEC Elliott Automation Ltd., A 2951-22, 1977.

140. Cawthraw M. Rutherford Laboratory Report, R246, 1972.

141. Аблеев В.Г., Басиладзе С.Г., Запорожец C.A. и др. Сообщение ОИЯИ, 10-11124, Дубна, 1977.

142. Водопьянов А.С., Авдейчиков В.В., Бавижев М.Д. и др. Препринт ОИЯИ, Р13-80-225, Дубна, 1980.

143. Ефимов Л.Г., Крячко А.П., Мороз Н.С. и др. Сообщение ОИЯИ, 10-85105, Дубна, 1985.

144. Васильев Н.Д., Власов П.Н., Герасимов В.П. и др. В кн.: Труды VIII Всесоюзного совещания по ускорителям заряженных частиц, Протвино, 19-21 окт. 1982 г. Дубна: ОИЯИ, 1983, с.327.

145. Айхнер Г., Апеев А.Н., Арефьев В.А. Смирнов В.А. и др.

146. Сообщение ОИЯИ, 10-80-644, Дубна, 1980.

147. Айхнер Г., Алеев А.Н., Арефьев В.А. Смирнов В.А. и др. Препринт

148. ОИЯИ, 10-80-433, Дубна, 1980.

149. Гузик 3., Рыжов В.Н., Цыганов Э.Н. Сообщение ОИЯИ Р13-85-530, Дубна, 1985.

150. IEEE Standard for A Versatile Backplane Bus: VMEbus. New York: The Institute of Electrical and Electronics Engineers INC, 1988.

151. EUR 4100e suppl. Block transfers in CAMAC systems. Luxembourg: CEC, 1977.

152. Stone, Harold S. High-performance computer architecture. 3rd ed. Addison-Wesley Publishing Company, Inc., USA, 1993.

153. Kunz P.F., Fall R.N., Gravina M.F. et al. IEEE Trans, on Nucl. Sci., 1980, NS-27, No.1, p. 582.