Andrey.Shevel@pnpi.spb.ru

• На pcfarm установлен новый дисковод емкостью 36 ГБ (по заказу В.А. Гордеева). Пришлось изрядно повозиться (первый дисковод такой емкости). В три или четыре захода удолось запустить, хотя все (физический объем, логические номера в шине, кабели) просто впритирку.
• Дирекция ОФВЭ оплатила централизованным образом несколько важных компонентов фермы, которые имеют ключевое значение для организации моделирования экспериментов или обработки данных в ПИЯФ. Имеются в виду магнитофон DLT8000 и арматуру дисковой фермы для установки дисководов по 72 ГБ, которые будут приобретаться за счет отдельных проектов. Фактическая установка оборудования будет производиться по мере поступления оборудования (например, поставка магнитофона в течение 6 недель в Москву).

Andrey.Shevel@pnpi.spb.ru

Вчера (23 января 2001) вечером начала работать система PBS на ферме. Смотрите на ферме

news batch

Отличий от CODINE немного, но они важны.

Andrey.Shevel@pnpi.spb.ru

Dear collegues,
we spent about 10 days to try new Batch System PBS from NASA. We found serious bug in that system (10 days were spent to find the source of the bug). However the bug might be compensated by special script. We plan to put PBS into operation on the farm this week.
At the same time we have intensive negotiation with Sun Corp. on the product Sun Gridware (same as CODINE) however with no success.

Andrey.Shevel@pnpi.spb.ru

Коллеги, мы замечательно жили с использованием системы CODINE, которую нам поставили бесплатно в 1998 году коллеги из маленькой немецкой компании www.genias.de. В те времена я пригласил этих ребят участвовать в проекте BCFpc, на страницах которого Вы читаете этот текст. Они с удовольствием согласились. Мы, со своей стороны (в моем лице), обязались лишь упоминать на наших страницах и в публикациях факт использования CODINE. В соответствии с договоренностью нам продляли лицензию каждые полгода. Позже, в 1999 году компания www.genias.de объединилась с американской компанией www.gridware.com. Наконец, в 2000 году компания www.gridware.com была поглощена компанией Sun. Факт слияния с Sun кратко описан на страницах www.sun.com/gridware. В конце 2000 года, у нас в очередной раз истекла лицензия. Мы послали соответствующие запросы, однако пока никакого ответа не последовало. Мы будем продолжать попытки договориться с Sun, однако, одновременно, готовимся к неблагоприятному развитию событий. Имеется в виду подготовительные действия по установке какой-то другой системы пакетной обработки на ферме. Среди более известных и освоенных систем находится система PBS. Не смотря на то, что www.gridware.com поставляла CODINE почти для всех платформ, компания Sun пока предлагает аналог CODINE только для платформы Sun (и для операционной системы и по железу). Все это означает, что на нашей ферме 'pcfarm' временно приостанавливается пакетная обработка заданий. Мы вынуждены использовать ферму в монопольном режиме для экспериментов с новым вариантом пакетной обработки заданий. Предположительно до 10 января 2001 года будут продолжаться проблемы с использованием фермы.

Andrey.Shevel@pnpi.spb.ru

Additional 18 GB disk drive has been installed. Please see the page 'Contributors'.

On all machines is used RedHat 6.1.

Andrey.Shevel@pnpi.spb.ru

RH 6.0 with Cyrillic was installed on three machines of the farm and one machine (satellite) is running yet under RH 5.0.

CODINE is changed to CODINE 4.2.8 (with glibc). All the job was done by Oreshkin and Shevel.

Andrey.Shevel@pnpi.spb.ru

During the summer there were installed three computers in the farm:

• 450 MHz 128MB Pentium III (delivered by V. Koptev);
• 450 MHz 512MB Dual Pentium II Xeon (German Credit);
• 400 MHz 256MB Petium II (German Credit).

• testing and upgrading of application utilities;
• UPS control tuning;
• hardware drivers tuning to achieve maximum speed (mainly network cards).

Andrey.Shevel@pnpi.spb.ru

yesterday the new disk drive (18GB) was installed on PC Farm. That disk drive was paid by Julich (Vladimir Koptev). The disk divided as usual 1 to 3 by volume (3 to Koptev and 1 to physics community). At the same time Koptev may pretend to public part on temporary bases like all others.
File system names allocated on the drive are:
- /koptev01
- /data02
Additional computer from Koptev (450 MHz) will come in operation inside the farm soon.

Andrey Shevel

It was received the prolongation for the license on CODINE. Also, Anatoli Oreshkin trys to use CODINE 4.2 (earlier we used CODINE 4.1).

Andrey Shevel

There are free f90 compiler (translator) for Linix on Intel, please see "http://www.psrv.com/linux.html".

Andrey Shevel

The seminar on PNPI PC Farm was taken place at Institute of High Performance Computing and Data Bases at St.Petersburg 12th May 1998.

We were suggested to submit new proposal to Russia R&D technology fund.

Andrey Shevel

we prepared and sent the proposal on computing cluster for 10 Gflops to Russia Fund for Basic Research. We will see the results later this sommer.

Andrey Shevel

at HEPD PNPI the seminar on pcfarm took place 31st March 1998.

Slides are available as usual on pcfarm pages in partion "Documents".

It may be emphasized that the farm is used as general purpose computing installation at HEPD.

          For everybody who needs for reasonable computing power
          ======================================================


                       For Your Laboratory Information
                       -------------------------------

                            Created: 09.12.1997

                          Corrected: 15.12.1997
                                     03.02.1998
                                     16.03.1998



As you know we are in progress in developing the Batch Computing Farm
based on PCs (BCFpc) for High Energy Physics. The farm is now in
operation from 2nd March 1998. You might see the details at
"http://www.pnpi.spb.ru/pcfarm/". 

In order to increase the value of our proposal we try to use collaborating
efforts in project realization.

It is clear that Batch Computing Facility might be used over the Internet
as well. That means any laboratory can buy one or more PCs to add to
current BCFpc installation and to obtain a range of user accounts to use
whole BCFpc power in batch mode.

It is clear that BCFpc shall have standard program library configuration
for HEP (i mean CERNlib and related software).

An official report on BCFpc usage will be available on regular base (once
a month or week). 

In this case your laboratory will save man power to maintain the computing
facility.






*****     How to be registered on the Batch Computing Farm


If you feel you need to use Batch Computing Farm for your computing you
are required to be registered. To do that you need to fill the
registration form and send it by fax (+7-81271-360-40).
The pattern of the registration form can be found out in
"http://dbserv.pnpi.spb.ru/~volkova/".





*****     How to pay for a PC (PCs)


To avoid transportation and probably custom problems we use special
procedure. In contact with our partners we find out a PC and after send
the offer (invoice) to our partner. When the offer (invoice) will be paid
we are able to receive the PC and add it to our Batch Computing Farm
(BCFpc).

More or less standard configuration we discuss is:

- Pentium II (fastest);
- 256 MB main memory;
- 100 Mbit Ethernet;
- EIDE disk drive (5-10 GB);
  NO MONITOR - NO KEYBOARD - NO MOUSE .

In total about $3K per a PC or less (December 1997).

It might be discussed any other (more advanced) PC configuration and prices. 

в ОФВЭ начала работать новая вычислительная установка (первая очередь проекта BCFpc: смотрите "http://www.pnpi.spb.ru/pcfarm/").

По откликам, которые мы уже имеем, время выполнения реальных программ (Александр Добровольский, Михаил Левченко) на новой установке примерно в 10 (десять) раз меньше, чем на старой SGI Power Series (rec03).

Предполагается, что установка будет наращиваться (сейчас три процессора 266 MHz) за счет тех научных проектов и программ, которые выполняются в лабораториях ОФВЭ, а также в дружественных лабораториях, и которые будут пользоваться данным кластером.

Регистрация на установке производится путем заполнения регистрационного листа, который подписывается директором Отделения. Регистрационный лист находится на странице: "http://www.pnpi.spb.ru/~volkova".

Для запуска заданий предлагается использовать специальные системы балансировки загрузки компьютерного кластера: CODINE или другие.

Программы системы CODINE находятся в директории pcfarm:/usr/CODINE/bin/linux/. Параметры команд и подробное описание команд можно получить с помощью man. Анатолий Орешкин (oreshkin@pnpi.spb.ru, телефон 63-56) сможет оказать ограниченную помощь, если остались неясности после прочтения описания.

Из прикладных систем имеются основные GNU-программы, g77, CERNlib, paw, paw++. Детали можно уточнить у Татьяны Серебровой (tatianas@pnpi.spb.ru, телефон 69-82).

О других имеющихся возможностях можно уточнить у администратора компьютерного кластера pcfarm (root@pcfarm.pnpi.spb.ru , телефон 63-56).

С уважением,

All users were asked to use the batch system to balance the load among PCs.

A. Shevel

Alexander Lodkin brought memory chips and 3COM SuperStack II Hub 100 TX. Now we have 128 MB on two satellite PCs and 256 MB on central PC.

Tatiana Serebrova informed that CERNlib was installed and available on the farm.

Anatoly Oreshkin installed and tested CODINE batch system. It was seen CODINE distributes the jobs among different PCs in according to load level. Other tests for CODINE will be undertaken soon.

Victor Barashko informed about some details concerned PC Linux NIS, registration procedure, etc.

Andrey Shevel informed about his visit to JINR and talking on PC farms at JINR.

Victor Barashko tuned special software for the SmartUPS.

There is no observable load level on the SmartUPS (two computers and one monitor). In nearest future we plan to add Hub100, third computer, disk subsystem.

It was checked UPS procedure with shutdown:
break the power, automatic shutdown and UPS switched off;
whole automatic restart after restore the power;
appropriate messages when the power was restored soon after the break (less than 5 minutes).

Everything is OK.

1. PCfarm.Contrib - to maintain the page 'Contributors';
2. PCfarm.Hard - to maintain the page 'Hardware';
3. PCfarm.Soft - maintain the page 'Software'.

All three scripts take into account the directory structure "/www/docs/pcfarm".

Last Friday Alexander Lodkin brought another two PCs (without monitors).

Victor Barashko has installed Linux on all three computers (PCs).

  /www/docs/pcfarm/index.hist.head
  /www/docs/pcfarm/index.hist
  /www/docs/pcfarm/index.HotNews.Head
  /www/docs/pcfarm/index.HotNews
  /www/docs/pcfarm/index.links

PNPI HEP scientific board approved 25th November in general our plan to upgrade PNPI HEP computing facility by PC farm.

Several steps to check CERNlib on SlackWare Linux were undertaken in test installation. CERNlib will be running soon.

We are looking for an appropriate offer for central PC [Dual Pentium II/300, 256 MB main memory, wide SCSI, 3 x 9 GB disk drives, CD ROM].

A couple of weeks ago we (Andrey Shevel, Alexander Lodkin, Victor Barashko, Anatoly Oreshkin) were discussing the new computing platform for future computing facility in HEP. Andrey Shevel has prepared a kind of proposal on this topic. That proposal is now available on these pages. We are awaiting that many people will have interest for our activity in computing area.

The name of the proposal is HEP Batch Computing Farm based on PCs (or shorter BCFpc). Suggestions on better name might be discussed.

HEP means High Energy Physics.

The logo of the proposal which can be seen at the top left corner of the page is a combination of our institute logo and Linux logo.

Current status:

• we use two personal installations with Slackware Linux;

• we have local Slackware Linux FTP mirror at ftp.pnpi.spb.ru/pub/Mirror/Linux.