FIS konferencija

Kreacija

i distribucija

“Monarc”

fajlovatokom

“LoadTest07”

vežbe CMS kolaboracije

September 26th

2007

Dimitrije Maletić,INN

Vinča, Beograd

UvodUvod

-

CMS experiment je

od

početka bio planiran kao distibutivan računarski model i to zbog:-

Potrebe za ogromnim količinama podataka i proračuna-

Mogućnosti preraspodele resursa na svoje institute i laboratorije-

20% resursa treba da budu u CERN-u, 40% na T1 i 40% na T2 centrima.-

T2 centri planirani su kao središta aktivnosti vezanih za analizu podataka,-

T1 centri planirani su da sadrže i serviraju podatke dobijene iz CMS detektora.-

Pošto nema dovoljno resursa ni u jednom centru da se izvše sve analize pristupilo se analizi koristeći Grid.

September 26th

2007 2

UvodUvod (II)(II)

-

Dok se CMS detektor ne upozna dovoljno, celokupni podaci moraju biti dostupni za analizu. Ovo zahteva i do 35 puta veći transfer podataka u prvih par godina rada CMSa.-Zbog ovoga,

Grid data menadžment servisi moraju dobro da rade od početka

rada

CMS-a.-

CMS model predviđa da se transfer fajlova unutar CMS kolaboracije sprovodi

korišćenjem PhEDEx-a

(PhysicsExperiementDataExport)-

Predviđa se da u 2008 obim transfera podataka bude oko 7PB (~3M) fajlova.- Takođe, predviđena brzina je oko 5 Gb/s u 2008 godini.

September 26th

2007 3

PhEDExPhEDEx

September 26th

2007 4

PhEDExPhEDEx (II)(II)

September 26th

2007 5

AllocatorFileRouter

Site A

TMDB

DownloadSite A

Export Site B

12

34

5

Blackboard

PhEDExPhEDEx (III) / LoadTest07 file injector(III) / LoadTest07 file injector

September 26th

2007 6

LFN –

Logical File NameLoadTest/MyTest/LoadTest07_CERN_FF

PFN –

Physical File Name/castor/cern.ch/cms/store/LoadTest/MyTest/LoadTest07_CERN_FF

LoadTest07 file injectorLoadTest07 file injector

September 26th

2007 7

<lfn-to-pfn

protocol="direct" path-match=".*/LoadTest07_SITE_(.*)_.*_.*"

result="/path_to_LoadTest07_files/LoadTest07_SITE_$1"/>

LoadTest07_CERN_FF LoadTest07_CERN_FF_Sxd45D_20

Seed(40kB)

LoadTest07_CERN_FF

LoadTest07_CERN_00 LoadTest07_CERN_00_Sxd45D_20

LoadTest07_CERN_00_pptyxd_1299256 * 2.5 GB/site

~2.5 PB/week

.

.

.

.

.

.

.

.

CMS computing modelCMS computing model

September 26th

2007 8

FNAL

Chicago

IN2P3

Lyon

PIC

Bascelona

ASGC

Taiwan

RAL

Oxford

FZK

Karlsrue

CNAF

Bolognia

CMS computing model (II)CMS computing model (II)

September 26th

2007 9

CMS computing model (III)CMS computing model (III)

September 26th

2007 10

LoadTest07LoadTest07

September 26th

2007 11

S t a t u sS t a t u s

- aaa

September 26th

2007 12

S t a t u sS t a t u s

- aaa

September 26th

2007 13

S t a t u sS t a t u s

- aaa

September 26th

2007 14

ZakljuZaključčakak- CMS computing model je distributivan model

- Transfer fajlova unutar CMS kolaboracije korišćenjem PhEDEx-a

-

Sve veći zahtevi za

resursima u

CMS centrima

zahtevaju češće i opsežnije testove.

-

Ovaj predloženi metod kreacije i distribucije Monarc fajlova prihvatio CMS Commisioning coordinator Stefano Belforte kao jedini za LoadTest07 vežbu CMS kolaboracije kao pretposlednju vežbu

CMS computing-a

pred puštanje u rad LHC-a.

(Poslednja

vežba CSA07)

- Metod

distribuisan

unutar

PhEDEx

paketa

na

sve

CMS centre.

-

Već

prvog dana LoadTest07 dostignuti zahtevi za brzinu transfera u 2008 godini od 5Mb/s. Tokom Vežbe za ~5 meseci exportovano 3PB iz CERN-a, a za 2008 predviđeno 7PB.

-

LoadTest07 1. septembra

zamenjuje

CSA07 kao

glavna

aktivnost

CMS kolaboracije. LoadTest07 nastavlja

da

služi kao debugging tool.

September 26th

2007 15