+ All Categories
Home > Documents > Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial...

Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial...

Date post: 02-May-2015
Category:
Upload: concetta-farina
View: 216 times
Download: 1 times
Share this document with a friend
17
martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007 Gestione del Top BDII Giuseppe Platania, INFN Catania Tutorial per Site Administrator Progetto PI2S2 Messina, 9-11.07.2007
Transcript
Page 1: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

1Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

Gestione del Top BDII

Giuseppe Platania, INFN Catania

Tutorial per Site Administrator Progetto PI2S2

Messina, 9-11.07.2007

Page 2: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

2Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

Outline

● Top BDII

– Overview

– Differents between Top and Site BDII

– Configuration file

– Troubleshooting

Page 3: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

3Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

BDII overview● It's entirely based on LDAP

● Every node (except UI,BDII and WNs) has a GRIS

service in order to publish its informations

● A node in every site collects all site GRISes and

publishes them using a site BDII, by default installed

on the CE

● The top BDII collects all site BDIIs

● User can run a set of commands to query the top BDII.

Page 4: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

4Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

Top BDII vs Site BDII● Site BDII

– By default it is installed on the CE

– It collects all site GRISes* (for example SE,RB,LFC,etc..)

– The name of the service is bdii

● Top BDII

– It collects all site BDIIs** (CE1,CE2 ..... CEn)

– The name of the service is bdii

– It gives to the RB all needed informations to match and

dispatch user's jobs

– It can run in the same machine where the RB is running)

*GRIS=Grid Resource Information Service

**BDII=Berkely Database Infomatin Index

Page 5: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

5Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

Configuration file : /opt/bdii/etc/bdii.confBDII_PORT_READ=2170

BDII_PORTS_WRITE="2171 2172 2173"

BDII_USER=edguser

BDII_BIND=mds-vo-name=local,o=grid

BDII_PASSWD=HTwv9pt4d

BDII_SEARCH_FILTER='(|(objectClass=GlueSchemaVersion)(objectClass=GlueTop))'

BDII_SEARCH_TIMEOUT=30

BDII_BREATHE_TIME=60

BDII_AUTO_UPDATE=yes

BDII_AUTO_MODIFY=no

BDII_DIR=/opt/bdii/

BDII_UPDATE_URL=http://www.pi2s2.it/conf/cometa/cometa-bdii.conf

BDII_UPDATE_LDIF=http://

SLAPD=/usr/sbin/slapd

SLAPADD=/usr/sbin/slapadd

Page 6: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

6Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

Configuration file : /opt/bdii/etc/bdii-update.confCOMETA-INFN-CATANIA ldap://infn-ce-01.ct.pi2s2.it:2170/mds-vo-name=cometa-infn-

catania,o=grid

COMETA-INAF-CATANIA ldap://inaf-ce-01.ct.pi2s2.it:2170/mds-vo-name=cometa-inaf-catania,o=grid

COMETA-INFNLNS-CATANIA ldap://infnlns-ce-01.ct.pi2s2.it:2170/mds-vo-name=cometa-infnlns-catania,o=grid

COMETA-UNICT-DMI-CATANIA ldap://unict-dmi-ce-01.ct.pi2s2.it:2170/mds-vo-name=cometa-unict-dmi-catania,o=grid

COMETA-UNICT-DIIT-CATANIA ldap://unict-diit-ce-01.ct.pi2s2.it:2170/mds-vo-name=cometa-unict-diit-catania,o=grid

COMETA-INGEGNERIA-MESSINA ldap://unime-ce-01.me.pi2s2.it:2170/mds-vo-name=cometa-ingegneria-messina,o=grid

COMETA-UNIPA-PALERMO ldap://unipa-ce-01.pa.pi2s2.it:2170/mds-vo-name=cometa-unipa-palermo,o=grid

Page 7: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

7Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

Site BDII C

SE GRISCE GRIS

Site C

RB

Site BDII A

SE GRISCE GRIS

Site A

Site BDII B

SE GRISCE GRIS

Site B

Top BDII

Page 8: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

8Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

BDII testing

Page 9: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

9Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

BDII testing

You can ask the BDII in order to see if its database is running:

ldapsearch –x –h <bdii hostname> -p 2170 –b mds-vo-name=local,o=grid

Page 10: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

10Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

From your account in the UI:

● Set the BDII enviroenment:

[plt@ui-1:~]$ export LCG_GFAL_INFOSYS=<bdii hostname>:2170

[plt@ui-1:~]$ lcg-infosites –h

[plt@ui-1:~]$ lcg-info –h

they will show the help with all the possible queries to

obtain the sites’ informations

BDII testing

Page 11: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

11Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

lcg-infosites example / 1

[plt@genius plt]$ lcg-infosites --vo cometa se

Avail Space(Kb) Used Space(Kb) Type SEs

----------------------------------------------------------

7720000000 n.a n.a inaf-se-01.ct.pi2s2.it

21810000000 n.a n.a infn-se-01.ct.pi2s2.it

4090000000 n.a n.a unime-se-01.me.pi2s2.it

14540000000 n.a n.a unipa-se-01.pa.pi2s2.it

Page 12: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

12Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

lcg-infosites example / 2[plt@genius plt]$ lcg-infosites --vo cometa ce

#CPU Free Total Jobs Running Waiting ComputingElement

----------------------------------------------------------

60 60 0 0 0 inaf-ce-01.ct.pi2s2.it:2119/jobmanager-lcglsf-short

60 60 0 0 0 inaf-ce-01.ct.pi2s2.it:2119/jobmanager-lcglsf-long

60 60 0 0 0 inaf-ce-01.ct.pi2s2.it:2119/jobmanager-lcglsf-infinite

40 40 0 0 0 infn-ce-01.ct.pi2s2.it:2119/jobmanager-lcglsf-short

40 40 0 0 0 infn-ce-01.ct.pi2s2.it:2119/jobmanager-lcglsf-long

40 40 0 0 0 infn-ce-01.ct.pi2s2.it:2119/jobmanager-lcglsf-infinite

32 32 0 0 0 infnlns-ce-01.ct.pi2s2.it:2119/jobmanager-lcglsf-short

32 32 0 0 0 infnlns-ce-01.ct.pi2s2.it:2119/jobmanager-lcglsf-long

32 32 0 0 0 infnlns-ce-01.ct.pi2s2.it:2119/jobmanager-lcglsf-infinite

[ …..]

Page 13: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

13Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

Troubleshooting

Page 14: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

14Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

/opt/bdii/var/bdii.log● If a query to the BDII doesn’t show the

information about a site, you have to look at the bdii log file.

● For example:COMETA-INFN-CATANIA: ldap_bind: Can't contact LDAP

server

Check if:– globus-mds is up & running (ps aux |grep 2135)

– 2170 port is open on the site BDII firewall (log a ticket)

Page 15: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

15Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

LDAP databases in lock status● If a query to the BDII is slow, probably the

ldap databases are corrupted.

● Solution:– Stop bdii daemon

– Remove all databases, temporary and cached files:

● rm –f /opt/bdii/var/217*/* /opt/bdii/var/tmp/* /opt/bdii/var/cache/*

– Start bdii daemon

Page 16: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

16Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

LINK of Top BDII troubleshooting

http://goc.grid.sinica.edu.tw/gocwiki/SiteProblemsFollowUpFaq#head-d5bc714b734175fc25f3d387c0a46a9ff7ad421e

Page 17: Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” FESR 1 Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007.

martedi 8 novembre 2005

Consorzio COMETA “Progetto PI2S2”Consorzio COMETA “Progetto PI2S2”FESR

17Giuseppe Platania - Tutorial per Site Administrator Progetto PI2S2, Messina 9-11.07.2007

Questions…


Recommended