Project

General

Profile

LCG-France »

SSR2019

Message du WLCG Office (report de janvier 2019)

Fichier à vérifier (report de janvier) : https://forge.in2p3.fr/attachments/download/62383/WSSA_2019_01.xlsx

Lien sur la présentation faite au GDB de janvier : https://indico.cern.ch/event/739874/contributions/3278159/attachments/1779732/2894840/2019.01.16_WLCG_Storage_Space_Accounting_Now_In_Production.pdf

Informations complémentaires

  • Tokens comptabilisés
    • ATLAS : seuls ATLASDATADISK et ATLASSCRATCHDISK (Tier-2) + ATLASDATATAPE et ATLASMCTAPE (Tier-1s)
    • LHCb : LHCb-Disk et LHCb_USER (Tier-2) et LHCb-Tape (Tier-1s)
  • Comment les valeurs sont récupérées :
    • ALICE : les valeurs sont reportées par MonaLisa -> oui mais comment sont-elles mesurées ?
    • LHCb : for LHCb we are using SRM queries for disk space. (Julia Andreeva) $ gfal-xattr srm://grid05.lal.in2p3.fr:8446/dpm/lal.in2p3.fr/home spacetoken.description?LHCb-Disk
  • Digest des problèmes détectés sur les sites
    • problèmes détectés :
      • LHCb LAL rien n'est remonté -> résolu avec équipe accounting
      • ALICE IRFU cesse de remonter info début février en cours
      • ALICE CC-IN2P3 : MonaLisa ne remontait pas les données pendant une période -> résolu par Dimitrios
      • ALICE LPSC : CB n'arrive pas à avoir l'espace "used"

Commentaires des sites (sur le report de janvier 2019)

FR-CCIN2P3

FR-GRIF

FR-IN2P3-CC-T2

FR-IN2P3-CPPM

ATLAS: OK
LHCB: OK

FR-IN2P3-IPHC

  • Volumétrie ALICE : ok (corresopnd à l'info que nous avons données à ALICE)
  • En attente de CMS pour vérifier les données CMS.

FR-IN2P3-LAPP

  • Volumétrie ATLAS OK : Total 1855 To Pledges 2018 : 1850 To

FR-IN2P3-LPC

  • Volumetrie Pledes : OK
  • Volumetrie Alice : De petites differences entre les differentes vision ( local : df --si, Alice via monalisa )
  • Volumetrie atlas OK : Des differences plus importante (~100 To ) mais peut-être du aussi a l'effet ajout/remplacement de stockage. Refaire l'exercice fin mars pour avoir une vision plus instantannée
    • Note de Catherine le 5 mars : grafana vue historique donne au 3 fevrier 2019 : 1207 PB total et 1063 To used ; le xls donne 1207 To total et 1033To used -> xls et grafana correspondent
    • Note de Catherine le 5 mars 2019 : grafana donne ce jour : 1.207 PB total et 1.078 To used ; "dpm-listspaces --si" de Jean-Claude donne space tokens atlasdatadisk+atlasscratchdisk reserved=1.20TB 1.08=used -> ca colle tres bien

FR-IN2P3-LPSC (check du report de janvier le 25 février 2019)

  • pledges : OK
  • volumétrie ALICE : les nombres dans le report ne correspondent ni à ce qui est installé (df --si), ni à ce que MonaLisa rapporte (http://alimonitor.cern.ch/siteinfo/?site=Grenoble)
    • df --si sur no serveurs : 413 To total -> 375 TiB
    • http://alimonitor.cern.ch/siteinfo/?site=Grenoble donne 360 TiB total -> je calcule 395 TB
    • xrdfs lpsc-se-dpm-disk17.in2p3.fr:1094 & spaceinfo / donne 396 TB
    • Catherine le 5 mars : grafana : ALICE used=348.9 TB, total=396.5 TB -> le total est coherent si on admet que xrootd prend de la place (413 TB -> 395TB)
    • Catherine le 5 mars xrdfs lpsc-se-dpm-disk17.in2p3.fr:1094 & spaceinfo / donne (ce sont des TB) : Total: 396 485 501 874 176
      Free: 36 793 671 794 688 Used: 57 350 994 918 715 -> le used est completement bizarre ??????????????
    • Catherine le 5 mars autre page MonaLisa donne bien aussi 360 TiB total
  • volumétrie ATLAS OK : les nombres semblent corrects dans le report (dpm-listspace --si compté sur ATLASDATADISK); comme le LPSC est en train d'installer des serveurs et de décommisionner d'autres, il est difficile de savoir quelles étaient les volumétries exactes fin janvier) ; l'exercice fait le 5 mars en se basant sur grafana donne des valeurs correctes
    • Catherine le 5 mars : grafana : ATLAS total=828.8 TB used=733.4 TB
    • Catherine le 5 mars dpm-listspaces --si : 830.13=reserved 734.03T=used Space Tokens: ATLASDATADISK+ATLASSCRATCHDISK

FR-IN2P3-SUBATECH

  • pledges : OK
  • volumétrie ALICE : correspond bien avec ce qui est publié via le BDII (et à mes calculs) mais pas avec ce qu'affiche Alice-Monalisa qui utilise des unités TiB,GiB (cela correspond une fois converti). Comment sont réellement collectées les données ?

Bilan au 15 mars 2019

bilan fait par Catherine à la réunion Technique du mois de mars : https://indico.in2p3.fr/event/18936/
Accès direct à la présentation

Rapport de février 2019 pour vérification par les sites

Fichier à vérifier par les sites : https://forge.in2p3.fr/attachments/download/62608/WSSA_2019_02.xlsx

Retour des sites

  • LPSC : ALICE : OK ; ATLAS : OK
  • LAPP : ATLAS : OK Depuis les pledges 2019 ont été déployées.
  • SUBATECH : ALICE : OK
  • IPHC : OK
  • site : commentaire
  • site : commentaire
    ...

Rapport de mai 2019 pour vérification par les sites

Retour des sites

  • CPPM : OK
  • GRIF-CMS : OK, mais problème potentiel DPM-IRFU -> grafana, par contre grafana -> report OK
  • IPHC : OK
  • LAPP : OK
  • LPC : OK
  • Subatech : OK