wiki:dataMgt

Version 44 (modified by /O=GRID-FR/C=FR/O=CNRS/OU=LPSC/CN=Fabian Lambert, 15 years ago) ( diff )

--

Gestion des données grille

Généralités

Composants grille ==== Deux éléments sont à connaitre afin de manipuler des fichiers sur la grille.

  • Le LFC (LCG File Catalog) qui est une base de données qui contient les informations sur la localisation des fichiers sur la grille.
  • Le SE (Storage Element) qui fournit l'espace de stockage des fichiers.

Les fichiers ==== L'unité primaire de donnée sur la grille est le fichier. Il existe plusieurs façons d'identifier un fichier sur la grille:

  • Identifiants absolus
    • GUID (Grid Unique IDentifier)
    • LFN (Logical File Name) -> un alias utilisateur
  • Identifiants relatifs
    • SURL (Storage URL) -> pour identifier les réplicas
    • TURL (Transport URL)

Tutoriels ==== Attention ! La plupart des exercices nécessitent une authentification

[lambert@lpsc-ui ~]$ voms-proxy-init --voms xxx

ALICE VO

Les fichiers

L'accès aux fichiers ALICE se fait par l'intermédiaire de l'environnement shell aliensh en connaissant leur chemin/LFN ou un GUID.

Tutoriels ==== Attention ! La plupart des exercices nécessitent une authentification

[lambert@lpsc-ui ~]$ alien-token-init flambert
[lambert@lpsc-ui ~]$ source /tmp/env_$UID

ATLAS VO

Composants grille

  • Dans le cas de l'expérience ATLAS, les espaces disques des SE sont "divisés" en space-token.
    Les space-token ATLAS sont des espaces réservés, accessibles en fonction des rôles VOMS au sein de la VO ATLAS.

Les datasets ==== Les expériences comme ATLAS préfèrent manipuler des ensembles de fichiers nommés dataset.

Des outils comme 'DQ2' permettent de manipuler les datasets.
Pour ATLAS, AMI est l'outil officiel de recherche de datasets.

Tutoriels ==== Attention ! La plupart des exercices nécessitent une authentification

[lambert@lpsc-ui ~]$ voms-proxy-init --voms atlas

up ; previous ; next

Note: See TracWiki for help on using the wiki.