Centre de Calcul de l'Institut National de Physique Nucléaire et de Physique des Particules
Le libre dans le monde des datacenters
rêve ou réalité ?
Campus du Libre, 10 Novembre 2018
Benjamin Guillon, Cyril L'Orphelin - CNRS/CCIN2P3
- Unité de Service et de Recherche du CNRS / IN2P3
- IN2P3 : Institut National de Physique Nucléaire et de Physique des Particules
- Localisé de l'autre côté de la rue
- ~85 personnes dont 65 ingénieurs et 1 chercheur
- La physique des particules : les propriétés des constituants élémentaires de la matière
- La physique nucléaire : les propriétés des noyaux des atomes et de leurs constituants les nucléons
- L’astrophysique et les astroparticules : le rayonnement cosmique, le contenu, la structure et l’évolution de l’Univers
- Dans une moindre mesure, les sciences de la vie et les sciences humaines et sociales
- Des moyens de traitement de grandes masses de données
- Des systèmes de stockage de masse
- Une infrastructure pour la production scientifique
- Des outils d'aide à la production scientifique
| OS | Nb serveurs | Licence | |
|---|---|---|---|
 |
~50 | GNU GPL |  |
 |
~800 | GNU GPL | |
| Nom | Nb centres | Type | |
|---|---|---|---|
| TORQUE & MAUI | 90 | Commerciale + GNU LGPL |  |
 |
50 | Dual licensed | |
 |
50 | Apache 2 | |
 |
20 | GNU GPL | |
 |
20 | Sun Industry License |  |
 |
20 | IBM License | |
- Soumissions distribuées : Grid/Cloud Computing
- Couche de communication : Middleware / Intergiciel
- Collaborations internationales
- Standards ouverts
- Open Source
- Des moyens de traitement de grandes masses de données
- Des systèmes de stockage de masse
- Une infrastructure pour la production scientifique
- Des outils d'aide à la production scientifique
| Utilisation | Description | Volumétrie | |
|---|---|---|---|
| SPS |
|
|
|
| PBS |
|
|
 
|
| Utilisation | Description | Volumétrie | Solution Logicielle | |
|---|---|---|---|---|
| Local | HPSS |
|
|
|
| Xrootd |
|
|
 |
|
| Distribué | iRODS |
|
|
 |
| dCache |
|
|
 |
 |
Licence Commerciale |
 |
Fork communautaire de MySQL GNU GPLv2, GNU LGPL |
 |
PostgreSQL License a liberal Open Source license |
 |
GNU AGPLv3 |
- Des moyens de traitement de grandes masses de données
- Des systèmes de stockage de masse
- Une infrastructure pour la production scientifique
- Des outils d'aide à la production scientifique
Un réseau local performant pour plusieurs salles :
- n x 100Gbps entre salles
- n x 1 ou 10Gbps vers les machines
Principalement Ethernet mais aussi Infiniband
Un IX RENATER et autres opérateurs, zone neutre
Du cisco partout...
Hébergement:
- Colocation de serveurs
- Infrastructure as a Service (IaaS)
- Web hosting
Clients institutionnels
- Hébergement "sec"
- Racks, fluides et réseau
Virtualisation « à la demande »
Accès aux ressources mutualisées:
- Calcul
- Stockage
- Réseau
↓
+
Production et R&D:
- 80 HVs
- 50 Projets
- 150 utilisateurs
- 6500 vCPUs
- 34 TB de RAM
- 0,5 PB de stockage
→
Plus de 300 sites et services web institutionnels
Plusieurs défis pour le CCIN2P3:
- Augmentation des demandes
- Hétérogénéité des technologies
- Ressources contraintes
→ Sur une plateforme vieillissante...
+ 
Mutualisation → Conteneurisation
- Cohabitation technologique
- Orchestration et automatisation
- Industrialisation, standardisation, délégation
Industrialiser le déploiement d'infrastructures
- Eviter les erreurs humaines
- Standardiser les configurations
- Automatiser les tâches rébarbatives
- Des moyens de traitement de grandes masses de données
- Des systèmes de stockage de masse
- Une infrastructure pour la production scientifique
- Des outils d'aide à la production scientifique
Plateforme « Atrium »
→ Gestion électronique de documents (GED)
- 4,8k utilisateurs (IN2P3)
- 180k documents (depuis 2003)
- 1.4To de données
Déploiement INSU à venir...
Opensource et commercial
| Usage | Outil(s) | Licence |
| Emails |
|
Commercial |
| Conférences |
|
Libre |
| Support utilisateur |
|
Libres |
| Retransmission d'évènements |
|
Commercial |
| Usage | Outil(s) | Licence |
| Gestion de projet informatique |
|
Libres |
| Gestion de sources | Git, SVN, CVS, Hg... | Libres |
| Intégration continue |
|
Libres |
Avantages du logiciel libre
- Indépendance et contrôle
- Exploration technologique
- Travail aux limites
- Moins de frais de licence et de support
Mise en avant du logiciel libre:
→ En France et en Europe
OpenData
- F.A.I.R.
- Rayonnement international
- Public
VS.
Souveraineté des données- Respect de la législation
- Propriété intellectuelle
- Sécurité et confidentialité
«CEA CNRS INRIA Logiciel Libre»
- Licence Opensource compatible GNU GPL
- Conçu par les acteurs publics majeurs français
- Préconisée dans le monde de l'ESR
→ Mais est-elle vraiment util(isé)e?
Support et fonctions avancées payants
→ Logiciel Libre « professionnel »
Dépendance à des sociétés ...
... de plus en plus puissantes.
Une philosophie Open Source pragmatique
→ qui dépend :
- de la spécifité de nos besoins
- de la performance des solutions
- du cout humain de l'implémentation et l'intégration
Une souveraineté assumée de la gestion de données
- Hébergement
- local, pour nos services
- mais aussi communautaire (ESR)
- Données stockées localement
- Peu de recours à l'externalisation
Des questions?
cc.in2p3.fr/rejoignez-nous
Powered by Reveal.js