la certification des entrepôts de données€¦ · cooordinates trusted scientific data services...

43
La certification des entrepôts de données Françoise Genova CDS/Observatoire Astronomique de Strasbourg RDA France 11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 1

Upload: others

Post on 22-Jul-2020

0 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

La certification des entrepôts de données

Françoise GenovaCDS/Observatoire Astronomique de Strasbourg

RDA France

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 1

Page 2: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

La certification des entrepôts de données

Pourquoi?Les cadres de certification ‘de base’Exemple d’auto-évaluationLes critères du CoreTrustSealConclusions

Tout au long de l’exposé, l’exemple du Centre de Données astronomiques de Strasbourg

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 2

Page 3: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

La certification, pourquoi?

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 3

Page 4: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Certification

thanks to I. Dillo and H. L’Hours

Page 5: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

5

Perhaps the biggest challenge in sharing data is trust: how do you create a system robust enough for scientists to trust that, if they share, their data won’t be lost, garbled, stolen or misused?

Page 6: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

6Trust

Trust is at the very heart of storing and sharing data

Users Depositors Funders

Page 7: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

7What is trust built on?

Dedicate yourself (mission statement) Do what you promise (stable, sincere and competent

reputation) Be transparent (peer review, get certified)

Page 8: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

8What is a trustworthy repository?

mission to provide reliable, long-term access to managed digital resources to its designated community, now and into the future

constant monitoring, planning, and maintenance

understand threats to and risks within its systems

regular cycle of audit and/or certification

Page 9: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

9What is a trustworthy repository?

mission to provide reliable, long-term access to managed digital resources to its designated community, now and into the future

constant monitoring, planning, and maintenance

understand threats to and risks within its systems

regular cycle of audit and/or certification ?

Page 10: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Pourquoi une certification formelle?

Assurer que le centre est « de confiance »Mais… il a peut-être déjà la confiance de ses utilisateurs…L’exemple du Centre de Données astronomiques de Strasbourg

Crée en 1972Centre de données de référence pour la communauté astronomique internationaleInfrastructure de Recherche sur la Feuille de Route nationale~1 000 000 requêtes/jour sur les services

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 10

Page 11: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Oui, pourquoi?

Critères établis par des personnes compétentes et applicables quel que soit le cadre disciplinaireEvaluation externe par des personnes compétentes Au préalable, auto-évaluation selon les critères, qui permet de vérifier l’organisation et les process et d’identifier des améliorations possiblesUn point important dans les Data Management Plans

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 11

Page 12: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Le CDS est certifié

World Data System - WDSData Seal of Approval -DSACoreTrustSeal - CTS

Document produit pour la certification CoreTrustSeal:

https://www.coretrustseal.org/wp-content/uploads/2019/02/Strasbourg-Astronomical-Data-Centre.pdf

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 12

Page 13: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Les cadres de certification ‘de base’Un peu d’histoire…

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 13

Page 14: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

14The certification landscape EN 2015

4 certification standards available

DIN 31644

ISO 16363

Page 15: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Le World Data System (WDS)

Créé en 2008 par l’ICSU (=ISC)Essentiellement au départ données sur la planète (et astronomie) mais ouvert à tousPromoting universal and equitable access to, and long-term stewardship of, quality-assured scientific data and data services, products, and information covering a broad range of disciplines from the natural and social sciences, and humanities. Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasetsCDS member du WDS en 2012

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 15

Page 16: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

16

European certification framework (pre-RDA)

Basic Certification is granted to repositories which obtain DSA certification

Extended Certification is granted to Basic Certification repositories which in addition perform a structured, externally reviewed and publicly available self-audit based on DIN 31644/nestorSeal

Formal Certification is granted to repositories which in addition to Basic Certification obtain full external audit and certification based on ISO 16363

Page 17: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Le Data Seal of Approval

Plutôt HumanitésPlus dépôts de données que servicesLe CDS a été le premier centre certifié DSA du domaine des sciences physiques (en 2014)

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 17

Page 18: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Dans la RDA, dès 2013

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 18

Page 19: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

RDA: DSA + WDS (2016)

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 19

Page 20: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

DSA + WDS = CoreTrustSeal (CTS)

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 20

Page 21: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Exemple d’auto-évaluationLe Centre de Données astronomiques de Strasbourg (CDS)

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 21

Page 22: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Auto-evaluation

Questionnaire à remplirIl faut les compétences

De la direction (mission, organisation, …)Des personnes en charge du contenuDes personnes en charge de l’informatique

Pour le CDS: un travail d’équipe qui a impliqué la direction, les documentalistes, l’informaticien en charge du service et l’ingénieur système

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 22

Page 23: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Description des process du CDS

Basé sur le modèle OAIS –Open Archive Information System

https://public.ccsds.org/Pubs/650x0m2.pdf

Site en françaishttps://www.cines.fr/archivage/un-concept-des-problematiques/le-modele-de-reference-loais/

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 23

Page 24: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

L’environnement d’une archive OAIS

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 24

Page 25: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Les entités fonctionnelles de l’OAIS

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 25

SIP: Submission Information PackageAIP: Archival Information PackageDIP: Dissemination Information Package

Page 26: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Le pipeline de données du CDS dans le modèle OAIS

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 26

Page 27: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Les conséquences pour le CDS

Description de bout en bout des process et des rôlesPas de modification majeure Des améliorations suite à l’auto-évaluation pour le DSA

Clarification des licencesChecksums des fichiers

Le document soumis à CTS en 2018 a été accepté sans modification majeure Réaction très positive de nos autorités

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 27

Page 28: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Les critères du CoreTrustSeal

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 28

Page 29: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

La certification CTS

Toute l’information est sur le site de CoreTrustSealhttps://www.coretrustseal.org/

Contexte + 16 critèresDocument pour guider les évaluateurs et les candidats

En cours, V1.1 2017-2019https://www.coretrustseal.org/wp-content/uploads/2017/01/20180629-CTS-Extended-Guidance-v1.1.pdf

Traduction française par RDA Francehttps://www.rd-alliance.org/coretrustseal-criteres-de-conformite

Guide en cours de révision pour 2020-2022 - Les critères ne changent pas!

Version préliminaire et modificationshttps://www.coretrustseal.org/why-certification/review-of-requirements/

« Administrative fee » 1000€

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 29

Page 30: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Transition

Les candidatures sont acceptées dans l’ancien système jusqu’au 31 octobre, 23:59 UTCRéouverture en janvier En fait la mise à jour est essentiellement une clarification: on peut travailler sur la nouvelle version (et faire une petite vérification avant de soumettre)

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 30

Page 31: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Les critères sur le site CTS

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 31

Page 32: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Information sur la révision en cours

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 32

Page 33: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Les critères de certification CTS

R0 - Le contexte 16 critères, 3 thèmes:

Infrastructure organisationnelleGestion des objets numériques (données et des metadonnées)Technologie

Critères + aide

https://www.coretrustseal.org/why-certification/requirements/

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 33

Page 34: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Le contexte

Type d’entrepôtBrève description de l’entrepôtBrève description de la communauté concernéeNiveau de curation

Contenu en accès tel que déposéCuration de base (p. ex. vérification rapide, ajout de métadonnées de base ou de documentation)Curation avancée (p. ex. conversion vers de nouveaux formats, amélioration de la qualité de la documentation)Curation au niveau des données

Partenaires Résumé des modifications depuis la candidature précédente (s’il y a lieu)Autres informations pertinentes

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 34

Page 35: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Infrastructure organisationnelle

R1 – Mission/périmètreR2 – LicensesR3 – Continuité de l’accèsR4 – Confidentialité/éthiqueR5 – Infrastructure organisationnelleR6 – Conseils d’experts

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 35

Page 36: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Gestion des objets numériques

R7 – Intégrité et authenticité des donnéesR8 – Appréciation et sélection des donnéesR9 – Procédures d’archivage documentéesR10 – Plan de préservationR11 – Qualité des donnéesR12 – Processus de traitement (Workflows)R13 – Découverte et identification des donnéesR14 – Réutilisation des données

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 36

Page 37: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Technologie

R15 – Infrastructure techniqueR16 – Sécurité

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 37

Page 38: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Conclusions

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 38

Page 39: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Pourquoi la certification?

Quelques semaines de travail d’équipe (tout compris) Evaluation interneEvaluation externeImportance croissante pour les financeurs des centres de données et des projets (DMP)Priorité au niveau politique en France

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 39

Page 40: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Au niveau national: Plan national pour la Science Ouverte

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 40

Axe Structurer et Ouvrir les données de la recherche

ANR Flash 2019

Page 41: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

L’impact de la RDA

Fusion des deux cadres de certification ‘de base’Clarification du paysage pour les centres de données et les agences de financementDeux cadres complémentaires au départ: le résultat est meilleur que chacun des originaux!Nombreux nouveaux candidats à la certification

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 41

Page 42: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

Le rôle de RDA France

La certification est une prioritéTraduction du Guide (à reprendre quand la version 2020-2022 sera finalisée)Ateliers, présentations dans des réunions à la demande, discussions au téléphone, etcUne question récurrente: granularité pour les réseaux de dépôts de données/services. Sera discuté en plénière le 13.Relayer les initiatives du projet FAIRsFAIR et les appels d’offre, les informations sur les activités de la RDA, etcInscrivez-vous sur la liste de diffusion

https://listes.services.cnrs.fr/wws/subscribe/rda-france

11-12/09/2019 rd-alliance.org @resdatall | @rda_europe 42

Page 43: La certification des entrepôts de données€¦ · Cooordinates trusted scientific data services for the provision, use, and preservation of relevant datasets CDS member du WDS en

11-12/09/2019

43

rd-alliance.org @resdatall | @rda_europe

RDA in a Nutshell/RDA en Bref

WWW.RD-ALLIANCE.ORG/@RESDATALL

RDA Global

Email - [email protected] - www.rd-alliance.orgTwitter - @resdatallLinkedIn - www.linkedin.com/in/ResearchDataAllianceSlideshare - http://www.slideshare.net/ResearchDataAlliance

RDA EuropeEmail - [email protected] - @RDA_Europe

RDA FRANCEhttps://rd-alliance.org/groups/rda-franceEmail - [email protected]