DARK ENERGY EXTRAGALACTIC MAPPING DATA CENTER — EUCLID (Q3197147)

EL SUBPROYECTO "CENTRO DE DATOS PARA CARTOGRAFIADOS EXTRAGALACTICOS DE ENERGIA OSCURA - EUCLID" PROPORCIONA LOS MEDIOS PARA LA PRODUCCION, PROCESADO Y ANALISIS DE DATOS DE DES, PAU Y EUCLID, CON ALGUNA CONTRIBUCION A LSST AND WFIRST. CON RESPECTO A EUCLID, OBJETIVO PRINCIPAL DE ESTA PROPUESTA, SE HA CONSTITUIDO UNA COLABORACION ENTRE LA UNIDAD ORGANITZATIVA PARA LAS SIMULACIONES (OU-SIM, EN SUS SIGLAS EN INGLES) Y EL PORT D'INFORMACIO CIENTIFICA (PIC), ESTE ULTIMO OCUPANDO EL ROL DE CENTRO DE DATOS CIENTIFICOS PARA ESPAÑA (SDC-ES, EN SUS SIGLAS EN INGLES), QUE ES; LA ENCARGADA DE DESARROLLAR Y MANTENER LAS CADENAS DE PROCESAMIENTO QUE PRODUCIRAN LOS DATOS DE ENTRADA SIMULADOS PARA EL RESTO DE OUS. VARIOS ENTREGAS DE SIMULADORES DE LOS 3 INSTRUMENTOS + 2 SURVEYS EXTERNOS DE EUCLID FUERON DESARROLLADOS HASTA 2017. ESTA TAREA PUEDE APROVECHAR LOS TRABAJOS REALIZADOS PARA LAS SIMULACIONES DE PAU PARA LAS QUE EL PIC, EN COLABORACION CON EL IEEC, HA IDO DESARROLLANDO LAS CADENAS DE PROCESAMIENTO QUE PRODUCEN LAS IMAGENES EN CRUDO SIMULADAS SIGUIENDO LAS ESPECIFICACIONES DEL INSTRUMENTO DE LA CAMARA DE PAU. ESTAS IMAGENES SIMULADAS ALIMENTAN LAS CADENAS DE PROCESAMIENTO DE REDUCCION DE DATOS DE LA TAREA DE GESTION DE DATOS DE PAU, QUE TAMBIEN SE DESARROLLA Y OPERA EN EL PIC. ADICIONALMENTE, EL PIC DISTRIBUYE CATALOGOS DE OBJETOS DERIVADOS DE LOS DIVERSOS GRAND CHALLENGES Y FLAGSHIP RUNS DE LAS SIMULACIONES DE MICE Y DE LA UNIVERSIDAD DE ZURICH A LOS PROYECTOS DE EUCLID, DES Y PAU. ESTA DISTRIBUCION YA SE ESTA LLEVANDO A CABO MEDIANTE DEL SERVICIO DE DISTRIBUCION DE CATALOGOS, PROPORCIONANDO CATALOGOS PERSONALIZADOS A MAS DE 500 DE CIENTIFICOS. _x000D_ EL TRABAJO PARA EL SDC-ES ES EL OBJETIVO PRINCIPAL DEL SUBPROYECTO PRESENTADO POR EL IFAE-PIC. AUN ASI, OTROS PROYECTOS SE VERAN REFORZADOS DEBIDO A SU RELEVANCIA Y CONVERGENCIA COMO PRECURSORES O VALIDADORES DE EUCLID. DENTRO DE ESTOS PROYECTOS CONVERGENTES, LA EXPERIENCIA DEL PIC SE ENCUENTRA PRINCIPALMENTE EN PAU, DES Y MICE, PERO TAMBIEN SUS SUCESORES LSST AND WFIRST. EL PIC, CON SU IMPLICACION EN EL PROYECTO PAU, SE ERIGE COMO EL CENTRO DE DATOS DE REFERENCIA Y COMO EL PROVEEDOR DE LOS MEDIOS PARA LA REDUCCION DE LAS IMAGENES EN CRUDO Y SU TRANSFORMACION EN DATOS DESTINADOS AL USO CIENTIFICO. EL PIC, EN COLABORACION CON EL IEEC, HA DESARROLLADO E IMPLEMENTADO EL PAQUETE DE GESTION DE DATOS PARA PAU. EN JUNIO 2015 EL PROYECTO ENTRO EN LA FASE DE TOMA DE DATOS. EL PIC DEBE PROPORCIONAR LA INFRAESTRUCTURA NECESARIA Y DESARROLLAR LAS CADENAS DE PROCESAMIENTO DE CIENCIA DE PAU, PERO TAMBIEN DE DES Y LSST. SIPIC, EL SOFTWARE DE DESARROLLAR Y EJECUTAR ESTOS PIPELINES, CORRERA EN UNA PLATAFORMA DE BIG DATA INCORPORADA A COSMOHUB._x000D_ DESDE SUS INICIOS EN 2003, EL PIC SE HA POSICIONADO COMO UNO DE LOS CENTROS DE DATOS DE REFERENCIA PARA LA GESTION Y MANEJO DE VOLUMENES DE DATOS MASIVOS, ESPECIALMENTE POR SU PARTICIPACION EN EL PROYECTO WLCG COMO EL CENTRO DE NIVEL 1 EN ESPAÑA PARA LOS PROYECTOS DEL LHC. LA TRANSFERENCIA DE TECNOLOGIA HA PERMITIDO IMPLEMENTAR Y MEJORAR OTRAS TAREAS RELACIONADAS DE OTROS PROYECTOS, EN ESPECIAL EN EL AREA DE COSMOLOGIA Y ASTROFISICA, COMO MAGIC, DES, PAU Y EUCLID._x000D_ LOS NUEVOS VOLUMENES DE DATOS Y SU COMPLEXIDAD NOS OBLIGAN A INNOVAR CONSTANTEMENTE SOLUCIONES QUE PROPORCIONAN UN ACCESO RAPIDO Y INTUITIVO A LOS DATOS A LA COMUNIDAD CIENTIFICA. ESTA TAREA ES PARTE DE LOS RETOS TECNOLOGICOS QUE SURGEN POR LA EVOLUCION DE LA SOCIEDAD CADA VEZ MAS BASADA EN LA INFORMACION DIGITAL. (Spanish)

0 references

THE SUB-PROJECT "DATA CENTER FOR EXTRAGALACTIC DARK ENERGY SURVEYS - EUCLID" PROVIDES THE MEANS OF THE DATA PRODUCTION, PROCESSING AND ANALYSIS FOR DES, PAU AND EUCLID, WITH CONTRIBUTIONS TO LSST AND WFIRST. REGARDING EUCLID, WHICH IS THE PRIMARY FOCUS OF THIS PROPOSAL, A COLLABORATION OF THE ORGANISATIONAL UNIT FOR SIMULATIONS (OU-SIM) AND THE PORT D'INFORMACIO CIENTIFICA (PIC), IN ITS ROLE OF THE SPANISH SCIENCE DATA CENTER (SDC-ES), WILL DEVELOP AND MAINTAIN THE SIM PIPELINES THAT PRODUCE SIMULATED MOCK INPUT TO ALL OTHER OUS. SIMULATORS FOR THE 3 EUCLID INSTRUMENTS + 2 EXTERNAL SURVEYS HAVE BEEN DEVELOPED AND USED IN A DATA CHALLENGE IN 2017. THE FURTHER WORK CAN BUILD UPON THE SIMULATION ACTIVITIES FOR PAU. WITHIN THESE ACTIVITIES PIC, IN COLLABORATION WITH IEEC, DEVELOPED THE SIMULATION PIPELINES THAT PRODUCE MOCK RAW IMAGES WITH RESPECT TO THE INSTRUMENTAL SPECIFICATIONS OF THE PAU CAMERA. THE SIMULATED DATA FEED THE DATA REDUCTION PIPELINES OF THE PAU DATA MANAGEMENT, ALSO DEVELOPED AND OPERATED AT PIC. FURTHER, PIC DISTRIBUTES OBJECT CATALOGUES DERIVED FROM THE GRAND CHALLENGE AND FLAGSHIP RUNS OF SIMULATIONS FROM MICE AND THE UNIVERSITY OF ZURICH TO EUCLID, DES AND PAU. THE CATALOGUE DISTRIBUTION SERVICE IS ALREADY IN PLACE AND SERVES CUSTOMISED OBJECT CATALOGUES TO APPROXIMATELY 500 SCIENTISTS._x000D_ THE WORK OF SDC-ES IS THE PRIMARY OBJECTIVE OF THE SUB-PROJECT PRESENTED BY IFAE-PIC. NEVERTHELESS, OTHER PROJECTS WILL BE SUPPORTED BECAUSE OF THEIR RELEVANCE AS PATHFINDING ACTIVITIES TO EUCLID. WITHIN THOSE PATHFINDING PROJECTS PICS EXPERTISE IS FOCUSED ON PAU, DES AND MICE, BUT ALSO ON ITS SUCCESSORS LSST AND WFIRST. _x000D_ PIC SUPPORTS PAU BEING ITS REFERENCE DATA CENTER AND PROVIDING THE MEANS OF REDUCING RAW IMAGES INTO SCIENCE-READY DATA. PIC, IN COLLABORATION WITH IEEC, DEVELOPED AND IMPLEMENTED THE DATA MANAGEMENT PACKAGE FOR PAU. IN JUNE 2015 THE PROJECT ENTERED IN THE PHASE OF DATA-TAKING AND SCIENTIFIC EXPLOITATION. PIC HAS TO PROVIDE THE NECESSARY INFRASTRUCTURE AND TO DEVELOP THE_x000D_ SCIENCE PIPELINES FOR PAU, BUT ALSO TO DES AND LSST. SCIPIC, THE SOFTWARE DEVELOPMENT AND DATA ANALYSIS PACKAGE, IS THOUGHT TO BE EXECUTED ON A BIG DATA PLATFORM INCORPORATED INTO COSMOHUB._x000D_ SINCE ITS BEGINNINGS IN 2003, PIC HAS BECOME A REFERENCE DATA CENTER FOR THE MANAGEMENT OF MASSIVE DATA SETS THROUGH ITS WORK WITHIN THE WLCG PROJECT, BEING THE SPANISH TIER-1 FOR THE LHC PROJECTS. THE TRANSFER OF TECHNOLOGY AND KNOWLEDGE MADE IT POSSIBLE_x000D_ TO ENABLE AND CARRY OUT TASKS RELATED TO OTHER PROJECTS, ESPECIALLY IN THE AREA OF ASTROPHYSICS AND COSMOLOGY, E.G. MAGIC, DES, PAU AND EUCLID._x000D_ THE NEW ORDER OF MAGNITUDE IN DATA VOLUMES AND ITS COMPLEXITY FORCES US INTO THE INNOVATION OF SOLUTIONS THAT MAKE THE DATA ACCESSIBLE TO THE SCIENTIFIC COMMUNITY EASILY AND INTUITIVELY. THIS TASK IS PART OF THE TECHNOLOGICAL CHALLENGES THAT SURFACE BECAUSE OF THE EVOLUTION TOWARDS A SOCIETY INCREASINGLY BASED ON DIGITAL INFORMATION. (English)

0 references

LE SOUS-PROJET «CENTRE DE DONNÉES POUR L’ÉNERGIE SOMBRE — CARTOGRAPHES EUCLID EXTRAGALATIC» FOURNIT LES MOYENS POUR LA PRODUCTION, LE TRAITEMENT ET L’ANALYSE DES DONNÉES DES, PAU ET EUCLID, AVEC UNE CERTAINE CONTRIBUTION À LSST ET WFIRST. EN CE QUI CONCERNE EUCLIDE, PRINCIPAL OBJECTIF DE CETTE PROPOSITION, UNE COLLABORATION A ÉTÉ ÉTABLIE ENTRE L’UNITÉ D’ORGANISATION DES SIMULATIONS (OU-SIM) ET LE PORT D’INFORMACIO SCIENTIFICA (PIC), CELUI-CI OCCUPANT LE RÔLE DE CENTRE DE DONNÉES SCIENTIFIQUES POUR L’ESPAGNE (SDC-ES), À SAVOIR: CELUI QUI EST CHARGÉ DE DÉVELOPPER ET DE MAINTENIR LES CHAÎNES DE TRAITEMENT QUI PRODUIRA LES DONNÉES D’ENTRÉE SIMULÉES POUR LE RESTE DES OUS. PLUSIEURS TRANCHES DE L’INSTRUMENT 3 D’EUCLIDE + 2 SIMULATEURS EXTERNES D’ENQUÊTE ONT ÉTÉ DÉVELOPPÉES JUSQU’EN 2017. CETTE TÂCHE PEUT TIRER PARTI DU TRAVAIL EFFECTUÉ POUR LES SIMULATIONS PAU POUR LESQUELLES LE PIC, EN COLLABORATION AVEC L’IEEC, A DÉVELOPPÉ LES CHAÎNES DE TRAITEMENT QUI PRODUISENT LES IMAGES BRUTES SIMULÉES SELON LES SPÉCIFICATIONS DE L’INSTRUMENT DE LA CAMARA DE PAU. CES IMAGES SIMULÉES ALIMENTENT LES CHAÎNES DE TRAITEMENT DE LA RÉDUCTION DES DONNÉES DE LA TÂCHE DE GESTION DES DONNÉES DE PAU, QUI EST ÉGALEMENT DÉVELOPPÉE ET EXPLOITÉE DANS LE PIC. EN OUTRE, LE PIC DISTRIBUE DES CATALOGUES D’OBJETS ISSUS DES DIFFÉRENTS GRANDS CHALLENGES ET PASSE DES SIMULATIONS DE SOURIS ET DE L’UNIVERSITÉ DE ZURICH AUX PROJETS D’EUCLIDE, DES ET PAU. CETTE DISTRIBUTION EST DÉJÀ EFFECTUÉE PAR LE BIAIS DU SERVICE DE DISTRIBUTION DE CATALOGUES, FOURNISSANT DES CATALOGUES PERSONNALISÉS À PLUS DE 500 SCIENTIFIQUES. _x000D_ le travail SDC-EN est l’OBJECTIF PRINCIPAL du sous-projet SUBMITTED PAR IFAE-PIC. TOUTEFOIS, D’AUTRES PROJETS SERONT RENFORCÉS EN RAISON DE LEUR PERTINENCE ET DE LEUR CONVERGENCE EN TANT QUE PRÉCURSEURS OU VALIDATEURS D’EUCLIDE. DANS LE CADRE DE CES PROJETS CONVERGENTS, L’EXPÉRIENCE DU CIP EST PRINCIPALEMENT À PAU, AUX SOURIS, MAIS AUSSI À SES SUCCESSEURS LSST ET WFIRST. LE PIC, AVEC SA PARTICIPATION AU PROJET PAU, EST LE CENTRE DE DONNÉES DE RÉFÉRENCE ET LE FOURNISSEUR DES MOYENS DE RÉDUCTION DES IMAGES BRUTES ET DE LEUR TRANSFORMATION EN DONNÉES DESTINÉES À UNE UTILISATION SCIENTIFIQUE. LE PIC, EN COLLABORATION AVEC LA CEEI, A ÉLABORÉ ET MIS EN ŒUVRE LE PAQUET DE GESTION DES DONNÉES POUR PAU. EN JUIN 2015, LE PROJET EST ENTRÉ DANS LA PHASE DE COLLECTE DES DONNÉES. LE PIC DEVRAIT FOURNIR L’INFRASTRUCTURE NÉCESSAIRE ET DÉVELOPPER LES CHAÎNES DE TRAITEMENT SCIENTIFIQUE DE PAU, MAIS AUSSI DES ET LSST. Sipic, THE SOFTWARE OF DEVELOPING AND EXECUTING ces pipelines, fonctionne sur une plate-forme de BIG DATA INCORPORATE TO COSMOHUB._x000D_ depuis son lancement en 2003, le PIC a été positionné comme l’un des centres de données de référence pour la gestion et le traitement des données de masse, en particulier pour votre participation au projet WLCG en tant que NIVEL 1 en Espagne pour les projets LHC. Le TRANSFERT DE TECHNOLOGIE EN SPÉCIAL DANS LE DOMAINE DE LA cosmologie ET de l’astrophysique, AS MAGIC, DES, PAU ET EUCLID._x000D_ NEW DATA Volumens ET VOTRE complexité OWN TO INNOVATE Il existe des solutions qui fournissent un accord brut et inclusif aux données à la communauté scientifique. CETTE TÂCHE S’INSCRIT DANS LE CADRE DES DÉFIS TECHNOLOGIQUES QUI DÉCOULENT DE L’ÉVOLUTION DE LA SOCIÉTÉ DE PLUS EN PLUS BASÉE SUR L’INFORMATION NUMÉRIQUE. (French)

point in time

4 December 2021

0 references

DAS TEILPROJEKT „RECHENZENTRUM FÜR DUNKLE ENERGIE – EUCLID EXTRAGALATIC KARTOGRAPHEN“ BIETET DIE MITTEL FÜR DIE PRODUKTION, VERARBEITUNG UND ANALYSE VON DATEN DES, PAU UND EUCLID, MIT EINEM GEWISSEN BEITRAG ZU LSST UND WFIRST. IN BEZUG AUF EUCLID, DAS HAUPTZIEL DIESES VORSCHLAGS, WURDE EINE ZUSAMMENARBEIT ZWISCHEN DER ORGANISATIONSEINHEIT FÜR SIMULATIONEN (OU-SIM) UND DEM HAFEN D’INFORMACIO SCIENTIFICA (PIC) GESCHAFFEN, DIE DIE ROLLE DES WISSENSCHAFTLICHEN RECHENZENTRUMS FÜR SPANIEN (SDC-ES) INNEHAT; DERJENIGE, DER FÜR DIE ENTWICKLUNG UND PFLEGE DER VERARBEITUNGSKETTEN ZUSTÄNDIG IST, DIE DIE SIMULIERTEN EINGABEDATEN FÜR DEN REST VON OUS PRODUZIEREN. BIS 2017 WURDEN MEHRERE RATEN VON EUCLID’S 3 INSTRUMENT + 2 EXTERNEN UMFRAGESIMULATOREN ENTWICKELT. DIESE AUFGABE KANN DIE ARBEIT DER PAU-SIMULATIONEN NUTZEN, BEI DENEN DIE PIC IN ZUSAMMENARBEIT MIT DER IEEC DIE VERARBEITUNGSKETTEN ENTWICKELT HAT, DIE DIE SIMULIERTEN ROHBILDER NACH DEN SPEZIFIKATIONEN DES INSTRUMENTS DER CAMARA DE PAU ERZEUGEN. DIESE SIMULIERTEN BILDER GEBEN DIE DATENREDUZIERUNGSKETTEN DER EBENFALLS IM PIC ENTWICKELTEN UND BETRIEBENEN PAU-DATENVERWALTUNGSAUFGABE ZU. DARÜBER HINAUS VERTREIBT DIE PIC KATALOGE VON OBJEKTEN, DIE AUS DEN VERSCHIEDENEN GROSSEN HERAUSFORDERUNGEN UND FLAGGSCHIFFLÄUFEN VON DEN MÄUSENSIMULATIONEN UND DER UNIVERSITÄT ZÜRICH AN DIE PROJEKTE VON EUCLID, DES UND PAU ABGELEITET WURDEN. DIESE DISTRIBUTION ERFOLGT BEREITS ÜBER DEN KATALOGVERTRIEBSSERVICE, DER MEHR ALS 500 WISSENSCHAFTLERN MASSGESCHNEIDERTE KATALOGE ZUR VERFÜGUNG STELLT. _x000D_ die DEZA-DE-WORK ist das PRINCIPAL OBJECTIVE DES Teilprojekts SUBMITTED BY IFAE-PIC. ANDERE PROJEKTE WERDEN JEDOCH AUFGRUND IHRER RELEVANZ UND KONVERGENZ ALS VORLÄUFER ODER VALIDATOREN VON EUCLID VERSTÄRKT. IM RAHMEN DIESER KONVERGENTEN PROJEKTE LIEGT DIE ERFAHRUNG DES CIP VOR ALLEM IN PAU, DES UND MÄUSEN, ABER AUCH IN SEINEN NACHFOLGERN LSST UND WFIRST. DAS PIC STEHT MIT SEINER BETEILIGUNG AM PROJEKT PAU ALS REFERENZ-RECHENZENTRUM UND ALS ANBIETER DER MITTEL ZUR REDUKTION VON ROHBILDERN UND DEREN UMWANDLUNG IN DATEN, DIE FÜR DEN WISSENSCHAFTLICHEN EINSATZ BESTIMMT SIND. DIE PIC HAT IN ZUSAMMENARBEIT MIT DER IEEC DAS DATENMANAGEMENTPAKET FÜR PAU ENTWICKELT UND UMGESETZT. IM JUNI 2015 TRAT DAS PROJEKT IN DIE DATENERHEBUNGSPHASE EIN. DAS CIP SOLLTE DIE NOTWENDIGE INFRASTRUKTUR BIETEN UND PAU’S WISSENSCHAFTSVERARBEITUNGSKETTEN, ABER AUCH DES UND LSST ENTWICKELN. Sipic, THE SOFTWARE OF DEVELOPING AND EXECUTING these Pipelines, läuft in einer Plattform von BIG DATA INCORPORATE TO COSMOHUB._x000D_ von Anfang 2003 als eines der Referenzdaten für die Verwaltung und den Umgang mit Massendaten, speziell für Ihre Teilnahme am WLCG-Projekt als NIVEL 1 in Spanien für LHC-Projekte. The TRANSFER OF TECHNOLOGY IN THE AREA der Kosmologie und Astrophysik, AS MAGIC, DES, PAU UND EUCLID._x000D_ NEW DATA volumens UND IHR Komplexität OWN INNOVATE gibt es Lösungen, die eine rohe und inklusive Übereinstimmung mit den Daten für die wissenschaftliche Gemeinschaft bieten. DIESE AUFGABE IST TEIL DER TECHNOLOGISCHEN HERAUSFORDERUNGEN, DIE SICH AUS DER ZUNEHMEND AUF DIGITALEN INFORMATIONEN BERUHENDEN ENTWICKLUNG DER GESELLSCHAFT ERGEBEN. (German)

point in time

9 December 2021

0 references

location (string)

Cerdanyola del Vallès

0 references

Identifiers

Spanish Kohesio ID

ESP2017-89838-C3-3-R

0 references

DARK ENERGY EXTRAGALACTIC MAPPING DATA CENTER — EUCLID (Q3197147)

Statements

Identifiers

Navigation menu

Search