Published July 2, 2025 | Version 1.0
Presentation Open

Data from NenuFAR, an SKA pathfinder: a challenge in a constrained landscape.

  • 1. Observatoire de Paris, Université de Recherche Paris Sciences et Lettres

Description

NenuFAR (New Extension in Nançay Upgrading LOFAR) is a low-frequency radio telescope (10 to 18 MHz) located at the Observatoire de Radioastronomie de Nançay (ORN). With over 15 thematic groups, the instrument covers all fields of radio astronomy (from the solar system to the early Universe). NenuFAR can operate as an interferometer, as a phased array, or even as an extension of LOFAR. This flexibility in configuration multiplies the types of data products and associated processing, with data rates that can approach 15 TB per hour. The various receivers produce such large volumes of data that they have to be reduced before being transferred out of the ORN. Some processing is carried out on the fly, on the data stream, but in the majority of cases, scientists run their scripts a posteriori to produce the reduced data. NenuFAR's data infrastructure is made up of 3 main elements: the receivers that produce the initial data stream; the Nançay data center, which provides storage and computing resources to users for the initial data reduction; and finally, a distributed data center split between the Paris Observatory and the DataCentre of the Région-Centre-Val-de-Loire. While the computing resources at Nançay are conventional (independent servers with shared storage space), the distributed data center is built on a cloud architecture. This heterogeneous architecture requires coordinated management of data, processing software and computing and storage resources.

Abstract (French)

NenuFAR (New Extension in Nançay Upgrading LOFAR) est un radio télescope basse fréquence (10 à 18 MHz) situé à l’Observatoire de Radioastronomie de Nançay (ORN). Avec plus de 15 groupes thématiques, l’instrument couvre tous les champs de la radio astronomie (depuis le système solaire au débuts de l’Univers). NenuFAR peut fonctionner comme un interféromètre, comme un réseau phasé, voire même comme une extension de LOFAR. Cette flexibilité dans la configuration démultiplie les types de produits de données et les traitements associés, avec des débits de données qui peuvent approcher les 15 To par heure. Les différents récepteurs produisent des volumes de données tels qu’ils doivent être réduits avant d’être transférés hors de l’ORN. Certains traitements sont opérés à la volée, sur le flux de données, mais dans la majorité des cas, les scientifiques lancent leurs scripts a posteriori pour produire les données réduites. L’infrastructure de données de NenuFAR est composée de 3 éléments principaux: les récepteurs qui produisent le flux de données initial; le centre de données de Nançay qui fournit le stockage et les moyens de calculs aux utilisateurs pour la réduction initiale des données; et enfin, un centre de données distribué réparti entre l’Observatoire de Paris et le DataCentre de la Région-Centre-Val-de-Loire. Si les moyens de calcul à Nançay sont classiques (serveurs indépendants avec un espace de stockage partagé), le centre de données distribué est construit sur une architecture cloud. Cette architecture hétérogène nécessite une gestion coordonnée des données, des logiciels de traitement et des moyens de calculs et de stockage.

Files

2025-07-02-SF2A-Toulouse-NenuFAR.pdf

Files (48.4 MB)

Name Size Download all
md5:d7c39b691c13a9f5d13653e0223ab5f3
48.4 MB Preview Download

Additional details

Additional titles

Translated title (French)
Les données de NenuFAR, éclaireur de SKA: un défi dans un paysage contraint.

Funding

European Commission
OSTrails - Open Science Plan-Track-Assess Pathways 101130187
European Commission
EXTRACT - A distributed data-mining software platform for extreme data across the compute continuum 101093110

Dates

Issued
2025-07-02