Abstract:

This paper introduces the early results of a research programme called MEMORIA that aims at developing an information system enabling the description, structuring and storage of digital outputs produced in the course of Heritage Architecture studies.
Our objective is to memorize not only a given result – i.e. a digital asset - but its making-of - in other words to record and share with future generations a work process rather than solely its outcomes. Digital assets are on the one hand described by a set of “classic” parameters (e.g. format, authors, creation date, etc.) and on the other hand associated with a process (concept that should be understood as a chain of activities).
Ultimately, the project investigates how a digital resource resulting from a human-birthed cognitive process can be associated with descriptors ensuring that all actions mobilised to produce the resource are recorded, and therefore ensuring a sort-of scientific traceability of the "final" digital document.

Abstract:

Knowledge-based systems, are today part of many research protocols where they act as powerful means to model, implement and cross-examine the workflows that lead from a set of inputs to a set of outputs.
They remain however tricky to apply in the specific context of heritage science where workflows include a long tail of subjective human decisions, of non-explicit research protocols, of poorly formalised pieces of knowledge, of highly individual skills, of undocumented, non-reproducible, intuitive interpretations, when not simply of licentia artistica. Yet the heritage science community has witnessed over the past decades the emergence of huge quantities of digital outputs, either following massive digitization efforts, or as a result of the growing capacity of actors to produce digital-born material. How can this move be supported in terms of reproducibility, reusability and cross-examination of results if research protocols remain non-formalised one-shot efforts?
The research presented in this paper bases on the idea that what should be formalised and shared with future generations are not end results alone (outputs) but the methods and processes that lead the making of the output (human skills, tools, technological procedures, cognitive processes, scientific protocols, etc.).
Our contribution addresses a pending issue: how can we today complement traditional approaches to heritage assets documentation with means to describe and record research processes and workflows? The infrastructure we propose raises knowledge representation, visualisation, and information management issues. It applies primarily to a range of specific cultural heritage related artefacts, but is expected to be fairly generic in terms of methodology. In this paper we describe the methods employed in order to elicit underlying activities, support team elicitation through ad-hoc visualisations, promote a consistent visual interfacing of the underlying Information System.

Abstract :

Scientists and academics have over the last decades been the witnesses of a profound shift in research practices, induced by the growing influence of “digital technologies” at large. One of the consequences of the introduction and use of those technologies (and methods) are changes in research pragmatics (e.g. a renewal of workflows, a renewal of data exchange and publication paradigms and practices). In the specific context of human and social sciences also, actors have acquired new tools that strongly influence their research practices. Yet the very nature of the cognitive processes concerned (and in particular the role of individual, somehow subjective interpretation steps) invites us to look into the consequences of the above shift with a sharp eye. With new opportunities often come new issues, new difficulties, and new hazards.
The MEMORIA project addresses some of these issues in an application field where constraints in relation with heritage Sciences meet practices, protocols, tools stemming from the engineering and information sciences. One of the key ethical issue that is discussed is the influence of digital technologies – supposedly positive– on our capacity to perpetuate and transmit to future generations pieces of data as well as elements of knowledge. The mantra behind the MEMORIA project is the idea that what needs to be formalized, shared, transmitted are not only results of research processes, but the result along with the production process. In other words the project aims at helping actors to "memorize" not only a digital resource but also and maybe above all the way it was created, the methods, protocols, choices, and subjective layers of interpretations that need to be worded if wanting to make of it a meaningful, reusable scientific document. In an application field where practices are often poorly documented, inferences sometimes subjective, and instrumentations ever more heterogeneous and pregnant, the issue is not trivial.
The contribution combines a down to earth presentation of the actual system under development with a more general vision of how researchers are today confronted to ethical challenges on the specific aspect of memorization, but also on more general terms.

Résumé:
Bien des activités humaines peuvent imposer de les observer, de les mesurer, à l’aune de questions et enjeux éthiques ou juridiques, et la recherche scientifique en fait partie. Dans ce champ d’activités de tels questionnements sont souvent mis en avant pour discuter de problèmes de propriété intellectuelle, de gestion des droits liés aux résultats de la recherche, et bien sûr des conditions dans lesquelles une expérimentation peut être menée sans porter atteinte aux droits des individus sur lesquels elle porte. Mais nous avons choisi ici d’aborder une question un peu moins souvent mise en lumière : celle de notre responsabilité dans la transmission des connaissances, enjeu qui nous semble relever de l’éthique des chercheur(e)s. Nous partons de la conviction que transmettre des connaissances implique non pas de transmettre une conclusion, mais un raisonnement, et de l’observation que l’omniprésence des techniques numériques a tendance nous faire oublier cette exigence.
De façon très générale notre travail consiste à renouveler les méthodes d’acquisition, d’analyse et de transmission de données et de connaissances sur le patrimoine culturel. Il s’agit donc d’un domaine de recherche non sans lien avec le monde de la culture, et fortement impacté par une transformation progressive de l’outillage lui-même ainsi que des méthodes scientifiques. Or l’adoption massive et la propagation de l’informatique dans les pratiques de recherche provoque un bouleversement profond dans le monde des sciences humaines et sociales - certains parlent même de « révolution numérique ». Les scientifiques ont acquis de nouveaux outils qui influencent fortement leur manière de travailler. Ces outils dictent même parfois aux scientifiques des objectifs à atteindre, voire fait de leur manipulation un objectif en tant que tel car nous ne maitrisons pas nos nouveaux outils autant que nous avons maitrisé les anciens. Par ailleurs, dans l’euphorie du numérique, nous oublions souvent que de nouveaux types d'opportunités activent généralement de nouveaux types de difficultés et d'erreurs.
Une des conséquences de l’introduction et de l’usage des nouvelles technologies sont des changements dans la pragmatique de la recherche (ex. renouvellement des méthodes de travail, des modes de pérennisation et de partage des données). À l’intersection des sciences humaines et sociales et des sciences d’information où se situe notre travail, ces bouleversements recouvrent à la fois une exigence de transmission sur le long terme des indices historiques bruts, et les contraintes d’une instrumentation toujours en évolution au travers de laquelle ces indices sont interprétés ou réinterprétés. L’impact concret de ces bouleversements sur nos pratiques, sur notre capacité à pérenniser et transmettre, reste donc encore aujourd’hui un sujet de réflexion ouvert. Que transmettre exactement ? Des données ? Des analyses, des interprétations fondées sur ces données? Les protocoles mis en œuvre pour aboutir à ces interprétations? Dans ce sens, le projet MEMORIA porte une exigence éthique nous conduisant à transmettre aux générations futures non seulement des résultats, mais aussi les processus (cognitifs et technologiques) qui les sous-tendent. Autrement dit le projet cherche à s’inscrire dans une logique d'intégrité scientifique et de bonnes pratiques. Il se fixe comme objectif et contrainte centrale de « mémoriser » non seulement un résultat – i.e. une ressource numérique ou non - mais aussi et surtout son historique de production.

Abstract :

As a result of the massive introduction of computer-assisted research workflows in and around the analysis of heritage items, we are today witnessing a blooming of highly specialized, and sometimes obscure for outsiders, data processing chains. Operations conducted on this or that site include a vast range of digitization activities and an equally vast array of post-processing roadmaps.
The amount, diversity, and sometimes complexity of these operations are definitely a challenging aspect of the heritage science community’s move towards “more” digital data acquisition and processing. It hinders that community’s ability to identify and share, beyond results, methods and argumentation. In particular, it jeopardizes its capacity to preserve and explain research processes on the long term, and therefore to ensure their reproducibility (obviously a key methodological issue if processes should fall within a “scientific” approach).

The paper presents the MEMORIA research, aimed at experimenting a practical solution for the formalization and intersubjective description of research workflows.
The initiative bases on the idea that, beyond metadata describing outputs themselves, the scientific community concerned is awaiting for means to ensure their verifiability, reproducibility and comparability. The paper focuses on two aspects:
• A real-case experimentation on a series of investigations we have conducted on the historical centre of Krakow (Poland) over the last 15 years.
• A feedback on difficulties to foresee at a methodological level, for instance in terms of grain (what exactly should be recorded? Each and every click inside a given computer software? Certainly not...).

T6 - Formalisation du raisonnement et traçabilité / Formalisation and traceability of reasoning - MEMORIA

23/11 - État des lieux du développement du SI MEMORIA, extension de l’expérimentation au-delà des activités de restitution / MEMORIA IS, extension of experimentation beyond restitution activities,,

30/11 - Reproductibilité, traçabilité, approche MEMORIA : les objectifs,la stratégie de développement du SI, une démonstration fonctionnelle / Reproducibility and traceability, MEMORIA approach: objectives and development strategy (demo)

30/11 - Reproductibilité, traçabilité, approche MEMORIA : session d’élicitation des connaissances autour des activités liées à la fouille archéologique / Knowledge elicitation session - activities related to archaeological excavation

La vidéo démonstration du prototype MEMORIA, au travers duquel est expérimentée une solution pratique de formalisa-tion et de description intersubjective des flux de recherche. Le prototype a été conçu et développé au sein de l'UMR MAP, et doit permettre de décrire, d’enregistrer et d’archiver de manière structurée les résultats de notre travail dans leur profondeur. Il ne s’agit donc pas de sauvegarder ou décrire des fichiers contenant des résultats, mais d’identifier, de structurer et de préserver des informations sur les objectifs, choix et contexte de création de ces résultats.

The video demonstration of the MEMORIA prototype, through which a practical solution for the formalization and intersubjective description of research flows is tested. The prototype has been designed and developed within the UMR 3495 MAP, and should allow the results of our work to be described, recorded and archived in a structured manner. It is therefore not a question of saving or describing files containing results, but of identifying, structuring and preserving information on the objectives, choices and context of the creation of these results.

Le prototype MEMORIA est un système d’informations en ligne dont le but est d’apporter aux acteurs d’opérations scientifiques une solution pratique pour formaliser et décrire des flux de recherche. L’initiative repose sur l'idée qu'au-delà de métadonnées décrivant des résultats finaux, des productions, ces acteurs attendent des moyens pour assurer leur vérifiabilité, leur reproductibilité et leur comparabilité en leur associant un ‘historique de production’ partageable. Cette contribution synthétise les objectifs du système puis en présente les différentes facettes (service attendu, fonctionnement, choix majeurs en matière de modalités d’interactions) et les limites intrinsèques.

***

The MEMORIA prototype is an online information system offering a practical solution to formalize and describe research workflows. The initiative is based on the idea that beyond metadata describing outputs themselves, scientific results - especially in historical and heritage sciences - should be depicted with indicators that would allow for a better understanding of the process through which these results were achieved. The contribution summarizes the objectives of the system and briefly presents its main principles and its intrinsic limits.

Le ‘bac à sable’ MEMORIA permet d’expérimenter la traduction concrète des notions d’output, de composition, de publication, de processus et d’activités, ou d’expertise. Les autres fonctionnalités du SI sont désactivées.
Il est conçu comme une plateforme de familiarisation avec les principes et l’interface du SI MEMORIA, et NON comme un espace de travail. Le contenu du ‘bac à sable’ est susceptible d’être réinitialisé à chaque fin de mois.

***

The MEMORIA 'sandbox' allows potential users of the MEMORIA IS to try out the system and to explore the notions of output, composition, publication, processes and activities, or expertise. The other functionalities of the IS are disabled.
It is designed as a "hands on" platform that should help users to get a better idea of the principles of the MEMORIA IS and of its interface design. Please note that the sandbox is NOT a workspace. Its content is likely to be reset at the end of each month.

Ce document présente la classification des 285 activités que comporte le système d’informations MEMORIA en mai 2022.

« littérature grise » - document n’été pas contrôlé par l’édition commerciale
Ce document a été mis en page par N. Renaudin (MAP-Gamsau, UMR 3495 CNRS/MC).
L’implémentation du système en ligne a été portée entre 2019 et 2022 par M. Rabefandroana (MAP-Gamsau, UMR 3495 CNRS/MC). La maintenance du SI est assure par P. Bénistant (MAP-Gamsau, UMR 3495 CNRS/MC).
Travail d’élicitation des connaissances mené avec la participation de : N. Renaudin, L. Bergerot, N. Carboni, A. Alaoui M’darhri, L. De Luca, A. Pamart, P. Bénistant, J.Y. Blaise, F. De Domenico (MAP-Gamsau, UMR 3495 CNRS/MC) et X. Rodier, E. Lorans, G. Simon, O. Marlet (LAT, UMR 7324 CITERES).


***

This document presents the classification of the 285 activities in the MEMORIA information system as at May 2022.

"Grey literature" document not controlled by commercial publishing
The document was formatted by N. Renaudin (MAP-Gamsau, UMR 3495 CNRS/MC).
The implementation of the online system was carried out between 2019 and 2022 by M. Rabefandroana (MAP-Gamsau, UMR 3495 CNRS/MC).
The maintenance of the IS is ensured by P. Bénistant (MAP-Gamsau, UMR 3495 CNRS/MC).
Knowledge elicitation work conducted with the participation of : N. Renaudin, L. Bergerot, N. Carboni, A. Alaoui M'darhri, L. De Luca, A. Pamart, P. Bénistant, J.Y. Blaise, F. De Domenico (MAP-Gamsau, UMR 3495 CNRS/MC) and X. Rodier, E. Lorans, G. Simon, O. Marlet (LAT, UMR 7324 CITERES). .

Le carnet LAB & DOC, tenu par les documentalistes des laboratoires de recherche des Écoles nationales supérieures d'architecture et de paysage (Centres de documentation en architecture, paysage, urbanisme)

***

The LAB & DOC notebook - site maintained by the research laboratories documentalists of the Écoles nationales supérieures d'architecture et de paysage (Documentation centres for architecture, landscape and urban planning)

présentation aux Journées du Consortium 3D pour SHS 2022.


***

presentation at the Consortium "3D for Humanities" meeting 2022

Cette enquête, a pour objectif de réaliser un état des lieux des difficultés et des particularités dans des habitudes liées à documentation des protocoles de recherche scientifique et leurs résultats dans des différentes disciplines engage dans les sciences.
Comment procéder > téléchargez l'enquête, remplissez-la et envoyez-la par e-mail à l'adresse signalé dans le document.

***

The aim of this survey is to take stock of the difficulties and peculiarities in the habits related to the documentation of scientific research protocols and their results in the different disciplines involved in science.
How to proceed > download the survey, fill it in and send it by e-mail to the address indicated in the document.

L’article présente un système d’information web exploratoire développé en réaction à des questions pratiques et épistémologiques, dans le contexte d’une unité scientifique qui étudie le patrimoine architectural (à la fois du point de vue des sciences historiques et du point de vue des sciences de l’ingénieur). L’article présente le potentiel méthodologique et analytique de ce système pour la description, l’analyse et le partage d’informations sur les flux de recherche.
Le prototype MEMORIA est avant tout un effort visant à construire un outil qui devrait nous aider à assurer la traçabilité, la transmissibilité et la vérifiabilité des résultats scientifiques et à relever les défis de la science ouverte (fournir un accès libre au contenu produit). La spécificité du système est de permettre une caractérisation formelle des processus qui ont conduit à tel ou tel résultat de recherche en listant les éléments nécessaires à une bonne compréhension du résultat. Un point important est l’ambition de déployer des interfaces visuelles donnant accès aux ressources et permettant une analyse directe des informations collectées. À terme, le projet vise à décrire les approches cognitives et méthodologiques sous-tendant les résultats scientifiques en utilisant les possibilités offertes par la visualisation de l’information.
Le document présente et définit les concepts clés sur lesquels repose notre approche et décrit comment ils se développent dans la pratique. Les aspects théoriques sont illustrés par des exemples pratiques. Le document se termine par une analyse des avantages et du potentiel de l’approche systématique de la documentation du processus scientifique que nous présentons, en soulignant ses avantages et en discutant de ses limites.

***

The paper presents an exploratory web information system developed as a reaction to practical and epistemological questions, in the context of a scientific unit studying the architectural heritage (from both the historical sciences perspective, and an engineering science standpoint). The article presents the methodological and analytical potential of this system for the description, analysis and information sharing of research workflows.
The MEMORIA prototype is first and foremost an effort to build a tool that should help us to ensure the traceability, transmissibility and verifiability of scientific results and fulfil the challenges of open science (providing free access to the content produced). The specificity of the system is to empower a formal characterisation of processes that led to this or that research result by listing the most important elements necessary for a proper understanding of the result. An important point is the ambition to deploy visual interfaces providing access to resources and enabling direct analysis of the information collected. Ultimately, the project aims to depict a cognitive and methodological approaches behind scientific results using the possibilities offered by Information Visualisation.
The paper presents and defines the key concepts behind our approach and describes how they develop in practice. The theoretical aspects are illustrated with practical examples. The paper concludes with an analysis of the benefits and potential of the systematic approach to scientific process documentation that we introduce, highlighting its advantages and discussing its limitations.

Dans cette présentation, nous discutons de l'importance de la traçabilité, de la vérifiabilité et de la comparabilité dans les processus de recherche et les ensembles de données numériques. Nous soulignons les défis liés au choix de la langue, qui peut affecter l'interprétation des descriptions de recherche. Pour y remédier, nous proposons d'utiliser la modélisation conceptuelle, le vocabulaire contrôlé et les représentations diagrammatiques comme moyen de réduire la variabilité de l'interprétation. Ces éléments constituent la base sur laquelle est construit le système d'information exploratoire MEMORIA visant à formaliser et à décrire les flux de travail de la recherche. Les principaux objectifs du système, notamment l'identification et la conservation d'informations sur différents types de résultats de recherche et les séquences d'actions qui ont conduit à leur création, seront illustrés sur des diagrammes de flux de travail pour les protocoles d'acquisition de données acoustiques et spatio-acoustiques et diverses manières de visualiser les données collectées. Dans la conclusion, nous mentionnons les contraintes et les limites du système, y compris la fiabilité des données et la nature chronophage de la documentation.

***

In this presentation, we discuss the importance of traceability, verifiability and comparability of research workflows and digital data sets. We highlight the challenges associated with the choice of language, which can affect the interpretation of research descriptions. To address this, we propose the use of conceptual modelling, controlled vocabulary and diagrammatic representations as a means of reducing interpretation variability. These elements form the basis on which the MEMORIA exploratory information system is built. The main objectives of the system, notably the identification and preservation of information on different types of research results and the sequences of actions that led to their creation, are illustrated using spatio-acoustic data acquisition protocols.

Conférence invitée

***

Guest lecture