Comparing the Use of Scientific Software and Generative AI Art Tools: Exploratory research and future agenda

The introduction of Generative Artificial Intelligence (GenAI) image and text generators has brought a renewed and significant amount of attention to textual user interfaces. Platforms such as ChatGPT and Midjourney generate, respectively, text and images from verbal instructions typed by users in natural language and processed by Machine Learning models. The use of natural language in GenAI differs from scientific software use interfaces, usually operated through programming and scripting languages. Still, both computational science and generative art, in their own ways, replace traditional ‘wet’ processes with abstract, dematerialised ones.

Through an examination of existing literature and preliminary research on those practices, this paper discusses the potential in cross-pollinating principles and concepts from scientific software and generative art and design. It aims to propose new approaches to developing and using those tools, having in mind not only user interface paradigms in those systems, but similarities and differences between scientific, and art and design domains. It will explore the tensions between open and closed models, objectivity and subjectivity, and reproducibility and uniqueness, which are respectively associated with scientific and creative practices. Preliminary results suggest the need for policies and practices in Generative AI development that involve art and design professionals and ways to acknowledge and reward their domain expertise.

La introducción de generadores de imágenes y texto de inteligencia artificial generativa (IAG) ha atraído una atención renovada y significativa a las interfaces de usuario textuales. Plataformas como ChatGPT y Midjourney generan, respectivamente, texto e imágenes a partir de instrucciones verbales escritas por los usuarios en lenguaje natural y procesadas mediante modelos de machine learning. El uso del lenguaje natural en IAG difiere de las interfaces de uso del software científico, generalmente operadas a través de lenguajes de programación y scripting. Aun así, tanto la ciencia computacional como el arte generativo, a su manera, reemplazan los procesos tradicionales “húmedos” por procesos abstractos y desmaterializados.

A través de un examen de la literatura existente y la investigación preliminar sobre esas prácticas, el presente artículo analiza el potencial de la polinización cruzada de principios y conceptos del software científico y el arte y diseño generativo. El objetivo es proponer nuevos enfoques para el desarrollo y uso de dichas herramientas, teniendo en cuenta no solo los paradigmas de las interfaces de usuario en esos sistemas, sino también las similitudes y diferencias entre los dominios científico y de arte y diseño. Se explorarán las tensiones entre modelos abiertos y cerrados, objetividad y subjetividad, reproducibilidad y unicidad, que se asocian respectivamente con prácticas científicas y creativas. Los resultados preliminares sugieren la necesidad de políticas y prácticas en el desarrollo de IA generativa que involucren a los profesionales del arte y el diseño, y formas de reconocer y recompensar su experiencia en el dominio.