Current Organizations / Institutes

The organizations/institutes from the scholar's latest article


Bartek Łukawski has a total of 30 co-authors. Here are the top co-authors by number of shared publications:


Latest Publications

  • Open Access

    Integrating YARP and ROS 2 for web-based and embedded robot GUIs

    by Bartek Łukawski, Grigor Hovhannisyan Mkhitaryan, Lucía Menéndez Reques, Iñaki Ureta Sanz, Juan G. Victores, Alberto Jardón Huete

    A graphical user interface (GUI) in robotics aids the operator in gaining insight on the robot state and configuration, and issuing motion commands, among others. We seek to fulfill these goals in the proposed software architectures by adopting GUI design frameworks (React with Vite and Blender, TouchGFXDesigner) and robotic middlewares (ROS 2, YARP). For practical demonstration, the ABB CRB 15000-5 "GoFa" cobot and the humanoid robot TEO have been considered. For the former, we leverage ROS 2 to communicate the robot through a control node wrapping the ABB Externally Guided Motion (EGM) interface, and introduce a Node.js web application that bridges the ROS 2 network via WebSockets while staying responsive to different screen sizes and resolutions of the user device. For the latter, an embedded graphical and touch-based application was designed with STM tools to run on an Mbed board connected to the YARP network of the robot.

  • Open Access

    YARP and ROS 2 GenICam middleware for visual servoing applications

    by Álvaro Santos-García, Bartek Łukawski, Juan G. Victores, Carlos Balaguer, Alberto Jardón

    Service and humanoid robots rely on dependable visual perception systems, commonly built around industrial cameras that expose heterogeneous connectivity protocols such as USB3 Vision and GigE Vision. This work presents an acquisition middleware for cameras compliant with the GenICam standard, implemented as a YARP device written in C++ on top of the Aravis library. The device exports the standardized YARP interfaces for image acquisition and parameter control, such as exposure or gain, publishing them simultaneously over the YARP and ROS 2 networks through the corresponding network wrappers. This dual exposure allows the same hardware abstraction to be reused on two platforms with distinct ecosystems; the TEO humanoid robot, natively integrated in YARP, and the TIAGo mobile manipulator, based on ROS 2. This was accompanied by a graphical control interface and a demonstration of visual servoing guided by ArUco markers.

  • Open Access

    Bilateral haptic teleoperation bridging YARP and ROS 2 ecosystems

    by Álvaro Santos-García, Bartek Łukawski, Dorin Copaci, Juan G. Victores, Carlos Balaguer

    Trabajos previos establecieron una arquitectura de teleoperación para brazos robóticos sobre YARP y ROS 2. El presente trabajo extiende dicha arquitectura incorporando retroalimentación háptica para cerrar un bucle de control bilateral. Un dispositivo Phantom Omni transmite comandos de posición al robot y recibe fuerzas de contacto del entorno remoto. La integración comprende tres capas: YARP para la abstracción hardware del dispositivo háptico, ROS 2 como backbone de comunicación, y una capa de control específica por plataforma, que emplea la pila de control cartesiano para el robot humanoide TEO y el protocolo EGM de ABB para el brazo colaborativo GoFa. Para evitar calibración espacial explícita entre marcos de referencia, se adopta una estrategia de control diferencial basada en desplazamientos incrementales. La retroalimentación de fuerzas se implementa mediante un nodo dedicado que evalúa la penetración del extremo del robot en regiones de restricción virtual y genera fuerzas de restitución proporcionales, cerrando el bucle bilateral de forma independiente a la plataforma objetivo.

  • Open Access

    External force-torque sensor feedback on the ABB GoFa collaborative robot

    by Bartek Łukawski, Alba Olano Díaz, Alfredo González Villasante, Edwin D. Oña, Juan G. Victores, Alberto Jardón

    Este trabajo presenta la integración de un sistema de adquisición original y de código abierto, desarrollado para un sensor fuerza-par JR3 de seis ejes gestionado por un microcontrolador Mbed, y el brazo manipulador colaborativo CRB 15000-5 "GoFa" de ABB. La característica Externally Guided Motion (EGM) del fabricante es aprovechada para producir comandos de alta frecuencia mediante un dispositivo externo y la realimentación del sensor. Una arquitectura distribuida de componentes software es orquestrada por el middleware ROS 2 usando paquetes y librerías de Python. El sistema ha sido validado en simulación con RobotStudio y sobre el robot real mediante tres aplicaciones de alto nivel que emplean la realimentación de fuerza: control de admitancia (guiado kinestésico), control de impedancia y ejecución de trayectorias predefinidas con aplicación de presión constante. Se muestra un caso de uso de la última aplicación para realizar dibujos con el robot. Futuras extensiones de este sistema pueden ser aplicadas en escenarios que involucren teleoperación y realimentación háptica.

  • Open Access

    Assessing Student Satisfaction and System Usability in Industrial Robotics Education

    by Bartek Łukawski, Edwin D. Oña, Juan G. Victores, Carlos Balaguer, Alberto Jardón

    Este trabajo analiza las sesiones de laboratorio de robótica industrial diseñadas para estudiantes de grado y máster de la Universidad Carlos III de Madrid. Las sesiones involucran un manejo práctico de robots CRB 15000-5 “GoFa” de ABB con herramientas personalizadas (rotulador, electroimán) para tareas de dibujo y pick-and-place, con especial énfasis en la programación manual y mediante RAPID, la simulación en RobotStudio y la sincronización con el robot real. Adicionalmente, se ha utilizado el robot TIAGo++ de PAL Robotics para ilustrar posibles aplicaciones médicas. Se realizó una encuesta de satisfacción y usabilidad a 97 estudiantes a lo largo de 2025 para evaluar la experiencia. Los cuestionarios consistieron en entre 10 y 15 elementos evaluados en una escala Likert de cinco niveles. Los resultados indican que las sesiones han tenido buena acogida, estimulan la participación y refuerzan conceptos teóricos clave. La programación en RAPID y la simulación han sido identificadas como los elementos que más dificultades han supuesto.

  • Open Access

    YARP Cartesian controller layers over ROS 2 for teleoperation and web applications

    by Bartek Łukawski, María de Las Mercedes Rebollo Rayo, Ángel Gilabert de la Encina, Juan G. Victores, Carlos Balaguer, Alberto Jardón

    Nuestros trabajos previos introdujeron una arquitectura de teleoperación para brazos robóticos orquestada por el entorno de trabajo e intermediario YARP. Un esquema distribuido de componentes software facilitó la adopción de nuevos periféricos para teleoperación, explorando múltiples modos de control. En este trabajo, proponemos un nexo entre los elementos de YARP ya disponibles y el ecosistema de paquetes y herramientas de Robot Operating System (ROS). Nuestro controlador cartesiano y sus interfaces C++ han servido como base para la nueva implementación, exponiendo comandos del robot y su configuración 3D en la red de ROS 2. Esto ha sido materializado en forma de una aplicación de teleoperación para el ratón 3D SpaceMouse de bajo coste, y una aplicación web construida con la librería React en JavaScript. Ambos componentes han sido probados y validados sobre robots reales y en simulación: sobre la plataforma robótica humanoide TEO y el brazo asistencial AMOR.

  • Open Access

    Espresso macchiato, por favore: collaborative robotic coffee-making for education

    by Bartek Łukawski, Miquel Martín Cervera, Carmen Menchén Pascual, Edwin Daniel Oña, Juan G. Victores, Alberto Jardón

    Presentamos un ejercicio práctico que involucra el brazo colaborativo robótico ABB “GoFa” CRB 15000-5: una estación de café para una cafetera doméstica convencional con cápsulas. El objetivo es proporcionar un caso de uso práctico e intuitivo para su adopción en sesiones prácticas con estudiantes de grado o máster. Esperamos enriquecer de este modo dichas sesiones, mostrando algunos mecanismos que ofrece el entorno de programación de ABB de cara al desarrollo de interfaces gráficas personalizadas. Exploramos AppStudio, la herramienta software de reciente introducción (enero de 2025) para crear aplicaciones gráficas, así como la más consolidada OmniCore App SDK. En este trabajo, describimos dos nuevas aplicaciones que demuestran la validez de ambas herramientas a través de experimentos tanto sobre el simulador RobotStudio como en un montaje real.


  • Open Access

    Interaction with a humanoid robot through a conversational interface using DeepSeek

    by Bartek Łukawski, Juan G. Victores, Carlos Balaguer, Alberto Jardón

    This work presents an application that enables users to hold a conversation with a chat agent, aimed to be launched aboard a humanoid robot equipped with audio sink and source hardware. It was designed to fulfill two constraints: all components are backed up by free and open-source software, and all computations can be carried out offline, either locally or offloaded to a dedicated edge server on the robot itself. The YARP robotics middleware and framework was leveraged to be at the foundation of a distributed architecture of newly developed modules: text-to-speech (implemented with eSpeak and Piper), automatic speech recognition (powered by Kaldi, wrapped by Vosk), wake word detection (via openWakeWord) and inference on large language models (with llama.cpp). The application was tested on the humanoid robot TEO using a distilled variant of the DeepSeek-R1 language model. Results show that a fully offline low-latency conversational agent can be adopted to achieve human-robot interaction tasks.

  • Open Access

    Hybrid Sensor Fusion Mixed with Reinforcement Learning in Autonomous Dual-Arm Lifting Tasks Performed by Humanoid Robots

    by Juan Hernandez-Vicen, Bartek Łukawski, Santiago Martinez, Nikos Tsagarakis, Carlos Balaguer

    Humanoid robots often struggle with tasks such as lifting objects due to the complexity involved in identifying contact points, applying the correct force, and tracking task progress. We propose an integrated solution that leverages the dual-arm capability of humanoids and utilizes sensor fusion from vision and force sensors. Our system employs a computer vision algorithm to detect and characterize object properties (shape, size, position, orientation) and differentiate between parallel and non-parallel bi-manipulation tasks. The controller then identifies optimal contact points for the end effectors, generating trajectories fed into a closed-loop controller using force feedback. For parallel bi-manipulation, momentum cancellation is achieved through sensor fusion. For non-parallel surfaces, a reinforcement learning algorithm determines the appropriate lifting force to prevent slippage using only two contact points. Experimental validation on a real humanoid platform demonstrates the effectiveness of our approach in autonomously lifting objects, regardless of contact surface configuration. This advancement significantly enhances the reliability and versatility of humanoid robots in performing complex manipulation tasks, contributing to their practical deployment in human-oriented environments.


  • Open Access

    A user-friendly point cloud processing pipeline for interfacing PCL with YARP

    by Bartek Łukawski, Alberto Rodríguez-Sanz, Elisabeth Menendez, Juan G. Victores, Carlos Balaguer

    PCL es una librería de código abierto diseñada para el procesamiento de nubes de puntos. Por otra parte, YARP es un marco de desarrollo e intermediario entre componentes hardware (p. ej. motores y sensores) para elaborar aplicaciones robóticas de alto nivel. Este trabajo presenta una librería de C++ que emplea los algoritmos de PCL sin necesidad de exponer ninguno de sus tipos. Permite describir sencillamente y mediante texto secuencias de pasos para el procesamiento de nubes de puntos, exponiendo el resultado final a través de interfaces YARP. Se consigue encapsular así todos los detalles internos de PCL y se evita la dependencia de sus módulos y cabeceras en las aplicaciones cliente. La librería ha sido probada en una aplicación de reconstrucción de escenas para el popular algoritmo KinectFusion, en un módulo de construcción de mallas en tiempo real para el simulador OpenRAVE, y se prevé su uso en tareas de visión con la nueva cabeza del robot humanoide TEO.