¿Por qué el seguimiento es un salvavidas para las pruebas de extremo a extremo de los sistemas distribuidos?

Rate this content
Bookmark

Los sistemas de software contemporáneos suelen construirse sobre un patrón de arquitectura de microservicios. En este patrón, en lugar de construir una gran base de código para una sola aplicación, los sistemas se separan en múltiples bases de código más pequeñas. Estas implementan servicios que proporcionan una función específica, como autenticación o monitoreo, y esos servicios pueden tener problemas de rendimiento, problemas de red o errores en su código, cualquiera de los cuales puede provocar pruebas fallidas. Si desea resolver tales problemas, debe ir un paso más allá de simplemente registrar sus errores: lo mejor es monitorear sus pruebas con seguimiento distribuido. Esta charla le mostrará por qué un sistema de seguimiento lo rescatará de la complejidad de entender por qué una prueba de extremo a extremo ha fallado en una arquitectura distribuida.

8 min
18 Nov, 2021

Video Summary and Transcription

Tandra es una empresa que construye herramientas modernas para desarrolladores y ingenieros de control de calidad. Su producto estrella, Foresight, ayuda a monitorear y depurar flujos de trabajo y pruebas de CI-CD. La charla analiza las razones de las fallas en las pruebas de extremo a extremo, cómo depurarlas y los beneficios del seguimiento. Las pruebas de extremo a extremo pueden fallar debido a problemas de espera, dependencias entre pruebas y comunicaciones entre servicios. Es posible depurar a través de registros y artefactos, pero el seguimiento es más efectivo para descubrir las causas raíz, especialmente en microservicios.

Available in English

1. Introducción a Tandra y Foresight

Short description:

Soy Burak de Tandra, un gerente de producto. Tandra construye herramientas modernas para desarrolladores y ingenieros de QA. Nuestro producto estrella, Foresight, te ayuda a monitorear y depurar flujos de trabajo y pruebas de CI-CD.

¡Hola a todos! Soy Burak de Tandra. Estoy muy emocionado de estar aquí con todos ustedes hoy, y espero que estén pasando un buen momento viendo a todos estos excelentes oradores aquí en la Cumbre de TestJS.

Hoy voy a hablar sobre cómo el seguimiento puede ayudarte a encontrar las causas raíz en tus fallas de prueba, fallas de prueba de extremo a extremo en tus sistemas distribuidos. Antes de entrar en eso, permítanme presentarme, y también presentarles a Tandra.

Soy Burak, y trabajo como gerente de producto aquí en Tandra. Además de mi carrera profesional, me pueden ver jugando tenis en la cancha, y Tandra construye herramientas modernas para desarrolladores e ingenieros de QA que desarrollan y entregan aplicaciones, aplicaciones modernas en la nube. Nuestro producto estrella, Foresight, te ayuda a monitorear y depurar tus flujos de trabajo de CI-CD y pruebas.

2. Reasons for End-to-End Test Failures and Debugging

Short description:

Hoy discutiremos por qué fallan las pruebas de extremo a extremo, cómo depurarlas y los beneficios del seguimiento. Las pruebas de extremo a extremo verifican si todas las partes del sistema funcionan correctamente, pero pueden fallar debido a problemas de tiempo de espera, dependencias entre pruebas y comunicaciones entre servicios. La depuración se puede realizar a través de registros y artefactos, pero el seguimiento ayuda a descubrir las causas raíz, especialmente en microservicios.

Hoy vamos a hablar sobre por qué fallan las pruebas de extremo a extremo, cómo depurarlas y cómo el seguimiento puede ayudarte a encontrar las causas raíz más fácilmente. ¿Por qué están fallando? ¿Por qué fallan las pruebas de extremo a extremo? Están tratando de verificar si todas las partes de tu sistema funcionan correctamente. En resumen, están verificando toda la aplicación de atrás hacia adelante. Puede haber varias razones de fallas, y una de ellas son los problemas de tiempo de espera. Si tienes varios servicios comunicándose entre sí, las respuestas no serán instantáneas, por lo que puede haber problemas relacionados con el tiempo.

Otra cosa es que una prueba puede depender de otra. Entonces, si una falla, puede haber diez fallas más desde esa primera falla. Otra, y la más importante, son las comunicaciones entre servicios. Dado que las pruebas de extremo a extremo pueden tener diferentes servicios esperando las respuestas entre sí, imagínalo como si tuvieras un sistema de pago esperando el retorno de un carrito de compras, por lo que puede haber una posible falla de un servicio diferente. Incluso si obtienes un error de servicio 500, no te dice qué sucedió realmente y dónde sucedió.

Cuando ocurre un error, puedes depurarlo revisando los registros, obviamente. Te brindan un resumen de toda la ejecución, y aunque las herramientas modernas y los ID resaltan el error exacto, puedes terminar perdido en miles de líneas para encontrar la razón exacta de la falla. Y también puedes verificar artefactos como capturas de pantalla y grabaciones de video. Estas pruebas de extremo a extremo contienen escenarios de prueba de extremo a extremo que incluyen la experiencia de los usuarios. Por lo tanto, puedes obtener ayuda de ese tipo de artefactos. Sin embargo, puede que no sea suficiente para ver qué sucedió detrás de las cortinas, como mencioné, especialmente si estás trabajando en microservicios. El seguimiento puede ayudarte a detectar ese tipo de fallas más fácilmente. El seguimiento es una práctica común de los desarrolladores para analizar y comprender toda la aplicación data y el flujo. Supongamos que algo sale mal en una aplicación monolítica, un desarrollador solo necesita revisar la traza de la pila, ya que toda la aplicación se ejecuta en una sola ejecución, se ejecuta en un solo proceso para averiguar qué sucedió realmente. Ahora, imagina esa situación con una aplicación distribuida, que potencialmente consta de múltiples funciones lambda, y hay algunos servicios externos, bases de datos externas, servicios de autenticación con los que tu aplicación necesita funcionar. No solo es fácil probar ese tipo de aplicaciones, sino que también estás tratando de encontrar la causa raíz de las fallas. Es realmente un problema desafiante, y ese tipo de escenarios necesita herramientas especiales. Y afortunadamente, Tundra Foresight es esa herramienta especial para ingenieros de QA y de compilación. Estás viendo el resultado de un caso de prueba único visualizado en el panel de control de Tundra Foresight. No solo te proporciona los registros, mensajes de error e historial de rendimiento, si tu caso de prueba incluye capturas de pantalla, también puedes verlas en el panel de control de Tundra Foresight. Y también, con la ayuda de nuestra novedosa tecnología de seguimiento distribuido, es fácil visualizar toda la aplicación en un solo mapa de seguimiento. Con la ayuda del seguimiento distribuido, puedes verificar el intercambio de mensajes entre diferentes tipos de servicios. Y si hago clic en el mapa de seguimiento, obtendré un mapa, en realidad un flujo que visualiza la ejecución de la prueba JEST completa. Estás viendo la ejecución de la prueba JEST. Y toda la prueba de extremo a extremo requiere alguna transacción entre servicios de AWS como API Gateway y Lambda. Y si te fijas, hay una flecha roja entre Lambda y DynamoDB aquí, estás viendo una flecha roja. Entonces, si hago clic en eso, obtendré un resumen de esas transacciones. Y después de navegar por el gráfico de seguimiento, encontraré el spam erróneo que obtendré con la ayuda de la depuración de viaje en el tiempo. Puedo ver que hay algún error, guardando un elemento en R en mi solicitud de mapa de adición, por lo que puedo detectar rápidamente la razón de la falla. En resumen, todo falla todo el tiempo, pero tenemos un tiempo limitado para encontrar ese tipo de errores. Entonces, las capacidades de seguimiento y de Tundra nos ayudan a encontrarlos fácilmente, nos ahorran tiempo, no necesitamos reproducir el flujo completo de la aplicación una y otra vez. Solo necesitas navegar por el flujo de la aplicación y encontrar las causas raíz de tus pruebas y solucionar errores y detectar cuellos de botella en tus pruebas. Así que gracias por escucharme, eso es todo por hoy. Si tienes alguna pregunta, no dudes en hacerla y estaré encantado de escuchar tus comentarios y responder tus preguntas. ¡Si quieres probarlo, ve a tundra.io!

Check out more articles and videos

We constantly think of articles and videos that might spark Git people interest / skill us up or help building a stellar career

TestJS Summit 2021TestJS Summit 2021
33 min
Network Requests with Cypress
Top Content
Whether you're testing your UI or API, Cypress gives you all the tools needed to work with and manage network requests. This intermediate-level task demonstrates how to use the cy.request and cy.intercept commands to execute, spy on, and stub network requests while testing your application in the browser. Learn how the commands work as well as use cases for each, including best practices for testing and mocking your network requests.
TestJS Summit 2021TestJS Summit 2021
38 min
Testing Pyramid Makes Little Sense, What We Can Use Instead
Top Content
Featured Video
The testing pyramid - the canonical shape of tests that defined what types of tests we need to write to make sure the app works - is ... obsolete. In this presentation, Roman Sandler and Gleb Bahmutov argue what the testing shape works better for today's web applications.
TestJS Summit 2022TestJS Summit 2022
27 min
Full-Circle Testing With Cypress
Top Content
Cypress has taken the world by storm by brining an easy to use tool for end to end testing. It’s capabilities have proven to be be useful for creating stable tests for frontend applications. But end to end testing is just a small part of testing efforts. What about your API? What about your components? Well, in my talk I would like to show you how we can start with end-to-end tests, go deeper with component testing and then move up to testing our API, circ
TestJS Summit 2022TestJS Summit 2022
20 min
Testing Web Applications with Playwright
Top Content
Testing is hard, testing takes time to learn and to write, and time is money. As developers we want to test. We know we should but we don't have time. So how can we get more developers to do testing? We can create better tools.Let me introduce you to Playwright - Reliable end-to-end cross browser testing for modern web apps, by Microsoft and fully open source. Playwright's codegen generates tests for you in JavaScript, TypeScript, Dot Net, Java or Python. Now you really have no excuses. It's time to play your tests wright.
TestJS Summit 2021TestJS Summit 2021
31 min
Test Effective Development
Top Content
Developers want to sleep tight knowing they didn't break production. Companies want to be efficient in order to meet their customer needs faster and to gain competitive advantage sooner. We ALL want to be cost effective... or shall I say... TEST EFFECTIVE!But how do we do that?Are the "unit" and "integration" terminology serves us right?Or is it time for a change? When should we use either strategy to maximize our "test effectiveness"?In this talk I'll show you a brand new way to think about cost effective testing with new strategies and new testing terms!It’s time to go DEEPER!

Workshops on related topic

React Summit 2023React Summit 2023
151 min
Designing Effective Tests With React Testing Library
Top Content
Featured Workshop
React Testing Library is a great framework for React component tests because there are a lot of questions it answers for you, so you don’t need to worry about those questions. But that doesn’t mean testing is easy. There are still a lot of questions you have to figure out for yourself: How many component tests should you write vs end-to-end tests or lower-level unit tests? How can you test a certain line of code that is tricky to test? And what in the world are you supposed to do about that persistent act() warning?
In this three-hour workshop we’ll introduce React Testing Library along with a mental model for how to think about designing your component tests. This mental model will help you see how to test each bit of logic, whether or not to mock dependencies, and will help improve the design of your components. You’ll walk away with the tools, techniques, and principles you need to implement low-cost, high-value component tests.
Table of contents- The different kinds of React application tests, and where component tests fit in- A mental model for thinking about the inputs and outputs of the components you test- Options for selecting DOM elements to verify and interact with them- The value of mocks and why they shouldn’t be avoided- The challenges with asynchrony in RTL tests and how to handle them
Prerequisites- Familiarity with building applications with React- Basic experience writing automated tests with Jest or another unit testing framework- You do not need any experience with React Testing Library- Machine setup: Node LTS, Yarn
TestJS Summit 2022TestJS Summit 2022
146 min
How to Start With Cypress
Featured WorkshopFree
The web has evolved. Finally, testing has also. Cypress is a modern testing tool that answers the testing needs of modern web applications. It has been gaining a lot of traction in the last couple of years, gaining worldwide popularity. If you have been waiting to learn Cypress, wait no more! Filip Hric will guide you through the first steps on how to start using Cypress and set up a project on your own. The good news is, learning Cypress is incredibly easy. You'll write your first test in no time, and then you'll discover how to write a full end-to-end test for a modern web application. You'll learn the core concepts like retry-ability. Discover how to work and interact with your application and learn how to combine API and UI tests. Throughout this whole workshop, we will write code and do practical exercises. You will leave with a hands-on experience that you can translate to your own project.
React Summit 2022React Summit 2022
117 min
Detox 101: How to write stable end-to-end tests for your React Native application
Top Content
WorkshopFree
Compared to unit testing, end-to-end testing aims to interact with your application just like a real user. And as we all know it can be pretty challenging. Especially when we talk about Mobile applications.
Tests rely on many conditions and are considered to be slow and flaky. On the other hand - end-to-end tests can give the greatest confidence that your app is working. And if done right - can become an amazing tool for boosting developer velocity.
Detox is a gray-box end-to-end testing framework for mobile apps. Developed by Wix to solve the problem of slowness and flakiness and used by React Native itself as its E2E testing tool.
Join me on this workshop to learn how to make your mobile end-to-end tests with Detox rock.
Prerequisites- iOS/Android: MacOS Catalina or newer- Android only: Linux- Install before the workshop
TestJS Summit 2023TestJS Summit 2023
48 min
API Testing with Postman Workshop
Top Content
WorkshopFree
In the ever-evolving landscape of software development, ensuring the reliability and functionality of APIs has become paramount. "API Testing with Postman" is a comprehensive workshop designed to equip participants with the knowledge and skills needed to excel in API testing using Postman, a powerful tool widely adopted by professionals in the field. This workshop delves into the fundamentals of API testing, progresses to advanced testing techniques, and explores automation, performance testing, and multi-protocol support, providing attendees with a holistic understanding of API testing with Postman.
1. Welcome to Postman- Explaining the Postman User Interface (UI)2. Workspace and Collections Collaboration- Understanding Workspaces and their role in collaboration- Exploring the concept of Collections for organizing and executing API requests3. Introduction to API Testing- Covering the basics of API testing and its significance4. Variable Management- Managing environment, global, and collection variables- Utilizing scripting snippets for dynamic data5. Building Testing Workflows- Creating effective testing workflows for comprehensive testing- Utilizing the Collection Runner for test execution- Introduction to Postbot for automated testing6. Advanced Testing- Contract Testing for ensuring API contracts- Using Mock Servers for effective testing- Maximizing productivity with Collection/Workspace templates- Integration Testing and Regression Testing strategies7. Automation with Postman- Leveraging the Postman CLI for automation- Scheduled Runs for regular testing- Integrating Postman into CI/CD pipelines8. Performance Testing- Demonstrating performance testing capabilities (showing the desktop client)- Synchronizing tests with VS Code for streamlined development9. Exploring Advanced Features - Working with Multiple Protocols: GraphQL, gRPC, and more
Join us for this workshop to unlock the full potential of Postman for API testing, streamline your testing processes, and enhance the quality and reliability of your software. Whether you're a beginner or an experienced tester, this workshop will equip you with the skills needed to excel in API testing with Postman.
TestJS Summit - January, 2021TestJS Summit - January, 2021
173 min
Testing Web Applications Using Cypress
WorkshopFree
This workshop will teach you the basics of writing useful end-to-end tests using Cypress Test Runner.
We will cover writing tests, covering every application feature, structuring tests, intercepting network requests, and setting up the backend data.
Anyone who knows JavaScript programming language and has NPM installed would be able to follow along.
TestJS Summit 2023TestJS Summit 2023
148 min
Best Practices for Writing and Debugging Cypress Tests
Workshop
You probably know the story. You’ve created a couple of tests, and since you are using Cypress, you’ve done this pretty quickly. Seems like nothing is stopping you, but then – failed test. It wasn’t the app, wasn’t an error, the test was… flaky? Well yes. Test design is important no matter what tool you will use, Cypress included. The good news is that Cypress has a couple of tools behind its belt that can help you out. Join me on my workshop, where I’ll guide you away from the valley of anti-patterns into the fields of evergreen, stable tests. We’ll talk about common mistakes when writing your test as well as debug and unveil underlying problems. All with the goal of avoiding flakiness, and designing stable test.