Evaluation of web scraping technologies in automated testing

Abstract

ABSTRACT: With the launch of their Global Cloud Marketplace, Ingram Micro Cloud requires to accelerate the QA process when a new product is added or updated. This process includes regression tests to assure that previous functionality is not affected as well as the compliance tests for the new applications. A big part of this process consists in repetitive and monotonous tasks that are time consuming and error prone. These tasks should be transitioned to an automatic execution shifting the added value of the operators into more analytical, deductive and creative work. This automation needs the use of cutting-edge technologies that analyze web pages, extract data and drive the tests with reliability and speed.

RESUMEN: Con el lanzamiento de su “Global Cloud Marketplace”, Ingram Micro Cloud requiere acelerar el proceso de control de calidad cuando se añade o actualiza un nuevo producto. Este proceso incluye pruebas de regresión para asegurar que la funcionalidad anterior no se vea afectada, así como las pruebas de conformidad para las nuevas aplicaciones. Una gran parte de este proceso consiste en tareas repetitivas y monótonas que consumen mucho tiempo y son propensas a errores. Estas tareas deben ser transicionadas a una ejecución automática, desplazando el valor añadido de los operadores hacia un trabajo más analítico, deductivo y creativo. Para ello, se han de desarrollar herramientas de automatización que requieran el uso de tecnologías de vanguardia que analicen páginas web, extraigan datos e impulsen las pruebas con fiabilidad y rapidez.