[{"data":1,"prerenderedAt":18},["ShallowReactive",2],{"article":3},{"id":4,"category":5,"slug":6,"title":7,"image":8,"page_image":9,"published_at":10,"updated_at":11,"meta_title":12,"meta_description":13,"meta_keywords":14,"content":15,"tags":16,"faqs":17},102,"blog","es-chatgpt-and-data-collection-implications-for-web-data-harvesting-software","ChatGPT y la recolección de datos: Implicaciones para el software de recolección de datos web","https://blog.dexodata.com/storage/uploads/previews/15-4-s-trusted-proxy-website-chatgpt-and-scraping-implications-cover-1032x491-c9d78d89-7239-4f36-9e57-3de8b335a60c.webp","https://blog.dexodata.com/storage/uploads/covers/15-4-b-trusted-proxy-website-chatgpt-and-scraping-implications-cover-1032x491-5f5a859b-9fc4-4c7d-813d-8e3c8935ef35.webp","2023/07/04","2024/02/16","Roles de web scraping de ChatGPT y el sitio web de proxy confiable Dexodata","El sitio web de proxy confiable Dexodata que proporciona proxies geográficamente dirigidos en la lista blanca explica las implicaciones de tecnologías como ChatGPT para el web scraping.","trusted proxy website, geo targeted proxies, proxies for social networks","\u003C!DOCTYPE html PUBLIC \"-//W3C//DTD HTML 4.0 Transitional//EN\" \"http://www.w3.org/TR/REC-html40/loose.dtd\">\n\u003C?xml encoding=\"utf-8\"?>\u003Chtml>\u003Cbody>\u003Cp>\u003Cem>\u003Cstrong>Contenido del artículo:\u003C/strong>\u003C/em>\u003C/p>\n\u003Col>\n\u003Cli>\u003Ca href=\"#anchor1\">¿Es posible la recolección de datos solo con ChatGPT y un sitio web de proxy confiable?\u003C/a>\u003C/li>\n\u003Cli>\u003Ca href=\"#anchor2\">Escenario de muestra con ChatGPT y proxies geográficamente dirigidos\u003C/a>\u003C/li>\n\u003Cli>\u003Ca href=\"#anchor3\">Estado actual de ChatGPT en la recolección de datos de internet\u003C/a>\u003C/li>\n\u003C/ol>\n\u003Cp>El rápido desarrollo de modelos LLM y la implementación de \u003Ca href=\"https://dexodata.com/en/blog/how-to-use-chatgpt-for-web-data-extraction-in-2023\" target=\"_blank\" rel=\"noopener\">ChatGPT para la extracción de datos web\u003C/a> plantea una pregunta natural: si las herramientas impulsadas por IA reemplazarán a los web scrapers tal como los conocemos. Para comprender las implicaciones prácticas de este avance tecnológico, comenzamos con un problema obvio y decidimos verificar si ChatGPT puede raspar sitios web o no.\u003C/p>\n\u003Ch2>\u003Ca name=\"anchor1\">\u003C/a>¿Es posible la recolección de datos solo con ChatGPT y un sitio web de proxy confiable?\u003C/h2>\n\u003Cp>Un miembro del equipo que trabaja en Dexodata, un sitio web de proxy confiable con \u003Ca href=\"https://dexodata.com/en/blog/10-credible-reasons-to-use-dexodata\" target=\"_blank\" rel=\"noopener\">proxies geográficamente dirigidos y configuraciones flexibles,\u003C/a> preguntó directamente a ChatGPT si puede raspar sitios web. El marco respondió lo siguiente:\u003C/p>\n\u003Cp>\u003Cimg style=\"display: block; margin-left: auto; margin-right: auto;\" src=\"https://blog.dexodata.com/storage/uploads/images/new/15-4-1-geo-targeted-proxies-chatgpt-and-scraping-pic-1032x491-3f08cff2-2914-452a-89d0-96e2d85aaa73.png\" alt=\"¿Puede ChatGPT hacer web scraping con proxies geográficamente dirigidos?\" width=\"711\" height=\"171\">\u003C/p>\n\u003Cp>Luego, nuestro equipo pidió a la IA que escribiera un código para un software que adquiera información en línea. Nos interesa la recolección de datos a gran escala para fines comerciales. Nuestra infraestructura se utiliza comúnmente como fuente de IPs intermedias para la recolección de información en línea. Los objetos son sitios de comercio electrónico, como Amazon, AliExpress, etc. Las consultas de búsqueda de “proxy de eBay” también son una razón popular para obtener proxies para redes sociales.\u003C/p>\n\u003Cp>Nuestra orden fue “\u003Cem>Generar código para un web scraper para raspar eBay\u003C/em>.” Como resultado, obtuvimos este código en Python basado en BeautifulSoup. Estas son soluciones que llevan numerosas tendencias inspiradoras en la recolección de datos web:\u003C/p>\n\u003Ctable style=\"border-collapse: collapse; width: 83.9387%;\" border=\"2\">\n\u003Ctbody>\n\u003Ctr>\n\u003Ctd style=\"width: 100%;\">\n\u003Cpre style=\"color: #283160; font-size: 16px; font-weight: 400; padding-left: 40px;\">\u003Ccode>\u003Cspan style=\"color: #236fa1;\">import\u003C/span> requests\u003C/code>\u003Cbr>\u003Ccode>\u003Cspan style=\"color: #236fa1;\">from\u003C/span> bs4 \u003Cspan style=\"color: #236fa1;\">import\u003C/span> BeautifulSoup\u003Cbr>\u003Cbr>\u003C/code>\u003Ccode>\u003Cspan style=\"color: #7e8c8d;\"># URL de la página de eBay que deseas raspar\u003C/span>\u003C/code>\u003Cbr>\u003Ccode>url = \"\u003Cspan style=\"color: #2dc26b;\">https://www.ebay.com/\u003C/span>\"\u003Cbr>\u003C/code>\u003Cbr>\u003Cspan style=\"color: #7e8c8d;\"># Envía una solicitud GET a la URL\u003C/span>\u003Cbr>\u003Ccode>response = requests.get(url)\u003Cbr>\u003C/code>\u003Cbr>\u003Cspan style=\"color: #7e8c8d;\"># Analiza el contenido HTML usando BeautifulSoup\u003C/span>\u003Cbr>\u003Ccode>soup = BeautifulSoup(response.content, \"\u003Cspan style=\"color: #2dc26b;\">html.parser\u003C/span>\")\u003Cbr>\u003C/code>\u003Cbr>\u003Cspan style=\"color: #7e8c8d;\"># Encuentra e imprime los títulos de los elementos en la página\u003C/span>\u003Cbr>\u003Ccode>items = soup.find_all(\"\u003Cspan style=\"color: #2dc26b;\">h3\u003C/span>\", class_=\"\u003Cspan style=\"color: #2dc26b;\">s-item__title\u003C/span>\")\u003C/code>\u003Cbr>\u003Ccode>\u003Cspan style=\"color: #236fa1;\">for\u003C/span> item \u003Cspan style=\"color: #236fa1;\">in\u003C/span> items:\u003Cbr>\u003Cspan style=\"color: #f1c40f;\">    print\u003C/span>(item.text)\u003C/code>\u003C/pre>\n\u003C/td>\n\u003C/tr>\n\u003C/tbody>\n\u003C/table>\n\u003Cp>Hemos investigado el resultado y hemos llegado a algunas conclusiones sobre el fenómeno de \u003Ca href=\"https://dexodata.com/en/blog/understanding-the-benefits-of-chatgpt-for-web-scraping\" target=\"_blank\" rel=\"noopener\">ChatGPT scraping\u003C/a>.\u003C/p>\n\u003Cp>Primero, no logrará hacer todo de inmediato. Introducir algo como “\u003Cem>ChatGTP, raspa esto por mí\u003C/em>” no será suficiente. Lo que significa que no puede reemplazar las herramientas existentes, tanto internas como externas. Aunque puede ayudar a diseñar una, y algunas manipulaciones aún tendrán su costo.\u003C/p>\n\u003Cp>Describiríamos la esencia de un algoritmo basado en IA con las palabras “asistente de chatbot para web scraping”. Se basa en un modelo de lenguaje que no puede realizar todo el procedimiento de recolección de información de forma autónoma. No escaneará ni recuperará detalles mencionados en eBay con un \u003Ca href=\"https://dexodata.com/en/ebay\" target=\"_blank\" rel=\"noopener\">proxy de eBay de Dexodata\u003C/a>. Pero es capaz de dar consejos valiosos, guiando a los usuarios a través del proceso. ChatGPT funciona bastante bien como un asistente digital avanzado para los usuarios del sitio web de proxy confiable. \u003C/p>\n\u003Cp>Aquí está cómo se ve un flujo típico de un proyecto de adquisición automatizada de información en línea habilitado por proxy de ChatGPT: \u003C/p>\n\u003Col>\n\u003Cli>Uno solicita a la IA que genere código que abarque la URL de interés como objetivo.\u003C/li>\n\u003Cli>Los algoritmos conversacionales dan líneas de código. Todo lo que se necesita ahora es copiar y pegar.\u003C/li>\n\u003Cli>Además, el asistente de chat inteligente puede identificar las bibliotecas que mejor se ajustan para obtener información crucial.\u003C/li>\n\u003Cli>Cuanto más especifiquen los usuarios sus tareas, mejor código enviará el robot autoaprendizaje. Así que prepárate para iterar.\u003C/li>\n\u003C/ol>\n\u003Cp>En esta capacidad, la nueva herramienta inteligente ahorra recursos en dos dimensiones:\u003C/p>\n\u003Cul>\n\u003Cli>Menos tiempo necesario para escribir código manualmente.\u003C/li>\n\u003Cli>No es necesario hacer una investigación extensa por tu cuenta y buscar guías disponibles. \u003C/li>\n\u003C/ul>\n\u003Cp>La conclusión clave es que ChatGPT no está en posición de reemplazar el software de recuperación de información web. No puede entender matices y ofrecer soluciones únicas para todos aún. Por otro lado, es capaz de ayudar a elegir y configurar software y \u003Ca href=\"https://dexodata.com/en/blog/7-web-data-types-to-harvest-successfully-without-coding-skills\" target=\"_blank\" rel=\"noopener\">recolectar datos web sin habilidades de codificación\u003C/a>. Vamos a realizar un par de iteraciones por nosotros mismos.\u003C/p>\n\u003Cp style=\"line-height: 0.5;\"> \u003C/p>\n\u003Ch3>\u003Ca name=\"anchor2\">\u003C/a>Escenario de muestra con ChatGPT, sitios web de proxy e iteraciones\u003C/h3>\n\u003Cp style=\"line-height: 0.1;\"> \u003C/p>\n\u003Cp>Un sitio web de proxy confiable, Dexodata, se centra en proxies para redes sociales y sitios de comercio electrónico destinados a mejorar el nivel de análisis en línea. En cualquier nivel, tanto corporativo como individual, lo primero que hay que hacer antes de ejecutar un script de recolección de información automatizado es identificar qué pretendemos adquirir.\u003C/p>\n\u003Cp>\u003Cstrong>\u003Cspan style=\"text-decoration: underline;\">Paso 1\u003C/span>\u003C/strong>. Siendo, entre otras cosas, una fuente de proxies de eBay, Dexodata te invita a trabajar con este gigante del comercio electrónico. La creación de un scraper de ChatGPT busca detalles adicionales. Alimenta esta información en el modelo de lenguaje. \u003C/p>\n\u003Cp>\u003Cimg src=\"https://blog.dexodata.com/storage/uploads/images/new/15-4-3-geo-targeted-proxies-chatgpt-and-scraping-pic-1032x491-4460da69-9f1d-4f69-a6ba-7429903a5318.png\" alt=\"¿Cómo puede ChatGPT hacer web scraping con proxies geográficamente dirigidos?\" width=\"1032\" height=\"589\">\u003C/p>\n\u003Cp>Haz clic derecho en la pieza de datos requerida, luego elige “Inspeccionar”, y explora el código HTML, nos referimos al atributo de clase en particular.\u003C/p>\n\u003Cp>\u003Cspan style=\"text-decoration: underline;\">\u003Cstrong>Paso 2\u003C/strong>\u003C/span>. Ha llegado el momento de que el modelo de NLP actúe. Dale el siguiente comando. Como ves, especificamos qué estamos inclinados a usar: \u003C/p>\n\u003Cp style=\"padding-left: 40px;\">\u003Cem>\u003Cstrong>“Por favor, \u003Ca href=\"https://www.ebay.com/b/Black-GPS-Running-Watches/75230/bn_115254101\" target=\"_blank\" rel=\"noopener\">raspa este sitio web\u003C/a> a través de Python y Scrapy. Localiza todos los elementos con el nombre del atributo \"class\"”.\u003C/strong>\u003C/em>\u003C/p>\n\u003Cp>ChatGPT responde:\u003C/p>\n\u003Ctable style=\"border-collapse: collapse; width: 99.9794%;\" border=\"2\">\n\u003Ctbody>\n\u003Ctr>\n\u003Ctd style=\"width: 97.0536%;\">\n\u003Cpre style=\"color: #283160; font-size: 16px; font-weight: 400; padding-left: 40px;\">\u003Ccode>\u003Cspan style=\"color: #236fa1;\">import\u003C/span> scrapy\u003C/code>\u003Cbr>\u003Cbr>\u003Ccode>\u003Cspan style=\"color: #236fa1;\">class\u003C/span> \u003Cspan style=\"color: #e03e2d;\">EbaySpider\u003C/span>(scrapy.Spider):\u003C/code>\u003Cbr>\u003Ccode>    name = \u003Cspan style=\"color: #2dc26b;\">\"ebay\"\u003C/span>\u003C/code>\u003Cbr>\u003Ccode>    start_urls = [\u003Cspan style=\"color: #2dc26b;\">'https://www.ebay.com/b/Black-GPS-Running-Watches/75230/bn_115254101'\u003C/span>]\u003C/code>\u003Cbr>\u003Cbr>\u003Ccode>\u003Cspan style=\"color: #236fa1;\">def\u003C/span> \u003Cspan style=\"color: #e03e2d;\">parse\u003C/span>(self, response):\u003C/code>\u003Cbr>\u003Ccode>    elements = response.css(\u003Cspan style=\"color: #2dc26b;\">'[class]'\u003C/span>)\u003C/code>\u003Cbr>\u003Ccode>    \u003Cspan style=\"color: #236fa1;\">for\u003C/span> element \u003Cspan style=\"color: #236fa1;\">in\u003C/span> elements:\u003C/code>\u003Cbr>\u003Ccode>        class_attribute = element.attrib.get(\u003Cspan style=\"color: #2dc26b;\">'class'\u003C/span>)\u003C/code>\u003Cbr>\u003Ccode>        \u003Cspan style=\"color: #236fa1;\">yield\u003C/span> {\u003C/code>\u003Cbr>\u003Ccode>            \u003Cspan style=\"color: #2dc26b;\">'class_attribute'\u003C/span>: class_attribute\u003C/code>\u003Cbr>\u003Ccode>        }\u003C/code>\u003C/pre>\n\u003C/td>\n\u003C/tr>\n\u003C/tbody>\n\u003C/table>\n\u003Cp>\u003Cspan style=\"text-decoration: underline;\">\u003Cstrong>Paso 3\u003C/strong>\u003C/span>. El ecosistema de proxies geográficamente dirigidos de Dexodata ofrece reducir el alcance de nuestra misión. Imponemos límites en el atributo de clase, así: \u003C/p>\n\u003Cp style=\"padding-left: 40px;\">\u003Cstrong>\u003Cem>“Por favor, raspa este sitio web a través de Python y Scrapy. Localiza todos los elementos con el nombre del atributo \"class=\"b-info__title\"”.\u003C/em>\u003C/strong>\u003C/p>\n\u003Cp>ChatGPT reacciona rápidamente:\u003C/p>\n\u003Ctable style=\"border-collapse: collapse; width: 99.9794%;\" border=\"2\">\n\u003Ctbody>\n\u003Ctr>\n\u003Ctd style=\"width: 97.0536%;\">\n\u003Cpre style=\"color: #283160; font-size: 16px; font-weight: 400; padding-left: 40px;\">\u003Ccode>\u003Cspan style=\"color: #236fa1;\">import\u003C/span> scrapy\u003C/code>\u003Cbr>\u003Cbr>\u003Ccode>\u003Cspan style=\"color: #236fa1;\">class\u003C/span> \u003Cspan style=\"color: #e03e2d;\">EbaySpider\u003C/span>(scrapy.Spider):\u003C/code>\u003Cbr>\u003Ccode>    name = \u003Cspan style=\"color: #2dc26b;\">\"ebay\"\u003C/span>\u003C/code>\u003Cbr>\u003Cbr>\u003Ccode>    start_urls = [\u003Cspan style=\"color: #2dc26b;\">'https://www.ebay.com/b/Black-GPS-Running-Watches/75230/bn_115254101'\u003C/span>]\u003C/code>\u003Cbr>\u003Cbr>\u003Ccode>    \u003Cspan style=\"color: #236fa1;\">def\u003C/span> \u003Cspan style=\"color: #e03e2d;\">parse\u003C/span>(self, response):\u003C/code>\u003Cbr>\u003Ccode>        elements = response.xpath(\u003Cspan style=\"color: #2dc26b;\">'//*[@class=\"b-info__title \"]'\u003C/span>)\u003C/code>\u003Cbr>\u003Ccode>        \u003Cspan style=\"color: #236fa1;\">for\u003C/span> element \u003Cspan style=\"color: #236fa1;\">in\u003C/span> elements:\u003C/code>\u003Cbr>\u003Ccode>            title = element.xpath(\u003Cspan style=\"color: #2dc26b;\">'text()'\u003C/span>).get()\u003C/code>\u003Cbr>\u003Ccode>            \u003Cspan style=\"color: #236fa1;\">yield\u003C/span> {\u003C/code>\u003Cbr>\u003Ccode>\u003Cspan style=\"color: #2dc26b;\">                'title'\u003C/span>: title.strip()\u003C/code>\u003Cbr>\u003Ccode>            }\u003C/code>\u003C/pre>\n\u003C/td>\n\u003C/tr>\n\u003C/tbody>\n\u003C/table>\n\u003Cp>Todo el procedimiento tomó cinco minutos. Ahora uno puede probar este código y ajustarlo más adelante, si es necesario.\u003C/p>\n\u003Cp style=\"line-height: 0.5;\"> \u003C/p>\n\u003Ch3>\u003Ca name=\"anchor3\">\u003C/a>Estado actual de ChatGPT en la recolección de datos de internet\u003C/h3>\n\u003Cp style=\"line-height: 0.1;\"> \u003C/p>\n\u003Cp>Nuestro veredicto es que ChatGPT transformará las actividades de recuperación de información web y \u003Ca href=\"https://dexodata.com/en/blog/browser-automation-for-data-harvesting-explained\" target=\"_blank\" rel=\"noopener\">la automatización de navegadores\u003C/a> en un futuro previsible, pero no reemplazará completamente las soluciones de recolección automatizada. Así que los programadores que usan varios lenguajes, por ejemplo, PHP, Python, JS, etc., pueden relajarse. La nueva herramienta ahora facilita su trabajo, no está a punto de reemplazarlos para siempre.\u003C/p>\n\u003Cp>Apreciamos la contribución que los sistemas de conversación automatizados hacen a la industria de extracción de información en línea. Animamos a los lectores a probar las posibilidades de web scraping de ChatGPT en acción. Es una oportunidad para obtener una prueba gratuita de nuestros \u003Ca href=\"https://dexodata.com/en/residential-proxies\" target=\"_blank\" rel=\"noopener\">IPs geográficamente dirigidos\u003C/a> que está disponible para nuevos usuarios.\u003C/p>\n\u003Cp>Los proxies geográficamente dirigidos de Dexodata están ubicados en más de 100 países. Estas son direcciones IP residenciales, móviles y de centro de datos disponibles a \u003Ca href=\"https://dexodata.com/en/pricing\" target=\"_blank\" rel=\"noopener\">precios razonables\u003C/a>. Regístrate en el sitio web oficial y obtén acceso a las poderosas herramientas que mejoran el análisis de datos avanzados junto con ChatGPT y otras soluciones de software mejoradas por IA.\u003C/p>\u003C/body>\u003C/html>\n",[],[],1783936360579]