[{"data":1,"prerenderedAt":18},["ShallowReactive",2],{"article":3},{"id":4,"category":5,"slug":6,"title":7,"image":8,"page_image":9,"published_at":10,"updated_at":11,"meta_title":12,"meta_description":13,"meta_keywords":14,"content":15,"tags":16,"faqs":17},81,"blog","fr-the-history-of-ethical-web-scraping-via-rotating-proxies","L'histoire du web scraping éthique via des proxies rotatifs","https://blog.dexodata.com/storage/uploads/previews/10-2-trusted-proxy-website-ethical-history-cover-2064x982-578de45c-08e8-4c1f-bf64-7b0df01418c4.webp","https://blog.dexodata.com/storage/uploads/covers/743368d7-ed4b-4b77-b58b-aca574d22a53.webp","2023/03/24","2023/05/29","Comment le web scraping éthique via des sites de proxy de confiance est apparu","Quand et comment la technologie de web scraping est-elle apparue, comment elle a évolué avec des sites de proxy de confiance, et pourquoi les proxies résidentiels rotatifs de Dexodata sont appliqués.","trusted proxy website","\u003C!DOCTYPE html PUBLIC \"-//W3C//DTD HTML 4.0 Transitional//EN\" \"http://www.w3.org/TR/REC-html40/loose.dtd\">\n\u003C?xml encoding=\"utf-8\"?>\u003Chtml>\u003Cbody>\u003Cp>\u003Cem>\u003Cstrong>Contenu de l'article :\u003C/strong>\u003C/em>\u003C/p>\n\u003Col>\n\u003Cli>\u003Ca href=\"#anchor1\">Comment les proxies g&eacute;o-cibl&eacute;s sont-ils apparus ?\u003C/a>\u003C/li>\n\u003Cli>\u003Ca href=\"#anchor2\">Quelles sont les derni&egrave;res tendances en mati&egrave;re de web scraping ?\u003C/a>\u003C/li>\n\u003Cli>\u003Ca href=\"#anchor3\">Quand l'histoire du web scraping a-t-elle commenc&eacute; ?\u003C/a>\u003C/li>\n\u003Cli>\u003Ca href=\"#anchor4\">Les jalons de l'histoire de la collecte de donn&eacute;es sur le web\u003C/a>\u003C/li>\n\u003Cli>\u003Ca href=\"#anchor5\">Comment la collecte de donn&eacute;es sur le web &eacute;volue-t-elle en 2023 ?\u003C/a>\u003C/li>\n\u003C/ol>\n\u003Cp>Internet en 2023 est un v&eacute;ritable espace mondial qui unit plus de 5 milliards d'utilisateurs. Peu importe l'emplacement ou l'heure de la journ&eacute;e, au moins deux des trois habitants de la Terre sont en ligne tout le temps, souligne \u003Ca href=\"https://www.statista.com/statistics/617136/digital-population-worldwide/\" target=\"_blank\" rel=\"noopener\">Statista\u003C/a>. L'internet par satellite d&eacute;velopp&eacute; par le programme Starlink de SpaceX et ses analogues ont rendu les connexions &agrave; large bande disponibles comme jamais auparavant &agrave; travers le globe.\u003C/p>\n\u003Cp>Une si grande communaut&eacute; en ligne cr&eacute;e des t&eacute;raoctets de contenu chaque seconde. Ces connaissances peuvent &ecirc;tre obtenues et appliqu&eacute;es aux besoins des entreprises. L'infrastructure de collecte de donn&eacute;es d'entreprise que Dexodata propose pour \u003Ca href=\"https://dexodata.com/en/mobile-proxies\" target=\"_blank\" rel=\"noopener\">acheter des proxies rotatifs\u003C/a>, capable d'am&eacute;liorer la proc&eacute;dure et les r&eacute;sultats de cette collecte de donn&eacute;es.\u003C/p>\n\u003Cp>Il n'a pas toujours &eacute;t&eacute; ainsi que la collecte d'informations en ligne soit le besoin fondamental pour le d&eacute;veloppement des affaires tout en gardant les secrets commerciaux &agrave; l'abri de la collecte de donn&eacute;es et de l'exploitation non &eacute;thiques. Un proxy r&eacute;sidentiel tournant ses adresses IP sert d'outil indispensable &agrave; ces fins. De tels services sont apparus relativement r&eacute;cemment. Aujourd'hui, nous vous invitons &agrave; nous rejoindre dans ce voyage &agrave; travers les pages de l'histoire de la r&eacute;colte web.\u003C/p>\n\u003Ch2>\u003Ca name=\"anchor1\">\u003C/a>Comment les proxies g&eacute;o-cibl&eacute;s sont-ils apparus ?\u003C/h2>\n\u003Cp>Le point de d&eacute;part dans l'histoire d'internet est le 23 ao&ucirc;t 1991. Ce jour-l&agrave;, l'ing&eacute;nieur du CERN Tim Berners-Lee a annonc&eacute; publiquement la technologie \u003Ca href=\"https://en.wikipedia.org/wiki/World_Wide_Web\" target=\"_blank\" rel=\"noopener\">World Wide Web\u003C/a>, WWW. Elle poss&egrave;de de nombreuses caract&eacute;ristiques distinctives qui ont fa&ccedil;onn&eacute; l'&eacute;tat actuel de la sph&egrave;re en ligne et des proxies rotatifs modernes en particulier. Celles-ci sont :\u003C/p>\n\u003Col>\n\u003Cli>HTTP, servant &agrave; livrer des informations des utilisateurs finaux distants aux serveurs, et vice versa. De nos jours, le protocole HTTP/3 bas&eacute; sur UDP est consid&eacute;r&eacute; comme la plateforme future pour l'ensemble du r&eacute;seau mondial\u003C/li>\n\u003Cli>HTML, le langage structurant les pages web, fonctionnant d&eacute;sormais avec CSS\u003C/li>\n\u003Cli>URLs, hyperliens qui servent de ponts entre les sections des sites et les services dispers&eacute;s. Lorsque vous achetez un proxy rotatif pour l'intelligence d'affaires et commencez &agrave; rechercher des informations d&eacute;taill&eacute;es, vous avez besoin de listes d'URLs menant au contenu d&eacute;sir&eacute;.\u003C/li>\n\u003C/ol>\n\u003Cp>Cette infrastructure est toujours fonctionnelle ind&eacute;pendamment des diff&eacute;rentes am&eacute;liorations de performance, telles que \u003Ca href=\"https://dexodata.com/en/blog/how-does-nat-technology-work-with-proxies\" target=\"_blank\" rel=\"noopener\">la technologie NAT\u003C/a> qui aborde le probl&egrave;me des adresses IPv4 manquantes.\u003C/p>\n\u003Cp>Un autre probl&egrave;me s&eacute;rieux d'internet est la s&eacute;curit&eacute; des informations priv&eacute;es. Comme nous l'avons d&eacute;clar&eacute; dans notre \u003Ca href=\"https://dexodata.com/en/blog/proxies-early-history-and-future-development\" target=\"_blank\" rel=\"noopener\">guide historique pr&eacute;c&eacute;dent\u003C/a>, les premiers sites de proxy de confiance sont apparus et ont &eacute;volu&eacute; en r&eacute;ponse &agrave; l'intention de tenir les escrocs en ligne &agrave; l'&eacute;cart des donn&eacute;es sensibles.\u003C/p>\n\u003Cp style=\"line-height: 0.5;\">&nbsp;\u003C/p>\n\u003Ch3>\u003Ca name=\"anchor2\">\u003C/a>Quelles sont les derni&egrave;res tendances en mati&egrave;re de web scraping ?\u003C/h3>\n\u003Cp style=\"line-height: 0.1;\">&nbsp;\u003C/p>\n\u003Cp>Les serveurs interm&eacute;diaires assistent &agrave; :\u003C/p>\n\u003Cul>\n\u003Cli>Distribuer la charge entre plusieurs n&oelig;uds\u003C/li>\n\u003Cli>Maintenir les campagnes SEO et SMM\u003C/li>\n\u003Cli>Am&eacute;liorer la cybers&eacute;curit&eacute;\u003C/li>\n\u003Cli>Collecter des informations pr&eacute;cises &agrave; grande &eacute;chelle.\u003C/li>\n\u003C/ul>\n\u003Cp>Le probl&egrave;me de l'extraction d'informations priv&eacute;es est aujourd'hui r&eacute;gul&eacute; par les lois locales. Aux &Eacute;tats-Unis, il existe la \u003Ca href=\"https://www.justice.gov/jm/jm-9-48000-computer-fraud\" target=\"_blank\" rel=\"noopener\">Loi am&eacute;ricaine sur la fraude et les abus informatiques (CFAA)\u003C/a> contenant la d&eacute;finition du piratage en ligne et des termes connexes. Une cour d'appel am&eacute;ricaine a d&eacute;clar&eacute;, en se basant sur cette loi, que la collecte d'informations &eacute;thiques ne concerne que les donn&eacute;es publiquement disponibles. Le proc&egrave;s est toujours en cours, mais les sites de proxy les plus fiables, tels que Dexodata, soutiennent cette d&eacute;cision. Nous garantissons une conformit&eacute; stricte aux politiques AML et KYC pour effectuer une collecte de donn&eacute;es internet &eacute;thique, et ainsi nous soutenons les derni&egrave;res tendances en mati&egrave;re de web scraping.\u003C/p>\n\u003Cp style=\"line-height: 0.5;\">&nbsp;\u003C/p>\n\u003Ch3>\u003Ca name=\"anchor3\">\u003C/a>Quand l'histoire du web scraping a-t-elle commenc&eacute; ?\u003C/h3>\n\u003Cp style=\"line-height: 0.1;\">&nbsp;\u003C/p>\n\u003Cp>WWW n'&eacute;tait pas seulement un r&eacute;seau informatique, mais aussi le titre du premier navigateur web, WorldWideWeb, sans espaces. Sa cr&eacute;ation appartient &eacute;galement &agrave; Tim Berners-Lee. L'invention a &eacute;t&eacute; annonc&eacute;e en 1991.\u003C/p>\n\u003Cp>Il a fallu deux ans apr&egrave;s l'apparition de la navigation pour faire le premier pas vers l'acquisition d'informations en ligne &agrave; grande &eacute;chelle. Et une ann&eacute;e de plus pour afficher des images en ligne parmi les symboles de texte, le navigateur Mosaic &eacute;tait capable de le faire en 1994. Il n'y avait pas de possibilit&eacute;s d'acheter des \u003Ca href=\"https://dexodata.com/en/pricing\" target=\"_blank\" rel=\"noopener\">adresses IP rotatives de proxy\u003C/a> &agrave; l'&eacute;poque.\u003C/p>\n\u003Cp>1993 est devenu l'ann&eacute;e o&ugrave; la premi&egrave;re technologie de crawling web a &eacute;t&eacute; invent&eacute;e. D'abord, un logiciel appel&eacute; Wanderer a mesur&eacute; la taille du r&eacute;seau mondial en &eacute;num&eacute;rant les ressources disponibles. Ensuite, la technologie JumpStation est apparue et est devenue un moteur de recherche pilot&eacute; par un crawler.\u003C/p>\n\u003Cp>Les premiers outils de collecte de donn&eacute;es bas&eacute;s sur des crawlers en ligne ont &eacute;t&eacute; con&ccedil;us en 1996. Ils s'appelaient WebBot et WebCrawler et tous deux pouvaient acqu&eacute;rir des donn&eacute;es contenues dans le code HTML des sites. Et c'&eacute;tait le d&eacute;but de l'histoire de la collecte d'informations.\u003C/p>\n\u003Cp style=\"line-height: 0.5;\">&nbsp;\u003C/p>\n\u003Ch3>\u003Ca name=\"anchor4\">\u003C/a>Les jalons de l'histoire de la collecte de donn&eacute;es sur le web\u003C/h3>\n\u003Cp style=\"line-height: 0.1;\">&nbsp;\u003C/p>\n\u003Cp>Les ing&eacute;nieurs ont continu&eacute; &agrave; am&eacute;liorer les technologies pendant les ann&eacute;es suivantes. Aujourd'hui, tout le monde peut tester des proxies rotatifs, les acheter et les appliquer &agrave; des logiciels choisis, y compris des outils aliment&eacute;s par l'IA. La technologie de cha&icirc;nage &eacute;tait populaire &agrave; l'&eacute;poque. Chaque IP de middlebox servait de lien dans la cha&icirc;ne de connexion, et transf&eacute;rant des paquets d'octets dans les deux sens.\u003C/p>\n\u003Cp>Netscape Communications a introduit le premier IP r&eacute;sidentiel rotatif en 1996. Le fichier de configuration automatique de proxy (PAC) pilot&eacute; par JavaScript a inclus la liste des h&ocirc;tes disponibles et des r&egrave;gles pour se connecter &agrave; travers eux aux URLs requises.\u003C/p>\n\u003Cp>Les prochaines &eacute;tapes marquantes dans le d&eacute;veloppement des solutions de collecte d'informations ont &eacute;t&eacute; caract&eacute;ris&eacute;es par l'apparition de :\u003C/p>\n\u003Col>\n\u003Cli>2000 &ndash; Web API (Interface de Programmation d'Applications), responsable de l'&eacute;change simplifi&eacute; de requ&ecirc;tes entre des applications et services tiers\u003C/li>\n\u003Cli>2001 &ndash; Cadre fonctionnant sur des principes open source et des suites de navigateurs hors ligne pour t&eacute;l&eacute;charger des pages HTML\u003C/li>\n\u003Cli>2003 &ndash; XPath, langage d'expression qui a pr&eacute;c&eacute;d&eacute; le format XML et a acc&eacute;l&eacute;r&eacute; la cr&eacute;ation d'outils d'extraction automatis&eacute;s avec \u003Ca href=\"https://dexodata.com/en/residential-proxies\" target=\"_blank\" rel=\"noopener\">des proxies r&eacute;sidentiels rotatifs\u003C/a>\u003C/li>\n\u003Cli>2004 &ndash; Biblioth&egrave;que &eacute;crite en Python avec des algorithmes qui sont les plus fr&eacute;quemment utilis&eacute;s pour obtenir des informations en ligne\u003C/li>\n\u003Cli>2006 &ndash; L'acquisition d'informations en ligne est devenue disponible sans comp&eacute;tences en codage gr&acirc;ce &agrave; la structuration visuelle du code HTML de la page source. En 2023, \u003Ca href=\"https://dexodata.com/en/blog/7-web-data-types-to-harvest-successfully-without-coding-skills\" target=\"_blank\" rel=\"noopener\">des mod&egrave;les LLM aliment&eacute;s par l'IA comme ChatGPT\u003C/a> ont encore simplifi&eacute; l'automatisation de la collecte de big data\u003C/li>\n\u003Cli>2008 &ndash; Outil de web scraping automatis&eacute;\u003C/li>\n\u003Cli>2009 &ndash; Solutions bas&eacute;es sur le cloud\u003C/li>\n\u003Cli>2015 &ndash; Logiciel bas&eacute; sur l'IA pour la collecte d'informations web\u003C/li>\n\u003Cli>2018 - Application de l'apprentissage automatique pour augmenter l'&eacute;chelle de collecte, de v&eacute;rification et de traitement des informations.\u003C/li>\n\u003C/ol>\n\u003Cp style=\"line-height: 0.5; text-align: center;\">\u003Cimg src=\"https://blog.dexodata.com/storage/uploads/images/81/10-2-geo-targeted-proxies-ethical-history-1032x491-234b9c87-59fa-47de-bc8e-b470f0ee84a2.png\" alt=\"Comment le web scraping &eacute;thique via des sites de proxy de confiance est apparu (chronologie)\" width=\"1020\" height=\"485\">\u003C/p>\n\u003Cp style=\"line-height: 0.5; text-align: center;\">\u003Csup>Chronologie de la collecte &eacute;thique de donn&eacute;es sur le web&nbsp;\u003C/sup>\u003C/p>\n\u003Cp style=\"line-height: 0.5;\">&nbsp;\u003C/p>\n\u003Ch3>\u003Ca name=\"anchor5\">\u003C/a>Comment la collecte de donn&eacute;es sur le web &eacute;volue-t-elle en 2023 ?\u003C/h3>\n\u003Cp style=\"line-height: 0.1;\">&nbsp;\u003C/p>\n\u003Cp>L'intelligence artificielle donne le ton &agrave; tout le d&eacute;veloppement de l'industrie. \u003Ca href=\"https://dexodata.com/en/about\" target=\"_blank\" rel=\"noopener\">Les sites de proxy de confiance\u003C/a> servent &agrave; la collecte de donn&eacute;es dans le e-commerce, le SEO, la v&eacute;rification des annonces, le suivi des m&eacute;triques actuelles, et \u003Ca href=\"https://dexodata.com/en/blog/what-is-ai-based-business-forecasting-with-geo-targeted-proxies\" target=\"_blank\" rel=\"noopener\">la pr&eacute;vision des tendances futures\u003C/a>. Les particuliers et les entreprises sont invit&eacute;s &agrave; obtenir un essai gratuit de n'importe quel proxy r&eacute;sidentiel, de centre de donn&eacute;es, \u003Ca href=\"https://dexodata.com/en/mobile-proxies\" target=\"_blank\" rel=\"noopener\">proxy mobile rotatif\u003C/a>. Ensuite, achetez une adresse ou un pool d'IPs dynamiques &agrave; un prix raisonnable sur Dexodata.\u003C/p>\u003C/body>\u003C/html>\n",[],[],1783936370194]