[{"data":1,"prerenderedAt":18},["ShallowReactive",2],{"article":3},{"id":4,"category":5,"slug":6,"title":7,"image":8,"page_image":9,"published_at":10,"updated_at":11,"meta_title":12,"meta_description":13,"meta_keywords":14,"content":15,"tags":16,"faqs":17},102,"blog","ar-chatgpt-and-data-collection-implications-for-web-data-harvesting-software","ChatGPT وجمع البيانات: الآثار المترتبة على برامج جمع بيانات الويب","https://blog.dexodata.com/storage/uploads/previews/15-4-s-trusted-proxy-website-chatgpt-and-scraping-implications-cover-1032x491-c9d78d89-7239-4f36-9e57-3de8b335a60c.webp","https://blog.dexodata.com/storage/uploads/covers/15-4-b-trusted-proxy-website-chatgpt-and-scraping-implications-cover-1032x491-5f5a859b-9fc4-4c7d-813d-8e3c8935ef35.webp","2023/07/04","2024/02/16","أدوار جمع البيانات من الويب لـ ChatGPT وموقع Dexodata الموثوق بالبروكسي","يوضح موقع Dexodata الموثوق بالبروكسي الذي يوفر بروكسيات مستهدفة جغرافياً الآثار المترتبة على هذه التقنيات مثل ChatGPT لجمع البيانات من الويب.","trusted proxy website, geo targeted proxies, proxies for social networks","\u003C!DOCTYPE html PUBLIC \"-//W3C//DTD HTML 4.0 Transitional//EN\" \"http://www.w3.org/TR/REC-html40/loose.dtd\">\n\u003C?xml encoding=\"utf-8\"?>\u003Chtml>\u003Cbody>\u003Cp>\u003Cem>\u003Cstrong>محتويات المقال:\u003C/strong>\u003C/em>\u003C/p>\n\u003Col>\n\u003Cli>\u003Ca href=\"#anchor1\">هل من الممكن جمع البيانات باستخدام ChatGPT فقط وموقع بروكسي موثوق؟\u003C/a>\u003C/li>\n\u003Cli>\u003Ca href=\"#anchor2\">سيناريو عينة مع ChatGPT وبروكسيات مستهدفة جغرافياً\u003C/a>\u003C/li>\n\u003Cli>\u003Ca href=\"#anchor3\">الحالة الحالية لـ ChatGPT في جمع بيانات الإنترنت\u003C/a>\u003C/li>\n\u003C/ol>\n\u003Cp>يطرح التطور السريع لنماذج LLM وتنفيذ \u003Ca href=\"https://dexodata.com/en/blog/how-to-use-chatgpt-for-web-data-extraction-in-2023\" target=\"_blank\" rel=\"noopener\">ChatGPT لجمع بيانات الويب\u003C/a> سؤالاً طبيعياً، هل ستستبدل الأدوات المدفوعة بالذكاء الاصطناعي برامج جمع البيانات كما نعرفها. لفهم الآثار العملية لهذا الاختراق التكنولوجي، بدأنا بمسألة واضحة وقررنا التحقق، هل يمكن لـ ChatGPT جمع بيانات من المواقع أم لا.\u003C/p>\n\u003Ch2>\u003Ca name=\"anchor1\">\u003C/a>هل من الممكن جمع البيانات باستخدام ChatGPT فقط وموقع بروكسي موثوق؟\u003C/h2>\n\u003Cp>سأل أحد أعضاء الفريق العامل في Dexodata، وهو موقع بروكسي موثوق يحتوي على \u003Ca href=\"https://dexodata.com/en/blog/10-credible-reasons-to-use-dexodata\" target=\"_blank\" rel=\"noopener\">بروكسيات مستهدفة جغرافياً وإعدادات مرنة،\u003C/a> ChatGPT مباشرة إذا كان بإمكانه جمع بيانات من المواقع. أجاب الإطار بما يلي:\u003C/p>\n\u003Cp>\u003Cimg style=\"display: block; margin-left: auto; margin-right: auto;\" src=\"https://blog.dexodata.com/storage/uploads/images/new/15-4-1-geo-targeted-proxies-chatgpt-and-scraping-pic-1032x491-3f08cff2-2914-452a-89d0-96e2d85aaa73.png\" alt=\"هل يمكن لـ ChatGPT جمع بيانات من الويب باستخدام بروكسيات مستهدفة جغرافياً؟\" width=\"711\" height=\"171\">\u003C/p>\n\u003Cp>ثم طلب فريقنا من الذكاء الاصطناعي كتابة بعض الأكواد لبرامج جمع المعلومات عبر الإنترنت. نحن مهتمون بجمع البيانات على نطاق واسع لأغراض تجارية. تُستخدم بنيتنا التحتية عادةً كمصدر لعناوين IP الوسيطة لجمع المعلومات عبر الإنترنت. تشمل الأهداف مواقع التجارة الإلكترونية، مثل أمازون، وعلي إكسبريس، وما إلى ذلك. تعتبر استعلامات البحث عن \"بروكسي eBay\" أيضًا سببًا شائعًا للحصول على بروكسيات لشبكات التواصل الاجتماعي.\u003C/p>\n\u003Cp>كانت أوامرنا هي \"\u003Cem>إنشاء كود لجمع بيانات من eBay\u003C/em>.\" ونتيجة لذلك، حصلنا على هذا الكود بلغة بايثون يعتمد على BeautifulSoup. هذه هي الحلول التي تحمل العديد من الاتجاهات الملهمة في جمع بيانات الويب:\u003C/p>\n\u003Ctable style=\"border-collapse: collapse; width: 83.9387%;\" border=\"2\">\n\u003Ctbody>\n\u003Ctr>\n\u003Ctd style=\"width: 100%;\">\n\u003Cpre style=\"color: #283160; font-size: 16px; font-weight: 400; padding-left: 40px;\">\u003Ccode>\u003Cspan style=\"color: #236fa1;\">import\u003C/span> requests\u003C/code>\u003Cbr>\u003Ccode>\u003Cspan style=\"color: #236fa1;\">from\u003C/span> bs4 \u003Cspan style=\"color: #236fa1;\">import\u003C/span> BeautifulSoup\u003Cbr>\u003Cbr>\u003C/code>\u003Ccode>\u003Cspan style=\"color: #7e8c8d;\"># عنوان URL لصفحة eBay التي تريد جمع بياناتها\u003C/span>\u003C/code>\u003Cbr>\u003Ccode>url = \"\u003Cspan style=\"color: #2dc26b;\">https://www.ebay.com/\u003C/span>\"\u003Cbr>\u003C/code>\u003Cbr>\u003Cspan style=\"color: #7e8c8d;\"># إرسال طلب GET إلى عنوان URL\u003C/span>\u003Cbr>\u003Ccode>response = requests.get(url)\u003Cbr>\u003C/code>\u003Cbr>\u003Cspan style=\"color: #7e8c8d;\"># تحليل محتوى HTML باستخدام BeautifulSoup\u003C/span>\u003Cbr>\u003Ccode>soup = BeautifulSoup(response.content, \"\u003Cspan style=\"color: #2dc26b;\">html.parser\u003C/span>\")\u003Cbr>\u003C/code>\u003Cbr>\u003Cspan style=\"color: #7e8c8d;\"># العثور على عناوين العناصر على الصفحة وطباعة\u003C/span>\u003Cbr>\u003Ccode>items = soup.find_all(\"\u003Cspan style=\"color: #2dc26b;\">h3\u003C/span>\", class_=\"\u003Cspan style=\"color: #2dc26b;\">s-item__title\u003C/span>\")\u003C/code>\u003Cbr>\u003Ccode>\u003Cspan style=\"color: #236fa1;\">for\u003C/span> item \u003Cspan style=\"color: #236fa1;\">in\u003C/span> items:\u003Cbr>\u003Cspan style=\"color: #f1c40f;\">    print\u003C/span>(item.text)\u003C/code>\u003C/pre>\n\u003C/td>\n\u003C/tr>\n\u003C/tbody>\n\u003C/table>\n\u003Cp>لقد قمنا بالتحقيق في النتائج، وخرجنا ببعض الاستنتاجات حول ظاهرة \u003Ca href=\"https://dexodata.com/en/blog/understanding-the-benefits-of-chatgpt-for-web-scraping\" target=\"_blank\" rel=\"noopener\">جمع بيانات ChatGPT\u003C/a>.\u003C/p>\n\u003Cp>أولاً، لن يتمكن من إنجاز كل شيء على الفور. إدخال شيء مثل \"\u003Cem>ChatGTP، اجمع لي هذا\u003C/em>\" لن يكون كافياً. مما يعني أنه لا يمكنه استبدال الأدوات الحالية، سواء كانت مبنية داخليًا أو خارجياً. على الرغم من أنه يمكن أن يساعد في تصميم واحدة، وبعض التلاعبات ستظل تأخذ وقتها.\u003C/p>\n\u003Cp>سنصف جوهر خوارزمية قائمة على الذكاء الاصطناعي بكلمات \"مساعد دردشة لجمع بيانات الويب\". إنها تعتمد على نموذج لغوي لا يمكنه إجراء عملية جمع المعلومات بالكامل بشكل مستقل. لن يقوم بمسح واسترجاع التفاصيل المذكورة على eBay باستخدام \u003Ca href=\"https://dexodata.com/en/ebay\" target=\"_blank\" rel=\"noopener\">بروكسي eBay من Dexodata\u003C/a>. لكنه قادر على تقديم نصائح قيمة، وإرشاد المستخدمين خلال العملية. يعمل ChatGPT بشكل جيد كمساعد رقمي متقدم لمستخدمي موقع البروكسي الموثوق.\u003C/p>\n\u003Cp>إليك ما يبدو عليه تدفق مشروع جمع المعلومات عبر الإنترنت المعتمد على بروكسي ChatGPT:\u003C/p>\n\u003Col>\n\u003Cli>يطلب المرء من الذكاء الاصطناعي إنشاء كود يشمل عنوان URL المعني كهدف.\u003C/li>\n\u003Cli>تقدم الخوارزميات الحوارية خطوطًا من الأكواد. كل ما يتطلبه الأمر الآن هو النسخ واللصق.\u003C/li>\n\u003Cli>بالإضافة إلى ذلك، يمكن للمساعد الذكي تحديد أفضل المكتبات المطابقة للحصول على المعلومات الحاسمة.\u003C/li>\n\u003Cli>كلما كان المستخدمون أكثر تحديدًا لمهامهم، كان الكود الذي يقدمه الروبوت المتعلم ذاتيًا أفضل. لذا كن مستعدًا للتكرار.\u003C/li>\n\u003C/ol>\n\u003Cp>في هذا السياق، يوفر الأداة الذكية الجديدة الموارد في بعدين:\u003C/p>\n\u003Cul>\n\u003Cli>وقت أقل مطلوب لكتابة الكود يدويًا.\u003C/li>\n\u003Cli>لا حاجة لإجراء بحث مكثف بنفسك والبحث عن الأدلة المتاحة.\u003C/li>\n\u003C/ul>\n\u003Cp>النقطة الرئيسية هي أن ChatGPT ليس في وضع يسمح له باستبدال برامج استرجاع المعلومات من الويب. لا يمكنه فهم الفروق الدقيقة وتقديم حلول تناسب الجميع بعد. من ناحية أخرى، فإنه قادر على مساعدة المرء في اختيار وإعداد البرامج و\u003Ca href=\"https://dexodata.com/en/blog/7-web-data-types-to-harvest-successfully-without-coding-skills\" target=\"_blank\" rel=\"noopener\">جمع بيانات الويب دون مهارات برمجية\u003C/a>. دعنا نجري بعض التكرارات بأنفسنا.\u003C/p>\n\u003Cp style=\"line-height: 0.5;\"> \u003C/p>\n\u003Ch3>\u003Ca name=\"anchor2\">\u003C/a>سيناريو عينة مع ChatGPT، مواقع البروكسي، والتكرارات\u003C/h3>\n\u003Cp style=\"line-height: 0.1;\"> \u003C/p>\n\u003Cp>يركز موقع البروكسي الموثوق Dexodata على البروكسيات لمواقع التواصل الاجتماعي ومواقع التجارة الإلكترونية بهدف تعزيز مستوى التحليلات عبر الإنترنت. على أي مستوى، سواء كان مؤسسيًا أو فرديًا، فإن أول شيء يجب القيام به قبل تشغيل برنامج جمع المعلومات الآلي هو تحديد ما نعتزم جمعه.\u003C/p>\n\u003Cp>\u003Cstrong>\u003Cspan style=\"text-decoration: underline;\">الخطوة 1\u003C/span>\u003C/strong>. كونها، من بين أمور أخرى، مصدرًا لبروكسيات eBay، تدعو Dexodata للعمل مع هذا العملاق في التجارة الإلكترونية. يسعى إنشاء جامع بيانات ChatGPT للحصول على تفاصيل إضافية. قم بإدخال هذه المعلومات في نموذج اللغة.\u003C/p>\n\u003Cp>\u003Cimg src=\"https://blog.dexodata.com/storage/uploads/images/new/15-4-3-geo-targeted-proxies-chatgpt-and-scraping-pic-1032x491-4460da69-9f1d-4f69-a6ba-7429903a5318.png\" alt=\"كيف يمكن لـ ChatGPT جمع بيانات من الويب باستخدام بروكسيات مستهدفة جغرافياً\" width=\"1032\" height=\"589\">\u003C/p>\n\u003Cp>قم بالنقر بزر الماوس الأيمن على قطعة البيانات المطلوبة، ثم اختر \"تفقد\"، واستكشف كود HTML، نعني خاصية الفئة على وجه الخصوص.\u003C/p>\n\u003Cp>\u003Cspan style=\"text-decoration: underline;\">\u003Cstrong>الخطوة 2\u003C/strong>\u003C/span>. حان الوقت لنموذج معالجة اللغة الطبيعية للعمل. أعطه الأمر أدناه. كما ترى، حددنا ما نميل إلى استخدامه:\u003C/p>\n\u003Cp style=\"padding-left: 40px;\">\u003Cem>\u003Cstrong>\"من فضلك، \u003Ca href=\"https://www.ebay.com/b/Black-GPS-Running-Watches/75230/bn_115254101\" target=\"_blank\" rel=\"noopener\">اجمع بيانات من هذا الموقع\u003C/a> عبر بايثون وScrapy. حدد جميع العناصر التي تحمل اسم خاصية \"class\"\".\u003C/strong>\u003C/em>\u003C/p>\n\u003Cp>أجاب ChatGPT:\u003C/p>\n\u003Ctable style=\"border-collapse: collapse; width: 99.9794%;\" border=\"2\">\n\u003Ctbody>\n\u003Ctr>\n\u003Ctd style=\"width: 97.0536%;\">\n\u003Cpre style=\"color: #283160; font-size: 16px; font-weight: 400; padding-left: 40px;\">\u003Ccode>\u003Cspan style=\"color: #236fa1;\"> import\u003C/span> scrapy\u003C/code>\u003Cbr>\u003Cbr>\u003Ccode>\u003Cspan style=\"color: #236fa1;\">class\u003C/span> \u003Cspan style=\"color: #e03e2d;\">EbaySpider\u003C/span>(scrapy.Spider):\u003C/code>\u003Cbr>\u003Ccode>    name = \u003Cspan style=\"color: #2dc26b;\">\"ebay\"\u003C/span>\u003C/code>\u003Cbr>\u003Ccode>    start_urls = [\u003Cspan style=\"color: #2dc26b;\">'https://www.ebay.com/b/Black-GPS-Running-Watches/75230/bn_115254101'\u003C/span>]\u003C/code>\u003Cbr>\u003Cbr>\u003Ccode>\u003Cspan style=\"color: #236fa1;\">def\u003C/span> \u003Cspan style=\"color: #e03e2d;\">parse\u003C/span>(self, response):\u003C/code>\u003Cbr>\u003Ccode>    elements = response.css(\u003Cspan style=\"color: #2dc26b;\">'[class]'\u003C/span>)\u003C/code>\u003Cbr>\u003Ccode>    \u003Cspan style=\"color: #236fa1;\">for\u003C/span> element \u003Cspan style=\"color: #236fa1;\">in\u003C/span> elements:\u003C/code>\u003Cbr>\u003Ccode>        class_attribute = element.attrib.get(\u003Cspan style=\"color: #2dc26b;\">'class'\u003C/span>)\u003C/code>\u003Cbr>\u003Ccode>        \u003Cspan style=\"color: #236fa1;\">yield\u003C/span> {\u003C/code>\u003Cbr>\u003Ccode>            \u003Cspan style=\"color: #2dc26b;\">'class_attribute'\u003C/span>: class_attribute\u003C/code>\u003Cbr>\u003Ccode>        }\u003C/code>\u003C/pre>\n\u003C/td>\n\u003C/tr>\n\u003C/tbody>\n\u003C/table>\n\u003Cp>\u003Cspan style=\"text-decoration: underline;\">\u003Cstrong>الخطوة 3\u003C/strong>\u003C/span>. يوفر نظام Dexodata البيئي للبروكسيات المستهدفة جغرافياً تضييق نطاق مهمتنا. نفرض حدودًا على خاصية الفئة، مثل هذا:\u003C/p>\n\u003Cp style=\"padding-left: 40px;\">\u003Cstrong>\u003Cem>\"من فضلك، اجمع بيانات من هذا الموقع عبر بايثون وScrapy. حدد جميع العناصر التي تحمل اسم خاصية \"class=\"b-info__title\"\".\u003C/em>\u003C/strong>\u003C/p>\n\u003Cp>يستجيب ChatGPT بسرعة:\u003C/p>\n\u003Ctable style=\"border-collapse: collapse; width: 99.9794%;\" border=\"2\">\n\u003Ctbody>\n\u003Ctr>\n\u003Ctd style=\"width: 97.0536%;\">\n\u003Cpre style=\"color: #283160; font-size: 16px; font-weight: 400; padding-left: 40px;\">\u003Ccode>\u003Cspan style=\"color: #236fa1;\">import\u003C/span> scrapy\u003C/code>\u003Cbr>\u003Cbr>\u003Ccode>\u003Cspan style=\"color: #236fa1;\">class\u003C/span> \u003Cspan style=\"color: #e03e2d;\">EbaySpider\u003C/span>(scrapy.Spider):\u003C/code>\u003Cbr>\u003Ccode>    name = \u003Cspan style=\"color: #2dc26b;\">\"ebay\"\u003C/span>\u003C/code>\u003Cbr>\u003Cbr>\u003Ccode>    start_urls = [\u003Cspan style=\"color: #2dc26b;\">'https://www.ebay.com/b/Black-GPS-Running-Watches/75230/bn_115254101'\u003C/span>]\u003C/code>\u003Cbr>\u003Cbr>\u003Ccode>    \u003Cspan style=\"color: #236fa1;\">def\u003C/span> \u003Cspan style=\"color: #e03e2d;\">parse\u003C/span>(self, response):\u003C/code>\u003Cbr>\u003Ccode>        elements = response.xpath(\u003Cspan style=\"color: #2dc26b;\">'//*[@class=\"b-info__title \"]'\u003C/span>)\u003C/code>\u003Cbr>\u003Ccode>        \u003Cspan style=\"color: #236fa1;\">for\u003C/span> element \u003Cspan style=\"color: #236fa1;\">in\u003C/span> elements:\u003C/code>\u003Cbr>\u003Ccode>            title = element.xpath(\u003Cspan style=\"color: #2dc26b;\">'text()'\u003C/span>).get()\u003C/code>\u003Cbr>\u003Ccode>            \u003Cspan style=\"color: #236fa1;\">yield\u003C/span> {\u003C/code>\u003Cbr>\u003Ccode>\u003Cspan style=\"color: #2dc26b;\">                'title'\u003C/span>: title.strip()\u003C/code>\u003Cbr>\u003Ccode>            }\u003C/code>\u003C/pre>\n\u003C/td>\n\u003C/tr>\n\u003C/tbody>\n\u003C/table>\n\u003Cp>استغرق الإجراء بأكمله خمس دقائق. الآن يمكن للمرء اختبار هذا الكود وضبطه لاحقًا، عند الحاجة.\u003C/p>\n\u003Cp style=\"line-height: 0.5;\"> \u003C/p>\n\u003Ch3>\u003Ca name=\"anchor3\">\u003C/a>الحالة الحالية لـ ChatGPT في جمع بيانات الإنترنت\u003C/h3>\n\u003Cp style=\"line-height: 0.1;\"> \u003C/p>\n\u003Cp>حكمنا هو أن ChatGPT سيحول الأنشطة المتعلقة باسترجاع معلومات الويب و\u003Ca href=\"https://dexodata.com/en/blog/browser-automation-for-data-harvesting-explained\" target=\"_blank\" rel=\"noopener\">أتمتة المتصفحات\u003C/a> في أي مستقبل يمكن توقعه، لكنه لن يستبدل حلول الجمع الآلي تمامًا. لذا يمكن للمبرمجين الذين يستخدمون لغات مختلفة، مثل PHP وPython وJS، أن يستريحوا. الأداة الجديدة الآن تسهل وظائفهم، وليست على وشك أخذها منهم للأبد.\u003C/p>\n\u003Cp>نحن نقدر المساهمة التي تقدمها أنظمة المحادثة الآلية في صناعة استخراج المعلومات عبر الإنترنت. نشجع القراء على تجربة إمكانيات جمع بيانات الويب من ChatGPT في العمل. إنها فرصة للحصول على تجربة مجانية من \u003Ca href=\"https://dexodata.com/en/residential-proxies\" target=\"_blank\" rel=\"noopener\">بروكسيات مستهدفة جغرافياً\u003C/a> المتاحة للمستخدمين الجدد.\u003C/p>\n\u003Cp>توجد بروكسيات Dexodata المستهدفة جغرافياً في أكثر من 100 دولة. هذه هي عناوين IP السكنية، والمتحركة، ومراكز البيانات المتاحة بأسعار \u003Ca href=\"https://dexodata.com/en/pricing\" target=\"_blank\" rel=\"noopener\">معقولة\u003C/a>. قم بالتسجيل على الموقع الرسمي واحصل على وصول إلى الأدوات القوية التي تحسن تحليلات البيانات المتقدمة مع ChatGPT وحلول البرمجيات المعززة بالذكاء الاصطناعي الأخرى.\u003C/p>\u003C/body>\u003C/html>\n",[],[],1783936377449]