استخراج النص بكفاءة باستخدام RAG Text Scraper
RAG Text Scraper هو ملحق لمتصفح Chrome مصمم لاستخراج نص المقالات بكفاءة من عدة عناوين URL. يقوم بأتمتة عملية تنظيف المقالات على الويب، وإزالة الإعلانات والفوضى لتوفير ملفات نصية نظيفة وقابلة للاستخدام. يمكن للمستخدمين استخراج المحتوى من قائمة من عناوين URL أو من التبويب الحالي بسهولة. يستخدم الأداة Readability.js من Mozilla لضمان استخراج المحتوى الرئيسي فقط، مما يجعلها مثالية للمطورين والباحثين وعشاق الذكاء الاصطناعي الذين يتطلعون إلى بناء مجموعات بيانات عالية الجودة لأنظمة الجيل المعزز بالاسترجاع.
واحدة من الميزات البارزة في RAG Text Scraper هي خاصية التنظيف المدعومة بالذكاء الاصطناعي الاختيارية. من خلال ربط مفتاح API من مزودين مثل Google Gemini أو OpenAI GPT، يمكن للمستخدمين تحسين جودة النص المستخرج، وإصلاح الفقرات وإزالة التكرارات. يقوم الملحق بحفظ كل مقال تم استخراجه كملف .txt منسق بشكل مرتب، مع بيانات التعريف. هذه الأداة مفيدة بشكل خاص لمطوري الذكاء الاصطناعي، وعلماء البيانات، والهواة الذين يحتاجون إلى جمع ومعالجة مجموعات نصية كبيرة بسرعة.
