الويب غير المرئي: ما هو وكيف يمكنك العثور عليه

ما هو الويب غير المرئي؟

هل تعلم أن هناك كمية هائلة من البيانات التي لن تعرضها محركات البحث دون بحث محدد؟ يشير مصطلح "الويب غير المرئي" بشكل أساسي إلى مستودع المعلومات الهائل الذي لا تمتلكه محركات البحث والدلائل الوصول المباشر إليه ، مثل قواعد البيانات.

على عكس صفحات الويب المرئية (أي الويب التي يمكنك الوصول إليها من محركات البحث والدلائل) ، فإن المعلومات الموجودة في قواعد البيانات لا يمكن الوصول إليها بشكل عام إلى برامج العنكبوت وبرامج الزحف التي تنشئ فهارس محرك بحث. يستطيع المستخدمون الوصول إلى معظم هذه المعلومات ، ولكن فقط من خلال عمليات بحث محددة يتم فتحها في مكان وجود هذه المعلومات.

كيف كبير هو الويب غير مرئي؟

يقدر أن الويب غير المرئي هو حرفياًآلاف المرات أكبر من محتوى الويب الموجود مع الاستعلامات العامة لمحركات البحث. ووفقًا لـ Bright Planet ، وهي منظمة بحث متخصصة في استخراج محتوى الويب غير المرئي ، فإن شبكة الويب غير المرئية تحتوي على ما يقرب من 550 مليار مستند فردي مقارنةً بالمليار من الويب.

لا تُرجع محركات البحث الرئيسية - Google و Yahoo و Bing - كل المحتوى "المخفي" في البحث العادي ، وذلك ببساطة لأنها لا تستطيع رؤية هذا المحتوى بدون معلمات بحث متخصصة و / أو خبرة في البحث. ومع ذلك ، بمجرد أن يعرف الباحث كيفية الوصول إلى هذه البيانات ، هناك مجموعة كبيرة ومتنوعة من المعلومات المتاحة.

لماذا يطلق عليه "الويب غير المرئي"؟

العناكب ، وهي برامج برمجية صغيرة ، تتعرّج عبر الويب ، وتقوم بفهرسة عناوين الصفحات التي تكتشفها. عند تشغيل هذه البرامج في صفحة من الويب غير المرئي ، فإنها لا تعرف تمامًا ماذا تفعل بها. يمكن لهذه العناكب تسجيل العنوان ، ولكن لا يمكن الوصول إلى أي شيء عن المعلومات التي تحتوي عليها الصفحة.

لماذا ا؟ هناك الكثير من العوامل ، ولكنها في الأساس تتلخص في العوائق الفنية و / أو القرارات المتعمدة من جانب مالك (مواقع) الموقع لاستبعاد صفحاتهم من عناكب محركات البحث. على سبيل المثال ، لن يتم تضمين مواقع مكتبة الجامعة التي تتطلب كلمات مرور للوصول إلى معلوماتها في نتائج محرك البحث ، بالإضافة إلى صفحات تستند إلى نصوص لا يمكن قراءتها بسهولة بواسطة عناكب محركات البحث.

لماذا تعتبر الشبكة غير المرئية مهمة؟

يعتقد العديد من المستخدمين أنه قد يكون من السهل الالتزام بما يمكن العثور عليه مع Google أو Yahoo. ومع ذلك ، ليس من السهل دائمًا العثور على ما تبحث عنه باستخدام محرك بحث ، خاصةً إذا كنت تبحث عن شيء معقد أو غامض.

فكر في الويب كمكتبة واسعة. معظم الناس لا يتوقعون مجرد المشي في الباب الأمامي والعثور على الفور معلومات عن تاريخ مقاطع الورق ملقاة على المنضدة الأمامية. يتوقعون أن يحفروا من أجلها. هذا هو المكان الذي لن يساعدك فيه محرك البحث بالضرورة ، ولكن ستقوم شبكة الويب غير المرئية.

إن حقيقة أن محركات البحث تقوم فقط بالبحث عن جزء صغير جدًا من الويب تجعل من Invisible Web موردًا مغرًا للغاية. هناك الكثير من المعلومات التي يمكن تخيلها.

كيف يمكنني استخدام الويب غير المرئي؟

هناك العديد من الأشخاص الآخرين الذين سألوا أنفسهم نفس السؤال بالضبط ووضعوا مواقع رائعة تعمل كنقطة انطلاق في الويب غير المرئي. فيما يلي بعض بوابات المواضيع المختلفة:

العلوم الإنسانية

• صوت المكوك: بدأ في عام 1994 ، يعد VoS واحدًا من أقدم وأكبر قواعد البيانات الإنسانية على الويب ، حيث يقدم فهرسًا حصريًا لمحتوى يتنوع من الأنثروبولوجيا إلى تقنية الكتابة.

خاص بحكومة الولايات المتحدة

• مركز وثائق حكومة جامعة ميشيغان: ستجد التقارير والإحصاءات والمستندات الأخرى من جميع مستويات الحكومة الأمريكية هنا. قواعد البيانات المقدمة تشمل الفنون ، العلوم الصحية ، العلوم الاجتماعية ، والدراسات الدولية.
• USA.gov: بوابة سجادة حمراء في أعماق العديد من كيانات حكومة الولايات المتحدة. تشمل وظائف حكومية ، وقائمة من الألف إلى الياء بالوكالات الحكومية ، ومعلومات عن الحصول على المنح والقروض والمساعدة المالية.

الصحة والعلوم

• PsycNET: استخدم قاعدة البيانات هذه من جمعية علم النفس الأمريكية للعثور على الملخصات والمجلات الكاملة على مواضيع نفسية مختلفة (الرسوم تنطبق على إدخالات اليومية الكاملة ، والملخصات عادة ما تكون مجانية).
• Healthfinder: تم فحص المعلومات بشكل احترافي من أكثر من ألف قاعدة بيانات صحية مختلفة على الويب. تتوفر هنا مجموعة كبيرة من الموارد حول مجموعة مذهلة من الموضوعات الصحية.
• RXList: إذا كنت تبحث عن معلومات موثوقة عن المخدرات ، فإن قاعدة البيانات هذه للعقاقير الطبية والأدوية وحبوب منع الحمل هي لك. يقدم فهرس A إلى Z ومجموعات صور وقاموس مصطلحات.

الضخمة بوابات

• المكتبة الافتراضية هي بسيطة وسهلة الاستخدام ، مع وصلات موضوع المشروح. أقدّر خصوصًا التعليقات التوضيحية لأنها تساعد في استبعاد وقت البحث غير الضروري.

ماذا عن موارد الويب غير المرئية؟

هناك العديد من المواقع التي تم إعدادها للتنقيب في الويب غير المرئي. تتم صيانة معظم المعلومات على الويب غير المرئي من قبل المؤسسات الأكاديمية وتتمتع بجودة أعلى من نتائج محرك البحث. هناك "بوابات أكاديمية" يمكنها مساعدتك في العثور على هذه المعلومات. للعثور على أي مصدر تعليمي تقريبًا على الويب ، ما عليك سوى كتابة سلسلة البحث هذه إلى محرك البحث المفضل لديك:

site: .edu "subject أنا أبحث عن"

سيعود بحثك مع المواقع المتعلقة فقط.إذا كانت لديك مدرسة معينة في ذهنك وتريد البحث عنها ، فاستخدم عنوان URL لهذه المدرسة في بحثك:

الموقع: www.school.edu "subject I'm looking for"

ضع إطارًا للموضوع داخل عروض الأسعار إذا كان أكثر من كلمتين ؛ يتيح هذا لمحرك البحث الذي تستخدمه معرفة أنك تريد العثور على هاتين الكلمتين بجوار بعضهما البعض. تعرف على المزيد حول حيل البحث لتصبح أكثر كفاءة في عمليات البحث على الويب.

The Bottom Line About The Invisible Web

تقدم Invisible Web مجموعة كبيرة من الموارد على أي شيء يمكن التفكير فيه. تبدأ الروابط الموضحة في هذه المقالة بالكاد في لمس الموارد الهائلة المتوفرة على الويب غير المرئي. مع مرور الوقت ، سوف يزداد حجم شبكة Invisible Web ، وهذا هو السبب في أنها فكرة جيدة لمعرفة كيفية استكشافها الآن.