OSINT : محركات البحث المختلفة - الجزء الأول

 

 OSINT 

بالعربي

 

محركات البحث المختلفة - الجزء الأول 

 جدول المحتويات :

        - مقدمة

        - ما هو محرك البحث

        - طبقات الإنترنت

        - أنواع محركات البحث

 

مقدمة

مع وجود المليارات من مواقع الأنترنت , أصبح من المستحيل حفظ أسماء وعناوين المواقع المراد الوصول إليها , نتج عن ذلك وجود محركات البحث لتقوم بتسهيل الأمر عليك من خلال تنظيم وترتيب المواقع الموجودة علي الأنترنت , بطرق خاصة تختلف من محرك بحث إلي أخر لكي تظهر لك نتائج مرتبطة بعملية البحث , بشكل منظم ومرتب.

 

 ما هو محرك البحث

عباره عن موقع إلكتروني يمتلك قاعدة بيانات ضخمة نتيجة لثلاث عمليات وهما (Crawling , Indexing , Ranking) 

 

   + Crawling : تعني عمليه الأستكشاف لصفحات الويب , وتتم من خلال bots و كلمه bot هنا تعني برنامج مُبرمج من قبل الجهه المنشئه لمحرك البحث لكي يقوم بجمع البيانات من صفحات الويب وتختلف البيانات التي يتم جمعها مثل مستندات , صور , فيدوهات. وتتم هذه العمليه من خلال التنقل بين روابط موقع الويب .

    + Indexing : هي عمليه تخزين المحتوي الناتج عن عمليات الأستكشاف , وتنظيمه حتي يسهل الوصول إليه.

    + Ranking : هي عمليه الفرز , عندما يقوم المستخدم بالبحث عن شئ ما , تقوم محركات البحث بفحص الفهرس الخاص بها والبحث عن محتوي ذات صله , ثم تقوم بترتيب المحتويات المشابهه وإظهارها للمستخدم.

طبقات الإنترنت

 

 يحتوي الإنترنت علي ثلاث طبقات أساسيه وهما 

        + Surface web : هو جزء من الإنترنت يكون فيه الوصول إلي المواقع وصفحات الويب سهل عن طريق محركات البحث , وذلك لأن محركات البحث تقوم بأرشفة هذه المواقع والصفحات عن طريق برامج bots خاصة بها.

        + Deep web : هو الجزء الأعمق من الإنترنت ويمثل الفئه الأكبر من محتوياته , كالصفحات أو المستندات التي لم يتم أرشفتها من قبل محركات البحث , وهذا يعني انك إذا قمت بالبحث عن هذه الصفحات أو المستندات من خلال محركات البحث لن يظهر لك أي نتائج والسبب فى ذلك أن هذه البيانات إما أن تكون محميه بكلمات مرور أو تحتاج إلي صلاحيات خاصه للوصول , معظم الناس تعتقد أن deep web شئ خطير أو لا نستطيع الوصول إليه ولكن فى الحقيقه هذا مفهوم خاطئ لأننا كل يوم نستخدم هذا الجزء من الإنترنت ومن أمثله هذه الصفحات التي لا تستطيع محركات البحث أرشفتها.

    - صفحات تحتاج إلي إسم مستخدم وكلمه مرور

    - صفحات تقدم خدمات مدفوعه مثل Netflix أو Amazon

    - صفحات داخليه خاصه بشركات أو منظمات

كل موقع إلكتروني يحتوي علي ملف إسمه robots.txt

يحتوي هذا الملف علي تعليمات عن الصفحات التي تستطيع محركات البحث أرشفتها والصفحات الممنوع علي محركات البحث أو أي شخص الوصول إليها

مثال علي هذا الملف فى الموقع الشهير Wikipedia

إذا بإختصار الفرق بين surface web و deep web هو أن هذه صفحات تم أرشفتها من محركات البحث والأخري لم يتم أرشفتها.

        + Dark web : هو الجزء أو الطبقه المخفيه فى الإنترنت ولا تستطيع الوصول إليها إلا بصلاحيات محدده ومعرفه إلي أين تذهب لأن فى هذه الطبقه يكون أسم الموقع معقد ومتغير بشكل مستمر لذلك حتي محركات البحث فى هذه الطبقه لا تستطيع عمل أرشفه لهذه المواقع بشكل مستمر.

مثال علي أسم موقع من هذه الطبقه :
xmh57jrknzkhv6y3ls3ubitzfqnkrwxhopf5aygthi7d6rplyvk3noyd.onion

نلاحظ أن أسم الموقع ينتهي .onion وليس كالمعتاد .com او .net ولهذا السبب تحتاج إلي برامج خاصه للدخول إلي المواقع من هذا النوع مثل :

    - متصفح Tor

    - خدمه I2P

وهذه الطبقه من الإنترنت تصنف علي أنها السوق السوداء الإلكترونيه وذلك لأنها تحتوي علي مواقع تقدم خدمات غير قانونية مثل :

    - مواقع بيع الأسلحه

    - مواقع الإتجار بالبشر

    - مواقع التزوير وبيع مستندات 

أنواع محركات البحث

يوجد العديد من محركات البحث علي الإنترنت , منها من هو مخصص ومنها من هو عام.

محركات بحث مخصصه مثل محركات بحث خاصه بالملفات أو الصور أو الفيديوهات فقط.

    + محركات بحث عامه :

        - Google

        - EntireWeb

        - Bing

    + محركات بحث تابعة لدوله :       

        - Yandex روسيا

        - Baidu صيني

        - Lableb عربي

    + محركات بحث لا تقوم بجمع معلومات عنك :

        - DuckDuckgo

        - StartPage نتائجه من محرك البحث جوجل

        - Peekier

    + محركات بحث عن الملفات :

        - NAPALM FTP Indexer     

        - MAMONT

        - Archive

    + محركات بحث خاصه بالصور :

        - Yandex Images

        - Google Images

        - ImgUR

    + محركات بحث عن المدونات :

        - Blogspot Blog Search

        - Blog Search

        - Blogging Fusion

    + محركات بحث لكشف الأخبار المزيفه :

        - Truth or Fiction

        - Snopes

        - Hoaxy

    + محركات بحث للتسريبات الإلكترونيه :

        - WikiLeaks

        - Have I Been Pwned

        - Intelligence X

    + محركات بحث فى Dark web :

        - Ahmia

        - Onion.Pet

        - Onion Search Engine

 

للدعم : من هنا ❤️