The Invisible Web

10
1 æヌuMF ノd{U wzd*ヌ dO Vuヌ The Invisible Web w rJムUe bF Wヌu rOKFヌ UOuuMJ ムubヌ áヌdS サ `U ハマu vHDB www.mostafagawdat.net " ﺍﻟﻮﻳـــﺐ ﻏﻴـــﺮ ﺍﻟﻤﺮﺋـــﻲ" ﻫـــﻮ ﺍﻟﻤـــﺼﻄﻠﺢ ﺍﻟﻤـــﺴﺘﺨﺪﻡ ﻟﻮﺻـــﻒ ﺟﻤﻴـــﻊ ﺍﻟﻤﻌﻠﻮﻣﺎﺕ ﻭﺍﻟﻤـﻮﺍﺩ ﺍﻟﻤﺘﺎﺣـﺔ ﻭﺍﻟﻤﺘـﻮﻓﺮﺓ ﻋﻠـﻰ ﺷـﺒﻜﺔ ﺍﻟﻮﻳـﺐ، ﺇﻻ ﺃﻧﻬـﺎ ﻳﺘﺎﺡ ﺍﻟﻮﺻﻮﻝ ﺇﻟﻴﻬﺎ ﺑﺎﺳﺘﺨﺪﺍﻡ ﺃﺩﻭﺍﺕ ﺍﻟﺒﺤﺚ. ﺍﻟﻌﺎﻣﺔ. ﻣــﺼﻄﻠﺢ ﺍﻹﻧﺘﺮﻧــﺖ ﻏﻴــﺮ ﺍﻟﻤﺮﺋــﻲ ﺃﻭ ﺍﻟﻌﻤﻴــﻖ ﺃﻭ ﺍﻟﻤﻈﻠــﻢ ﻌــﻮﺩ ﺇﻟــﻰ ﺍﻟﺤﻮﺍﺳﻴﺐ ﺍﻟﻤﺮﺗﺒﻄﺔ ﺑﺎﻟﺸﺒﻜﺔ ﻭﺍﻟﺘﻲ ﻻ ﻳﻤﻜﻦ ﺍﻟﻮﺻﻮﻝ ﺇﻟﻴﻬﺎ. ﻗﺪ ﻳﻜـﻮﻥ ﺍﻟــﺴﺒﺐ ﻫــﻮ ﺃﻧــﻪ ﻻ ﻳﻮﺟــﺪ ﻭﺻــﻼﺕ ﺇﻧﺘﺮﻧــﺖ ﺗــﺼﻞ ﺇﻟــﻰ ﻣﺤﺘﻮﻳــﺎﺕ ﺗﻠــﻚ ﺍﻟﻌﻨﺎﻭﻳﻦ ﺃﻭ ﻷﻥ ﺗﻠﻚ ﺍﻟﻤﺤﺘﻮﻳﺎﺕ ﺗﻮﹼﻟﺪ ﺃﻭ ﺗﻨﺘﺞ ﺗﻠﻘﺎﺋﻴﺎﹰ. 2 ﻋﻠـﻰ ﺳـﺒﻴﻞ ﺍﻟﻤﺜـﺎﻝ: ) ﻗﻮﺍﻋـﺪ ﺍﻟﺒﻴﺎﻧـﺎﺕ ﺍﻟﻤﺘﻐﻴـﺮﺓ ﺑـ ﺸﻜﻞ ﺛﺎﺑـﺖ( ﻧﺠـﺪ ﺃﻥ ﻣﺤﺮﻛـﺎﺕ ﺍﻟﺒﺤـﺚ ﻟـﺪﻳﻬﺎ ﺻـﻌﻮﺑﺔ ﻓـﻲ ﻓﻬﺮﺳـﺘﻬﺎ. ﻳﻤﻜـﻦ ﺃﻳـﻀﺎ ﺃﻥ ﻧﻌـﺮﹼﻑ ﺍﻻﻧﺘﺮﻧﺖ ﻏﻴـﺮ ﺍﻟﻤﺮﺋـﻲ ﻛﻤﺠﻤﻮﻋـﺔ ﻣـﻦ ﺍﺭﺗﺒﺎﻃـﺎﺕ ﺍﻟـﺸﺒﻜﺔ ﺍﻟﺘـﻲ ﺗـﺴﺘﻌﻤﻞ ﺑﺮﻭﺗﻮﻛـﻮﻻﺕ ﻏﻴـﺮ(HTTP) ﻭﻟﻜﻨﻬـﺎ ﻣﻮﺟـﻮﺩﺓ ﻋﻠـﻰ ﺍﻟـﺸﺒﻜﺔ ﻭﺗﺄﺳــﺴﺖ ﺑﻄﺮﻳﻘﺔ ﻣﻐﻠﻘﺔ ﻭﺳﺮﻳﺔ ﺑﻴﻦ ﺃﻃﺮﺍﻑ ﻣﻮﺛﻮﻗﺔ ﺑﻴﻦ ﺑﻌـﻀﻬﺎ ﺍﻟـﺒﻌﺾ. ﻋـﺎﺩﺓ ﻣﺎ ﻳﺴﺘﻌﻤﻞ ﻫﺬﺍ ﺍﻟﻨﻮﻉ ﻟﻐـﺮﺽ ﺗـﺸﺎﺭﻙ ﺍﻟﻤﻠﻔـﺎﺕ ﻧﻈﻴـﺮ ﺇﻟـﻰ ﻧﻈﻴـﺮ ﺃﻭ ﺑـﻴﻦ ﻧﻈﻴﺮﻳﻦ. Peertopeer files sharing. ノd{U wzd*ヌ dO Vuヌ マヌbナ nU L b ٬ bL u*ヌ qC v www.go2library2.wordpress.com w WU UOuuMJ Wヌu rOKFヌ ムubヌ áヌdS サ `U ハマu vHDB www.mostafagawdat.net c éu ノd{U;ヌ ç Vu0 t hd Bム W ハUOuLFヌ WOヌbヌ 3.0 The Invisible Web 1

description

"If only I had known!" was the bitter cry of the searcher who relied just on search engines to search the Web. Although many popular search engines boast about their ability to index information on the Web, more of it (dynamically-generated pages, certain file formats, and information held within numerous databases) has become invisible to their searching spiders. Much of the Web is hiding information from us, but we can access this hidden content! Learn how you can reveal the secrets of these dark, hiding places.

Transcript of The Invisible Web

1  The Invisible Web الويب غير املرئي : محاضرة بعنوان

www.mostafa­gawdat.net مصطفى جودت صالح ؛ بإشراف الدكتور تكنولوجيا التعليم بوابة نسعد بزيارتكم في

" ــي ــر المرئـ ــب غيـ " الويـ ــع ــستخدم لوصـــف جميـ ــو المـــصطلح المـ هـ ال إال أنهـا الويـب، علـى شـبكة والمتـوفرة المتاحـة والمـواد المعلومات

. العامة . البحث أدوات باستخدام الوصول إليها يتاحــت مــصطلح ــي اإلنترن ــق أو غيــر المرئ ــود إلــى ي المظلــم أو العمي ع

قد يكـون . المرتبطة بالشبكة والتي ال يمكن الوصول إليها الحواسيبــه ال ــسبب هــو أن ــك ال ــات تل ــى محتوي ــصل إل ــت ت ــد وصــالت إنترن يوج

 . تولد أو تنتج تلقائيا العناوين أو ألن تلك المحتويات

2 نجــد أن ) شكل ثابــت بــ قواعــد البيانــات المتغيــرة ( : علــى ســبيل المثــال

يمكـن أيـضا أن . محركـات البحـث لـديها صـعوبة فـي فهرسـتها نعـرف كمجموعـة مـن ارتباطـات الـشبكة التـي تـستعمل غيـر المرئـي االنترنت

ولكنهــا موجــودة علــى الــشبكة وتأســست (HTTP) بروتوكــوالت غيــر عـادة و . مغلقة وسرية بين أطراف موثوقة بين بعـضها الـبعض بطريقة

تـشارك الملفـات نظيـر إلـى نظيـر أو بـين لغـرض هذا النوع يستعمل ما .Peer­to­peer files sharing . نظيرين

 . ى فضل املول محمد ٬ د محم عاطف . ر : إعداد ؛ الويب غير املرئي : محاضرةwww.go2library2.wordpress.com 

: متاحة في مصطفى جودت صالح ؛ بإشراف الدكتور التعليم بوابة تكنولوجيا

www.mostafa­gawdat.net 

3.0 اإلبداعية العموميات ة رخص : مرخص له مبوجب ه احملاضرة محتوى هذ

الويب غير المرئيThe Invisible Web 

1

2  The Invisible Web الويب غير املرئي : محاضرة بعنوان

www.mostafa­gawdat.net مصطفى جودت صالح ؛ بإشراف الدكتور تكنولوجيا التعليم بوابة نسعد بزيارتكم في

: مقدمة

لكن هذا العدد الكبير ال . يعرفها عنوان الرقم تريليون إلى قائمة مواقع االنترنت التي » ل ج و ج « البحث ، أضاف محرك 2008 في أحد أيام صيف . االنترنت يسيرا من شبكة ميثل، حقيقة، إال جزءا

ات التسوق وجداول رحالت الطيران، واألبحاث ج تتضمن معلومات مالية وكتالو فأبعد من التريليون صفحة، هناك شبكة مخبأة من البيانات قواعد البيانات التي ال ويطلق على . مرئية من قبل محركات البحث الطبية وأنواع أخرى مختلفة من املواد ازنة في قواعد بيانات ال تزال غير

 . Invisible Web, Deep Web أو » الويب العميق « محركات البحث، اسم تصلها

موجودة في أماكن ما زالت تشكل حتديا وحتتوي الشبكة على بيانات أكبر بكثير لكنها . االنترنت ما هو إال السطح فما نراه اليوم من . مرئية ون موجودة على مواقع لم تسجل لدى محركات البحث ما يجعلها غير وهي قد تك . لتكنولوجيا محركات البحث املتوفرة

في املقابل يتضمن الويب . ورنيا ف بحسب دراسة قامت بها جامعة كالي تيرابايت، ألف 91 بـ » الويب العميق « ويقدر حجم البيانات املوجودة في . رس الكوجن بة آالف تيرابايت من البيانات، بحسب دراسة ملكت 3 السطحي املعروف نحو

: ما هو موقع الويب (hypertext documents) هو مجموعة من وثائق النص املترابط ) World Wide Web الشبكة العنكبوتية العاملية ( Web موقع الويب

: التالية على األسس الرئيسة وتقوم هذه املواقع . املخزنة في خادمات الويب .(layout) التصميم • .(Content) احملتويات • .(links) الروابط •

 . في الويب (navigation tools) أدوات اإلبحار •

بني النصوص في (Hyper linking) املتداخل ، هذا الترابط hypertext نظام من مستندات النص الفائق املرتبطة ببعضها عبارة وقع فامل على نصوص، وصور، وصفحات الويب من املمكن أن حتتوي . نترنت فيما بني الصفحات باستعمال متصفح إ الشبكة العاملية يسمح باالنتقال

الذي يقوم بإرسال الصفحات، ومحتوياتها بناء على الطلب ، Server جهاز اخلادم اإلنترنت ويقوم بتوفير هذه الصفحات في .. وأصوات، وفيديو/ Deep غير املرئي / العميق والويب Surface Web لويب السطحي ا : هناك نوعان من صفحات الويب و . من متصفح الويب Invisible Web 

معظمنـا ا خفيا من شبكة المعلومات العالمية العمالقة ال يـراه هناك جزء 1 وهو ضعف الجزء الظاهر الذي نستخدمه جميعا 550 بالتقريب يبلغ حجمه

) العميق أو المخفي أو المظلم ( ما يسمي بالويب

The Invisible (Deep, Hidden OR Dark) Web

3  The Invisible Web الويب غير املرئي : محاضرة بعنوان

 www.mostafa­gawdat.net مصطفى جودت صالح ؛ بإشراف الدكتور تكنولوجيا التعليم بوابة نسعد بزيارتكم في

2  ٬ احتاج المرء إلـى الحـصول علـى معلومـة معينـة تلزمـه فـي دراسـته أو عملـه إذا

جوجل فسيدخل أوال إلى موقع بحث مثل ٬ إجراء بحث على شبكة اإلنترنت وقرر عــودة ينتظــر أوماشــابهه ويكتــب كلمــة أو بــضع كلمــات تمثــل مــا يبحــث عنــه و

السيما إذا كـان يبحـث ٬ سفنه ولكن قد التجري الرياح بما تشتهي ٬ ا يريد النتائج بم النتـائج البعيـدة تمامـا عـن فقـد يفاجـأ بكـم كبيـر مـن ٬ عن معلومة اختـصاصية

! لماذا ال أجد ما أبحث عنه أين يكمن الخطأ؟ : وهنا يطرح التساؤل ٬ هدفه

: Surface Web الويب السطحية محرك ف ، " بفهرستها ات الويب التي تقوم محركات البحث فح مبعنى ص : الويب املفهرسة " كذلك بالويب الظاهرية أو بشكل أدق تسمى : ة وهي من ثالثة أجزاء متكامل يتكون البحث

 (crawler) أيضا يسمى الزاحف هذا البرنامج :(spider) أو برنامج العنكبوت (Robot) لبرنامج اآللي ا -

 . اآللي بأخذ نسخ منها البرنامج برنامج يقوم بفهرسة كل الوثائق التي قام :(Indexer) املفهرس - اجلانب املرئي من محرك البحث :(Interface) واجهة البحث -

: Deep Web Invisible / العميق / غير المرئي الويب ليشير إلى محتوى املعلومات الذي كان غير مرئي حملركات 1994 في عام Dr .Jill Ellsworth هو " الويب اخلفية " أول من ابتكر مصطلح كان

وخبراء البحث على الويب ومطوري كما اليوجد اتفاق بني الدراسات ، وليس هناك تعريف واضح قاموسي للويب اخلفية , البحث التقليدية سواء كان فردا ( عن شيء ما على الويب ويكمن التحدي األول أمام الباحث . وخريطة هذه الويب محركات البحث الرئيسية على حدود وحجم

 ! في فهم وإدراك أن الويب اخلفية توجد في املقام األول ) التخصص يبحث عن معلومة عامة أو مؤسسة كبيرة تبحث عن معلومة فائقة البحث التي تشكل البيانات عموما ال تصل إليها عناكب فإن املعلومات في قواعد Web visible على عكس الصفحات في الويب املرئية

 . وبالتالي ال تستطيع هذه احملركات أو لن تستطيع أبدا رؤيتها فهارس محركات البحث،

كلها مصطلحات تشير إلى صفحات الويب غير Web invisible ة أو الويب غير املرئي Deep Web الويب افية أو الويب العميقة إن وبالتالي لن يصل إليها مستخدم دة بشكل كلي في قاعدة بيانات محركات البحث محركات البحث أو غير املتواج املفهرسة من طرف

محركات البحث وباألخص عن املعلومة، إذ إن جل املبحرين في العالم االفتراضي ال يستعملون إال اإلنترنت إذا اتبع الطرق التقليدية في البحث ، كما أن ) السطحية ( ضعف حجم الويب الظاهرة 500 إلى 3 فية بني وتتراوح تقديرات حجم الويب اخل . Google محرك البحث الشهير

. اخلفية أفضل من الويب املفهرسة وميكن الوثوق بهذا النوع من الصفحات جودة املعلومات في الويب

: أنواع مواقع الويب غير المرئية

 : وهي أربع أنواع من تلك املواقع وهناك الظاهر من الشبكة املعلوماتية، اجلزء غير هو الويب العميق إذا

التقليدية، ولكن بإجراء يتكون من ملفات ميكن الوصول إليها من محركات البحث : opaque web الويب املبهم أو غير الشفاف . 1 . بسيط في طريقة البحث عن املعلومات

 . البحث من محركات صفحات ومواقع ميكن تكشيفها ولكن استبعدت بشكل مقصود : Private web الويب اخلاص . 2 . احملتوى مواقع متاحة فقط لألفراد الذين وافقوا على شروط معينة في مقابل مشاهدة : property web امللكية اخلاصة . 3. سنبينها الحقا ، أو تكشيف محتواها لها للوصول باب لعدم قدرة محركات البحث س وهناك عدة أ : الويب غير املرئي بالفعل . 4

4  The Invisible Web الويب غير املرئي : محاضرة بعنوان

 www.mostafa­gawdat.net مصطفى جودت صالح ؛ بإشراف الدكتور تكنولوجيا التعليم بوابة نسعد بزيارتكم في

3 مصطلح يشير إلى المـستودع الـضخم مـن المعلومـات والبيانـات ير المرئي غ الويب إن

والتـي , الموثوقة والمعتمدة والحديثة التي بمقدورك الوصول إليها من خـالل اإلنترنـت قواعـد البيانـات التملك محركات البحث العامة وأدلة الويب وصوال مباشـرا إليهـا مثـل

في قواعد البيانات عموما التي المعلومات ف Searchable Databases القابلة للبحث وبالتـالي ٬ التي تـشكل فهـارس محركـات البحـث التصل إليها عناكب البحث البرمجية

. تستطيع أبدا رؤيتها التستطيع هذه المحركات وربما لن

ما المشكلة إذا ؟ . لشبكة الويب العاملية تخدم مشاكل عدة نتيجة للكم الهائل املطرد في الزيادة ملس دى ا أصبحت تتولد ل املشكلة أنه

الدراسات ال تستطيع إال تقدير عدد املواقع اإللكترونية املنتشرة فبسبب التطور السريع واملذهل التي تتميز به الشبكة العنكبوتية، فإن جل . البحث، أي ما يسمى بالويب الظاهرية ي تتم فهرستها من قبل محركات االفتراضي، حيث تقوم بحساب فقط الصفحات الت في العالم

ي ، ن موقع إلكترو مليون 156 عدد املواقع تقريبا 2009 مارس إن عدد املواقع اإللكترونية في ارتفاع مستمر، حيث سجل خالل شهر التي 2006 هذا العدد أكبر من . إلكتروني مليون موقع 50 قدر بـ 2008 املواقع اإللكترونية اجلديدة للعام فإن عدد آخر بحث نتيجة وحسب

على فهرسة امل املواقع فحتى األن وصلت . الرتفاع عدد املواقع اإللكترونية وباخلصوص املدونات وكذلك . مليونا 30 بلغ فيها عدد املواقع اجلديدة ، وذلك في مليار صفحة 25.67 إلى - نسبة تقريبية - قل على األ ) ويندوز اليف - أسك – ياهو – جوجل ( في كال من محركات البحث ويب ال com . worldwidewebsize . www ) 2009 مارس 25 االربعاء (

ت، فكثير من املستخدمني في هذا الكم الهائل من املعلوما وبسبب هذا االنفجار املعلوماتي فإن مستخدم اإلنترنت بحاجة إلى آليات للبحث ل كما أن ج . البحث عن املعلومات في الشبكة العنكبوتية بسبب املتاهات والصعوبات التي تعترضهم في أثناء رحلة يتراجعون عن البحث

من 75 % الذي ال يغطي سوى Google محركات البحث، خصوصا احملرك الشهير ال يعرفون إال وسيلة وحيدة هي » املبحرون على الشبكة « . في األلف من الويب اخلفية 2 إلى 1 الظاهرية وال ميثل سوى الويب

هل محرك البحث هو أحسن وسيلة للوصول إلى املعلومات؟ : األن لكن السؤال الذي يطرح

5  The Invisible Web الويب غير املرئي : محاضرة بعنوان

 www.mostafa­gawdat.net مصطفى جودت صالح ؛ بإشراف الدكتور تكنولوجيا التعليم بوابة نسعد بزيارتكم في

الويب غير مرئيـة لمحركـات المشكلة قد تكمن في أن أجزاء واسعة من إن 4 بـل إنهـا حقـا أدوات ٬ وهـذا لـيس لكونهـا سـيئة الهندسـة ٬ العامـة البحـث لكنهــا فقــط ال تــستطيع رؤيــة ماليــين ٬ جــدا للباحــث علــى الويــب مفيــدة

.Invisible Web المتوفرة في الويب الخفية الموارد القيمة

؟ غير المرئي وجد الويب ي لماذا و ؟ التقليدية البحث طرق ا هذه الصفحات بعيدة عن متناول لماذ

 . تتجول من رابط آلخر داخل صفحات املوقع ا كما تفعل عندما تصل للصفحات اتلفة مبتابعة الروابط متام محركات البحث أن – 1

أو االختيار من بني عدة Query سواء بكتابة استعالمات البحث ولكن تخيل طريقة أخرى تزور فيها أحد املواقع لتبحث من خالل قاعدة بياناته شروط البحث أو االختيار وبالتالي فهي ال متتلك تستطيع كتابة أن عناكب محركات البحث غير قادرة على التفكير فهي بالتالي ال خيارات، ومبا

 . للمعلومات الثمينة التي حتتويها مثل هذه املواقع القدرة على الوصول

صفحات ديناميكية متغيرة بالضرورة وهذا يعني أن جهاز الكمبيوتر يقوم لصفحات التي تظهر بها نتائج وفقا لشرط البحث هي ا - 2 أجزاء من الثانية ، وبهذا املنطق فإن محتوى ات من عدة مصادر مختلفة ليضعها في الصفحة التي تظهر أمامك خالل املعلوم بسحب

 . الصفحات فيها بإنشائها وهو ما يعني استحالة قيام محرك البحث بفهرسة مثل هذه الصفحة يتغير في كل مرة تقوم

وكان ممكنا ومقبوال وضعها كلها بصيغة ، وثائق ومواقع قليلة اية الويب كانت هناك ففي بد ، طريقة تقدمي املعلومات ووضعها على الويب - 3 ولكن مع دخول تقنية قواعد . Lycos وكانت فهرستها سهلة من عناكب محركات البحث األولى مثل اليكوس , Static صفحات ثابتة

 أو PHP أو ASPH مثل بتقنيات ( لصفحات الويب Dynamic ناميكي الويب لتسمح بالتقدمي الدي خوادم لإلنترنت وتكيف Databases البياناتXML أو AJAX ( من قبل املواقع الكبيرة واجلهات املزودة واملنتجة لكميات ضخمة من البيانات ازداد االعتماد على قواعد البيانات وخصوصا . 

هي احتياج هذه الصفحة إلدخال اسم محركات البحث نع ظهور بعض الصفحات في مي ذي ال و " التقنية " األسباب سبب آخر وهو أحد – 4 الوقت نفسه عاجز ومبا أن محرك البحث ال يستطيع تنفيذ هذه الطلبات فإنه يكون في . معلومات املستخدم وكلمة السر قبل مشاهدة أي

ميكن أن تتواجد في أي مكان آخر على مثل هذا اإلجراء حتتوي على معلومات ال عن املرور من البوابة الرئيسية ومعظم املواقع التي تطلب . وهي املعلومات التي تتطلب اشتراكا خاصا للدخول إليها . الشبكة مثل الصحف القانونية والسجالت العامة ومعلومات األبحاث وغيرها

حيث :Format غة الصفحة صي إما : ألسباب عدة منها وذلك ) دون وجود عائق تقني قاهر ( هناك صفحات تختار محركات البحث إقصائها – 5PDF : مثل أما الصيغ واللغات األخرى HTML أن عناكب البحث تقرأ فقط الصفحات املكتوبة بلغة – Flash – Word – PowerPoint 

 PDF للبحث في النص الكامل مللفات جوجل استثناء وهو إمكانية مع وجود ( ، تشكل صعوبة حملرك البحث لفهرستها فقد التفهمها أو

. ى محاوالت مشابهة للصيغ األخر كما توجد ، األصلي PDF مع توفير رابط إلى ملف HTML لصيغة نصية ثم إلى صيغة لها أوال بتحوي

6  The Invisible Web الويب غير املرئي : محاضرة بعنوان

 www.mostafa­gawdat.net مصطفى جودت صالح ؛ بإشراف الدكتور تكنولوجيا التعليم بوابة نسعد بزيارتكم في

كانـت ٬ لتقدير حجم وأهمية الويب الخفية BrightPlanet في دراسة أجراها موقع 5 مـرة مـن 550 - 400 العامة في الويب الخفية أكبـر بــ أن حجم المعلومات : النتيجة

الويب المعروفة

: غير المرئي أهمية الويب ، أو ياهو جوجل معلومات عامة سيكون من األسهل واألجدى استخدام فإذا كنت تريد ، إن األمر هو مسألة اختيار الوسيلة املناسبة حلاجاتك

التنقيب عميقا عنها وهنا رمبا لن فسيتوجب عليك !) الورق مثال صناعة مشابك كتاريخ ( ية التخصص تبحث عن معلومة عال ولكن إذا كنت . اخلفية مبقدورها ذلك ولكن الويب بشكل يرضيك، تساعدك محركات البحث العامة

(   بحث جتر شباكها في الويب السطحي محركات ال ) 

 (حصاد الويب العميق والسطحي معا)

 اسـة أجراهـا موقـع ففـي در . كنـوزا التقـدر بـثمن لـك مي غير املرئـي فإن الويب ، كانت املعلومات هي القيمة األهم في عصرنا احلالي وإذاBrightPlanet مرة مـن 550 - 400 العامة في الويب اخلفية أكبر بـ أن حجم املعلومات : كانت النتيجة ، لتقدير حجم وأهمية الويب اخلفية

تيرابايـت فـي 19 البيانات مقارنة بـ تيرابايت من 7500 وأنها حتوي ، ) أن دراسات أخرى تعطي أرقاما أكثر حتفظا مع مالحظة ( الويب املعروفة أكثـر ومتيل قواعد بيانات املواقـع العميقـة لتكـون ، ) مخفية / غير مرئية ( موقع ويب عميقة 200000 تتوزع بني أكثر من ، الويب السطحية

، منها عامة ومجانية بـدون رسـوم أواشـتراك % 95 كما أن ، السطحية وعموما فإن محتواها أكثر قيمة بثالثة أضعاف من الويب ، تخصصا مـن مواقـع % 80 املؤرشفة والوثائق الداخلية للمواقع واملكتبات واملنشورات ) التي تشمل مجاالتها كل نواحي احلياة ( البيانات ل قواعد وتشك

في واضيع متعددة كما يظهر الباقية على م وتتوزع العشرة باملئة ، % 10 املعلومات املالية من حتويالت ومزادات وغيرها وتشكل ، الويب العميقة. التالي ل الشك

7  The Invisible Web الويب غير املرئي : محاضرة بعنوان

 www.mostafa­gawdat.net مصطفى جودت صالح ؛ بإشراف الدكتور تكنولوجيا التعليم بوابة نسعد بزيارتكم في

 ( خيـرة أدوات السـتخراج المعلومـات مـن الويـب العميقـة ظهرت فـي الـسنوات األ 6، مكتبات على النت ومواقع متخصصة موضوعية محركات البحث وأدلة (... مثل

الـذي org . archive . www أو الموقـع اإللكترونـي com . mooter . www محرك البحث . ب لصفحات الوي يقوم بأرشفة

) عميق ال محتويات الويب توزيع ( ! إذا ما الحل

: غير المرئي كيفية الوصول إلى الويب كما ميكن استعمال . احملركات املتخصصة في هذا النوع من الويب أو بعض املوضوعية ميكن الوصول إلى الويب العميقة عبر الدخول إلى األدلة

مثال قامت ( ة وباألخص محركات البحث األكادميي د البيانات العادية بتركيز البحث في املواقع اإللكترونية التي تعتمد قواع محركات البحث الباحث العلمي « أطلق عليها األخيرة بإضافة خدمة جديدة للبحث عن املقاالت األكادميية واألبحاث العلمية في السنوات google شركة

Google Scholar". ، موضوعية محركات البحث وأدلة ( لعميقة كما ظهرت في السنوات األخيرة أدوات الستخراج املعلومات من الويب ا ، يقوم الذي org . archive . www أو املوقع اإللكتروني com . mooter . www محرك البحث مثل ...) مكتبات على النت ومواقع متخصصة

. ب لصفحات الوي بأرشفة تعتمد على تتبع مسارات الوصالت واالنتقال من وصلة إلى أخرى على محتويات الشبكة تستخدم محركات البحث احلالية تقنية لكشف و

الويب « ما يخص غير مفيدة في الشبكة، لكنها وهي تقنية تنفع في حال كان البحث على سطح . للوصول إلى املعلومات املطلوبة الشبكة، . العميق

يقول أناند راجرامان، أحد . محركات البحث من التكنولوجيات يتشكل اليوم وقد توسع النطاق الذي ميكن أن تصل إليه جديدا غير أن جيال لكن ما نحاول غالبية احملركات تساعدك في العثور على إبرة في كومة قش، « الويب العميق ان للبحث في » كوسميكس « مؤسسي شركة

 . ة القش نفسها القيام به هو مساعدتك على استكشاف كوم ومن أجل استخراج هذه املعلومات من . املطلوبة برنامجا يتوافق في البحث مع قواعد بيانات حتتوي على املعلومات » كوسميكس " طورت قد و. معينة احملرك أن يحلل كلمات البحث ويتمكن من حتديد كيفية ربطها بقواعد بيانات ينبغي على » الويب العميق «

8  The Invisible Web الويب غير املرئي : محاضرة بعنوان

 www.mostafa­gawdat.net مصطفى جودت صالح ؛ بإشراف الدكتور تكنولوجيا التعليم بوابة نسعد بزيارتكم في

فـإن ٬ تمامـا عـن أعـين محركـات البحـث التقليديـة ا بعيـد غيـر المرئـي إن كـان الويـب 7، وذلك ممكن إليه الوصول بتوافر التصميم واالجتهـاد وباالسـتعانة بمحركـات بحـث

فلحـسن الحـظ ٬ متخصصة أو هجينة أو أدوات مساعدة متخصـصة فـي هـذا المجـال أشخاص عديدون بمن فيهم خبراء في مجال البحث على الويـب بوضـع مواقـع قام

من خالل توفيرهـا أدلـة ٬ جدا تشكل نقاط انطالق إلى فضاءات الويب الخفية مفيدة . مفصلة آلالف مواقع الويب الخفية

بتطوير برنامج للبحث في الويب العميق جوجل ويقوم . لواضعي برامج البحث وإذ يبدو األمر سهال في الظاهر إال أنه في احلقيقة يشكل حتديا DeepPeep في جامعة يوتا على مشروع طموح يدعى إحدى الباحثات السياق، تعمل وفي . عبر حتليل محتويات أي قاعدة بيانات يصادفها

. يهدف إلى فهرسة كل قاعدة بيانات على الشبكة

بتوافر التصميم واالجتهاد ، وذلك ممكن إليه الوصول فإن ، عن أعني محركات البحث التقليدية متاما ا بعيد غير املرئي إن كان الويب إذا، وحتى أشخاص عديدون مبن فيهم فلحسن احلظ قام ، متخصصة أو هجينة أو أدوات مساعدة متخصصة في هذا اال وباالستعانة مبحركات بحث

مفصلة من خالل توفيرها أدلة ، نقاط انطالق إلى فضاءات الويب اخلفية جدا تشكل خبراء في مجال البحث على الويب بوضع مواقع مفيدة ، آلالف مواقع الويب اخلفية الغنية مبختلف أصناف املعلومات

 الويب تدعى املغلفات للبحث في قواعد البيانات العميقة مباشرة من خالل أصناف من الباحثات على من خالل تقدميها إمكانيات قوية كذلكWrappers إلى فتوفر وصوال أقوى ، الرقمية متيل ألن تقدم باستخدام هياكل قواعدية أساسية تي تستفيد من حقيقة أن املعلومات وال

املبني على تقنية التغليف BrightPlanet من Deep Query Manager محتويات الويب اخلفية وكمثال برنامج مدير االستفسارات العميقة وياهو بكتابة جوجل كما ميكن البحث عن قواعد البيانات في ، غير مرئي مورد ويب 70000 خل بحث ألكثر من توفير واجهات ومدا والذي ميكنه

civil war database : مثل بعد كلمة البحث األساسية database كلمة

: أمثلة ونماذج للويب غير المرئي

الوقت واجلهد من أجل الوصول إلى املعلومات التي يحتويها حق بذل هو جزء ضخم وهام ويست الويب من افي كل األحوال فإن هذا اجلزء على تصميمها خصيصا كنقاط بداية لتلك بالطرق التقليدية املعروفة وهناك عدة مواقع تساعدك على حتقيق ذلك حيث مت والتي ال تتوافر

 : نذكر منها املعلومات

وقع خاص بالتحدث عن الويب الغير وهذا امل html . Web _ Inv / Invisible / rlackie / scholarly / edu . rider . library :// http : موقع - 1 ل تلك االدوات مما املرئي وهو يعطي العديد من األمثلة سواء حملركات البحث أو أدلة للبحث أو بوابات البحث الشاملة التي تتيح البحث داخ

 . ضغف النتائج التي قد يصل اليها الباحث اذا كان يبحث في ادوات بحث عادية 500 يتيح توفير قدر كبير من النتائج التي قد تصل الي

العميقة شعبية أو ما يطلق عليه البعض الشبكة وهو أحد أكثر مداخل شبكة اإلنترنت السرية org . lii . www :// http : موقع - 2 ألف مصدر مت تصنيفها يدويا على يد مجموعة من العاملني باملكتبات 11 وهذا املوقع عبارة عن فهرس قابل للبحث ألكثر من . وجماهيرية

تخبرك برسالة إلكترونية عند إضافة مجلة بريدية ويضم املوقع أيضا إمكانية االشتراك في . اخلبرات الكبيرة في تصنيف املصادر أصحاب. مصادر جديدة للدليل

9  The Invisible Web الويب غير املرئي : محاضرة بعنوان

 www.mostafa­gawdat.net مصطفى جودت صالح ؛ بإشراف الدكتور تكنولوجيا التعليم بوابة نسعد بزيارتكم في

8 H

org . lii :// http دليل اإلنترنت المكتبيين وصـول إلـي الويـب االعتمـاد عليهـا لل المواقع على اإلنترنت التـي تـستطيع أحد أهم يعد

، مميـزة مواقع علـى اإلنترنـت ل الف اآل ألكثر من عشرات يعرض نتائج بحث حيث . غير المرئي ، فرعي موضوع 300 حوالي موضوع رئيسي و 14 نظم في وهو م باألضافة إلى نـشرة أخبـار

، مميزة عن كل ما هو جديد سبوعية ا ، بلـد 85 مـن أكثـر أكثـر مـن مـشترك كـذلك لـديهم  . بشكل سهل ومبسط يع قيادتك أيضا إلى قواعد بيانات الويب المخفي يستط الموقع

مركزه الرئيسي إجنلترا ويديره وهو موقع . وهو واحد من أفضل األدلة املتوافرة حملتوى اإلنترنت اخلفية uk . ac . rdn . www :// http موقع - 3 وبالرغم من أن . املعتادة املباشر للمعلومات ذات القيمة العالية والتي ال تتوافر بالطرق التقليدية مجموعة من خبراء التعليم كطريقة للوصول

 . جزءا كبيرا منه مخصص لهذا الغرض فقط ط مواقع اإلنترنت اخلفية إال أن املوقع ال يضم فق

آالف قاعدة بيانات 10 فيتخذ شكل محركات البحث ليعمل داخل أكثر من COM . INVISIBLEWEB . WWW :// HTTP موقع – 4 املستخدمني على إجناز أبحاثهم واحلصول على أفضل نتائج تضمن املوقع شرحا تعليميا ملساعدة وي . إلحضار محتويات الشبكة اخلفية مختلفة

 . تصنيف مختلف 800 باإلضافة إلى ذلك فهو يتضمن دليل حتته أكثر من . في أقصر وقت ممكن

محرك البحث اصص للشبكة العميقة أو السرية والذي مت تصميمه COM . LANET COMPLETEP . WWW :// HTTP موقع - 5 ألف 100 ويضم املوقع فهارس بها أكثر من . اخلفية املتوافرة اليوم اخلبراء في هذا اال ، ويعتبر واحدا من أكمل وأثمن مداخل اإلنترنت على يد

األدلة التقليدية تظهر املواقع داخل األدلة والتصنيفات وعلى عكس . ميكن تصفحها وهناك أداة بحث تعمل داخل قواعد البيانات التي دليل . الذي يسهل عملية الوصول للمواقع مباشرة وهو األمر

قام ل حملتوى الشبكة السرية أو العميقة ، يعتبر مدخل مت تصنيفه يدويا للوصو NET . WEB ­ INVISIBLE . WWW :// HTTP موقع - 6 . تقسيما عاما ميكن أن تبدأ منها 18 املوقع بإنشائه اثنان من املؤلفني املتخصصني في موضوع الشبكة اخلفية ويضم

 com . mooter . www :// http بحث ال محرك - 7html . search / edu . princeton . cs . shapes :// http ة األبعاد طورته جامعة برينستون محرك البحث عن النماذج ثالثي - 8

10  The Invisible Web الويب غير املرئي : محاضرة بعنوان

 www.mostafa­gawdat.net مصطفى جودت صالح ؛ بإشراف الدكتور تكنولوجيا التعليم بوابة نسعد بزيارتكم في

« تكنولوجيات ستقود 9 » غير المرئي الويب . إلى استخدام البيانـات بطريقـة جديـدة خر آ نــات الــواردة مــن شــركات األدويــة، بــ لموقــع صــحي أن يقــارن البيا مــثال يمكــن التي يتوصل إليها الباحثون، أو يمكن لموقع إخباري محلي أن يـسمح االكتشافات

بالوصـــول إلـــى الـــسجالت العامـــة المخزنـــة فـــي قواعـــد البيانـــات لمـــستخدميه . الحكومية

: ة ــ خاتم

بحث أكثر كفاءة جتد مايبحثون عنه بشكل محركات إلى حتاج مستخدموا اإلنترنت ي ، تتكاثر مواقع ومحتويات الويب بسرعة هائلة بينما ، مستودع املعلومات املتاحة جها بواسطة التنقيب والغوص أعمق خالل املستقبلية سوف حتسن نوعية نتائ إن محركات البحث ، أسرع وأدق

واألن ، املستقبلية اهتماماتك على املدى الطويل لالستجابة بشكل أكثر ذكاء في أبحاثك وبتتبع سياق ، وبتصنيف وعرض النتائج بشكل أفضل . بني الويب اقي والويب السطحي ظهرت محوالت جادة ومؤثرة لتقلل تلك الفجوة 2.0 ومع ظهور محركات بحث الويب

الهندسية وإيجاد األشكال والتصاميم ، إيجاد الصور والفيديو ، الكلمات أو كما سوف توسع نطاق بحثها ليشمل باإلضافة للبحث عن النصوص أمام منه مبجرد دندنة مقطع امال التتذكره ك النشيد الذي على تسمية ذلك بل وحتى ستكون قادرة ، ثالثية األبعاد بناء على رسوماتك األولية

. املعلومات باستخدام واجهات غنية وسهلة تتيح توجها أفضل للمستخدم وسوف يبحر الباحثون في محيطات هائلة من . ميكروفون احلاسب

العظيم الله سبحان ::: وبحمده الله سبحان ى وكف هللا والحمد

د ـ عاطف محم . ر داد ــ إع

ى محمد فضل المول

Go To Library 2.0 www.go2library2.wordpress.com