الخميس، 26 غشت 2010

برمجة محركات البحث...بين الدقة و النتائج الفضفاضة

السلام عليكم و رحمة الله تعالى و بركاته
لعل أهم عنصر في الموقع هو محرك البحث فلا شيء سيكون مفيدا إن لم يتح لك إمكانية البحث عن الشيء المفقود و هذا ما أعطى لمحرك البحث المقام الذي تحتله الآن فهو أهم شيء في قابلية الوصول . إذن فعند برمجة أي تطبيق فهذه الوظيفة يجب إعطاؤها حقها ، لكن المشكل هو صعوبة تحديد المعايير التي يجب اتباعها فكما أقول دائما القياسية هي منقذة التطوير ، و ما يحزنك هو تطبيقات كبيرة و بمحرك بحث بسيط مبني على الأمر LIKE في  SQL و لا يعرف مقياسا للأولويات لهذا أريد أن أشارككم المعايير التي توصلت لها من خلال محاولاتي لبرمجة محرك بحث داخلي قوي و كنت سأطرحه لكنه بصراحة غير مقروء و غير مكتمل تماما لحد الآن و بمجرد الإنتهاء منه سأطرحه فأنا سأبدأ في تطويره لاستخدامه في Framework أطوره .
أول معيار هو التصميم UI : التصميم يجب أن يكون بسيطا و واضحا و يستحب أن يكون نموذج البحث في الأعلى أو في الشريط الجانبي و أن تستدل عليه بكلمات واضحة و أيقونة العدسة  أو زر و غيرها من السبل المهم هو الإيضاح بأن هذا النموذج صالح للبحث و تجنب أن تحذف الزر و تجعل الزائر يضغط Enter فليس كل الناس على دراية بذلك و هناك متصفحات لا تدعمها، كذلك التعليمات البرمجية مثل OR و AND التي صرنا نجدها في نماذج البحث فهي غير عملية إلا للمستخدمين المتقدمين لذلك راعي البساطة .
ثاني شيء النتائج السريعة : يفضل أن تكون هناك انسيابية و متابعة للمستخدم أثناء إدخال كلمات البحث و إعطاءه اقتراحات متواصلة تتجاوب مع النتائج الأفضل و هي حركة يمكن القيام بها ببساطة مع Ajax و يفضل JQuery بالخصوص .
ثالثا التجاوب مع اللغات : لعلكم لاحظتم كيف يقوم Youtube بعكس اتجاه الكتابة كلما انتقلت بين العربية و الإنجليزية و هذا درس جميل من عبد الرحمان العتيبة حول تحويل اتجاه النص التلقائي .
الآن نمر للجزء الأهم و هو معايير دقة النتائج ، تختلف هذه المعايير من تطبيق لآخر لكن المبدأ مشترك تحديد سلم الأولويات و قوة النتيجة هذان هما عصب محرك البحث الجيد . لنأخذ Google على سبيل المثال - رغم أننا اصغر من أن نفهم خواريزميات هذا العملاق الغاية في الضخامة و القوة و السرية - لكن من خلال استعمالنا اليومي و SEO نستطيع أن نفوز ببعض النقاط :
النتائج لها سلم أولوية شبيه بالتالي :
  1. Page Rank 
  2. عنوان الصفحة
  3. عنوان النتيجة
  4. المحتوى
هذه نبذة بسيطة و تتم عملية قياس القوة كالتالي :
  1. التكرار
  2. احترام تتالي الكلمات المدخلة و السياق
  3. Meta tags 
  4. Backlinks 
طبعا هذا ليس مأخوذا من أي مصدر  فقط هذا ما أظنه و ما لاحظته  لكن هذا ليس مهما المهم هو أن تفهم ما هو سلم الأولويات و ما هو قياس القوة . الآن نعود لموضوعنا الرئيسي . الآن كيف تقيس الأولوية ؟ حسنا لديك مثلا تطبيق نعتبرها مدونة ما هو أهم شيء ... نعم العنوان فالعنوان بطبعه يجسد المقال و يعطي فكرة مسبقة يعني إذا حصل تطابق مع العنوان فذلك يؤخذ بعين الإعتبار . في المركز الثاني نجد المحتوى فبالطبع هو مهم جدا فهو ما نبحث عنه إذا حصل تطابق أو أكثر في المحتوى فهذا جيد و من بعد سنبحث في الوسوم و إلى آخره فطبعا هذا مرتبط بك أنت و طبيعة التطبيق .
الآن يجب قياس القوة - يمكن في هذا الجزء استعمال النقط لنتائج أفضل - نبقى في إطار تطبيق مدونة سنعتمد التكرار و احترام النسق كيف ذلك مثلا أدخل المستخدم محركات البحث سنقوم باتباع سلم الأولويات الذي وضعناه . أولا العنوان نبحث عن السياق بأكمله إذا وجد نعطي النتيجة 1000 نقطة مثلا على كل تطابق فقد يكون العنوان سلسلة محركات البحث - معلومات عن محركات البحث فهذا أفضل من مقال بعنوان برمجة محركات البحث...بين الدقة و النتائج الفضفاضة مفهوم ؟ . نمر الآن للفرز من الدرجة الأولى نقسم النص إلى كلمات و نبحث مجددا في العنوان فلا زلنا مع العنوان نبحث عن محركات ثم عن البحث و نعطي لكل نتيجة 950 نقطة عن كل تطابق . ثم نمر للفرز من درجات أخرى مثلا تقسيم كل كلمة إلى جزئين ثم ثلاثة إلى آخره و إذا أردنا يمكننا زيادة الدقة بتقسيم الكلمة إلى أحرف و العثور على الكلمات التي تحتوي على أكبر عدد من الأحرف و دا ئما إعطاء النقط حسب الدقة  فالبحث عن محركات البحث سيعطي أيضا أبحاث و محراك و باحث و بحوث و حركات .... و قول هذا أسهل من فعله.
نستمر في هذه العملية حتى نمر على سلم أولوياتنا بأكمله طبعا مع تخفيض النقط تبعا لكل عنصر لذلك أخذت 1000 نقطة كبداية و قد تنتهي ب 5 نقط أو أقل. و في النهاية، برمجيا ستكون لديك مصفوفة تحتوي على ID النتيجة و النقاط و سيتم إخراج النتائج بعملية استخراج من قاعدة البيانات بكل بساطة .
خطوات إضافية : طبعا لا حدود للتطوير و يمكنك إضافة مميزات جديدة سواء في عملية البحث أو عملية العرض كالصفحات و جعل الكلمات المفتاحية بخط عريض أو عدم إظهار النتائج ابتداءا من 100 نقطة مثلا و إظهار رابط نتائج مهملة لإظهار البقية و يمكنك أن تبدع كما شئت و تبرمج هذا المبدأ بأي لغة برمجة تريدها .

هناك تعليقان (2):

  1. موضوع جميل بافكار مثيرة

    ردحذف
  2. شكرا لاطلاعك على الموضوع و أنوي إن وجدت وقتا أن أضع موضوعا برمجيا عن محركات البحث

    ردحذف