خطوات إشهار المواقع و الأرشفة في محركات البحث ( بالتفصيل الممل ) - الجزء الأول

السلام عليكم و رحمة الله

سوف نتناول في هذا الموضوع مايلي
1-robots.txt: فهرسة أو بدون فهرسة هذا هو السؤال؟
2- كيف استفيد من ملف htaccess
3-أسرار ترتيب المواقع في ألكسا
4-كيف تحسن ترتيبك في Google؟
5-مصطلحات في تتبع الزوار
6-وسائل نشر موقعك على الشبكة
7- احصائيات جوجل لموقعك
8- خدمة ال site map وكيفية تفعيلها
9- كيفية تحسين البيج رنك الخاص بموقعك
ارجو من اخواني التركيز لكي يعم الفائده علي الجميع ولا يحتاج احد الي إشــهار موقعه بطرق غير مشرووعه

1-robots.txt: فهرسة أو بدون فهرسة هذا هو السؤال؟

بسم الله نبدء بأول النقاط
1-robots.txt: فهرسة أو بدون فهرسة هذا هو السؤال؟
مقدمه
مع تقدم خدمات الأرشفة index و البحث أصبح جوجل أكثر دقة و قدرة على أرشفة و فهرسة الصفحات و بالتالي أصبح قادرا على الوصول إلى معلومات مهمة قد لا ترده الوصول إليها مثل أرقام الهواتف و أرقام بطاقات الائتمان. و بالتالي تقدم للها كرز المعلومات على طبق من ذهب . و بهذه الطريقة هي لا تحتاج إلى مخترق خبير فمن الممكن أن يصل إليها حتى الشخص العادي المبتدأ بواسطة جوجل فقط .

بالرغم من أن معظم حالات سرقات بطاقات الائتمان تتم عن طريقة سرقة قواعد البيانات إلا أننا لا نستطيع إغفال خطورة الوضع .
هل يجب أن نلوم جوجل؟

جوجل أو ما يسمى Google spider يقوم بعمله فقط . جوجل لا يفهرس الصفحات عنوه لكنه يفهرس صفحات الإنترنت ووضعك للمعلومات الحساسة و المهمة على شبكة الإنترنت بدون حماية خطأك وحدك .و حماية هذه المعلومات مسئوليتك .

والان
|استخدم ملفات robots.txt

هذه بالتأكيد أحد أهم الأدوات و هو ملف صغير نصي ترفعه إلى مستضيفك يحوي على الملفات و المجلدات التي يستطيع أو لا يستطيع إلى محرك بحث و ليس جوجل فقط فهرستها .في الخطوة التالية سنستعرض محتويات الملف .
حذف ملفاتك المهمة من جوجل

لو وقع الفأس في الرأس و فهرس جوجل صفحات مهمة و حساسة في موقعك يمكنك إزالتها عن طريق عدد من الخطوات مذكورة هنا [ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]

سأحاول ترجمتها على عجالة ( أو استخلاص المفيد منها )
ملاحظة

لو كنت تريد حذف صفحة من جوجل فورا و لا تريد انتظار عملية الأرشفة القادمة زر الوصلة التالية و اطلب حذف الأرشيف
automatic URL removal system ([ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]ا)
|حذف موقعك بالكامل من جوجل أو محركات البحث الأخر
لمنع كل محركات البحث من أرشفة موقعك ضع الكود التالي في ملف robots.txt
User-agent: *
Disallow: /

لمنع جوجل فقط من أرشفة صفحات موقعك .

User-agent: Googlebot
Disallow: /

كل بورت port يحتاج لملف robots.txt خاص له مثلا http تحتاج لملف و https يحتاج لملف و ftp يحتاج ملف و هكذا .
|إزالة صفحة واحدة من جوجل .

هناك طريقتان :
أولا : ملف robots.txt

بعد جملة user-agent يمكنك ان تحدد محرك بحث بعينه مثلا googlebot أو يمكنك أن تضع * لمنع جميع محركات البحث .

الأمثلة التالية على تمنع جميع محركات البحث لكن يمكنك استبدال googlebot بـــ * لمنع جميع محركات البحث .

لمنع فهرسة مجلد

User-agent: Googlebot
Disallow: /lemurs

لمنع فهرسة نوع معين من الملفات مثلا الصور من نوع gif
User-agent: Googlebot
Disallow: /*.gif$

لمنع فهرسة الصفحات الديناميكية مثل index.php?task=anything
User-agent: Googlebot
Disallow: /*?

ثانيا : الميتاتاج met tag

لمنع فهرسة صفحة معينه نضع التالي في منطقة الرأس بين و
>

لمنع جوجل فقط من فهرسة هذه الصفحة نضع
>

للسماح بفهرسة الصفحة و لكن عدم فهرسة الصفحات المربوطة بها
>
|حذف الوصف snippets

عند إظهار جوجل للنتائج فإنها تظهر وصف snippets تحت كل موقع لحذفه

|حذف النسخ المخزنة cached pages

جوجل تحتفظ بنسخة من صفحات موقعك في قواعدها لمنع ذلك

|حذف صورة من محرك بحث جوجل للصور .

جميع الأمر تطبق عليها لكن اسم الروبوت هنا Googlebot-Image و ليس googlebot

لحذف صورة معينة أضف في ملف robots.txt
User-agent: Googlebot-Image
Disallow: /images/salafsoft.jpg

لمنعه من فهرسة جميع صور موقعك
User-agent: Googlebot-Image
Disallow: /

ما مدى درجة الأمان لهذه الملفات ؟

ملف robots.txt ليس وسيلة حماية يمكن الاعتماد عليها لحماية موقعك . في الحقيقة هي أقرب لوحة ممنوع الدخول على الباب و ليست قفلا عليها.لذلك عليك تأمين موقعك جيدا و حماية مجلداتك بكلمات مرور أو منع الدخول بواسطة ملفات htaccess

ثانيا : كيف استفيد من ملف .htaccess
مقدمة
سنتعرف في هذا الموضوع على ما يمكننا الوصول و كيف يمكن تطوير موقعنا بواسطة ملف htaccess . و بالرغم من كونه ملف صغير فعدة أسطر فيه يمكن أن تطور موقعك بشكل كبير.

هل يدعمه مستضيف موقعي؟
لا يمكن الإجابة على هذا السؤال . لكن يمكنك تجربة إنشاء ملف و إرساله إلى مستضيفك و تأكد إن كان يعمل أولا أو أسأل مستضيف موقعك .

إنشاء الملف
افتح محرر النصوص المفضل لديك مثلا برنامج notepad المرفق مع الويندوز (programs>accessories>notepad) و احفظ الملف باسم

إنشاء الملف
افتح محرر النصوص المفضل لديك مثلا برنامج notepad المرفق مع الويندوز (programs>accessories>notepad) و احفظ الملف باسمكود PHP:
.htaccess

ليس هناك اسم للملف فقط امتداد مكون من 8 أحرف ولذلك قد لا تقبل بعض الأنظمة حفظ الملف لذلك يمكنك عند الحفظ وضع علامتي تنصيص حول الملف

ملاحظة أخيرة

هذا الملف لا يمكن أن يضرك كل ما هناك قد تكون صفحات خطأ 500 و بمجرد حذف الملف يعود موقعك إلى ما كان عليه لكن لو كنت تستعمل امتدادات فرونت بيج Microsoft FrontPage Extensions فهو بالفعل يستخدم هذا الملف . كما قد يكون مستضيف موقعك يستخدمه و عدلت انت عليه من خلال cpanel مثلا .. لو وجد هذا الملف في سيرفرك قم بتحميله إلى جهازك و التعديل عليه و إعادة تحميله .

لو جربت الطريقة السابقة و لم تعمل.. أعط أي اسم للملف و ارفعه لمستضيفك و بعد ذلك غير اسمه .

أولا : صفحات خطأ خاصة بموقعك
نأتي اولا لشرح هذه النقطه
ملفات الخطأ
افتح النوت باد Notepad المرفق بالويندوز . انشأ ملف جديد و احفظه بأسم

كود PHP:
.htaccess

نشأ صفحات الخطأ

[ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]انشأ صفحات الخطأ التي تريد مثلا صفحة الخطأ رقم 404 و الذي يعني ان الصفحة غير موجودة سننشأ ملف و نسميه 404error.htm و هكذا و نكتب الكود التالي في الملف

كود PHP:
ErrorDocument 403 http://yoursite/403error.htm
ErrorDocument 404 http://yoursite/404error.htm

نحمل الملف مع الصفحات التي انشأناها إلى السيرفر . و انتهينا ..[ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذه الصورة] هناك عدد كبير من الاخطاء يمكنك التعرف عليها هنا :

400, bad request : المستضيف غير مهيئ أو قادر على الوصول لهذا العنوان .
403, access forbidden : دخول غير مسموح أو منطقة محظورة .
404, document not found : الصفحةالتي طلبتها غير موجودة في الموقع ( الأكثر شيوعا)
500, internal server error : خلل في السيرفر ناتج عن ملف أو برنامج

ثانيا : وقف صفحة الفهرس

لو أردت وقف استعراض محتويات مجلد معين بدل من إنشاء فهرس وهمي في كل مجلد تملكه فقط ضع الأمر

كود PHP:
Options -Indexes

و أي مجلد لا يحتوي على فهرس يحاول أي شخص دخوله سيظهر له دخول غير مسموح ..
ثالثا : منع أصحاب رقم الأي بي المعين من الدخول

أحيانا قد تريد منع أصحاب رقم أي بي معين من الدخول لموقعك أو السماح فقط لمستخدمي مزود خدمة معين من الدخول لموقعك .بالطبع تحتاج لمعرفة رقم الابي بي .
للمنع

كود PHP:
deny from 000.000.000.000

للسماح

كود PHP:
allow from 000.000.000.000

رابعا : منع الجميع من الدخول لمجلد معين .

deny from all

هذا لا يمسح بالدخول للمجلد لكن يسمح السكريبت او للبرنامج من استدعاء الملفات .

خامسا: إعادة التوجيه
هي طريقة رائعة عند طلب الزائر لصفحة معينه يتم تحويله إلى صفحة أخرى مفيد جدا إذا أعدت تنظيم موقعك مثلا . كما يمكن تحويل الزائر من موقعك إلى موقع آخر أو عنوان آخر .

كود PHP:
Redirect /oldfolder/test.html http://salafsoft.com/newfile.htm

الصفحة التي سيطلبها الزائر هي olderfolder/test.html إلى العنوان التالي newfile.htm

كما يمكنك التحويل لمجلد كامل مثلا في التصميم القديم لموقعنا كان هناك مجلد اسمهswf يحتوي على دروس فلاشية وبعد إعادة تصميم موقعنا اصبح العنوان [ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]

لكن هناك الكثير من المواقع أو الموضوعات الخارجية التي مازالت تشير للمجلد القديم و لا يمكننا حصر جميع أسماء الملفات القديمة فيمكننا تحويل المجلد كاملا إلى العنوان الجديد

كود PHP:
Redirect /swf http://salafsoft.com/vb/4

3- أسرار ترتيب المواقع في ألكسا

[ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذه الصورة]

[ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]أحد أشهر المواقع التابعة [ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط] و التي تدعي أنها تصنف جميع المواقع العالمية منذ إنشائها عام 1996 حسب شهرتها أو عدد زوارها و إعطاء ترتيب لموقعك. يتراوح ترتيب ألكسا من 1 إلى 5 مليون .في الغالب من 4 إلى 5 مليون تكون للمواقع الجديدة أو المواقع التي لا تحصل على زوار. إذا كان ترتيبك 100 ألف أو أقل فأنت تحصل على نسبة جيدة من الزوار. لو كان ترتيب موقعك 1 (مجرد حلم) فأنت تحصل على أكثر عدد من الزوار على الإنترنت. و بالطبع يجب أن تنتظر على الأقل 3 أشهر لتحصل على ترتيب أكثر دقة لأن ألكسا تحتسب الترتيب وفق القيمة المتوسطة ل3 أشهر.

كيف تجمع [ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط] المعلومات ..

[ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط] تضيفه في متصفحك و هو مجاني و بالتالي عن طريق هذا الشريط يتم احتساب عدد زوار كل موقع لاحظ لا يتم احتساب كل الزوار فقط الزوار الذين يملكون شريط أدوات الكسا . ثم تقوم ألكسا بضرب هذه القيمة بقيمة معينة لتقدير عدد الزوار الكلي .. تقدير فقط .. فمثلا لو افترضنا أن النسبة التقديرية هي 10 فلو زار 100 شخص يملكون شريط الأدوات موقعك فألكسا ستحتسبهم 1000 و هكذا ( القيمة 10 هي قيمة افتراضية و نحن لا نعرف ما هي القيمة التي تستخدمها ألكسا )
و بالتالي لو كان معظم زوار موقعك يملكون شريط الأدوات و العدد الأقل لا يملكه فلن يتم وضع هذا في الحسبان و ستكون النتيجة مبالغ فيها و سيتم احتساب عدد زوار أكبر من الحقيقي.و كما هو متعارف عليه فأغلب من يقوم بتحميل شريط أدوات ألكسا هم من أصحاب المواقع فالشريط يظهر لك ترتيب كل موقع بمجرد زيارته و بالتالي المواقع التي تجذب أصحاب المواقع ستحصل على ترتيب أفضل من غيرها .

تطوير

ألكسا تحاول تطوير عملية ترتيب المواقع و جعلها أكثر دقة عن طريق احتساب زيارات أصحاب [ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]لكن الترتيب مازال غير دقيق.

هل ترتيب ألكسا بلا فائدة.

لا يمكن أن نقول أن ترتيب ألكسا عديم الفائدة .. في الحقيقة يبقى أحد الطرق لتقييم شهرة المواقع و لكن لا يمكن الاعتماد عليه بشكل مطلق . فلو أدعى موقع انه يحصل على مثلا مليون زائر يوميا و ترتبه في الكسا منخفض يمكنك أن تعرف آته يبالغ في عدد زواره . و يحب أن لا يصبح ترتيب الموقع في ألكسا هاجس كما نرى اليوم بين الكثير من أصحاب المواقع

[ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]

كيف تصنف محركات Google المواقع ؟

يتم تصنيف موقعك على حسب عدد و نوعية الوصلات التي تصل لموقعك مثلا لو كان هناك 100 وصلة على الشبكة تشير لموقعك فيهذ فستكون أعلى من موقع لديه 20 وصلة تصل له على الأنترنت
و بالطبع يتختلف نوعية الوصلات لو كانت الوصلات من مواقع مهمة أو مشهورة هي أيضا كان ترتيبك أفضل
و فكرة التصنيف هذه منشورة من قبل جوجل في [ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]

تحسين ترتيب موقعك ؟

1- أحصل على وصلات

حاول أن تزيد عدد الصفحات التي تشير لموقعك مثلا لو حاول إضافته في عدد من أدلة البحث أو عدد من المواقع التي تخصص وصلات للمواقع أو اعقد صداقة مع عدد من المواقع لتضيف موقعك

2- عنوان الصفحة

تأكد دائما من وضع عنوان لموقعك . افصد العنوان بين و و هي و التي تظهر في الشريط الأزرق أعلى المتصفح بعض برامج التحرير مثل الفرونت بيج تضع عنوان تلقائيا شئ مثل New Page حاول وضع عناوين لكل الصفحات و إن لا يكون كلها يشير لإسم موقعك بل إلى موضوع الصفحة أيضا .

3- كثافة كلمات البحث

حاول أو تزيد من كلمات البحث مثلا لو كان موقعك موقع يتكلم عن التصميم ما قد تتوقع أن أي شخص يريد أن يصل لموقعك سيكتب كلمة مثل كلمة تصميم .. و لكن من الممكن أن تتكلم عن تصميم الصفحات لكن لن تذكر كلمة تصميم في صفحات موقعك بالشكل الكافي هذا يؤثر على ترتيب موقعك بالطبع في سياق الموضوع و ليس بشكل عشوائي . مثال آخر للتوضيح أو كان موقعك يتحدث عن الإسلام .. و ربما يحتوي على عدد من المقالات التي تتحدث عن الدين الإسلامي لكنك ربما ستتكلم عن الإسلام بصيغة (هذا الدين و و في هذا الدين و يحمل هذا الدين) بدل استخدام كلمة الإسلام و بالتالي أنت تقلل من تكرار هذه الكلمة وفي حال بحث عنها الزائر في جوجل لن يكون موقعك في المواقع العليا أو المتقدمة.

4- الكلمات المفتاحية في الوصلات

وفقا لمحرك البحث جوجل فإن الوصلات التي تحمل كلمات مفتاحية ترفع من ترتيب موقعك مثلا يفضل أن تضع وصلة تحمل العنوان [ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]بدل من استخدام عبارة اضغط هنا فقط.

أفكار أخرى

1- جوجل و الصفحات الديناميكية

مثلا انظر في شريط العنوان في الأعلى ستجد عنوان مثل [ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط] و هذه صفحات ديناميكية أي ان الصفحات فعليا غير موجودة على المستضيف ولكن يتم إنشاءها اتوماتيكيا عند طلبها وهناك محركات بحث لا تستطيع فهرسة هذه المواقع أما جوجل فيستطيع
.
2- النص البديل للصورة

لو كنت تترك صور موقعك من غير وضع نص لها فهذا وقت مناسب لتغير رأيك حاول أن تضيف نص لكل صورة في ALT .

3- الميتاتاج يتم تجاهلها

قبل سنوات كانت الطريقة الوحيدة التي يتم فهرسة المواقع فيها هي الميتا تاج و لكن مفاجئه جوجل لا يحتاج كلمات البحث في الميتاتاج لذلك فلا تحاول أن تزيدها أكثر من اللاز

5-مصطلحات في تتبع الزوار

هل تقدم لك شركة الاستضافة الخاصة بك خدمة تتبع لزوار موقعك او انك اشتركت في احد تلك المتتبعات و التي تحدد لك عدد زوار موقعك و مكانهم و انظمتهم الخ .. في تقارير هذه المتتبعات هناك عدد من المصطلحات المستخدمه .. و التي تحتمل اكثر من معنى فمثلا او زار شخص موقعك 3 مرات و زار 20 صفحة فيتم حساب واحد زائر منفرد unique visitor .

Hits

كل ما يحمله او يزوره الزائر في موقعك مثلا لو زار الشخص صفحة واحده بها 5 رسومات فان مجموع الhits يساوي 6. اي الصفحة + ال6 صور.
Page Views

كل صفحة يزورها الزائر لو زار شخص صفحة في موقعك تحتوي على 10 صور. فان المجموع سيكون واحد فقط .
Unique Urls

كل مرة شخص يزور موقعك خلال مدة 24 ساعة . مثلا لو زار شخص صفحة بها 4 صور سيتم حساب 5.
Unique Sites أو Unique visitors

كل زائر على حده .. فمثلا لو زار شخص موقعك خلال شهر واحد 100 مرة سيتم حساب 1 فقط .. كدلالة على هذا الشخص و ليس عدد مرات زيارته

» 4 خطوات تضمن صداقتك بالدرجة الاولى مع محركات البحث
» ضيف موقعك في محركات البحث
» عوامل تحسين محركات البحث
» أقوى محركات البحث وأفضلها لعام 2008
» لأرشفة منتداك بأحسن طريقة في محركات البحث