سئو- استفاده از همه شگردها برای بالابردن ترافیک سایت

در رابطه با بهینه سازی موتورهای جستجو کلا 3 مبحث زیر مطرح می شود
SEM یا Search engine marketing
 SEO یا Search engine optimization
SEW یا Search engine Watch 
در ادامه به تشریح هریک می پردازم
SEM یا ایجاد درآمد (از |به) موتورهای جستجو
در SEM مهندسی نرم افزار نقشی ندارد و شرایط بیرونی حاکم است بطور خلاصه sew ،seo و sem چیستند و تفاوت های هرکدام

مدت کوتاهی از گذاشتن مقاله دست نویس خودتان  نگذشته که متوجه می شوید بر روی اینترنت منتشر شده است
بدون حتی یک واو کم یا زیاد
و بدتر از همه بدون هیچ اشاره ای به منبع و ماخذ مطلب
این  بی انصافی در وب ایرانی بیشتر دیده میشود(نه به خاطر اینکه  ایرانیها اعتقادی به حفظ منافع دیگران ندارند! بلکه به خاطر عدم قانونی بودن حق مولف در ایران تا ظانجا که ما عضو سازمان جهانی حقوق مولفین هم نیستیم) خیرا گوگل امکانی برای اینکار گذاشته و آن شکایت از سایتهای متخلف
اما مشکل اینجاست که ما تا  بیاییم ثابت کنیم  مطلب از آن ماست کپی شده
اینجانب شخصا برای این مورد به این صورت عمل می کنم که
1- از یک مخزن استفاده می کنم
این مخزن بر روی آی پی های ورودی ایران بسته است (یعنی خروجی ندارد) و تنها کسانیکه از خارج از ایرا صفحه را باز کنند می توانند مطلب را بخوانند
و چون آدرس مخزن مخفی است و فقط به گوگل اعلام شده است عملا گوگل زودتر از دیگران مطلب را می بییند
2- استفاده از یک انتی ربات با فرض برملا شدن آدرس مخزن این مخزن به یک آنتی ربات مجهز است که با مشاهده ربات  ای پی آن را ثبت و بلوک می کند
این انتی ربات روش هایی برای شناسایی ربات دارد که به طور خلاصه من آن را تله ربات گیر  نام گذاشته ام به دلایل فنی نمی خواهم الگوریتم آن را برملا کنم
اما بر دوستانی که می خواهند یک انتی ربات بنویسند مطالب زیر را هدیه می کنم
کافیست یک نرمافزار تجزیه م تحلیل ورودی های انجام شده به مخزن (که در انظار عموم نیست) داشته باشیم
چگونه ربات ها را شناسایی  کنیم کلا دو نوع ربات داریم
ربات خوب  و ربات بد
رباتهای خوب دارای مشخصه های زیر هستند
agent و هویت آنها شناخته شده است

• همیشه فایل robots.txt را برای بررسی دستورات طلب می کنند
• پیروی کامل از دستورات robots.txt
• آنها درخواست برای دریافت فایلهای css هم می دهند
• درخواست عکس از سرور نمی کنند
• هیچ وقت referer به سرور نمی فرستند
• در بازه های زمانی کوتاه به سایت سر می زنند

اما در نقطه مقابل ما ربات ای بد را داریم که گاها برای جا زدن خود به جای ربات خوب  همه یا برخی از  موارد بالا را  رعایت می کنند اما به طور معمول مزاحمت های زیر را دارند

• در خواستهای زیاد در زمان کم دارند و باعث بالا رفتن ترافیک سایت می شوند
• اهمیتی به دستورات robots.txt  نمی دهند

ضمن اینکه برخی با استفاده از curl خود را به عنوان یک کاربر معمولی جا می زنند که این کار را برای فرار از تله های ربات انجام می دهند
اما در پروژه در دست گروه g724  تله تله ساخته شده غیر قابل شناسایی توسط چنین ربات هایی است
که در آینده از این ربات ها بیشتر می نویسیم