سلام.اگر دقت کرده باشيد زير خط: User-agent: Googlebot صفحاتي disallow شده است. به اين معني که گوگل بات (نام ربات جستجوگر گوگل است)تو به اين صفحات اجازه دسترسي نداري مثلا براي Disallow: /mbox* يعني به تمام صفحاتي که با mbox شروع شوند و.....توجه کنيد که گوگل اجازه دسترسي بمنظور انتشار را نداره اما شما خودتان بي مشکل مي توانيد آن صفحات راببينيد