מחולל robots.txt

על הכלי הזה

בונה robots.txt מרשימת קבוצות כללים. הוסיפו קבוצה לכל user-agent (או השתמשו ב-* לכל הסורקים).