איך ⁦SearchedBy⁩ קורא אתרים

מתי אנחנו קוראים אתר

רק כשמישהו מבקש באתר הזה סריקה חינמית של האתר ומאשר את האימייל שלו עם קוד. התנאים מחייבים שזה יהיה האתר שלו, אתר שהוא מורשה לנתח, או מידע ציבורי למטרה לגיטימית.

מה אנחנו מבקשים ובאיזה קצב

כמה עמודים ציבוריים (עד 6), את קובץ robots.txt ואת מפות האתר, בקצב של בקשה אחת בשנייה. בלי התחברות, בלי טפסים, שום דבר פרטי. חלק מהעמודים נפתחים בדפדפן אמיתי, שטוען את הסקריפטים שלהם כמו כל ביקור.

באיזו זהות

אנחנו קוראים כמו דפדפן. כדי לבדוק אם הבוטים של מנועי חיפוש ושל בינה מלאכותית מורשים להיכנס, אנחנו מבקשים עד 3 מהעמודים האלה שוב עם הזהות של כל בוט (גוגל, Bing, ‏ChatGPT, ‏Perplexity ו‑Claude, בין השאר). בסריקה הזאת קובץ robots.txt של האתר הוא לא כלל בשבילנו: אנחנו קוראים אותו ומדווחים מה כתוב בו.

אם אתם לא רוצים שננתח את האתר שלכם

כתבו לכתובת [email protected] מכתובת בדומיין שלכם, או בדרך אחרת שמראה שהאתר שלכם. נוסיף אותו לרשימת ההחרגה, והטופס יפסיק לקבל אותו. נענה תוך 7 ימים.

אם אתם מוזכרים בדוח

תשובות של מנועי בינה מלאכותית יכולות להזכיר חברות, ולפעמים גם אנשים. אם אתם מוזכרים בדוח ורוצים לתקן או להסיר אזכור, כתבו לכתובת [email protected] עם הקישור או הדומיין. נענה תוך 7 ימים.