크롤러 안내
aide 는 이용자의 Agent 가 공개 페이지 하나를 읽어 달라고 할 때만 그 주소에 접속합니다. 목록을 만들어 웹 전체를 돌아다니지 않고, 읽은 페이지의 링크를 따라가지 않습니다.
식별 문자열
| User-Agent | aide-bot/1.0 (+https://aide.io.kr/bot) |
|---|
무엇을 읽나요
- Agent 가 고른 주소 하나의 공개 HTML — 페이지 제목과 본문 글.
- Agent 가 원문을 달라고 한 공개 텍스트·XML 파일 하나(예:
/robots.txt·/sitemap.xml·/llms.txt). - 쿠키나 로그인 정보를 보내지 않아 로그인·결제 뒤의 화면에는 접근하지 않습니다. 비밀번호나 인증 코드 입력칸이 있는 화면은 읽지 않습니다.
읽은 내용은 그 Agent 작업에만 쓰고 aide 서버에 저장하지 않습니다. 제3자에게 팔거나 모델 학습 데이터로 넘기지 않습니다.
요청 규모
| 항목 | 상한 |
|---|---|
| 한 번에 읽는 페이지 수 | 1개 |
| 페이지 1개 응답 대기 | 15초 |
| 페이지 1개당 내려받는 크기 | 최대 2MB |
| 따라가는 리다이렉트 | 최대 5번 |
차단하는 방법
이 읽기는 robots.txt 를 확인하지 않습니다. 막으려면 서버에서 User-Agent 에 aide-bot 이 포함된 요청을 거부해 주세요.
문의
예상치 못한 요청을 발견하셨다면 접속 시각과 로그를 담아 info@aide.io.kr 로 알려 주세요. 확인 후 바로 조치합니다.