본문이 늦게 나타나는 페이지
클라이언트 실행 뒤에야 본문이 채워지면 요약 엔진은 빈 껍데기만 읽을 수 있습니다. 중요한 글은 첫 HTML 응답에 포함되어야 합니다.
API 차단과 문서 허용의 분리
robots 규칙은 무조건 많이 허용하는 장치가 아니라 쓸모없는 경로를 줄이고 공개 문서를 더 분명히 보이게 하는 편집 도구입니다.
llms.txt의 좋은 문장
긴 선언보다 “이 사이트에서 먼저 읽을 문서는 무엇인가”에 답하는 짧은 문장이 모델에게 더 안정적인 단서가 됩니다.