url 이 그냥 posts/1, posts/2, posts/3 으로 되어 있으면 크롤러가 1,2,3,4,5... 넣어서 돌리는데
url 이 posts/L12Qsd, posts/dei24A 이런 식으로 되어 있으면 그걸 못해서 그런 것 같네요
url 이 그냥 posts/1, posts/2, posts/3 으로 되어 있으면 크롤러가 1,2,3,4,5... 넣어서 돌리는데
url 이 posts/L12Qsd, posts/dei24A 이런 식으로 되어 있으면 그걸 못해서 그런 것 같네요
어떻게 사용하면 크롤링을 막을 수 있는건지 설명을 좀 더 해주실수 있나요?