반응형 코딩강좌/코딩상식13 초보 개발자가 꼭 알아야 할 검색 엔진 노출 원리 - robots.txt 안녕하세요. 대디동동 동코딩동 시간입니다. 이번 시간에는 초보(주니어) 웹 개발자님이 꼭 알아야 할 노하우 중에서 검색 원리를 이해할 수 있는 robots.txt에 대해서 설명해 드리겠습니다. 우선 검색 엔진에 대한 이해가 필요한데, 내용이 복잡해질 수 있으니 자세한 설명은 별도의 게시물을 통해서 알려드리도록 하겠습니다. 이번 시간에서는 간단하게 구글(google.com), 네이버(naver.com), 다음(daum.net), 빙(bing.com) 등의 사이트를 통해서 궁금해 하는 내용을 넣으면 해당 내용에 관련한 전 세계 수많은 문서를 쉽게 볼 수 있도록 만든 프로그램이라고 보시면 됩니다. 간단 용어 설명 크롤링(crawling), 스크레이핑(scraping) 웹 페이지를 가져와서 데이터를 추출하는 행.. 2023. 9. 6. 이전 1 2 3 다음 반응형
