Screaming Frog 및 Google Sheets를 사용한 빠른 SEO 크롤링 및 감사
게시 됨: 2022-04-12웹사이트를 빠르게 크롤링해야 합니까? 다음 작업을 결정할 수 있도록 통찰력을 빠르게 시각화하고 싶으십니까? 이 비디오에서는 Screaming Frog SEO Spider를 사용하여 사이트를 빠르고 높은 수준으로 크롤링하는 방법을 안내해 드리겠습니다. 그런 다음 Google 스프레드시트를 사용하여 몇 가지 주요 데이터 요소를 시각화합니다.
자원:
- 비명 개구리 SEO 스파이더
- 구글 시트 템플릿
동영상 대본:
Hack My Growth의 최신 에피소드에서는 Screaming Frog SEO Spider를 사용하여 빠른 SEO 크롤링과 Google 스프레드시트 템플릿을 사용하여 해당 데이터를 빠르게 시각화하는 방법을 안내해 드리겠습니다. 이 동영상을 확인해 주셔서 감사합니다. 이 채널에서 만든 비디오가 마음에 드시면 구독을 누르고 알림 버튼을 켜는 것을 잊지 마십시오. 디지털 마케팅 활동을 최대한 활용할 수 있도록 매주 새로운 콘텐츠를 제작합니다.
그래서 개막식에서 말했듯이 Screaming Frog SEO Spider를 사용하여 빠른 SEO 크롤링을 설정하는 방법을 살펴보겠습니다. 이것은 정말 훌륭한 도구입니다. 우리가 여기 에이전시에서 거의 매일 사용하는 도구입니다. 또한 웹 사이트의 30,000피트 보기와 웹 사이트의 매우 세부적인 세부 보기를 모두 얻는 데 도움이 됩니다. 그리고 오늘 우리는 빠른 감사에 대해 이야기하고 있습니다. 이것은 우리가 아주 기본적인 수준에서 사이트를 볼 수 있게 해주지만 클라이언트나 가능한 잠재 고객과 함께 사용할 수 있는 크거나 빠른 성공에 대한 이해를 제공하는 데 도움이 됩니다.
비명 개구리와 SEO 크롤링
자, 본론으로 들어가겠습니다. 좋습니다. 이 비디오에서는 Screaming Frog를 사용하는 기본 사이트 크롤링의 개요를 빠르게 안내해 드리겠습니다. Screaming Frog SEO Spider는 SEO 또는 웹사이트에 대해 더 많이 알고 싶어 하는 사이트 소유자에게 가장 유용한 도구 중 하나일 것입니다. 작동 방식, 설정 방법 및 실행 방법에 대한 간략한 개요를 살펴보겠습니다. 그런 다음 Google 스프레드시트에서 수행할 수 있는 매우 간단한 보고서 시각화를 빠르게 공유하겠습니다.
기다
따라서 Screaming Frog로 할 첫 번째 작업은 여기에 URL을 추가할 수 있고 그냥 가고 싶다면 시작을 누르십시오. 그러나 실제로 이 크롤링을 실행하는 방법에는 여러 가지가 있습니다. 여기에서 전체 도메인을 수행할 수 있지만 몇 페이지만 실행하려는 경우에도 수행할 수 있습니다. 여기에는 다양한 모드가 있습니다. 따라서 목록을 실행할 수 있고 실제로 검색 결과에서 데이터를 가져온 다음 비교할 수 있습니다. 따라서 웹 사이트, 페이지 목록 및 검색 결과 자체를 실제로 이해하려는 경우 매우 유용한 도구입니다.
이제 이 비디오에서는 당사 웹사이트 크롤링에 대해 구체적으로 설명합니다. 이제 여기로 먼저 들어가서 몇 가지 구성을 하는 것을 좋아합니다. 딥 크롤링을 수행하려는 경우 이러한 항목을 많이 클릭하고 선택해야 할 것입니다.
그러나 빠른 사이트 크롤링을 수행하고 사이트가 얼마나 최적화되었는지 또는 이 사이트의 기초가 무엇인지 아주 기본적인 수준에서 이해하려는 경우 실제로 이러한 다양한 항목을 모두 크롤링하고 복원할 필요가 없습니다. JavaScript에서 CSS의 이미지를 크롤링하면 시간이 더 오래 걸립니다. 심층 크롤링을 수행하고 해당 웹 사이트를 매우 심층적으로 보려면 이러한 항목을 확인하는 것이 좋습니다.
그러나 웹사이트에서 무슨 일이 일어나고 있는지에 대한 기본적인 아이디어를 찾고 있거나 빠른 감사를 하고 있거나 누군가가 "이봐, 우리 사이트와 함께 일하고 싶니? " 이 사이트가 귀하가 참여하고 싶은 사이트인지 여부를 확인하기 위해 처음에 너무 깊이 들어갈 필요는 없습니다.
하지만 이제 보시다시피 이러한 다양한 요소를 모두 크롤링할 수 있습니다. 다른 페이지 링크를 크롤링할 수 있습니다. 크롤링 동작 방식을 변경할 수 있습니다. 원하는 경우 사이트 맵을 크롤링할 수도 있습니다.
추출
Screaming Frog로 추출할 수 있는 여러 가지가 있습니다. 정말 멋진 기능입니다. 메타에서 페이지 제목을 할 수 있지만 JSON-LD, RDFa 및 schema.org도 할 수 있습니다. 그 모든 것. 따라서 그들이 구조화된 데이터를 사용하고 있는지 확인하고 싶다면 이를 확인해야 합니다. HTML도 저장할 수 있습니다.
제한
여기에서 한계를 설정했습니다. 얼마나 많은 페이지를 크롤링하시겠습니까? 비즈니스에 따라 50개의 링크가 있는 페이지를 크롤링할 수 있고 최대 10,030개의 페이지를 크롤링할 수 있습니다. 30,000개 이상의 링크로 크롤링을 수행했습니다. 시간이 많이 걸리지만 그런 종류의 작업을 처리할 수 있는 도구임은 분명합니다. 여기에서 이러한 설정을 정말로 지정하고 싶은 곳입니다. 얼마나 많은 리디렉션을 따르고 싶습니까? 따라서 리디렉션 체인이 진행 중이고 모든 다른 URL과 원하는 깊이가 있는 경우.
표현
렌더링을 통해 크롤러와 잘 작동하지 않는 사이트를 크롤링할 수 있습니다. 지금은 텍스트 전용으로 설정되어 있어 텍스트 자체를 렌더링하고 있습니다. 보시다시피 마우스를 가져가면 그것에 대해 조금 더 자세히 알려줍니다. 그리고 이것을 이동하여 다른 결과를 얻을 수 있는지 확인할 수 있습니다. 따라서 여기에는 Old Ajax 크롤링 및 JavaScript와 같은 다른 모드가 있습니다. 이제 일부 사이트는 구축된 방식 때문에 크롤링하기 위해 JavaScript를 사용해야 합니다. 따라서 사이트 크롤링을 시작했는데 링크가 표시되지 않는 경우 이러한 다른 렌더링 설정 중 일부를 시도하고 실제로 가져오려는 데이터를 가져오기 시작할 수 있습니다.
고급 및 기본 설정
Screaming Frog의 환경 설정에는 많은 고급 기능이 있으며 여기에서 이러한 모든 사용자 정의를 설정할 수 있습니다. 크롤링이 원하는 작업을 수행하는 데 실제로 도움이 되도록 설정하려는 모든 다양한 규칙.
연습
이제 여기에서 볼 필요가 없도록 크롤링을 설정했습니다. 여기에서 볼 수 있듯이 다양한 탭이 있습니다. Screaming Frog가 가져올 데이터가 엄청나게 많습니다. URL과 모든 사이트 데이터가 있습니다. 이 링크 중 하나를 클릭할 때마다 바로 여기에서 볼 수 있듯이 점점 더 많은 정보를 얻을 수 있습니다. 정말 멋진 일입니다. 웹 사이트에 대한 거의 모든 것을 볼 수 있습니다.
여기에서 그들은 항상 우리에게 요약을 제공하고 요약에는 항상 이러한 멋진 작은 시각화도 있습니다. 그래서 우리가 만난 모든 URL을 볼 수 있습니다. 크롤링 데이터가 어떻게 표시되었는지 확인할 수 있습니다. 사이트 자체의 보안을 볼 수 있습니다. 여기에서 알 수 있듯이 창도 변경됩니다. 다양한 URL 구조와 페이지 제목, 그리고 이제 최적화에 사용할 수 있는 이 모든 멋진 데이터를 볼 수 있습니다.
이 데이터를 가져와서 복사 및 붙여넣기 관점에서 몇 가지 기본 분석을 수행하려고 한다고 가정해 보겠습니다. 글쎄, 당신이 할 수있는 일은 여기이 내부 탭으로 이동하여 내보내기를 클릭하는 것입니다. 이것은 CSV 파일을 만들 것입니다. 여기에서 선택하려는 다른 항목을 선택할 수도 있습니다. Google 스프레드시트 또는 기타. 그리고 그 파일을 저장합니다. 이제 이 파일을 복사하여 Google 스프레드시트에 붙여넣을 수 있습니다.
이 Google 스프레드시트를 여러분과 공유하겠습니다. 이 데이터를 여기에 붙여넣기만 하면 되는 모든 크롤링 데이터, 내부 크롤링 데이터입니다. 따라서 페이지 유형, 해당 페이지의 상태 코드와 같은 모든 것을 알 수 있습니다. 그들은 좋은가? 라이브 페이지입니까? 리디렉션되고 있습니까? 인덱싱 가능성은 무엇입니까? 내 말은, 목록은 계속해서 계속해서 계속됩니다. 여기에서 볼 수 있듯이 우리는 단어 수, 텍스트 비율, 크롤링 깊이에서 모든 것을 가지고 있습니다.
여기에서 이 점수를 얻으려면 링크 점수라고 하며 내부 링크에 대한 Screaming Frog 메트릭입니다. 여기에서 이 크롤링을 실행한 후 실제로 여기로 이동하여 크롤링 분석을 수행하고 시작을 누를 수 있습니다.
이 작업은 이 크롤링 데이터에 대해 또 다른 분석을 실행하고 여기에서 링크 점수를 얻을 수 있습니다. 링크 점수는 기본적으로 Screaming Frog에서 계산한 페이지의 내부 페이지 순위입니다. 따라서 특정 페이지가 다른 페이지와 비교하여 얼마나 강력한지 확인하고 싶다면 여기에서 이 페이지가 100인 것을 볼 수 있지만 이 페이지는 30대와 같습니다. 이제 순위를 매겼기 때문에 이 페이지의 가중치가 더 낮을 수 있습니다. 또는 이러한 페이지의 링크 점수를 개선할 수 있도록 내부 링크를 추가로 가져와야 하는 페이지일 수 있습니다. 이것은 내부 링크 메트릭과 비슷합니다. 이것은 꽤 멋진 일입니다.
우리가 구축한 것 내에서, 바로 지금, 단지 빠른 개요, 우리는 거기에 이것을 가지고 있지 않습니다. 하지만 여기에서 할 수 있는 아주 작은 일이며 다시 크롤링 분석으로 이동하여 시작을 누르기만 하면 됩니다. 하지만 보시다시피 우리는 이 모든 데이터를 가지고 있으며 때로는 어렵습니다. 당신이 웹사이트를 보고 있을 때 또는 누군가 당신에게 와서 "이봐, 빨리 감사할 수 있니? 나는 웹사이트에서 무슨 일이 일어나고 있는지에 대한 높은 수준의 보기를 보고 싶다."라고 말합니다. 당신은 이 데이터를 살펴볼 시간이 많지 않습니다. 그리고 단지 큰 것을 보고 싶어 "알았어. 그래. 여기에 기회가 있을 수도 있고 없을 수도 있어."
따라서 여기에 데이터를 붙여넣은 후 이 시각화 탭으로 이동할 수 있습니다. 그리고 여기서 우리가 한 것은 우리가 보고 싶은 상위 수준의 일부로 범위를 좁힌 것입니다. 그래서 우리는 URL을 얻었습니다. 이 웹사이트로 크롤링된 총 URL입니다. 우리가 크롤링한 페이지의 평균 단어 수는 얼마입니까? 이 페이지의 색인 생성 가능 상태는 무엇입니까? 색인을 생성할 수 있습니까, 아니면 그렇지 않습니까? 응답 코드는 무엇입니까? 깨진 페이지가 많이 있습니까?
보시다시피 여기로 모든 데이터를 가져왔습니다. 이 모든 작업은 일부 Excel 명령으로 수행된 다음 여기에서 시각화했습니다. 알았어. 제목 태그 최적화를 수행할 수 있습니다. 일부 메타 태그 최적화를 수행해야 합니다. 아마도 정규화 작업이 필요할 것입니다. 크롤링 깊이는 꽤 좋지만 여기에는 세 번 또는 네 번만 클릭하면 되는 페이지가 많이 있습니다. 어떻게 하면 이 사이트를 평평하게 만들고 조금 더 좋게 만들 수 있을까요?
따라서 이것은 심층 크롤링이 아닙니다. 이것은 우리가 빠른 관점에서 이것을 하고 있기 때문에 웹사이트에 대한 모든 것을 말하지는 않을 것입니다. 이것은 Screaming Frog를 사용하여 매우 빠르게 수행할 수 있는 이 웹사이트에 대한 1,000피트 뷰를 제공하는 데 도움이 되는 빠른 SEO 크롤링입니다. 그런 다음 여기에서 몇 가지 시각화를 구축하여 "좋아요, 우리가 뭔가를 할 수 있는 몇 가지 빠른 기회가 있다는 것을 알았습니다." 이제 크롤링으로 돌아가 해당 페이지가 무엇인지 찾을 수 있으며 실제로 데이터를 조작하여 다시 작동하도록 할 수 있으므로 이제 이러한 변경 사항을 구현할 수 있습니다.
그래서 이것은 Google 스프레드시트를 사용하여 일부 시각화와 함께 빠른 SEO 크롤링이었습니다. 도움이 되셨기를 바랍니다. Google 스프레드시트 또는 Screaming Frog 및 설정 방법에 대해 궁금한 점이 있으면 알려주세요. 우리는 당신과 그 대화를 계속하고 싶습니다. 그리고 다음 시간까지, 행복한 마케팅.