จะทำอย่างไรให้ไม่มีดัชนีในร้านค้า Shopify ของคุณและอย่างไร คู่มือสำหรับ robots.txt และเมตาแท็กของโรบ็อต

ไฟล์ robots.txt เป็นหนึ่งในพื้นฐานของเทคนิค SEO ที่คุณควรดูแลอยู่เสมอ ช่วยให้คุณควบคุมวิธีที่เครื่องมือค้นหารวบรวมข้อมูลไซต์ของคุณ เพื่อให้ทุกสิ่งที่สำคัญปรากฏในผลการค้นหาและทุกสิ่งที่คุณไม่ต้องการให้แสดงจะถูกบล็อก

‍

เหตุใดการควบคุมการรวบรวมข้อมูลและการจัดทำดัชนีหน้าเว็บของคุณจึงมีความสำคัญมาก

• ประหยัดงบประมาณการรวบรวมข้อมูล มีการจำกัดจำนวนหน้าที่บอทการค้นหาสามารถดำเนินการได้ในเวลาที่กำหนด เพื่อให้แน่ใจว่ามีการรวบรวมข้อมูลและรวบรวมข้อมูลหน้าที่สำคัญที่สุดของคุณเป็นประจำ คุณควรยกเว้นหน้าเหล่านั้นที่ไม่จำเป็นต้องแสดงในผลการค้นหา

• ป้องกันไม่ให้เพจทางเทคนิคแสดงในการค้นหา มีหลายหน้าที่ร้านค้าของคุณสร้างขึ้นเพื่อความสะดวกของผู้ใช้: หน้าที่มีการเข้าสู่ระบบ ชำระเงิน การค้นหาภายใน ฯลฯ หน้าเหล่านี้มีความสำคัญสำหรับ UX แต่ไม่จำเป็นต้องจัดอันดับในการค้นหา

• หลีกเลี่ยงปัญหาเนื้อหาที่ซ้ำกัน เมื่อพูดถึงหน้าทางเทคนิคที่เรากล่าวถึง พวกเขาสามารถสร้างการทำซ้ำได้: ตัวอย่างเช่น ตัวเลือกการจัดเรียงที่แตกต่างกันจะมาที่ URL ที่ต่างกัน แต่แสดงผลิตภัณฑ์เดียวกันในลำดับที่ต่างกัน คุณไม่ต้องการให้หน้าเหล่านั้นมีส่วนร่วมในการจัดอันดับ เนื่องจากเครื่องมือค้นหาไม่ชอบเนื้อหาที่ซ้ำกัน

คุณจะควบคุมการจัดทำดัชนีหน้าร้านค้าของคุณได้อย่างไร?

เพื่อให้ค่าแก่หน้าที่สำคัญของคุณและอำนวยความสะดวกในการจัดทำดัชนีโดยบอทการค้นหา คุณควรมีแผนผังเว็บไซต์ที่อัปเดตและถูกต้องเสมอ นอกจากนี้ ดูแลการเชื่อมโยงภายในและหาแหล่งภายนอกเพื่อเชื่อมโยงไปยังเนื้อหาของคุณ เพื่อให้หน้าของคุณดูน่าเชื่อถือมากขึ้นในสายตาของเครื่องมือค้นหา

มาตรการเหล่านี้ค่อนข้างรับประกันได้ว่าหน้าเว็บของคุณจะได้รับการจัดอันดับในการค้นหา แม้ว่าจะไม่มีทางพิสูจน์ได้ว่ามีการจัดทำดัชนี 100%

สิ่งที่คุณรับประกันได้ 100% คือการยกเว้นบางหน้าที่คุณไม่ต้องการให้ปรากฏในการค้นหา สำหรับสิ่งนี้ คุณสามารถ ใช้คำสั่ง noindex ในไฟล์ robots.txt หรือเมตาแท็กของโรบ็ อต ฟังดูเป็นเทคนิคมากในแวบแรก แต่จริงๆ แล้วง่ายมาก โดยเฉพาะอย่างยิ่งสำหรับผู้ขายของ Shopify เนื่องจากแพลตฟอร์มจะดูแลการจัดทำดัชนีที่เหมาะสมเป็นส่วนใหญ่โดยอัตโนมัติ

ดังนั้นคุณควร noindex ในร้านค้า Shopify อย่างไร

สำหรับร้านค้าออนไลน์ คุณควรบล็อกไม่ให้สร้างดัชนีหน้าประเภทต่อไปนี้:

• ทุกอย่างที่เกี่ยวข้องกับบัญชีผู้ใช้ หน้าเหล่านี้ไม่ซ้ำกันสำหรับลูกค้าแต่ละรายและไม่จำเป็นในการค้นหา
• ทุกอย่างที่เกี่ยวข้องกับการเช็คเอาต์ของแขก แม้ว่าผู้ใช้จะไม่เข้าสู่ระบบบัญชีของตนและได้รับอนุญาตให้ซื้อในฐานะผู้เยี่ยมชม หน้าที่มีขั้นตอนการชำระเงินที่สร้างขึ้นสำหรับพวกเขาไม่ได้มีไว้สำหรับการค้นหา
• การนำทางแบบเหลี่ยมเพชรพลอยและการค้นหาภายใน ดังที่เราได้กล่าวไปแล้ว การเสนอ URL เหล่านั้นให้กับบอทการค้นหาจะทำให้เกิดความสับสน เปลืองงบประมาณในการรวบรวมข้อมูลของคุณ และสร้างปัญหาเนื้อหาที่ซ้ำกัน
• ผลิตภัณฑ์ที่คุณต้องการซ่อนจากการค้นหา หากคุณไม่ต้องการให้สินค้าบางรายการแสดงในผลการค้นหา เช่น สินค้าหมดสต็อกหรือสินค้าที่มีความอ่อนไหวต่อเวลาซึ่งไม่เกี่ยวข้องอีกต่อไป คุณสามารถซ่อนสินค้าจากการค้นหาในไฟล์ Shopify robots.txt ของคุณได้

Robots.txt ใน Shopify

ในการตรวจสอบไฟล์ robots.txt ที่สร้างขึ้นสำหรับคุณโดยอัตโนมัติ คุณสามารถเพิ่ม /robots.txt ในโดเมนร้านค้าของคุณ:

ไฟล์นี้มักจะมีอะไรบ้าง? มันระบุบอทการค้นหาเฉพาะ (ฟิลด์ User-agent ) และให้คำสั่งการรวบรวมข้อมูล ( Disallow หมายถึงการบล็อกจากการเข้าถึง) ในตัวอย่างข้างต้น กฎชุดแรกถูกกำหนดให้กับบอทการค้นหาทั้งหมด ( User-agent ถูกตั้งค่าเป็น *) ในทางกลับกัน คำสั่ง Disallow จะห้ามไม่ให้มีการรวบรวมข้อมูลของหน้าที่ระบุ ในตัวอย่าง เราจะเห็นว่าไฟล์นั้นห้ามไม่ให้มีการรวบรวมข้อมูลหน้าทางเทคนิค เช่น ผู้ดูแลระบบ รถเข็น การชำระเงิน และอื่นๆ

Robots.txt ยังมีลิงก์ไปยังแผนผังเว็บไซต์ด้วย ซึ่งเป็นประโยชน์ในการค้นหาโปรแกรมรวบรวมข้อมูลเพื่อทำความเข้าใจโครงสร้างเว็บไซต์และลำดับความสำคัญในการจัดทำดัชนี

ก่อนหน้านี้ Shopify ไม่ได้ให้ความยืดหยุ่นใดๆ กับไฟล์นี้ แต่ในเดือนมิถุนายน 2021 ผู้ขายของ Shopify สามารถแก้ไข robots.txt ได้ กฎที่กำหนดไว้ล่วงหน้าส่วนใหญ่เพียงพอแต่อาจไม่พิจารณาทุกกรณี หากคุณใช้แอปสำหรับการค้นหาภายใน มักจะเปลี่ยน URL และกฎเริ่มต้นจะไม่ถูกนำไปใช้ หรือหากคุณต้องเผชิญกับการนำทาง URL จะเปลี่ยนไปตามตัวกรองที่เลือก และกฎเริ่มต้นอาจไม่พิจารณาทุกอย่าง คุณสามารถเพิ่มเพจและกฎเพิ่มเติมในไฟล์ของคุณ ระบุตัวแทนผู้ใช้เพิ่มเติม ฯลฯ

หากต้องการเรียนรู้เกี่ยวกับคำสั่งที่มีอยู่แล้วที่คุณนำไปใช้ได้ โปรดดูคู่มือของ Google ใน robots.txt

นอกจากนี้ โปรดทราบว่ากฎใหม่จะปรากฏขึ้นตลอดเวลา ตัวอย่างเช่น ในช่วงต้นปี 2022 Google ได้เปิดตัวแท็กใหม่ที่ควบคุมการจัดทำดัชนีของเนื้อหาที่ฝังไว้: indexifembedded สามารถใช้ได้หากคุณมีวิดเจ็ตในร้านค้าของคุณที่แทรกผ่าน iframe หรือแท็ก HTML ที่คล้ายกัน และคุณไม่ต้องการให้สร้างดัชนี

จะแก้ไข robots.txt ของคุณบน Shopify ได้อย่างไร

ในโค้ดของธีม คุณจะเห็นเทมเพลตจำนวนมาก (ไปที่ ร้านค้าออนไลน์ > ธีม > คลิก การ ทำงาน บนธีมปัจจุบันของคุณ > เลือก แก้ไขโค้ด > ไปที่ เทมเพลต ) รายการควรมีไฟล์ robots.txt.liquid

หากคุณไม่มีไฟล์ด้วยเหตุผลบางประการ คุณสามารถสร้างได้โดยคลิกที่ เพิ่มเทมเพลตใหม่ และเลือก robots.txt

ตัวอย่างเช่น บล็อกการค้นหาภายในจากการจัดทำดัชนี ซึ่งจะมีลักษณะดังนี้ในเทมเพลต:

ดูหน้าความช่วยเหลือของ Shopify เกี่ยวกับการแก้ไข robots.txt สำหรับรายละเอียดเพิ่มเติม

โปรดทราบว่าแม้ว่าหน้าจะไม่ได้รับอนุญาตใน robots.txt แต่ก็ยังสามารถจัดทำดัชนีได้หากมีลิงก์จากแหล่งภายนอก ตัวอย่างเช่น หากคุณมีหน้าเก่าที่ได้รับปริมาณการเข้าชมที่เหมาะสมในอดีตแต่ไม่เกี่ยวข้องกับร้านค้าของคุณอีกต่อไป จะเป็นการดีกว่าที่จะบล็อกหน้านั้นด้วยเมตาแท็กของโรบ็อตหรือลบออกทั้งหมด

ไม่มีการจัดทำดัชนีเนื้อหา Shopify ด้วยเมตาแท็กโรบ็อต

นอกจาก robots.txt แล้ว คุณยังสามารถแทรกคำสั่ง noindex ในส่วน <head> ของโค้ดธีมของคุณได้ด้วยความช่วยเหลือของเมตาแท็กของโรบ็อต แท็กมีไวยากรณ์ต่อไปนี้: <meta name=”robots” content=”noindex”>

เช่นเดียวกับวิธีที่คุณแก้ไขหรือสร้างโค้ด Shopify robots.txt ให้ไปที่ theme.liquid ในส่วน เล ย์เอาต์ ตัวอย่างเช่น จะมีลักษณะเช่นนี้หากคุณเพิ่มกฎสำหรับ noindexing หน้า /new-collection ของคุณ:

ด้วยวิธีนี้ คุณจะซ่อนหน้าจากการค้นหาสิ่งที่ดี

โปรดทราบว่าคุณสามารถใช้ noindex กับ nofollow หรือ ปฏิบัติตาม directives ร่วมกันได้ ด้วยการ ติดตาม หน้าของคุณจะถูกบล็อกจากการจัดทำดัชนี แต่จะอนุญาตให้บอทการค้นหารวบรวมข้อมูลลิงก์อื่นๆ ที่วางอยู่บนหน้านั้น ในขณะที่ nofollow ทั้งหน้านั้นเองและลิงก์ทั้งหมดบนหน้านั้นจะไม่สามารถเข้าถึงบอทการค้นหาได้

Noindexing เนื้อหา Shopify ด้วยความช่วยเหลือของแอพ

หากทั้งหมดนี้ดูเหมือนเป็นปัญหาสำหรับคุณ มีวิธีควบคุมการจัดทำดัชนีหน้าเว็บของคุณได้ง่ายยิ่งขึ้น โดยไม่ต้องเขียนโค้ดแม้แต่บรรทัดเดียว มีแอป SEO หลายตัวสำหรับ Shopify ที่จะช่วยคุณซ่อนสินค้าจากการค้นหาในร้านค้า Shopify ของคุณหรือบล็อกหน้าอื่นๆ

ลองดูสองสิ่งนี้:

• แผนผังเว็บไซต์ Noindex SEO Tools ($ 3.49 ต่อเดือนสำหรับหน้าทุกประเภท)
• NoIndexify - ตัวจัดการแผนผังเว็บไซต์ (ฟรีสำหรับหน้าผลิตภัณฑ์ คอลเลกชัน และบล็อก $2.99 ​​ต่อเดือนสำหรับหน้าอื่นๆ: การค้นหา การแบ่งหน้า การเข้าสู่ระบบ ฯลฯ)

นี่คือหน้าตาของอินเทอร์เฟซของ NoIndexify—สำหรับแต่ละหน้า คุณสามารถเลือกชุดคำสั่งได้:

ปรับปรุง SEO ของคุณด้วยการปรับปรุงการจัดทำดัชนีหน้า

เพียงเท่านี้: เราหวังว่าคุณจะมีความเข้าใจที่ดีขึ้นเกี่ยวกับวิธีการทำงานของ robots.txt ของ Shopify และวิธีใช้เพื่อประโยชน์ของคุณ ด้วยความช่วยเหลือของ robots.txt และเมตาแท็กของโรบ็อต คุณสามารถปรับปรุงการควบคุมการจัดทำดัชนีหน้า ป้องกันปัญหา SEO และให้คุณค่ากับหน้าที่สำคัญที่สุดของคุณมากขึ้น เพื่อให้พวกเขาโดดเด่นในการค้นหาและดึงดูดผู้เยี่ยมชมมากขึ้น

หากคุณกำลังมองหาเคล็ดลับ SEO ของ Shopify เพิ่มเติม โปรดดูคู่มือ SEO ของเรา