DANH MỤC DỊCH VỤ

Cách sử dụng Chrome để xem trang web dưới dạng Googlebot

Ngày 10/11/2025 - 11:11

Bạn đang gặp khó khăn trong việc đảm bảo Googlebot thu thập và lập chỉ mục trang web của mình một cách chính xác? Đối với các chuyên gia SEO, các vấn đề về hiển thị, đặc biệt là trên các trang web sử dụng nhiều JavaScript, có thể dẫn đến việc bỏ lỡ thứ hạng và ẩn nội dung.

Mục lục

Đó chính là lúc sử dụng Chrome (hoặc Chrome Canary) để mô phỏng Googlebot phát huy tác dụng. Phương pháp này sẽ phát hiện ra sự khác biệt giữa những gì người dùng và công cụ tìm kiếm nhìn thấy, đảm bảo trang web của bạn hoạt động đúng như mong đợi.

Cho dù có giả mạo Googlebot hay không, với trình duyệt thử nghiệm cụ thể, việc kiểm tra kỹ thuật sẽ hiệu quả và chính xác hơn.

Trong hướng dẫn này, tôi sẽ chỉ cho bạn cách thiết lập trình duyệt Googlebot, khắc phục sự cố hiển thị và cải thiện quá trình kiểm tra SEO của bạn.

Tại sao tôi nên xem một trang web là Googlebot?

Trước đây, việc kiểm tra SEO kỹ thuật đơn giản hơn, với các trang web dựa trên HTML và CSS, và JavaScript chỉ giới hạn ở những cải tiến nhỏ như hiệu ứng động. Ngày nay, toàn bộ trang web được xây dựng bằng JavaScript, chuyển khối lượng công việc từ máy chủ sang trình duyệt. Điều này có nghĩa là các bot tìm kiếm, bao gồm cả Googlebot, phải hiển thị các trang ở phía máy khách, một quy trình tốn nhiều tài nguyên và dễ bị chậm trễ .

Các bot tìm kiếm thường gặp khó khăn với JavaScript. Ví dụ: Googlebot xử lý HTML thô trước và có thể phải mất vài ngày hoặc vài tuần sau mới hiển thị đầy đủ nội dung JavaScript, tùy thuộc vào từng trang web. Một số trang web sử dụng kết xuất động để vượt qua những thách thức này, bằng cách cung cấp phiên bản phía máy chủ cho bot và phiên bản phía máy khách cho người dùng.

Lời phàn nàn ngắn gọn

Nhìn chung, thiết lập này làm phức tạp hóa trang web và tạo ra nhiều vấn đề SEO kỹ thuật hơn so với trang web được hiển thị phía máy chủ hoặc trang web HTML truyền thống. May mắn thay, các trang web được hiển thị động đang dần ít được sử dụng.

Mặc dù vẫn có ngoại lệ, tôi tin rằng các trang web được dựng sẵn ở phía máy khách là một ý tưởng tồi. Các trang web nên được thiết kế để hoạt động trên mẫu số chung thấp nhất của thiết bị, với việc cải tiến dần dần (thông qua JavaScript) để nâng cao trải nghiệm cho những người sử dụng thiết bị có thể xử lý các tính năng bổ sung.

Bằng chứng giai thoại của tôi cho thấy các trang web được hiển thị phía máy khách thường khó khăn hơn đối với những người dựa vào các giải pháp trợ năng như trình đọc màn hình. Nhiều nghiên cứu đã chứng minh điều này, mặc dù các nghiên cứu tôi đã thấy đều do các công ty và tổ chức từ thiện đầu tư vào trợ năng thực hiện (một ví dụ mà tôi cho rằng bất kỳ sự thiên vị nào cũng có thể hợp lý vì lợi ích chung). Tuy nhiên, có những trường hợp SEO kỹ thuật và khả năng sử dụng giao thoa .

Tin tốt

Việc xem một trang web dưới dạng Googlebot cho phép bạn phát hiện sự khác biệt giữa những gì bot và người dùng nhìn thấy. Mặc dù các chế độ xem này không nhất thiết phải giống hệt nhau, nhưng các yếu tố quan trọng - chẳng hạn như điều hướng và nội dung - phải đồng bộ. Phương pháp này giúp xác định các vấn đề về lập chỉ mục và xếp hạng do giới hạn hiển thị và các đặc điểm riêng biệt khác của bot tìm kiếm.

Chúng ta có thể thấy những gì Googlebot thấy không?

Không, không hoàn toàn như vậy.

Googlebot hiển thị các trang web bằng phiên bản không có giao diện của trình duyệt Chrome , nhưng ngay cả với các kỹ thuật trong bài viết này, vẫn không thể sao chép hoàn hảo hành vi của nó. Ví dụ: cách Googlebot xử lý JavaScript có thể không thể đoán trước.

Một lỗi đáng chú ý vào tháng 9 năm 2024 đã ngăn Google phát hiện thẻ meta noindex trong mã render phía máy khách của nhiều trang web dựa trên React. Những vấn đề như thế này làm nổi bật những hạn chế của việc mô phỏng Googlebot, đặc biệt là đối với các yếu tố SEO quan trọng như thẻ và nội dung chính.

Tuy nhiên, mục tiêu là mô phỏng cơ chế lập chỉ mục ưu tiên thiết bị di động của Googlebot càng sát càng tốt. Để làm được điều này, tôi sử dụng kết hợp các công cụ sau:

Trình duyệt Googlebot để mô phỏng trực tiếp.
Screaming Frog SEO Spider để giả mạo và hiển thị như Googlebot.
Các công cụ của Google như công cụ Kiểm tra URL trong Search Console và Rich Results Test để chụp ảnh màn hình và phân tích mã.

Cần lưu ý rằng các công cụ của Google, đặc biệt là sau khi họ chuyển sang user-agent "Google-InspectionTool" vào năm 2023, không hoàn toàn phản ánh chính xác những gì Googlebot nhìn thấy. Tuy nhiên, khi được sử dụng cùng với trình duyệt Googlebot và SEO Spider, chúng rất hữu ích trong việc xác định các vấn đề tiềm ẩn và khắc phục sự cố.

Tại sao phải sử dụng trình duyệt riêng để xem trang web dưới dạng Googlebot?

Sử dụng trình duyệt Googlebot chuyên dụng giúp đơn giản hóa việc kiểm tra SEO kỹ thuật và cải thiện độ chính xác của kết quả. Lý do là:

Sự tiện lợi

Trình duyệt chuyên dụng giúp tiết kiệm thời gian và công sức bằng cách cho phép bạn nhanh chóng mô phỏng Googlebot mà không cần dựa vào nhiều công cụ. Việc chuyển đổi tác nhân người dùng trong tiện ích mở rộng trình duyệt tiêu chuẩn có thể không hiệu quả, đặc biệt là khi kiểm tra các trang web có phản hồi máy chủ không nhất quán hoặc nội dung động.

Ngoài ra, một số cài đặt Chrome dành riêng cho Googlebot không được duy trì trên các tab hoặc phiên làm việc, và một số cài đặt cụ thể (ví dụ: tắt JavaScript) có thể ảnh hưởng đến các tab khác mà bạn đang làm việc. Bạn có thể bỏ qua những thách thức này và đơn giản hóa quy trình kiểm tra bằng một trình duyệt riêng biệt.

Độ chính xác được cải thiện

Tiện ích mở rộng trình duyệt có thể vô tình thay đổi giao diện hoặc hoạt động của trang web. Trình duyệt Googlebot chuyên dụng sẽ giảm thiểu số lượng tiện ích mở rộng, giảm thiểu sự can thiệp và đảm bảo mô phỏng chính xác hơn trải nghiệm của Googlebot.

Tránh sai lầm

Thật dễ quên tắt tính năng giả mạo Googlebot trong trình duyệt thông thường, điều này có thể khiến các trang web gặp sự cố hoặc chặn quyền truy cập của bạn. Tôi thậm chí đã bị chặn khỏi các trang web vì giả mạo Googlebot và phải gửi email cho họ kèm theo địa chỉ IP của mình để gỡ chặn.

Linh hoạt bất chấp thách thức

Trong nhiều năm, trình duyệt Googlebot của tôi hoạt động trơn tru. Tuy nhiên, với sự trỗi dậy của Cloudflare và các giao thức bảo mật chặt chẽ hơn trên các trang web thương mại điện tử , tôi thường phải yêu cầu khách hàng thêm các địa chỉ IP cụ thể vào danh sách cho phép để tôi có thể kiểm tra trang web của họ trong khi giả mạo Googlebot.

Khi không thể sử dụng danh sách trắng, tôi chuyển sang các giải pháp thay thế như user-agent Bingbot hoặc DuckDuckBot. Mặc dù kém tin cậy hơn so với việc mô phỏng Googlebot, nhưng nó vẫn có thể khám phá ra những thông tin chi tiết giá trị. Một giải pháp dự phòng khác là kiểm tra HTML đã được hiển thị trong Google Search Console , mặc dù hạn chế là một user-agent khác với trình thu thập thông tin của Google, nhưng đây vẫn là một cách đáng tin cậy để mô phỏng hành vi của Googlebot.

Nếu tôi đang kiểm tra một trang web chặn Googlebot không phải của Google và có thể cho phép IP của tôi, thì trình duyệt Googlebot vẫn là công cụ tôi ưa thích. Nó không chỉ là một công cụ chuyển đổi tác nhân người dùng mà còn cung cấp cách toàn diện nhất để hiểu những gì Googlebot nhìn thấy.

Kiểm tra SEO nào hữu ích cho trình duyệt Googlebot?

Trường hợp sử dụng phổ biến nhất của trình duyệt Googlebot là kiểm tra các trang web dựa trên kết xuất động hoặc phía máy khách. Đây là một cách đơn giản để so sánh những gì Googlebot thấy với những gì người dùng thông thường thấy, từ đó làm nổi bật những điểm khác biệt có thể ảnh hưởng đến hiệu suất trang web của bạn trong kết quả tìm kiếm.

Vì tôi khuyên bạn nên giới hạn số lượng tiện ích mở rộng của trình duyệt xuống một số ít tiện ích cần thiết, nên đây cũng là bài kiểm tra chính xác hơn so với trình duyệt có cài tiện ích mở rộng về cách người dùng Chrome thực tế trải nghiệm một trang web, đặc biệt là khi sử dụng DevTools và Lighthouse tích hợp sẵn của Chrome để kiểm tra tốc độ chẳng hạn.

Ngay cả với những trang web không sử dụng kết xuất động, bạn cũng không bao giờ biết mình có thể tìm thấy gì khi giả mạo Googlebot. Trong hơn tám năm kiểm tra các trang web thương mại điện tử , tôi vẫn ngạc nhiên trước những vấn đề đặc biệt mà mình gặp phải.

Bạn nên điều tra những gì trong quá trình kiểm tra Googlebot?

Sự khác biệt về điều hướng: Điều hướng chính có nhất quán giữa chế độ xem của người dùng và bot không?
Khả năng hiển thị nội dung: Googlebot có thể thấy nội dung bạn muốn lập chỉ mục không?
Trì hoãn lập chỉ mục JavaScript : Nếu trang web phụ thuộc vào việc hiển thị JavaScript, liệu nội dung mới có được lập chỉ mục đủ nhanh để quan trọng không (ví dụ: đối với các sự kiện hoặc ra mắt sản phẩm)?
Sự cố phản hồi của máy chủ: URL có trả về phản hồi chính xác từ máy chủ không? Ví dụ: một URL không chính xác có thể hiển thị lỗi 200 OK đối với Googlebot nhưng lại hiển thị lỗi 404 Not Found đối với khách truy cập.
Biến thể bố cục trang: Tôi thường thấy các liên kết hiển thị dưới dạng văn bản màu xanh trên nền đen khi giả mạo Googlebot. Văn bản này có thể đọc được bằng máy nhưng lại không thân thiện với người dùng. Nếu Googlebot không thể hiển thị trang web của bạn đúng cách, nó sẽ không biết nên ưu tiên nội dung nào.
Chuyển hướng dựa trên vị trí địa lý: Nhiều trang web chuyển hướng dựa trên vị trí. Vì Googlebot chủ yếu thu thập dữ liệu từ các địa chỉ IP tại Hoa Kỳ, nên việc xác minh cách trang web của bạn xử lý các yêu cầu như vậy là rất quan trọng.

Mức độ chi tiết tùy thuộc vào quy trình kiểm tra, nhưng Chrome cung cấp nhiều công cụ tích hợp sẵn cho việc kiểm tra SEO kỹ thuật . Ví dụ: tôi thường so sánh dữ liệu tab Console và Network để xác định sự khác biệt giữa chế độ xem chung của khách truy cập và Googlebot. Quy trình này sẽ phát hiện các tệp bị Googlebot chặn hoặc nội dung bị thiếu mà nếu không có Googlebot, chúng có thể bị bỏ sót.

Cách thiết lập trình duyệt Googlebot của bạn

Việc thiết lập trình duyệt Googlebot mất khoảng 30 phút và giúp việc xem trang web dưới dạng Googlebot dễ dàng hơn nhiều. Sau đây là cách bắt đầu:

Bước 1: Tải xuống và cài đặt Chrome hoặc Canary

Nếu Chrome không phải là trình duyệt mặc định của bạn, bạn có thể sử dụng nó làm trình duyệt Googlebot.
Nếu Chrome là trình duyệt mặc định của bạn, hãy tải xuống và cài đặt Chrome Canary .

Canary là phiên bản phát triển của Chrome, nơi Google thử nghiệm các tính năng mới. Nó chạy độc lập với trình duyệt Chrome mặc định và dễ dàng nhận biết bằng biểu tượng màu vàng, gợi nhớ đến loài chim hoàng yến từng được sử dụng trong các hầm mỏ để phát hiện khí độc.

Mặc dù Canary được gắn nhãn "không ổn định", tôi chưa gặp bất kỳ vấn đề nào khi sử dụng nó làm trình duyệt Googlebot. Trên thực tế, nó cung cấp các tính năng beta hữu ích cho việc kiểm tra. Nếu những tính năng này được đưa vào Chrome, bạn sẽ dẫn đầu và có thể gây ấn tượng với những đồng nghiệp không sử dụng Canary.

Bước 2: Cài đặt tiện ích mở rộng cho trình duyệt

Để tối ưu hóa trình duyệt Googlebot của bạn, tôi khuyên bạn nên cài đặt năm tiện ích mở rộng quan trọng và một bookmarklet để tối ưu hóa trình duyệt Googlebot của mình. Các công cụ này mô phỏng Googlebot và cải thiện các bài kiểm tra SEO kỹ thuật , với ba công cụ đặc biệt hữu ích cho các trang web sử dụng nhiều JavaScript. Dưới đây là chi tiết:

- Tiện ích mở rộng để mô phỏng Googlebot:

Bộ chuyển đổi tác nhân người dùng : Chuyển đổi tác nhân người dùng của trình duyệt để mô phỏng hành vi của Googlebot.
Nhà phát triển web : Cho phép bạn bật hoặc tắt JavaScript dễ dàng, cung cấp thông tin chi tiết về cách Googlebot có thể xử lý trang web.
Windscribe (hoặc VPN bạn thích): Mô phỏng vị trí của Googlebot, thường là ở Hoa Kỳ, đảm bảo tính đến những sai lệch dựa trên vị trí.

- Mục ưa thích bổ sung:

Link Redirect Trace : Kiểm tra nhanh phản hồi của máy chủ và tiêu đề HTTP để kiểm tra SEO kỹ thuật.
Xem nguồn đã kết xuất : So sánh HTML thô (những gì máy chủ cung cấp) với HTML đã kết xuất (những gì trình duyệt xử lý).

- Bookmarklet:

NoJS Side-by-Side : So sánh giao diện của trang web có và không bật JavaScript, giúp dễ dàng phát hiện sự khác biệt hơn.

- Trước khi chúng ta chuyển sang bước 3, tôi sẽ phân tích các phần mở rộng mà tôi vừa đề cập

- Tiện ích mở rộng User-Agent Switcher

User-Agent Switcher thực hiện đúng như tên gọi: chuyển đổi user-agent của trình duyệt. Mặc dù Chrome và Canary có cài đặt user-agent tích hợp sẵn, nhưng nó chỉ áp dụng cho tab đang hoạt động và được đặt lại khi bạn đóng trình duyệt. Sử dụng tiện ích mở rộng này đảm bảo tính nhất quán giữa các phiên duyệt.

Tôi lấy chuỗi tác nhân người dùng Googlebot từ cài đặt trình duyệt Chrome, tại thời điểm viết bài này là phiên bản Chrome mới nhất (lưu ý rằng bên dưới, tôi lấy tác nhân người dùng từ Chrome chứ không phải Canary).

- Thiết lập Bộ chuyển đổi tác nhân người dùng:

+ Lấy chuỗi tác nhân người dùng Googlebot:

Mở Chrome DevTools bằng cách nhấn F12 hoặc vào mục Công cụ khác > Công cụ dành cho nhà phát triển.
Điều hướng đến tab Mạng.
Từ menu hamburger Mạng ở góc trên bên phải, chọn Công cụ khác > Điều kiện mạng.
Trong tab Điều kiện mạng:
- Bỏ chọn "Sử dụng mặc định của trình duyệt".
- Chọn "Googlebot Smartphone" từ danh sách.
- Sao chép và dán user-agent từ trường bên dưới danh sách vào danh sách tiện ích mở rộng User-Agent Switcher (một ảnh chụp màn hình khác bên dưới). Nhớ chuyển Chrome sang user-agent mặc định nếu đó là trình duyệt chính của bạn.
Một mẹo bổ sung dành cho người dùng Chrome:
- Khi bạn ở đây, nếu Chrome là trình duyệt Googlebot của bạn, hãy đánh dấu "Tắt bộ nhớ đệm" trong DevTools để có kết quả chính xác hơn trong quá trình thử nghiệm.

+ Thêm tác nhân người dùng vào phần mở rộng:

Nhấp chuột phải vào biểu tượng User-Agent Switcher trên thanh công cụ của trình duyệt và nhấp vào Tùy chọn (xem ảnh chụp màn hình bên dưới).
“Cờ Chỉ báo” là văn bản trên thanh công cụ trình duyệt hiển thị tác nhân người dùng bạn đã chọn. Dán chuỗi tác nhân người dùng Googlebot vào danh sách và đặt nhãn (ví dụ: "GS" cho Googlebot Smartphone).
Tùy chọn, hãy thêm các tác nhân người dùng khác như Googlebot Desktop, Bingbots hoặc DuckDuckBot để thử nghiệm rộng hơn.

- Tại sao lại giả mạo user-agent của Googlebot?

Máy chủ web nhận dạng trình duyệt thông qua chuỗi user-agent của chúng. Ví dụ: user-agent cho thiết bị Windows 10 sử dụng Chrome có thể trông như thế này:

Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36

Nếu bạn tò mò về lịch sử của chuỗi tác nhân người dùng và lý do tại sao các trình duyệt khác lại xuất hiện trong chuỗi tác nhân người dùng của Chrome, bạn có thể thấy các tài nguyên như Lịch sử của chuỗi tác nhân người dùng là một bài đọc thú vị.

- Tiện ích mở rộng dành cho nhà phát triển web

Tiện ích mở rộng Web Developer là một công cụ thiết yếu cho các chuyên gia SEO kỹ thuật, đặc biệt là khi kiểm tra các trang web sử dụng nhiều JavaScript. Trong trình duyệt Googlebot của mình, tôi thường xuyên bật và tắt JavaScript để mô phỏng cách Googlebot xử lý một trang web.

- Tại sao phải tắt JavaScript?

Googlebot không thực thi toàn bộ JavaScript trong lần thu thập dữ liệu ban đầu của URL. Để hiểu những gì Googlebot thấy trước khi hiển thị JavaScript, hãy tắt JavaScript. Thao tác này sẽ hiển thị nội dung HTML thô và giúp xác định các vấn đề quan trọng, chẳng hạn như thiếu điều hướng hoặc nội dung dựa vào JavaScript để hiển thị.

Bằng cách chuyển đổi JavaScript với tiện ích mở rộng này, bạn sẽ hiểu rõ hơn về hiệu suất của trang web đối với các công cụ tìm kiếm trong lần thu thập thông tin đầu tiên quan trọng.

- Windscribe (hoặc VPN khác)

Windscribe, hoặc bất kỳ VPN đáng tin cậy nào, đều vô cùng hữu ích trong việc mô phỏng vị trí điển hình của Googlebot tại Hoa Kỳ. Mặc dù tôi sử dụng tài khoản Windscribe Pro, gói miễn phí của họ bao gồm tối đa 2GB dữ liệu hàng tháng và cung cấp nhiều vị trí tại Hoa Kỳ.

- Mẹo sử dụng VPN với trình duyệt Googlebot của bạn:

Vị trí không quan trọng lắm: Googlebot chủ yếu thu thập dữ liệu từ Hoa Kỳ, nên bất kỳ vị trí nào ở Hoa Kỳ cũng được. Để giải trí, tôi tưởng tượng Gotham là một thành phố có thật (và không có nhân vật phản diện).
Tắt các cài đặt không cần thiết: Tiện ích mở rộng trình duyệt Windscribe mặc định chặn quảng cáo, điều này có thể ảnh hưởng đến cách hiển thị trang web. Đảm bảo hai biểu tượng ở góc trên bên phải hiển thị số 0.
Sử dụng tiện ích mở rộng trình duyệt qua ứng dụng: Tiện ích mở rộng VPN sẽ liên kết tính năng giả mạo vị trí với trình duyệt Googlebot của bạn, đảm bảo hoạt động duyệt web thông thường của bạn không bị ảnh hưởng.

Các công cụ này, kết hợp với User-Agent Switcher, sẽ nâng cao khả năng mô phỏng Googlebot của bạn, phát hiện sự khác biệt về nội dung và các vấn đề tiềm ẩn về lập chỉ mục .

- Tại sao lại giả mạo vị trí của Googlebot?

Googlebot chủ yếu thu thập dữ liệu từ các trang web từ IP của Hoa Kỳ và có một số lý do để mô phỏng hành vi này khi tiến hành kiểm tra:

Chặn dựa trên vị trí địa lý: Một số trang web chặn truy cập vào các địa chỉ IP của Hoa Kỳ, nghĩa là Googlebot không thể thu thập dữ liệu hoặc lập chỉ mục các địa chỉ này. Việc giả mạo vị trí tại Hoa Kỳ đảm bảo rằng bạn đang xem trang web theo cách Googlebot nhìn thấy.
Chuyển hướng theo vị trí cụ thể: Nhiều trang web cung cấp nội dung khác nhau dựa trên vị trí. Ví dụ: một doanh nghiệp có thể có các trang web riêng biệt cho Châu Á và Hoa Kỳ, trong đó khách truy cập tại Hoa Kỳ sẽ tự động được chuyển hướng đến trang web tại Hoa Kỳ. Trong những trường hợp như vậy, Googlebot có thể không bao giờ tìm thấy phiên bản Châu Á, khiến trang web đó không được lập chỉ mục.

- Các tiện ích mở rộng Chrome khác hữu ích cho việc kiểm tra các trang web JavaScript

Ngoài những công cụ thiết yếu như User-Agent Switcher và VPN, sau đây là một số công cụ khác mà tôi sử dụng để kiểm tra kỹ thuật:

Theo dõi chuyển hướng liên kết : Hiển thị phản hồi của máy chủ và tiêu đề HTTP, giúp khắc phục sự cố kỹ thuật.
Xem nguồn đã hiển thị : So sánh HTML thô (do máy chủ cung cấp) với HTML đã hiển thị (do trình duyệt xử lý), giúp bạn phát hiện sự khác biệt giữa những gì người dùng và Googlebot nhìn thấy.
Bookmarklet NoJS Side-by-Side : Cho phép bạn so sánh một trang web có và không bật JavaScript, hiển thị cạnh nhau trong cùng một cửa sổ trình duyệt.

Được rồi, quay lại bước 3

Bước 3: Cấu hình cài đặt trình duyệt để mô phỏng Googlebot

Tiếp theo, chúng ta sẽ cấu hình cài đặt trình duyệt Googlebot để phù hợp với những gì Googlebot không hỗ trợ khi thu thập thông tin từ một trang web.

- Những gì Googlebot không hỗ trợ:

Nhân viên dịch vụ: Vì người dùng nhấp vào kết quả tìm kiếm có thể chưa từng truy cập trang trước đó nên Googlebot không lưu trữ dữ liệu cho những lần truy cập sau.
Yêu cầu cấp quyền: Googlebot không xử lý thông báo đẩy, truy cập webcam, yêu cầu định vị địa lý và các tính năng tương tự. Do đó, bất kỳ nội dung nào dựa trên các quyền này sẽ không hiển thị với Googlebot.
Trạng thái: Googlebot không có trạng thái, nghĩa là nó không lưu trữ dữ liệu như cookie, lưu trữ phiên, lưu trữ cục bộ hoặc IndexedDB. Mặc dù các cơ chế này có thể lưu trữ dữ liệu tạm thời, nhưng chúng sẽ bị xóa trước khi Googlebot thu thập URL tiếp theo.

Bước 3a: Cài đặt DevTools

Bạn sẽ cần điều chỉnh một số cài đặt trong Công cụ dành cho nhà phát triển (DevTools) để cấu hình trình duyệt Googlebot của mình nhằm mô phỏng chính xác.

- Cách mở DevTools:

Nhấn F12 hoặc mở menu hamburger ở góc trên bên phải của Chrome hoặc Canary và vào Thêm công cụ > Công cụ dành cho nhà phát triển.
Cửa sổ DevTools mặc định được neo trong trình duyệt, nhưng bạn có thể thay đổi điều này. Sử dụng menu hamburger thứ hai trong DevTools để chuyển sang Dock hoặc mở nó trong một cửa sổ riêng.

- Cấu hình chính trong DevTools:

Vô hiệu hóa bộ nhớ đệm :
- Bạn có thể đã thực hiện thao tác này nếu đang sử dụng Chrome làm trình duyệt Googlebot.
- Nếu không, trong DevTools, hãy mở menu hamburger, vào Công cụ khác > Điều kiện mạng và đánh dấu vào tùy chọn “Tắt bộ đệm”.

Chặn dịch vụ dành cho người lao động:
- Điều hướng đến tab Ứng dụng trong DevTools.
- Trong Service Workers, hãy đánh dấu vào tùy chọn “Bỏ qua mạng”.

Bước 3b: Cài đặt chung của trình duyệt

Điều chỉnh cài đặt chung của trình duyệt để phản ánh hành vi của Googlebot.

Chặn tất cả cookie:
- Vào Cài đặt > Quyền riêng tư và bảo mật > Cookie hoặc nhập chrome://settings/cookies vào thanh địa chỉ.
- Chọn “Chặn tất cả cookie (không khuyến khích)”—đôi khi, việc đi ngược lại quy luật cũng rất thú vị!

Điều chỉnh quyền của trang web:
- Trong Quyền riêng tư và Bảo mật , hãy điều hướng đến Cài đặt trang web hoặc nhập chrome://settings/content.
- Trong mục Quyền , hãy chặn riêng từng mục Vị trí, Máy ảnh, Micrô và Thông báo .
- Trong phần Quyền bổ sung , hãy tắt tính năng Đồng bộ hóa nền.

Bước 4: Mô phỏng thiết bị di động

Vì Googlebot chủ yếu sử dụng phương pháp thu thập dữ liệu trên thiết bị di động nên điều quan trọng là phải mô phỏng thiết bị di động trong trình duyệt Googlebot của bạn.

- Cách mô phỏng thiết bị di động:

Mở DevTools và nhấp vào nút chuyển đổi thanh công cụ thiết bị ở góc trên bên trái.
Chọn một thiết bị để mô phỏng từ menu thả xuống hoặc thêm một thiết bị tùy chỉnh để thử nghiệm cụ thể hơn.

- Những cân nhắc chính:

Googlebot không cuộn trên các trang web. Thay vào đó, nó hiển thị bằng một cửa sổ có chiều cao dọc dài.
Mặc dù mô phỏng trên thiết bị di động là cần thiết, tôi cũng khuyên bạn nên thử nghiệm trên chế độ xem máy tính để bàn và nếu có thể, trên thiết bị di động thực tế để kiểm tra chéo kết quả.

Bạn nghĩ sao về việc xem một trang web như một Bingbot?

Để tạo trình duyệt Bingbot, hãy sử dụng phiên bản Microsoft Edge gần đây và cấu hình nó bằng tác nhân người dùng Bingbot .

- Tại sao nên cân nhắc Bingbot?

Hành vi của Bingbot tương tự như Googlebot ở những gì nó hỗ trợ và không hỗ trợ.
Các công cụ tìm kiếm như Yahoo, DuckDuckGo và Ecosia được hỗ trợ bởi hoặc dựa trên Bing, khiến Bing có sức ảnh hưởng lớn hơn nhiều người nghĩ.

Tóm tắt và ghi chú kết thúc

Giờ đây, bạn đã có trình giả lập Googlebot của riêng mình. Thiết lập trình duyệt để mô phỏng Googlebot là một trong những cách dễ dàng và nhanh chóng nhất để xem các trang web giống như trình thu thập thông tin. Tuyệt vời hơn nữa, nó hoàn toàn miễn phí nếu bạn đã có máy tính để bàn có khả năng cài đặt Chrome hoặc Canary.

Trong khi các công cụ khác như Vision API của Google (dành cho hình ảnh) và Natural Language API cung cấp những thông tin chi tiết có giá trị, trình duyệt Googlebot đơn giản hóa việc kiểm tra kỹ thuật trang web, đặc biệt là những trang web dựa vào kết xuất phía máy khách.

Để tìm hiểu sâu hơn về việc kiểm tra các trang web JavaScript và hiểu rõ những sắc thái khác biệt giữa HTML chuẩn và các trang web được hiển thị bằng JavaScript, tôi khuyên bạn nên tham khảo các bài viết và bài thuyết trình từ các chuyên gia như Jamie Indigo, Joe Hall và Jess Peck. Họ cung cấp những hiểu biết sâu sắc về SEO JavaScript và những thách thức của nó.

Bình luận

Dịch vụ liên quan

Nội dung bài viết