Tạo sitemap.xml API

Duyệt website từ trang chủ và tạo sitemap.xml: chỉ cùng tên miền, tuân thủ robots.txt, tôn trọng noindex và canonical, lastmod lấy từ header.

Tham số

Ví dụ

curl "https://apibox.io.vn/v1/sitemap-generate?url=https://www.sitemaps.org/&max_pages=10" \
  -H "Authorization: Bearer YOUR_API_KEY"

const res = await fetch('https://apibox.io.vn/v1/sitemap-generate?url=https://www.sitemaps.org/&max_pages=10', {
  method: 'GET',
  headers: {
    Authorization: 'Bearer YOUR_API_KEY',
  },
});
const data = await res.json();
console.log(data);

import requests

res = requests.get(
    "https://apibox.io.vn/v1/sitemap-generate?url=https://www.sitemaps.org/&max_pages=10",
    headers={"Authorization": "Bearer YOUR_API_KEY"},
    timeout=30,
)
print(res.json())

<?php
$ch = curl_init('https://apibox.io.vn/v1/sitemap-generate?url=https://www.sitemaps.org/&max_pages=10');
curl_setopt_array($ch, [
    CURLOPT_RETURNTRANSFER => true,
    CURLOPT_HTTPHEADER => ['Authorization: Bearer YOUR_API_KEY'],
]);
$response = curl_exec($ch);
print_r(json_decode($response, true));

Kết quả trả về

{
  "url": "https://www.sitemaps.org/",
  "site": "https://www.sitemaps.org",
  "pages": 5,
  "complete": true,
  "limits": {
    "max_pages": 10,
    "max_depth": 5,
    "plan_cap": 500
  },
  "robots_txt": "respected",
  "sitemaps_in_robots": [
    "https://www.sitemaps.org/sitemap.xml"
  ],
  "skipped": {
    "robots": 0,
    "noindex": 0,
    "not_html": 2,
    "errors": 0,
    "canonical_elsewhere": 0,
    "redirected_away": 0
  },
  "queued_not_crawled": 0,
  "errors": [],
  "urls": [
    {
      "loc": "https://www.sitemaps.org/",
      "lastmod": "2021-09-23",
      "depth": 0,
      "title": "sitemaps.org - Home"
    },
    {
      "loc": "https://www.sitemaps.org/faq.html",
      "lastmod": "2021-07-08",
      "depth": 1,
      "title": "sitemaps.org - FAQ"
    },
    {
      "loc": "https://www.sitemaps.org/protocol.html",
      "lastmod": "2022-12-15",
      "depth": 1,
      "title": "sitemaps.org - Protocol"
    }
  ],
  "xml": "<?xml version=\"1.0\" encoding=\"UTF-8\"?>\n<urlset xmlns=\"http://www.sitemaps.org/schemas/sitemap/0.9\">\n  <url><loc>https://www.sitemaps.org/</loc><lastmod>2021-09-23</lastmod><priority>1.0</priority></url>\n  <url><loc>https://www.sitemaps.org/faq.html</loc><lastmod>2021-07-08</lastmod><priority>0.8</priority></url>\n  <url><loc>https://www.sitemaps.org/protocol.html</loc><lastmod>2022-12-15</lastmod><priority>0.8</priority></url>\n  …\n</urlset>\n"
}

Ứng dụng

• Tạo sitemap.xml đầu tiên cho website không có plugin CMS
• Kiểm tra trang nào máy tìm kiếm có thể truy cập
• So sánh trang duyệt được với sitemap đã khai báo
• Tìm trang bị ẩn do noindex hoặc canonical sai

Hỏi đáp

API liên quan