<分区>
感谢阅读我的问题。我正在建立一个网站，该网站将列出每个制造商的产品。我计划将 URL 结构化为以下变体:
www.mysite.com/manufacturer_name/product_name/product_id
www.mysite.com/product_name/product_id
www.mysite.com/manufacturer_name
有数百万种产品，我希望所有主要搜索引擎都能抓取它们。这样做的最佳方法是什么？
简单地向所有搜索引擎提交站点就足够了吗？我假设如果我提交列出所有制造商名称的制造商页面作为链接，搜索引擎将点击每个链接并点击每个制造商链接中显示的所有产品(我将对产品进行分页)以便搜索引擎可以继续在网站上抓取每个制造商的更多产品，直到用完页码。
是否足以在每个搜索引擎上列出每个产品？还是有一种新的更好的方法来做到这一点？可能有我不知道的新 SEO 技巧。我希望你能指出正确的方向。
我以前使用 robot.txt 来告诉搜索引擎要抓取哪些页面，这似乎工作正常。
谢谢， 糟糕的编码