SEO cookie 重定向

Question

我有一个网站，我将流量分成两个用户组“学习者”和“教师”。我将他们的用户组保存在会话变量中，并将他们引导到他们网站的相关部分。

由于搜索引擎没有设置 user_type cookie，我遇到了搜索引擎无法为网站编制索引的问题。有没有办法让搜索引擎爬虫访问网站的两个部分（目前它陷入从 user_type 选择页面到主页的循环中）。

理想情况下，我还希望能够允许爬虫访问仅限会员的资源，因为学习驱动程序将能够访问我希望只有登录后才能访问的内容。

检查会话变量 user_type 的代码如下，并在每个页面上被调用（因此什么都没有被抓取）

    if($check_exists==TRUE) {
        $this->session->set_userdata('referrer', current_url());
        if (strlen($this->session->userdata('user_type'))==0) {
            redirect('/user_type/');
        }
    } else if($check_exists==FALSE) {
        if (strlen($this->session->userdata('user_type'))>0) {
            redirect('/home/');
        }
    }

Answer 1

从 SEO 的角度来看，您用于处理两种用户类型（学习者和教师）的概念是错误的。在大多数情况下，您永远不必让不同的内容共享一个 URL。

在您的情况下，如果未找到 cookie，http://www.road2driving.co.uk/home 将重定向到 http://www.road2driving.co.uk/user_type。网络爬虫将忽略您的 cookie，并陷入循环。如果您想为这两个页面编制索引，则需要删除基于 cookie 的导航并创建您网站的 2 个单独部分。

http://www.road2driving.co.uk/home 应该是您当前的http://www.road2driving.co.uk/user_type 页面。这意味着 /home 将为学习者和教师部分显示 2 个链接。

然后创建一个learn 部分和一个teach 部分，例如使用子文件夹。您将拥有：

• http://www.road2driving.co.uk/home
• http://www.road2driving.co.uk/learn/
• http://www.road2driving.co.uk/teach/

这样，爬虫就可以访问您网站的所有部分。