网站的sitemap是爬虫抓取的主要地方,提交了sitemap的url,爬虫会优先抓取。

所以我们平时要有定期更新sitemap的习惯,生成sitemap的方法有很多,第三方工具抓取生成,自己生成。这里我推荐自己生成sitemap。因为这样消耗系统资源最少。

代码如下:

include_once Root_Path . “/vendor/autoload.php”;

use Medoo\Medoo;

$db = new Medoo([

‘database_type’ => ‘mysql’,

‘database_name’ => ‘menghuiguli’,

‘server’ => ’localhost’,

‘username’ => ‘root’,

‘password’ => ‘root’,

]);

$str = " “;

$articles = $db->select(‘article’,”*");

foreach ($articles as $k => $v) {

$str .= ' ’.$v[’name’].’

2019-02-02T10:16:23+08:00

monthly

0.5

‘;

}

$str .= ' ‘;

file_put_contents(’/sitemap.html’, $str);

其中数据库我使用了最小巧的medooORM模型,非常方便。

我们只要查出相关文章,然后对应循环生成sitemap即可。