php生成百度sitemap站点地图类函数实例


Posted in PHP onOctober 17, 2014

本文实例讲述了php生成百度sitemap站点地图类函数的方法,分享给大家供大家参考。具体实现方法如下:

问题概述:

公司网站是问答百科的网站、seo工程师提出需求说根据网站的问题来生成xml文件。每个xml文件包含5000条setmap格式数据。现在线上网站大约有70w条问题,所以说基本生成140个xml文件。还有一个索引文件。比如文件的名称以数字开头的。索引文件包含的内容就是每个xml文件的路径还有名称。
为什么要每个文件存储5000条数据呢,因为这是mysql的一个界限值、如果每次取多了以后可能会对线上用户访问造成影响,或者速度变慢。每个文件存储5000条数据,但是mysql selsect的时候不能每次取5000条、现在写的是每次取1000条。那这样逻辑就有点复杂。

实现方法:

首先取出1000条数据(可以灵活些成活的,方便以后修改),然后循环生成xml格式文件。file_puts_contens写入文件。然后再把生成的xml文件名称、取出问题的最小id、取出问题的最大id、取出问题的条数写出一个索引查询的txt文件当中,格式大概是这个样子的。
0,3146886,3145887,1000
发现最后面的条数是1000了吗、第一次select取出1000条数据、然后写入0.xml文件当中。把取出的xml文件名称、最小id、最大id、条数写入到索引查询txt中。第一次写入了1000条数据到0.xml、生成条数为1000。第二次查询的时候select语句会成为。 where id > 取出的最大id(当前mysql为正序查询、如果为倒序、改成小于) limit 1000 这样的话又取出1000、然后修改索引查询txt的最小id、最大id、生成条数加到2000。以此类推等生成条数到了5000的时候再另起一行写入索引文件、类似这样
0,3146886,3145887,5000
1,3148886,3147887,1000
这样写的话就减轻了服务器的压力。
下面贴出实现代码(风格有点乱):

具体功能代码如下:

<?php

/*

 * SiteMap接口类

 */

 

class SitemapAction extends Action{

private static $baseURL = ''; //URL地址

private static $askMobileUrl = 'http://m.xxx.cn/ask/'; //问答移动版地址

private static $askPcUrl = "http://www.xxx.cn/ask/";   //问答pc地址

private static $askZonePcUrl = "http://www.xxx.cn/ask/jingxuan/"; //问答精选Pc链接

private static $askZoneMobileUrl = "http://m.xxx.cn/ask/jx/"; //问答精选移动版链接

        //问答setmaps

public function askSetMap(){

header('Content-type:text/html;charset=utf-8');

//获取问题列表

$maxid = 0;    //索引文件最大id

$minid = 0;    //索引文件最小id

$psize = 1000; //数据库每次取数量

$maxXml = 5000; //xml写入记录数量

$where = array();

//读取索引文件

$index = APP_PATH.'setmapxml/Index.txt';

//关联setmaps路径

$askXml = "../siteditu/ask/ask.xml";

if(!file_exists($index)){

$fp=fopen("$index", "w+");

if ( !is_writable($index) ){

die("文件:" .$index. "不可写,请检查!");

}

fclose($fp);

}else{

//index.txt文件说明 0:xml文件名称(从1开始)、1:文件最大id、2:文件最小id、3:文件当前记录数

$fp = file($index);

$string = $fp[count($fp)-1];//显示最后一行

$arr = explode(',', $string);

}

//索引文件数量是否小于$maxXml

//如果为第一次运行

if(!$arr[1]){

$bs=1;

$filename=0;

}else{

if($arr && $arr[3]<$maxXml){

$filename = $arr[0];

$psize = $maxXml-$arr[3]>$psize?$psize:($maxXml-$arr[3]);

$bs = 0;

}else{

$filename = $arr[0]+1;

$bs=1;

}

}

$maxid = empty($arr[1])?0:$arr[1];

$minid = empty($arr[2])?0:$arr[2];

echo "文件名称:".$filename.".xml"."<br/ >";

echo "最大id:".$maxid."<br />";

echo "最小id:".$minid."<br />";

echo "xml写入最大记录:".$maxXml."<br />";

echo "数据库每次读取数量:".$psize."<br />";

$list = self::$questionObj->getQuestionSetMap($where,$maxid,$psize);

if(count($list)<=0){

echo 1;exit;

}

$record = $arr[3]+count($list); //索引文件写入记录数

$indexArr = array('filename'=>$filename,'maxid'=>$maxid,'minid'=>$minid,'maxXml'=>$record);

$start = '<?xml version="1.0" encoding="UTF-8" ?> '.chr(10);

$start.="<urlset xmlns=\"http://www.sitemaps.org/schemas/sitemap/0.9\" xmlns:mobile=\"http://www.baidu.com/schemas/sitemap-mobile/1/\">".chr(10);

                                $start.="</urlset>";

foreach($list as $k=>$qinfo){

if($k==0)

$indexArr['minid']=$qinfo['id'];

$qinfo['lastmod'] = substr($qinfo['lasttime'],0,10);

$qinfo['mobielurl'] = self::$askMobileUrl.$qinfo['id'].'.html'; //移动版链接

$qinfo['pcurl'] = self::$askPcUrl.$qinfo['id'].'-p1.html'; //pc版链接

$xml.=$this->askMapMobileUrl($qinfo); //移动版

$xml.=$this->askMapPcUrl($qinfo);     //pc版

}

$maxid = end($list);

$indexArr['maxid'] = $maxid['id'];

//更新索引文件

if($bs==0){

//更新最后一行

$txt = file($index);

$txt[count($txt)-1] = $indexArr[filename].','.$indexArr[maxid].','.$indexArr['minid'].','.$indexArr['maxXml']."\r\n";

$str = join($txt);

if (is_writable($index)) {

if (!$handle = fopen($index, 'w')) {

echo "不能打开文件 $index";exit;

exit;

}

if (fwrite($handle, $str) === FALSE) {

echo "不能写入到文件 $index";exit;

exit;

}

echo "成功地写入文件$index";

fclose($handle);

} else {

echo "文件 $index 不可写";exit;

}

fclose($index);

}elseif($bs==1){

//新加入一行

$fp = fopen($index,'a');

$num = count($list);

$string = $indexArr[filename].','.$indexArr[maxid].','.$indexArr['minid'].','.$num."\r\n";

if(fwrite($fp,$string)===false){

echo "追加新行失败。。。";exit;

}else{

echo "追加成功<br />";

//更新sitemap索引文件

$xmlData="<?xml version=\"1.0\"  encoding=\"UTF-8\" ?>".chr(10);

$xmlData.="<sitemapindex>".chr(10);

$xmlData.="</sitemapindex>";

if(!file_exists($askXml))

file_put_contents($askXml,$xmlData);

$fileList = file($askXml);

$fileCount = count($fileList);

$setmapxml = "http://www.xxx.cn/ask/setmapxml/{$filename}.xml";//正常问题链接

$txt = $this->setMapIndex($setmapxml);

$fileList[$fileCount-1]=$txt."</sitemapindex>";

$newContent = '';

foreach($fileList as $v){

$newContent.= $v;

}

if(!file_put_contents($askXml,$newContent)) exit('无法写入数据');

echo '已经写入文档' . $askXml;

}

fclose($fp);

}

$filename =  APP_PATH.'setmapxml/'.$filename.'.xml';

                //更新到xml文件中,增加结尾

                if(!file_exists($filename))

                        file_put_contents($filename,$start);

                $xmlList = file($filename);

                $xmlCount = count($fileList);

                $xmlList[$xmlCount-1]=$xml."</urlset>";

                $newXml = '';

foreach($xmlList as $v){

$newXml.= $v;

}

if(!file_put_contents($filename, $newXml))exit("写入数据错误");

                else

                    echo "写入数据成功<br />";

}

//问答移动版xml

private function askMapMobileUrl($data){

$xml = '';

if(is_array($data)&&!empty($data)){

$xml .="<url>".chr(10);

if($data['id'])

$xml.='<loc>'.$data['mobielurl'].'</loc>'.chr(10);//移动版链接

$xml.="<mobile:mobile type=\"mobile\"/>".chr(10);

if($data['lastmod'])

$xml.='<lastmod>'.$data['lastmod'].'</lastmod>'.chr(10);

$xml.='<changefreq>daily</changefreq>'.chr(10);

$xml.='<priority>0.8</priority>'.chr(10);   

$xml.="</url>".chr(10);

return $xml;

}

}

//问答pc版xml

private function askMapPcUrl($data){

$xml = '';

if(is_array($data)&&!empty($data)){

$xml.='<url>'.chr(10);

if($data['id'])

$xml.='<loc>'.$data['pcurl'].'</loc>'.chr(10);//pc版链接

if($data['lastmod'])

$xml.='<lastmod>'.$data['lastmod'].'</lastmod>'.chr(10);

$xml.='<changefreq>daily</changefreq>'.chr(10);

$xml.='<priority>0.8</priority>'.chr(10);

$xml.='</url>'.chr(10);

return $xml;

}

}

//setmaps索引文件

private function setMapIndex($filename){

$xml = '';

$xml.="<sitemap>".chr(10);

$xml.="<loc>{$filename}</loc>".chr(10);

$xml.="<lastmod>".date("Y-m-d",time())."</lastmod>".chr(10);

$xml.="</sitemap>".chr(10);

return $xml;

}

}

?>

 
xml索引文件格式如下:
<?xml version="1.0"  encoding="UTF-8" ?>

<sitemapindex>

<sitemap>

<loc>http://www.xxx.cn/ask/setmapxml/0.xml</loc>

<lastmod>2014-05-12</lastmod>

</sitemap>

<sitemap>

<loc>http://www.xxx.cn/ask/setmapxml/1.xml</loc>

<lastmod>2014-05-12</lastmod>

</sitemap>

</sitemapindex>

 
xml文件格式(每个文件需要存储5000条、现展示1条例子)
<?xml version="1.0" encoding="UTF-8" ?> 

<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9" xmlns:mobile="http://www.baidu.com/schemas/sitemap-mobile/1/">

<url>

<loc>http://m.xxx.cn/ask/7460.html</loc>

<mobile:mobile type="mobile"/>

<lastmod>2013-01-11</lastmod>

<changefreq>daily</changefreq>

<priority>0.8</priority>

</url>

<url>

</urlset>

 
至于sql代码主要就是一个select语句,这里就不贴出来了。

希望本文所述对大家的php程序设计有所帮助。

PHP 相关文章推荐
php excel类 phpExcel使用方法介绍
Aug 21 PHP
PHP生成自定义长度随机字符串的函数分享
May 04 PHP
php实现计数器方法小结
Jan 05 PHP
php使用Image Magick将PDF文件转换为JPG文件的方法
Apr 01 PHP
PHP中生成UUID自定义函数分享
Jun 10 PHP
如何使用纯PHP实现定时器任务(Timer)
Jul 31 PHP
PHP解压tar.gz格式文件的方法
Feb 14 PHP
简单谈谈php浮点数精确运算
Mar 10 PHP
php实现在新浪云中使用imagick生成缩略图并上传的方法
Sep 26 PHP
PHP中file_put_contents追加和换行的实现方法
Apr 01 PHP
PHP实现QQ登录的开原理和实现过程
Feb 04 PHP
Laravel基础_关于view共享数据的示例讲解
Oct 14 PHP
php+mysql实现数据库随机重排实例
Oct 17 #PHP
php中spl_autoload详解
Oct 17 #PHP
php中__destruct与register_shutdown_function执行的先后顺序问题
Oct 17 #PHP
PHP图片自动裁切应付不同尺寸的显示
Oct 16 #PHP
PHP 抽象方法与抽象类abstract关键字介绍及应用
Oct 16 #PHP
php开启与关闭错误提示适用于没有修改php.ini的权限
Oct 16 #PHP
php实现扫描二维码根据浏览器类型访问不同下载地址
Oct 15 #PHP
You might like
PHP中Session的概念
2006/10/09 PHP
php下将多个数组合并成一个数组的方法与实例代码
2011/02/03 PHP
php计算税后工资的方法
2015/07/28 PHP
PHP实现递归无限级分类
2015/10/22 PHP
PHP+swoole实现简单多人在线聊天群发
2016/01/19 PHP
php使用FFmpeg接口获取视频的播放时长、码率、缩略图以及创建时间
2016/11/07 PHP
date.parse在IE和FF中的区别
2010/07/29 Javascript
jquery 查找select ,并触发事件的实现代码
2011/03/30 Javascript
实现变速回到顶部的JavaScript代码
2011/05/09 Javascript
jQuery滚动新闻实现代码
2016/06/26 Javascript
Angular2从搭建环境到开发步骤详解
2016/10/17 Javascript
jquery实现自适应banner焦点图
2017/02/16 Javascript
vue实现样式之间的切换及vue动态样式的实现方法
2017/12/19 Javascript
es6新特性之 class 基本用法解析
2018/05/05 Javascript
nodejs中request库使用HTTPS代理的方法
2019/04/30 NodeJs
在JavaScript中如何访问暂未存在的嵌套对象
2019/06/18 Javascript
vue.js的简单自动求和计算实例
2019/11/08 Javascript
[41:12]Liquid vs Secret 2019国际邀请赛淘汰赛 败者组 BO3 第一场 8.24
2019/09/10 DOTA
selenium+python实现自动登录脚本
2018/04/22 Python
如何在Django中添加没有微秒的 DateTimeField 属性详解
2019/01/30 Python
Python常用特殊方法实例总结
2019/03/22 Python
python threading和multiprocessing模块基本用法实例分析
2019/07/25 Python
设置jupyter中DataFrame的显示限制方式
2020/04/12 Python
学会迭代器设计模式,帮你大幅提升python性能
2021/01/03 Python
CSS3 滤镜 webkit-filter详细介绍及使用方法
2012/12/27 HTML / CSS
西班牙宠物用品和食品网上商店:Tiendanimal
2019/06/06 全球购物
Laravel中Kafka的使用详解
2021/03/24 PHP
乡镇消防工作实施方案
2014/03/27 职场文书
学校查摆问题整改措施
2014/09/28 职场文书
学习保证书怎么写
2015/02/26 职场文书
养成教育主题班会
2015/08/13 职场文书
学生病假条怎么写
2015/08/17 职场文书
Nest.js参数校验和自定义返回数据格式详解
2021/03/29 Javascript
解决MySQL添加新用户-ERROR 1045 (28000)的问题
2022/03/03 MySQL
微信小程序APP的生命周期及页面的生命周期
2022/04/19 Javascript
Python first-order-model实现让照片动起来
2022/06/25 Python