php生成百度sitemap站点地图类函数实例


Posted in PHP onOctober 17, 2014

本文实例讲述了php生成百度sitemap站点地图类函数的方法,分享给大家供大家参考。具体实现方法如下:

问题概述:

公司网站是问答百科的网站、seo工程师提出需求说根据网站的问题来生成xml文件。每个xml文件包含5000条setmap格式数据。现在线上网站大约有70w条问题,所以说基本生成140个xml文件。还有一个索引文件。比如文件的名称以数字开头的。索引文件包含的内容就是每个xml文件的路径还有名称。
为什么要每个文件存储5000条数据呢,因为这是mysql的一个界限值、如果每次取多了以后可能会对线上用户访问造成影响,或者速度变慢。每个文件存储5000条数据,但是mysql selsect的时候不能每次取5000条、现在写的是每次取1000条。那这样逻辑就有点复杂。

实现方法:

首先取出1000条数据(可以灵活些成活的,方便以后修改),然后循环生成xml格式文件。file_puts_contens写入文件。然后再把生成的xml文件名称、取出问题的最小id、取出问题的最大id、取出问题的条数写出一个索引查询的txt文件当中,格式大概是这个样子的。
0,3146886,3145887,1000
发现最后面的条数是1000了吗、第一次select取出1000条数据、然后写入0.xml文件当中。把取出的xml文件名称、最小id、最大id、条数写入到索引查询txt中。第一次写入了1000条数据到0.xml、生成条数为1000。第二次查询的时候select语句会成为。 where id > 取出的最大id(当前mysql为正序查询、如果为倒序、改成小于) limit 1000 这样的话又取出1000、然后修改索引查询txt的最小id、最大id、生成条数加到2000。以此类推等生成条数到了5000的时候再另起一行写入索引文件、类似这样
0,3146886,3145887,5000
1,3148886,3147887,1000
这样写的话就减轻了服务器的压力。
下面贴出实现代码(风格有点乱):

具体功能代码如下:

<?php

/*

 * SiteMap接口类

 */

 

class SitemapAction extends Action{

private static $baseURL = ''; //URL地址

private static $askMobileUrl = 'http://m.xxx.cn/ask/'; //问答移动版地址

private static $askPcUrl = "http://www.xxx.cn/ask/";   //问答pc地址

private static $askZonePcUrl = "http://www.xxx.cn/ask/jingxuan/"; //问答精选Pc链接

private static $askZoneMobileUrl = "http://m.xxx.cn/ask/jx/"; //问答精选移动版链接

        //问答setmaps

public function askSetMap(){

header('Content-type:text/html;charset=utf-8');

//获取问题列表

$maxid = 0;    //索引文件最大id

$minid = 0;    //索引文件最小id

$psize = 1000; //数据库每次取数量

$maxXml = 5000; //xml写入记录数量

$where = array();

//读取索引文件

$index = APP_PATH.'setmapxml/Index.txt';

//关联setmaps路径

$askXml = "../siteditu/ask/ask.xml";

if(!file_exists($index)){

$fp=fopen("$index", "w+");

if ( !is_writable($index) ){

die("文件:" .$index. "不可写,请检查!");

}

fclose($fp);

}else{

//index.txt文件说明 0:xml文件名称(从1开始)、1:文件最大id、2:文件最小id、3:文件当前记录数

$fp = file($index);

$string = $fp[count($fp)-1];//显示最后一行

$arr = explode(',', $string);

}

//索引文件数量是否小于$maxXml

//如果为第一次运行

if(!$arr[1]){

$bs=1;

$filename=0;

}else{

if($arr && $arr[3]<$maxXml){

$filename = $arr[0];

$psize = $maxXml-$arr[3]>$psize?$psize:($maxXml-$arr[3]);

$bs = 0;

}else{

$filename = $arr[0]+1;

$bs=1;

}

}

$maxid = empty($arr[1])?0:$arr[1];

$minid = empty($arr[2])?0:$arr[2];

echo "文件名称:".$filename.".xml"."<br/ >";

echo "最大id:".$maxid."<br />";

echo "最小id:".$minid."<br />";

echo "xml写入最大记录:".$maxXml."<br />";

echo "数据库每次读取数量:".$psize."<br />";

$list = self::$questionObj->getQuestionSetMap($where,$maxid,$psize);

if(count($list)<=0){

echo 1;exit;

}

$record = $arr[3]+count($list); //索引文件写入记录数

$indexArr = array('filename'=>$filename,'maxid'=>$maxid,'minid'=>$minid,'maxXml'=>$record);

$start = '<?xml version="1.0" encoding="UTF-8" ?> '.chr(10);

$start.="<urlset xmlns=\"http://www.sitemaps.org/schemas/sitemap/0.9\" xmlns:mobile=\"http://www.baidu.com/schemas/sitemap-mobile/1/\">".chr(10);

                                $start.="</urlset>";

foreach($list as $k=>$qinfo){

if($k==0)

$indexArr['minid']=$qinfo['id'];

$qinfo['lastmod'] = substr($qinfo['lasttime'],0,10);

$qinfo['mobielurl'] = self::$askMobileUrl.$qinfo['id'].'.html'; //移动版链接

$qinfo['pcurl'] = self::$askPcUrl.$qinfo['id'].'-p1.html'; //pc版链接

$xml.=$this->askMapMobileUrl($qinfo); //移动版

$xml.=$this->askMapPcUrl($qinfo);     //pc版

}

$maxid = end($list);

$indexArr['maxid'] = $maxid['id'];

//更新索引文件

if($bs==0){

//更新最后一行

$txt = file($index);

$txt[count($txt)-1] = $indexArr[filename].','.$indexArr[maxid].','.$indexArr['minid'].','.$indexArr['maxXml']."\r\n";

$str = join($txt);

if (is_writable($index)) {

if (!$handle = fopen($index, 'w')) {

echo "不能打开文件 $index";exit;

exit;

}

if (fwrite($handle, $str) === FALSE) {

echo "不能写入到文件 $index";exit;

exit;

}

echo "成功地写入文件$index";

fclose($handle);

} else {

echo "文件 $index 不可写";exit;

}

fclose($index);

}elseif($bs==1){

//新加入一行

$fp = fopen($index,'a');

$num = count($list);

$string = $indexArr[filename].','.$indexArr[maxid].','.$indexArr['minid'].','.$num."\r\n";

if(fwrite($fp,$string)===false){

echo "追加新行失败。。。";exit;

}else{

echo "追加成功<br />";

//更新sitemap索引文件

$xmlData="<?xml version=\"1.0\"  encoding=\"UTF-8\" ?>".chr(10);

$xmlData.="<sitemapindex>".chr(10);

$xmlData.="</sitemapindex>";

if(!file_exists($askXml))

file_put_contents($askXml,$xmlData);

$fileList = file($askXml);

$fileCount = count($fileList);

$setmapxml = "http://www.xxx.cn/ask/setmapxml/{$filename}.xml";//正常问题链接

$txt = $this->setMapIndex($setmapxml);

$fileList[$fileCount-1]=$txt."</sitemapindex>";

$newContent = '';

foreach($fileList as $v){

$newContent.= $v;

}

if(!file_put_contents($askXml,$newContent)) exit('无法写入数据');

echo '已经写入文档' . $askXml;

}

fclose($fp);

}

$filename =  APP_PATH.'setmapxml/'.$filename.'.xml';

                //更新到xml文件中,增加结尾

                if(!file_exists($filename))

                        file_put_contents($filename,$start);

                $xmlList = file($filename);

                $xmlCount = count($fileList);

                $xmlList[$xmlCount-1]=$xml."</urlset>";

                $newXml = '';

foreach($xmlList as $v){

$newXml.= $v;

}

if(!file_put_contents($filename, $newXml))exit("写入数据错误");

                else

                    echo "写入数据成功<br />";

}

//问答移动版xml

private function askMapMobileUrl($data){

$xml = '';

if(is_array($data)&&!empty($data)){

$xml .="<url>".chr(10);

if($data['id'])

$xml.='<loc>'.$data['mobielurl'].'</loc>'.chr(10);//移动版链接

$xml.="<mobile:mobile type=\"mobile\"/>".chr(10);

if($data['lastmod'])

$xml.='<lastmod>'.$data['lastmod'].'</lastmod>'.chr(10);

$xml.='<changefreq>daily</changefreq>'.chr(10);

$xml.='<priority>0.8</priority>'.chr(10);   

$xml.="</url>".chr(10);

return $xml;

}

}

//问答pc版xml

private function askMapPcUrl($data){

$xml = '';

if(is_array($data)&&!empty($data)){

$xml.='<url>'.chr(10);

if($data['id'])

$xml.='<loc>'.$data['pcurl'].'</loc>'.chr(10);//pc版链接

if($data['lastmod'])

$xml.='<lastmod>'.$data['lastmod'].'</lastmod>'.chr(10);

$xml.='<changefreq>daily</changefreq>'.chr(10);

$xml.='<priority>0.8</priority>'.chr(10);

$xml.='</url>'.chr(10);

return $xml;

}

}

//setmaps索引文件

private function setMapIndex($filename){

$xml = '';

$xml.="<sitemap>".chr(10);

$xml.="<loc>{$filename}</loc>".chr(10);

$xml.="<lastmod>".date("Y-m-d",time())."</lastmod>".chr(10);

$xml.="</sitemap>".chr(10);

return $xml;

}

}

?>

 
xml索引文件格式如下:
<?xml version="1.0"  encoding="UTF-8" ?>

<sitemapindex>

<sitemap>

<loc>http://www.xxx.cn/ask/setmapxml/0.xml</loc>

<lastmod>2014-05-12</lastmod>

</sitemap>

<sitemap>

<loc>http://www.xxx.cn/ask/setmapxml/1.xml</loc>

<lastmod>2014-05-12</lastmod>

</sitemap>

</sitemapindex>

 
xml文件格式(每个文件需要存储5000条、现展示1条例子)
<?xml version="1.0" encoding="UTF-8" ?> 

<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9" xmlns:mobile="http://www.baidu.com/schemas/sitemap-mobile/1/">

<url>

<loc>http://m.xxx.cn/ask/7460.html</loc>

<mobile:mobile type="mobile"/>

<lastmod>2013-01-11</lastmod>

<changefreq>daily</changefreq>

<priority>0.8</priority>

</url>

<url>

</urlset>

 
至于sql代码主要就是一个select语句,这里就不贴出来了。

希望本文所述对大家的php程序设计有所帮助。

PHP 相关文章推荐
PHP+DBM的同学录程序(2)
Oct 09 PHP
一个SQL管理员的web接口
Oct 09 PHP
FCKeditor添加自定义按钮
Mar 27 PHP
Cannot modify header information错误解决方法
Oct 08 PHP
使用php统计字符串中中英文字符的个数
Jun 23 PHP
php实现的SESSION类
Dec 02 PHP
PHP使用fopen与file_get_contents读取文件实例分享
Mar 04 PHP
PHP二维数组矩形转置实例
Jul 20 PHP
PHP使用Redis长连接的方法详解
Feb 12 PHP
php成功操作redis cluster集群的实例教程
Jan 13 PHP
解决laravel中日志权限莫名变成了root的问题
Oct 17 PHP
PHP7创建销毁session的实例方法
Feb 03 PHP
php+mysql实现数据库随机重排实例
Oct 17 #PHP
php中spl_autoload详解
Oct 17 #PHP
php中__destruct与register_shutdown_function执行的先后顺序问题
Oct 17 #PHP
PHP图片自动裁切应付不同尺寸的显示
Oct 16 #PHP
PHP 抽象方法与抽象类abstract关键字介绍及应用
Oct 16 #PHP
php开启与关闭错误提示适用于没有修改php.ini的权限
Oct 16 #PHP
php实现扫描二维码根据浏览器类型访问不同下载地址
Oct 15 #PHP
You might like
PHP 输出缓存详解
2009/06/20 PHP
thinkPHP框架可添加js事件的分页类customPage.class.php完整实例
2017/03/16 PHP
基于JQuery实现CheckBox全选全不选
2011/06/27 Javascript
js实现模拟银行卡账号输入显示效果
2015/11/18 Javascript
js使用cookie记录用户名的方法
2015/11/26 Javascript
JS组件Bootstrap Table使用方法详解
2016/02/02 Javascript
JavaScript 经典实例日常收集整理(常用经典)
2016/03/30 Javascript
实例讲解jQuery EasyUI tree中state属性慎用
2016/04/01 Javascript
使用json来定义函数,在里面可以定义多个函数的实现方法
2016/10/28 Javascript
微信小程序 网络API 上传、下载详解
2016/11/09 Javascript
elementUI 设置input的只读或禁用的方法
2018/10/30 Javascript
在vue中实现禁止屏幕滚动,禁止屏幕滑动
2020/07/22 Javascript
浅谈vue中$event理解和框架中在包含默认值外传参
2020/08/07 Javascript
详解Vue的七种传值方式
2021/02/08 Vue.js
[02:07]DOTA2超级联赛专访BBC:难忘网吧超神经历
2013/06/09 DOTA
python字符串str和字节数组相互转化方法
2017/03/18 Python
Python绘制并保存指定大小图像的方法
2019/01/10 Python
Python判断对象是否相等及eq函数的讲解
2019/02/25 Python
django表单的Widgets使用详解
2019/07/22 Python
python 利用pywifi模块实现连接网络破解wifi密码实时监控网络
2019/09/16 Python
Python Opencv提取图片中某种颜色组成的图形的方法
2019/09/19 Python
详解Pycharm第三方库的安装及使用方法
2020/12/29 Python
Application Cache未缓存文件无法访问无法加载问题
2014/05/31 HTML / CSS
激光脱毛、蓝光和护肤:Tria Beauty
2019/03/28 全球购物
广州品高软件.net笔面试题目
2012/04/18 面试题
运动会稿件300字
2014/02/14 职场文书
工作汇报开头与结尾怎么写
2014/11/08 职场文书
先进工作者申报材料
2014/12/23 职场文书
搞笑结婚保证书
2015/05/08 职场文书
合同审查法律意见书
2015/06/04 职场文书
军事博物馆观后感
2015/06/05 职场文书
2015年幼儿园国庆节活动总结
2015/07/30 职场文书
会计岗位工作总结
2015/08/12 职场文书
电台广播稿范文
2015/08/19 职场文书
导游词之阆中古城
2019/12/23 职场文书
python 中的jieba分词库
2021/11/23 Python