<?php
$text = remote(array('http://www.imfeng.com/','http://www.aligaduo.com/'));
print_r($text);

function remote($urls) {
    if (!is_array($urls) or count($urls) == 0) {
        return false;
    }

    $curl = $text = array();
    $handle = curl_multi_init();
    foreach($urls as $k => $v) {
        $nurl[$k]= preg_replace('~([^:\/\.]+)~ei', "rawurlencode('\\1')", $v);
        $curl[$k] = curl_init($nurl[$k]);
        curl_setopt($curl[$k], CURLOPT_RETURNTRANSFER, 1);
        curl_setopt($curl[$k], CURLOPT_HEADER, 0);
        curl_multi_add_handle ($handle, $curl[$k]);
    }

    $active = null;
    do {
        $mrc = curl_multi_exec($handle, $active);
    } while ($mrc == CURLM_CALL_MULTI_PERFORM);

    while ($active && $mrc == CURLM_OK) {
        if (curl_multi_select($handle) != -1) {
            do {
                $mrc = curl_multi_exec($handle, $active);
            } while ($mrc == CURLM_CALL_MULTI_PERFORM);
        }
    }

    foreach ($curl as $k => $v) {
        if (curl_error($curl[$k]) == "") {
        $text[$k] = (string) curl_multi_getcontent($curl[$k]);
        }
        curl_multi_remove_handle($handle, $curl[$k]);
        curl_close($curl[$k]);
    }
    curl_multi_close($handle);
    return $text;
}

原文地址

这时候可以利用伪造搜索引擎蜘蛛UserAgent来突破限制实现采集。

一般情况下，枫子都是用Curl，并且已经习惯使用Curl了，还有一个专门用来采集的Curl函数，目前除了不能采集Google，其它的网站还没有发现不能采集的，不封是前提！

后来发现curl也有curl的缺点，于是开始研究php的采集类，著名的snoopy类。

下面是使用snoopy来突破限制的常用方法

1.使用Snoopy或curl传搜索引擎爬虫的USERAGENT值。
查看搜索引擎爬虫的USERAGENT值：http://www.imfeng.com/spdier-useragent/

2.使用Snoopy或curl传referer值。
如：$snoopy->referer = ‘http://www.imfeng.com/‘;
$header[] = “Referer: http://www.imfeng.com/“;

3.使用Snoopy或curl代理。
如：$snoopy->proxy_host = “99.99.99.99″;
$snoopy->proxy_port = “3128″;

4.使用Snoopy或curl防造IP。
如：$snoopy->rawheaders['X_FORWARDED_FOR'] = ‘127.0.0.1′;

如果使用mysql中的唯一索引，就可以很方便的实现去重插入。具体方法如下：

1，在phpmyadmin中设置一下需要去重的表字段：ALTER TABLE `test` ADD UNIQUE(`uid`)

其中，list是表名，uid是字段名。

2，在php程序中使用ignore方式插入：

mysql_query(“INSERT ignore INTO list (uid,con)
VALUES (‘$hy’,’$nr’)”);

这样就能很方便的实现php插入mysql数据库避免重复插入，但是要注意一点：如果需要去重的字段是text型，就会出现问题，因为mysql是不支持text型字段作为唯一索引的。所以需要将text型变为varchar，但是如果字段字节大于255个字节，次方法就会失效。

原文:http://www.semxian.com/blog/?p=50

解决办法，弄一个phpinfo(); 看第7行，Loaded Configuration File 这个的意思是php.ini的位置。

然后编辑php.ini 把里面的extension=php_curl.dll注释去掉。然后重启。

当然，我这个问题肯定不是这样解决的，因为我装环境的时候就已经开启了。

我把php目录下面的libeay32.dll、ssleay32.dll文件复制到C:\WINDOWS 解决。

突然发现这和PHP使用curl遭遇IIS 500错误 冲突了。哈哈哈

只是用来查找哪些文件里面包含你需要修改的关键词。

找了N多国产木马，没有一个有效果的，呃，来一个俄罗斯的。

下载

}

还需要说明的一点就是，这种生成静态页面的方法一般都用于那些变化不是很频繁的页面，比如信息的最终页面。而针对列表页，如果信息更新不是很频繁的 话，也是可取的。现在网上流行好多可以生成静态页面的blog或者论坛程序，都是通过手动点击后台“生成html页”的按钮来“半自动”生成html的。 而对一些信息量非常大的门户网站，则行不通。因为静态页之所以叫“静态”，是因为其不可自动改变。如果信息列表每天更新100次，那么静态的列表页就要重 新生成100次。如果我有10个这样的栏目，那想想也够吐血的了。

好了，闲话少说，现在来看看实际的程序演示：

first：是一个利用ob函数来做的咚咚，代码比较简单，效率相对也高一些。

PHP代码

<?php
ob_start();
@readfile("http://www.phphi.cn/post/186");
$text = ob_get_flush();
$myfile = fopen("myfile.html","w");
$text = str_replace ("{counent}",$string,$text);
fwrite($myfile,$text);
ob_clean();
?>

因为就算要生成静态页面，动态读取那部分也是要保留的，把数据插入数据库后，把url传递给readfile函数，然后读入缓存，fwrite一下 就可以生成静态页面，这种作法。代码行数最少，效率最高。http://www.phphi.cn/post/186/是一个裸页，也就是单纯的内容，没有头，尾，菜单。这样才能比较自由的定制自己的模版myfile.html。如果仅仅是要求生成静态页的话。

PHP代码

ob_start();
@readfile("http://www.phphi.cn/post/186");
$string = ob_get_flush();
$myfile = fopen("myfile.html","w");
fwrite($myfile,$string);
ob_clean();

就可以over了

second：普通生成静态html页。

这种作法就是按部就班的来做，fread进来页面，然后str_replace替换

首先是创建最终内容页：

PHP代码

$title = "http://www.phphi.cn/post/186 | phphi's blog";
$file = "phphi's blog-是一个以php+jquery为中心，面向软件开发者、程序爱好者的开源技术型博客。";
$fp = fopen ("temp.html","r");
$content = fread ($fp,filesize ("temp.html"));
$content = str_replace ("{file}",$file,$content);
$content = str_replace ("{title}",$title,$content);
$filename = "test/test.html";
$handle = fopen ($filename,"w"); //打开文件指针，创建文件
/* 检查文件是否被创建且可写 */
if (!is_writable ($filename)) {
die ("文件：".$filename."不可写，请检查其属性后重试！");
}
if (!fwrite ($handle,$content)){ //将信息写入文件
die ("生成文件".$filename."失败！");
}
fclose ($handle); //关闭指针
die ("创建文件".$filename."成功！");

这一步比较简单。只是单纯的变量替换即可。如果要生成静态的列表页面的话，原理也是一样，用程序来生成文章列表，把它当成一个大的变量，替换模版中 的变量，列表的翻页页是如此。当然，如果有信息更新的话，列表翻页也是要重新生成的。

PHP代码

<?php
$title = "http://www.phphi.cn/post/186";
$file = "phphi's blog-是一个以php+jquery为中心，面向软件开发者、程序爱好者的开源技术型博客。";
$fp = fopen ("temp.html","r");
$content = fread ($fp,filesize ("temp.html"));
$content = str_replace ("{file}",$file,$content);
$content = str_replace ("{title}",$title,$content);
// 生成列表开始
$list = '';
$sql = "select id,title,filename from article";
$query = mysql_query ($sql);
while ($result = mysql_fetch_array ($query)){
$list .= '<a href='.$root.$result['filename'].' target=_blank>'.$result['title'].'</a><br>'; }
$content .= str_replace ("{articletable}",$list,$content); //生成列表结束
// echo $content;
$filename = "test/test.html";
$handle = fopen ($filename,"w"); //打开文件指针，创建文件
/* 检查文件是否被创建且可写 */
if (!is_writable ($filename)){
die ("文件：".$filename."不可写，请检查其属性后重试！");
}
if (!fwrite ($handle,$content)){ //将信息写入文件
die ("生成文件".$filename."失败！");
}
fclose ($handle); //关闭指针
die ("创建文件".$filename."成功！");
?>

关于翻页：

如我们指定分页时，每页20篇。某子频道列表内文章经数据库查询为45条，则，首先我们通过查询得到如下参数：1，总 页数；2，每页篇数。第二步，for ($i = 0; $i < allpages; $i++)，页面元素获取，分析，文章生成，都在此循环中执行。不同的是，die ("创建文件".$filename."成功！";这句去掉，放到循环后的显示，因为该语句将中止程序执行。例：

PHP代码

<?php
$fp = fopen ("temp.html","r");
$content = fread ($fp,filesize ("temp.html"));
$onepage = ‘20′;
$sql = "select id from article where channel=’$channelid’";
$query = mysql_query ($sql);
$num = mysql_num_rows ($query);
$allpages = ceil ($num / $onepage);
for ($i = 0;$i<$allpages; $i++)
{ if ($i == 0){ $indexpath = "index.html"; }
else { $indexpath = "index_".$i."html"; }
$start = $i * $onepage; $list = ”;
$sql_for_page = "select name,filename,title from article where channel=’$channelid’ limit $start,$onepage";
$query_for_page = mysql_query ($sql_for_page);
while ($result = $query_for_page){ $list .= ‘<a href=’.$root.$result['filename'].’ target=_blank>’.$title.’</a><br>’; }
$content = str_replace ("{articletable}",$list,$content);
if (is_file ($indexpath)){
@unlink ($indexpath); //若文件已存在，则删除
}
$handle = fopen ($indexpath,"w"); //打开文件指针，创建文件
/* 检查文件是否被创建且可写 */
if (!is_writable ($indexpath)){ echo "文件：".$indexpath."不可写，请检查其属性后重试！"; //修改为echo
}
if (!fwrite ($handle,$content)){ //将信息写入文件 echo "生成文件".$indexpath."失败！"; //修改为echo
}
fclose ($handle); //关闭指针
}
fclose ($fp); die ("生成分页文件完成，如生成不完全，请检查文件权限系统后重新生成！");
?>

third：smarty模版生成静态页面
smarty自己有一个fetch函数，其功用有点类似于fread()可以用来生成静态的页面.
这个例子大家想必 看起来眼熟，对，smarty手册中关于fetch函数的例子，hoho 某驼借用一下，比竟官方的例子总是很经典的嘛！

PHP代码

<?php
include("Smarty.class.php");
$smarty = new Smarty;
$smarty->caching = true;
// only do db calls if cache doesn't exist if(!$smarty->is_cached("index.tpl")) {
// dummy up some data $address = "245 N 50th";
$db_data = array(
"City" => "Lincoln",
"State" => "Nebraska",
"Zip" => "68502"
);
$smarty->assign("Name","Fred");
$smarty->assign("Address",$address);
$smarty->assign($db_data); }
// capture the output $output = $smarty->fetch("index.tpl");
//这个地方算是关键// do something with $output here echo $output; //hoho
//看到output的结果了吧
//然后呢?fwrite一下，我们就 得到我们所要的结果了。
$fp = fopen("archives/2005/05/19/0001.html", "w");
fwrite($fp, $content);fclose($fp);
?>
<?phpob_start();echo "Hello World!";
$content = ob_get_contents();//取得php页面输出的全部内容
$fp = fopen("archives/2005/05/19/0001.html", "w");
fwrite($fp, $content);
fclose($fp);
?>

PHP代码
//PHP生成静态页面类

<?php
//-----------------------------生成静态的类-------------------------------
class Makehtml{
public $MbUrl,$OutUrl,$AllHtml,$SouChar,$ObjChar; //变量
public $row; //游标
public $Shuzusou,$Shuzuobj; //替换的字符串数组
//-----------------------初始化-------------------------
function __construct(){ //初始化
$this->MbUrl="";
$this->OutUrl="";
$this->AllHtml="";
$this->Sql="";
$this->SouChar="";
$this->ObjChar="";
}
//-----------------------------自动按字段替换---------------------------
function AutoReplace(){
//------------------自动获取要替换的字符串-------------------
$tlen=count($row);
$shuzu1=array();
$shuzu2=array();
if($row){
$i=0;
foreach($row as $key => $value){
$shuzu2="<=\$".$key."\$>";
$shuzu1=$value;
$i++;
}
$this->Replacehtml(shuzu2,shuzu1);
}
//------------------自动获取要替换的字符串-------------------
}
//-----------------------------自动按字段替换完成------------------------
//-----------------------------批量替换数组--------------------------
function Replacehtml($Shuzusou,$Shuzuobj){ //批量替换数组
if(count($Shuzusou)!=count($Shuzuobj)){
exit("替换数组不匹配");
}
if($this->AllHtml==""){
exit("没有要替换的内容");
}
for($i=0;$i<count($Shuzusou);$i++){
$this->AllHtml=str_replace($Shuzusou[$i],$Shuzuobj[$i],$this->AllHtml);
//print("<br>".$Shuzusou(i)."=".$Shuzuobj(i)."<br>")
}
} //-----------------------------批量替换数组完成--------------------------
//-----------------------------读取文件---------------------------------
function Readfile(){
$file=fopen($this->MbUrl,"r");
$fsize=filesize($this->MbUrl);
$this->AllHtml=fread($file,$fsize);
fclose($file);
}
//-----------------------------读取文件完成------------------------------
//-----------------------------保存文件---------------------------------
function SaveFile(){
$file=fopen($this->OutUrl,"w");
fwrite($file,$this->AllHtml);
fclose($file);
}
//-----------------------------保存文件完成------------------------------
}
//------------------------------生成静态的类完成 -------------------------------
//以下为引用的内容：
//------------------静态生成----
$MyMake=new Makehtml;
$MyMake->MbUrl="demo.html";
$MyMake->Readfile();
$THTml=$MyMake->AllHtml;
$shuzu1=array();
$shuzu2=array();
$shuzu1[0]="{keywords}";
$shuzu1[1]="{description}";
$shuzu1[2]="{title}";

$shuzu1[3]="width=\"100%\"";
$MyMake->OutUrl="News_".date('m_s').".html";
$shuzu2[0]="新闻,视频";
$shuzu2[1]="本网站是一个...";
$shuzu2[2]="网站标题";

$shuzu2[3]="width=\"95%\"";
$MyMake->Replacehtml($shuzu1,$shuzu2);
$MyMake->SaveFile();
//------------------静态生成完成-----------
?>

本篇文章来源于phphi 文章地址：http://www.phphi.cn/post/196/

miss u.

function GetBeianhao(){
	$o = '京津冀晋蒙辽吉黑沪苏浙皖闽赣鲁豫鄂湘粤桂琼渝川黔云藏陕甘青宁新港澳台';
	$output = '';
 	for($a=0;$a<8;$a++){
  		$output.=mt_rand(0,9);
 	}
	$beianhao = substr($o, rand(1, strlen($o)/2)*2, 2)."ICP备".$output."号";
 	return $beianhao;
}
echo GetBeianhao();

有点简单 凑合着用吧 Here is no comments yet by the time your rss reader get this, Do you want to be the first commentor? Hurry up ]]> http://www.imfeng.com/php-get-rand-beianhao/feed/ 0 http://www.imfeng.com/php-ini-error_reporting/ http://www.imfeng.com/php-ini-error_reporting/#comments Tue, 25 Jan 2011 12:07:20 +0000 枫子 http://www.imfeng.com/?p=433 error_reporting可以设置的参数如下：

错误报告是位字段。可以将数字加起来得到想要的错误报告等级。
E_ALL – 所有的错误和警告(不包括 E_STRICT)
 E_ERROR – 致命性的运行时错误
 E_WARNING – 运行时警告(非致命性错误)
 E_PARSE – 编译时解析错误
 E_NOTICE – 运行时提醒(这些经常是你代码中的bug引起的，也可能是有意的行为造成的。)
 E_STRICT – 编码标准化警告，允许PHP建议如何修改代码以确保最佳的互操作性向前兼容性。
 E_CORE_ERROR – PHP启动时初始化过程中的致命错误
 E_CORE_WARNING – PHP启动时初始化过程中的警告(非致命性错)
 E_COMPILE_ERROR – 编译时致命性错
 E_COMPILE_WARNING – 编译时警告(非致命性错)
 E_USER_ERROR – 用户自定义的错误消息
 E_USER_WARNING – 用户自定义的警告消息
 E_USER_NOTICE – 用户自定义的提醒消息
 例子:
error_reporting = E_ALL & ~E_NOTICE ; 显示所有的错误，除了提醒
error_reporting = E_COMPILE_ERROR|E_ERROR|E_CORE_ERROR ; 仅显示错

error_reporting=E_ERROR :只会报告致命性错误

基本上设置

error_reporting = E_ALL & ~E_NOTICE ; 显示所有的错误，除了提醒

基本上二次开发都没有很大的问题，除非是做一些比较复杂的东西，简单的文章系统，和数据库打交道的，采集程序之类的都已经很熟练了,并且能破解除了zend加密的php代码，即使很复杂。

这一个过程其实是很简单的，主要是PHP100视频教程帮助了我，但是至今还没看完php100的全部教程，只是挑选了一些自己需要的东西学了学，基本上有问题，百度一下，都能解决的。

总结就是：多做小东西，多看代码。