WEB开发

一般来说, 我们可以通过直接让URL指向一个位于Document Root下面的文件, 来引导用户下载文件.

但是, 这样做, 就没办法做一些统计, 权限检查, 等等的工作. 于是, 很多时候, 我们采用让PHP来做转发, 为用户提供文件下载.
[php]
<?php
<?php
$file = ‘monkey.gif’;

if (file_exists($file)) {
header(‘Content-Description: File Transfer’);
header(‘Content-Type: application/octet-stream’);
header(‘Content-Disposition: attachment; filename=’.basename($file));
header(‘Content-Transfer-Encoding: binary’);
header(‘Expires: 0’);
header(‘Cache-Control: must-revalidate’);
header(‘Pragma: public’);
header(‘Content-Length: ‘ . filesize($file));
ob_clean();
flush();
readfile($file);
exit;
}
?>
[/php]
但是这个有一个问题, 就是如果文件是中文名的话, 有的用户可能下载后的文件名是乱码.

于是, 我们做一下修改(参考: :
[php]
<?php
$file = "/tmp/中文名.tar.gz";

$filename = basename($file);

header("Content-type: application/octet-stream");

//处理中文文件名
$ua = $_SERVER["HTTP_USER_AGENT"];
$encoded_filename = urlencode($filename);
$encoded_filename = str_replace("+", "%20", $encoded_filename);
if (preg_match("/MSIE/", $ua)) {
header(‘Content-Disposition: attachment; filename="’ . $encoded_filename . ‘"’);
} else if (preg_match("/Firefox/", $ua)) {
header("Content-Disposition: attachment; filename*="utf8”" . $filename . ‘"’);
} else {
header(‘Content-Disposition: attachment; filename="’ . $filename . ‘"’);
}

header(‘Content-Disposition: attachment; filename="’ . $filename . ‘"’);
header("Content-Length: ". filesize($file));
readfile($file);
[/php]
恩, 现在看起来好多了, 不过还有一个问题, 那就是readfile, 虽然PHP的readfile尝试实现的尽量高效, 不占用PHP本身的内存, 但是实际上它还是需要采用MMAP(如果支持), 或者是一个固定的buffer去循环读取文件, 直接输出.

输出的时候, 如果是Apache + PHP mod, 那么还需要发送到Apache的输出缓冲区. 最后才发送给用户. 而对于Nginx + fpm如果他们分开部署的话, 那还会带来额外的网络IO.

那么, 能不能不经过PHP这层, 直接让Webserver直接把文件发送给用户呢?

今天, 我看到了一个有意思的文章: How I PHP: X-SendFile.

我们可以使用Apache的module mod_xsendfile, 让Apache直接发送这个文件给用户:
[php]
<?php
$file = "/tmp/中文名.tar.gz";

$filename = basename($file);

header("Content-type: application/octet-stream");

//处理中文文件名
$ua = $_SERVER["HTTP_USER_AGENT"];
$encoded_filename = urlencode($filename);
$encoded_filename = str_replace("+", "%20", $encoded_filename);
if (preg_match("/MSIE/", $ua)) {
header(‘Content-Disposition: attachment; filename="’ . $encoded_filename . ‘"’);
} else if (preg_match("/Firefox/", $ua)) {
header("Content-Disposition: attachment; filename*="utf8”" . $filename . ‘"’);
} else {
header(‘Content-Disposition: attachment; filename="’ . $filename . ‘"’);
}

header(‘Content-Disposition: attachment; filename="’ . basename($file) . ‘"’);

//让Xsendfile发送文件
header("X-Sendfile: $file");
[/php]
X-Sendfile头将被Apache处理, 并且把响应的文件直接发送给Client.
Lighttpd和Nginx也有类似的模块, 大家有兴趣的可以去找找看

采用新浪SAE的Fetchurl 、KVDB、cron服务，抓取天气预报，速度快，准确。
中央气象台提供一个API可以查询最近六天的天气，返回的格式为json，例如http://m.weather.com.cn/data/101200101.html 101200101为该城市武汉的城市代码，所以只要我们知道城市代码，就可以抓取该城市天气了。笔者准备了经过了筛选的全国所有城市的数据，这些数据经过本人通过编程手段一一检验，保证真实有效，mysql数据库文件下载链接http://www.kuaipan.cn/file/id_33799150646592444.html ，excel文件下载链接http://www.kuaipan.cn/file/id_33799150646592446.html
好的，我先说下大题思路：
1.抓取几个城市的天气比较容易，简单的编程就可以实现了，但是抓取两千多个城市的天气并不容易：
（1）网络延迟可能发生，不容易保证准确率，做到不重复不漏数据
（2）PHP脚本运行时间有限制，如果一次运行的话，脚本至少要运行近两个小时，而PHP默认限制是30S
2.初开始我想在每天凌晨自动把城市数据装进数据库，然后在早上九点开始抓取，每一分钟运行一次脚本，每个脚本抓取20条数据，然后每抓取成功一次数据，从数据库删除这个城市记录，后来测试一下，数据库读写太频繁，豆豆消耗太多，效率不太高。
3.经过分析，决定采用KVDB，读写速度极快，装入两千六百条数据只用了5秒左右。
代码如下：
装入城市ID的代码，命名为KV.php：

[php]
<?php
$mysql = new SaeMysql();
$sql = "SELECT * FROM `city` ";
$data = $mysql->getData( $sql ); //从数据库取出所有城市信息
$num=count($data);
$kv = new SaeKV();
$ret = $kv->init(); //初始化KVDB服务
for($i=0;$i<$num;$i++)
{
$cityid=$data[$i][‘cityid’];
$cityname=$data[$i][‘cityname’];
$ret = $kv->set($cityid, $cityname);

}
?>
[/php]

抓取数据代码，命名为curl.php

[php]
$kv = new SaeKV();
$mysql = new SaeMysql();
$mysql->setCharset(‘UTF8’);
$ret = $kv->init();
$result=$kv->pkrget(”,20);//从KVDB取出20条数据
$f = new SaeFetchurl();
foreach($result as $key=>$value)
{
$url="http://m.weather.com.cn/data/".$key.".html";
if($content = $f->fetch($url))
{

$data=json_decode($content,true);
$data=$data[‘weatherinfo’];
$cityid=$key;
$tl=array();
$th=array();
$wind=array();
$fl=array();
$fx=array();
$weather=array();
for($i=1;$i<7;$i++)
{
$tmp=0;
$temparray=explode("℃",$data[‘temp’.$i]);
$th[$i]=$temparray[0];
$tltemp=explode("~",$temparray[1]);
$tl[$i]=$tltemp[1];
if($tl[$i]>$th[$i])
{
$tmp=$th[$i];
$th[$i]=$tl[$i];
$tl[$i]=$tmp;
}
if(isset($data[‘wind’.$i]))
{
$wind[$i]=$data[‘wind’.$i];}
else{
$wind[$i]="无数据";
}
if(isset($data[‘fl’.$i]))
{
$fl[$i]=$data[‘fl’.$i];}
else{
$fl[$i]="无数据";

}
if(isset($data[‘fx’.$i]))
{
$fx[$i]=$data[‘fx’.$i];}
else{

$fx[$i]="无数据";

}
if(isset($data[‘weather’.$i])){
$weather[$i]=$data[‘weather’.$i];}
else{
$weather[$i]="无数据";

}

}
$cityname=$data[‘city’];
$time=time();
$time=date("Y-m-d" ,$time);
$sql="insert into weather(cityid,cityname,time,tl1,tl2,tl3,tl4,tl5,tl6,th1,th2,th3,th4,th5,th6,wind1,wind2,wind3,wind4,wind5,wind6,fl1,fl2,fl3,fl4,fl5,fl6,fx1,fx2,fx3,fx4,fx5,fx6,weather1,weather2,weather3,weather4,weather5,weather6) values( ‘" . $mysql->escape( $cityid ) . "’ ,’" . $mysql->escape( $cityname ) . "’ ,’" . $mysql->escape( $time) . "’ ,
‘" . $mysql->escape( $tl[1] ) . "’ ,’" . $mysql->escape( $tl[2]) . "’ ,’" . $mysql->escape( $tl[3]) . "’ ,’" . $mysql->escape( $tl[4] ) . "’ ,’" . $mysql->escape( $tl[5] ) . "’ ,’" . $mysql->escape( $tl[6]) . "’ ,
‘" . $mysql->escape( $th[1] ) . "’ ,’" . $mysql->escape( $th[2] ) . "’ ,’" . $mysql->escape( $th[3] ) . "’ ,’" . $mysql->escape( $th[4] ) . "’ ,’" . $mysql->escape( $th[5] ) . "’ ,’" . $mysql->escape( $th[6] ) . "’ ,
‘" . $mysql->escape( $wind[1] ) . "’ ,’" . $mysql->escape( $wind[2] ) . "’ ,’" . $mysql->escape( $wind[3] ) . "’ ,’" . $mysql->escape( $wind[4] ) . "’ ,’" . $mysql->escape( $wind[5] ) . "’ ,’" . $mysql->escape( $wind[6] ) . "’ ,
‘" . $mysql->escape( $fl[1] ) . "’ ,’" . $mysql->escape( $fl[2] ) . "’ ,’" . $mysql->escape( $fl[3] ) . "’ ,’" . $mysql->escape( $fl[4] ) . "’ ,’" . $mysql->escape( $fl[5] ) . "’ ,’" . $mysql->escape( $fl[6] ) . "’ ,
‘" . $mysql->escape( $fx[1] ) . "’ ,’" . $mysql->escape( $fx[2] ) . "’ ,’" . $mysql->escape( $fx[3] ) . "’ ,’" . $mysql->escape( $fx[4] ) . "’ ,’" . $mysql->escape( $fx[5] ) . "’ ,’" . $mysql->escape( $fx[6] ) . "’ ,
‘" . $mysql->escape( $weather[1] ) . "’ ,’" . $mysql->escape( $weather[2] ) . "’ ,’" . $mysql->escape( $weather[3] ) . "’ ,’" . $mysql->escape( $weather[4] ) . "’ ,’" . $mysql->escape( $weather[5] ) . "’ ,’" . $mysql->escape( $weather[6] ) . "’
)";
$mysql->runSql($sql);
if( $mysql->errno() != 0 )
{
die( "Error:" . $mysql->errmsg() );
}else{
$kv->delete($key);//读取成功从KVDB删除这条记录,否则保留，下次继续抓取

}
}
}
[/php]

然后编写定时执行命令就行

[shell]
cron:
– description: weather
url: curl.php
schedule: every 1 min
– description: kv
url: kv.php
schedule: every day of month 10:00
[/shell]

本文章主要是讲如何做一个实时查询导出excel的应用。
首先要复习的知识点是：
json格式数据特点 ，以及php操作json格式数据的函数（json_decode() json_encode()） ，phpexcel（http://phpexcel.codeplex.com/） 的使用，还有post请求与get请求的特点，我对这几个知识点不详细介绍，后面用的时候略讲
原理如下：
将查询后得到的数据以json格式存贮在显示查询结果的页面中，设置属性为隐藏，例如：

[html]
<form metho="post" action="">
<!–
//不用GET是因为GET方法传递数据的长度有限制
//注意<{$data}>为结果数据 value后面的是单引号，不能用双引号，因为json格式数据中用的是双引号。
–>
<input type="hidden" name="data" value='<{$data}>’/>
<input type="submit" value="导出"/>
</form>
[/html]
如何简单做出实时查询？我们知道查询的条件可能有很多，那如何控制SQL语句呢，我采用的是封装的思想，例如用MVC模型，都提供了统一的数据操作接口，有时候可以直接用下面的语句
[php]
$db=d("db");
$result= $db->query($_POST);
//$_POST 储存的是key=>value 数组，也就是你查询用到的条件，但是，我们不能直接用上面的方法，因为有的kye值value为空，并列查询时得到的结果为空
$query=array();
foreach($_POST as $key=>$value){
if(trim($value)!=""){
$query[$key]=>trim($value);

}

}
$result=$db->query($query)->select();

[/php]
然后呢，我们导出报表要有标题吧，那么加在结果后面加一列标题
[php]
$result[]=array("列一","列二","列三","列四","列五","列六");
$data=json_encode($result)；
[/php]
然后把$result数组传给刚才表单的$data就行了
这只是前台的一个实现，导出呢，还需要一些工作
我们新建一个文件用户接收post数据。
[php]
<?php

error_reporting(E_ALL);

/** PHPExcel */
require_once ‘./excel/PHPExcel.php’;
require_once ‘./config.inc’;
/** PHPExcel_IOFactory */
require_once ‘./excel/PHPExcel/IOFactory.php’;
$data=$_POST[‘data’];
if(get_magic_quotes_gpc())//如果get_magic_quotes_gpc()是打开的

{
$data=stripslashes($data);//将字符串进行处理

}
$data=json_decode($data,true);

$objPHPExcel = new PHPExcel();

// Set properties
$objPHPExcel->getProperties()->setCreator("Maarten Balliauw")
->setLastModifiedBy("Maarten Balliauw")
->setTitle("Office 2007 XLSX Test Document")
->setSubject("Office 2007 XLSX Test Document")
->setDescription("Test document for Office 2007 XLSX, generated using PHP classes.")
->setKeywords("office 2007 openxml php")
->setCategory("Test result file");

$sy=array("A","B","C","D","E","F","G","H","I","J","K","L","M","N");

$num=count($data);
foreach($data[$num-1] as $key=>$value){
$objPHPExcel->setActiveSheetIndex(0)->setCellValue($sy[$key]."1", $value,PHPExcel_Cell_DataType::TYPE_STRING);

}
$i=2;

foreach ($data as $key=>$row){
if($i>$num){
break;

}
$j=0;

foreach($row as $innerkey=>$innerrow){

$objPHPExcel->setActiveSheetIndex(0)->setCellValue($sy[$j].$i, $innerrow,PHPExcel_Cell_DataType::TYPE_STRING);
//$objPHPExcel->setActiveSheetIndex(0)->setCellValue("A".$j, $innerrow,PHPExcel_Cell_DataType::TYPE_STRING);
//echo $innerrow."<br/>";
$j++;}

// Miscellaneous glyphs, UTF-8

// Rename sheet}

$i++;
}
$objPHPExcel->getActiveSheet()->setTitle(‘报表’);

// Set active sheet index to the first sheet, so Excel opens this as the first sheet
$objPHPExcel->setActiveSheetIndex(0);
$name=time();

// Redirect output to a client’s web browser (Excel5)
header(‘Content-Type: application/vnd.ms-excel’);
header(‘Content-Disposition: attachment;filename="’.$name.’.xls"’);
header(‘Cache-Control: max-age=0’);

$objWriter = PHPExcel_IOFactory::createWriter($objPHPExcel, ‘Excel5’);
$objWriter->save(‘php://output’);
exit;
?>

[/php]
对上面代码不熟悉，参看PHPEXCLE文档

[html]
<html>
<head><title>JQuery星星评级</title><meta http-equiv="Content-Type" content="text/html; charset=gbk" />
<script src="http://jqueryjs.googlecode.com/files/jquery-1.2.6.min.js" type="text/javascript"></script>
<style type="text/css">
<!–
.star_rating {background:url(https://www.lvxinwei.com/wp-content/uploads/2012/03/114922_gGrF_101311.gif) -80px 0 no-repeat; padding:0;margin:0; width:80px; height:16px; float:left; position:relative; }
.star_rating li {padding:0;margin:0;float:left;width:16px;height:16px;}
–>
</style>
</head><body>
<div style="display:block; float:left;width:100px;"><span>*</span>&nbsp;总体评价：</div>
<ul class="star_rating"><li><li/><li><li/><li></li><li></li></ul>

<script type="text/javascript">
$(‘.star_rating li’).each(function(){
$(this).click(function(obj){
$(‘.star_rating li’).unbind();//移除事件绑定
var Too = (obj.srcElement.offsetLeft+16);
setStarPos(Too-80);
alert((Too/16)+’星’);
}).mouseover(function(obj){
setStarPos((obj.srcElement.offsetLeft+16)-80);
}).mouseout(function(obj){
setStarPos(‘-80’);
});
});
function setStarPos(le){
$(‘.star_rating’).css({‘backgroundPosition’:le+’px 0′});
};
</script></body></html>
[/html]