[PHP学习教程]004.下载/采集远程文件到本地(Download File)

引言:如何把http://mzitu.com里的图片全部下载下来呢?

一身浩然正气的AC陷入的深思....

当然这里涉及到的功能有线程,网页请求,页面提取,下载图片等等。今天,我们先讲一下如何下载文件。后面的教程请参看本博客的[PHP自动化-进阶]系列

函数接口:

array download_file ( [string url], [string fileName], [string dirName], [array fileType], [string type])

方法声明:

下载任何文件,并返回下载保存信息。

参数说明:

参看下文《函数API》部分。

函数API



本函数封装了下载文件方法,可以指定允许文件类型,下载请求方式(GET/POST)等,代码简单,大家一看便知:

/**
 * 下载远程文件到本地
 *
 * @param string $url 远程文件地址
 * @param string $filename 保存后的文件名(为空时则为随机生成的文件名,否则为原文件名)
 * @param array $fileType 允许的文件类型
 * @param string $dirName 文件保存的路径(路径其余部分根据时间系统自动生成)
 * @param int $type 远程获取文件的方式
 * @return json 返回文件名、文件的保存路径
 * @author SuperDo#AC
 */
function download_file($url, $fileName = ‘‘, $dirName, $fileType = array(‘jpg‘, ‘gif‘, ‘png‘), $type = 1)
{
    if ($url == ‘‘)
    {
        return false;
    }

    // 获取文件原文件名
    $defaultFileName = basename($url);

    // 获取文件类型
    $suffix = substr(strrchr($url, ‘.‘), 1);
    if (!in_array($suffix, $fileType))
    {
        return false;
    }

    // 设置保存后的文件名
    $fileName = $fileName == ‘‘ ? time() . rand(0, 9) . ‘.‘ . $suffix : $defaultFileName;

    // 获取远程文件资源
    if ($type)
    {
        $ch = curl_init();
        $timeout = 30;
        curl_setopt($ch, CURLOPT_URL, $url);
        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
        curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, $timeout);
        $file = curl_exec($ch);
        curl_close($ch);
    }
    else
    {
        ob_start();
        readfile($url);
        $file = ob_get_contents();
        ob_end_clean();
    }

    // 设置文件保存路径
    //$dirName = $dirName . ‘/‘ . date(‘Y‘, time()) . ‘/‘ . date(‘m‘, time()) . ‘/‘ . date(‘d‘, time());
    $dirName = $dirName . ‘/‘ . date(‘Ym‘, time());
    if (!file_exists($dirName))
    {
        mkdir($dirName, 0777, true);
    }

    // 保存文件
    $res = fopen($dirName . ‘/‘ . $fileName, ‘a‘);
    fwrite($res, $file);
    fclose($res);

    return array(
        ‘fileName‘ => $fileName,
        ‘dirName‘  => $dirName
    );
}

说明:除非在服务器上关闭这个程序,否则这断代码将永远执行下去。

扩展示例1则



Mark一下,大家有兴趣可以看看。

实现功能:每10秒记录时间到文件,永不停歇。

<?php
// 后台运行
ignore_user_abort();
// 取消脚本运行时间的超时上限
set_time_limit(0);

// 调试日志[开始]
echo ‘start.‘;
// 执行轮循
while(!file_exists(‘close.txt‘)) {
    // 打开文件
    $handle = fopen(‘test.txt‘, ‘a+‘);
    // 写入日期
    fwrite($handle,date("Y-m-d H:i:s") . " 成功了!\n");
    // 关闭文件
    fclose($handle);
    // 休眠10秒钟
    sleep(60);
}
// 调试日志[结束]
echo ‘end.‘;
?>

本站文章为宝宝巴士 SD.Team原创,转载务必在明显处注明:(作者官方网站:宝宝巴士
转载自【宝宝巴士SuperDo团队】 原文链接: http://www.cnblogs.com/superdo/p/4794277.html

时间: 2024-10-11 15:51:42

[PHP学习教程]004.下载/采集远程文件到本地(Download File)的相关文章

PHP下载/采集远程图片到本地

/** * 下载远程图片到本地 * * @param string $url 远程文件地址 * @param string $filename 保存后的文件名(为空时则为随机生成的文件名,否则为原文件名) * @param array $fileType 允许的文件类型 * @param string $dirName 文件保存的路径(路径其余部分根据时间系统自动生成) * @param int $type 远程获取文件的方式 * @return json 返回文件名.文件的保存路径 * @au

Linux学习教程推荐下载

RedhatLinux系统管理 http://down.51cto.com/data/1328166 The.Complete.FreeBSD.3rd.Edition http://down.51cto.com/data/1328165 UNIX和Linux权威教程(第三版) http://down.51cto.com/data/1328164 linux系统常用基本命令 http://down.51cto.com/data/1328163 红帽企业Linux虚拟化管理 http://down.

DbNetGrid控件学习教程及下载使用指南

DbNetGrid是龙博方案网的旗帜产品.它是一款基于网页的报告工具,它能简单地在浏览器中展示数据库信息.通过DbNetGrid,您能在不编写任何代码的情况下搜索.导航.分类.编辑.复制.打印以及导出数据库信息.是一款完全压缩的.用于内网与互联网开发的HTML网格控件.它被设计用来实现能在浏览器环境中展示与更新数据库信息的快速灵活的方法.DbNetGrid能完全开发IE5及更高版本浏览器的功能 具体功能: 搜索.导航.分类.更新.添加.删除.导出.上传.连接.嵌入.打印.复制以及更多-- 不需要

大开测试:性能- 如何下载并保存文件到本地(连载18)

7.18  如何下载并保存文件到本地 1.问题提出 如何下载并保存文件到本地? 2.问题解答 一个人事管理系统项目一般都要实现能够上传和下载电子文件(如学位照.身份证.护照或者其他Word.Excel.Pdf等格式的电子文件),测试时为了模拟下载的场景,需要编写相关脚本.在HTTP中,没有任何一个方法或是动作能够标识“下载文件”这个动作,对HTTP来说,无论是下载文件或者请求页面,都只是发出一个GET请求,LoadRunner记录了客户端发出的对文件的请求,并能够收到文件内容.因此,完全可以通过

linux下分卷压缩,从Linux下载大于4G文件到本地,并且在本地合并

背景:由于从linux上下载文件时如果大于4G,使用sz命令无法下载,所以需要将文件分卷压缩. 步骤: 1.将大文件压缩成1G的文件:cat mydata.zip | split -b 1G - mydata_20200302.zip. 其中mydata.zip为大文件名称,mydata_20200302.zip.为是拆分后文件的前缀,默认分拆后文件名称为mydata_20200302.zip.aa,ab,ac....类推 2.下载每个2G的压缩文件到本地:sz mydata_20200302.

【转】Android Studio安装配置学习教程指南 下载和安装--不错

背景 相信大家对Android Studio已经不陌生了,Android Studio是Google于2013 I/O大会针对Android开发推出的新的开发工具,目前很多开源项目都已经在采用,Google的更新速度也很快,明显能感觉到这是Android开发的未来,那么我们还有什么理由不去拥抱未来呢? 虽然推出了很久,但是国内貌似普及的程度并不高,鉴于很多朋友求studio的详细教程,那么今天我就手把手教大家下载.安装.使用,Studio之路从这里开始. Android Studio VS Ec

关于直播学习笔记-004 视频采集

http://www.cnblogs.com/skyseraph/archive/2012/03/26/2418665.html http://www.2cto.com/kf/201607/532165.html http://blog.csdn.net/xiejiashu/article/details/34860575

点击下载按钮下载文件到本地 download stream to local

protected void Down_Load(object sender, EventArgs e) { //create a stream for the file Stream stream = null; //this controls how many bytes to read at a time and send to the client int bytesToRead = 10000; //buffer to read bytes in chunk size specifie

使用paramiko模块复制远程文件到本地

脚本如下: # cat myscp.py  #!/usr/bin/env python import paramiko import os hostname  = '192.168.56.101' port      = 22 username  = 'root' password  = '111111' dir_path  = '/root/perl' if __name__ == "__main__":     t = paramiko.Transport((hostname, p