python3获取文件中url内容并下载

 1 #!/usr/bin/env python
 2 # -*- coding: utf-8 -*-
 3 # @Time    : 2019-12-25 11:33
 4 # @Author  : Anthony
 5 # @Email   : [email protected]
 6 # @File    : get_video_audio_file.py
 7
 8 import xlrd as xl
 9 import requests
10
11
12
13 # 创建文件夹
14 def mkdir_floder(path):
15     import os
16     isExists = os.path.exists(path)
17     if not isExists:
18         os.makedirs(path)
19         # print(path + ‘ 创建成功‘)
20         return True
21     else:
22         # 如果目录存在则不创建,并提示目录已存在
23         # print(path + ‘ 目录已存在‘)
24         return False
25
26
27
28 def request_floder(floder01,floder02,filename,url,types):
29     # 拼接全路径
30     all_path = basedirpath+floder01+‘/‘+floder02+‘/‘
31     res = requests.get(url.strip())
32     music = res.content
33     with open(all_path+filename+‘.‘+types, ‘ab‘) as file:  # 保存到本地的文件名
34         file.write(music)
35         file.flush()
36
37
38
39 def get_xls(filename):
40     # 打开文件
41     xls_file=xl.open_workbook(filename)
42     # 获取第一个sheet内容
43     xls_sheet=xls_file.sheets()[0]
44     # 总行数
45     line_nums = xls_sheet.nrows
46     for i in range(0,line_nums):
47         # 获取每一行的内容
48         row_value = xls_sheet.row_values(i)
49         # 获取第一级目录名称
50         folder1 = row_value[0]
51         # 获取第二级目录名称
52         folder2 = row_value[1]
53         # 获取文件名
54         file_name = row_value[2]
55         # 获取url内容
56         url = row_value[3]
57         # 创建目录
58         mkdir_floder(basedirpath+folder1+‘/‘+folder2)
59         # 转换url的类型为dict
60         url = eval(url)
61
62         # 获取视频内容
63         if "audio" in url:
64             if url["audioF"].strip() != "":
65                 audio_url = url["audioF"]
66                 audio_url_end = audio_url.split(‘.‘)[-1]
67                 print(audio_url)
68                 request_floder(folder1, folder2, file_name, audio_url, audio_url_end)
69
70             elif url["audio"].strip() != "":
71                 audio_url = url["audio"]
72                 audio_url_end = audio_url.split(‘.‘)[-1]
73                 print(audio_url)
74                 request_floder(folder1, folder2, file_name, audio_url, audio_url_end)
75
76         # 获取音频内容
77         elif "video" in url:
78             if url["video"].strip() != "":
79                 video_file = url["video"]
80                 video_file_end = video_file.split(‘.‘)[-1]
81                 print(video_file)
82                 request_floder(folder1, folder2, file_name, video_file, video_file_end)
83
84 if __name__ == "__main__":
85     # 文件存放路径
86     basedirpath = "/Users/ianthony/Desktop/Devops/"
87     # 读取的xlsx文件
88     get_xls("001.xlsx")

原文地址:https://www.cnblogs.com/ipyanthony/p/12096828.html

时间: 2024-08-03 06:11:34

python3获取文件中url内容并下载的相关文章

linux shell 脚本获取和替换文件中特定内容

1.从一串字符串中获取特定的信息 要求1:获取本机IP:menu.lst为系统镜象的IP配置文件,需要从中获取到本机IP信息(从文件获取信息) 1 timeout 1 2 default 0 3 4 title live 5 find --set-root /casper/vmlinuz 6 kernel /casper/vmlinuz boot=casper ignore_uuid showmounts ip=eth0,10.0.66.66,255.255.240.0,10.0.64.3 7

java中的文件读取和文件写出:如何从一个文件中获取内容以及如何向一个文件中写入内容

1 2 3 import java.io.BufferedReader; 4 import java.io.BufferedWriter; 5 import java.io.File; 6 import java.io.FileInputStream; 7 import java.io.FileNotFoundException; 8 import java.io.FileOutputStream; 9 import java.io.IOException; 10 import java.io.

效率最高的Excel数据导入---(c#调用SSIS Package将数据库数据导入到Excel文件中【附源代码下载】) 转

效率最高的Excel数据导入---(c#调用SSIS Package将数据库数据导入到Excel文件中[附源代码下载])  本文目录: (一)背景 (二)数据库数据导入到Excel的方法比较   (三)SSIS的简介   (四)数据库中存储过程示例(SSIS应用需要) (五)Excel模板的制作(这步这么简单,稍微介绍一下)   (六)SSIS操作过程(生成Package,用来调用)(下一篇随笔将详细讲解制作Package包的过程,图片太多,篇幅过长,因此本文将直接采用生成的Package包进行

取出文件中字符串内容

为了简化工作,避免手工操作,写了一个读取文件中字符串的小工具类 如果你想获取文件中字符串的内容(例如 XXX ="123" 得到 123)可以使用本工具 public static void main(String[] args) { new SubStringInFile().readAndWrite(); } /* * 读取文件,将字符串("abc"中abc)取出至文件 * 同行中去重 * */ public void readAndWrite(){ FileR

Java IO把一个文件中的内容以字符串的形式读出来

代码记录(备查): /** * 把一个文件中的内容以字符串的形式读出来 * * @author zhipengs * */ public class FileToString { public static void main(String[] args) { System.out.println(readFileToString()); } private static String readFileToString() { // new 一个空文件,用于获取路径 File dirs = ne

Android中WebView获取网页中标题 ,内容, 图片的方法

如题,在Android中WebView获取网页中标题 ,内容, 图片的方法 首先是获取标题,在new WebChromeClient(){}中重写onReceivedTitle()方法 @Override public void onReceivedTitle(WebView view, String title) { super.onReceivedTitle(view, title); // loge.e("__页面标题__"+title); } 获取内容,是参考的这边的 http

将XML文件中的内容转换为Json对象

using System;using System.Collections.Generic;using System.Linq;using System.Text;using System.Xml;using System.Web.Script.Serialization;using Newtonsoft.Json;using System.Windows.Forms; namespace XmlToJsonDemo{ class Program { static void Main(strin

linux命令---查找文件中的内容

linux命令---查找文件中的内容 [[email protected] ~]$ cat 1.txt |egrep '123456789|second'-------匹配123456789或者second的行 first line:123456789012345678901234567890123456789012345678901234567890 second line:one two three four five six seven eight nine ten [[email pro

python 修改文件中的内容

在python的文件操作中,是没有办法对文件中具体某行或者某个位置的内容进行局部的修改的,如果需要对文件的某一行内容进行修改,可以先将文件中的所有的内容全部读取出来,再进行内容判断,是否是需要修改的内容,如果是就替换内容,并且将修改替换过的内容和没有修改的内容全部写入到新的文件中. # 打开旧文件 f = open('file_text.txt','r',encoding='utf-8') # 打开新文件 f_new = open('file_text_bak.txt','w',encoding