curl 命令行下载工具使用方法小结

2023-05-16

CURL是一个利用URL语法在命令行下工作的文件传输工具。它支持文件的上传和下载,所以是综合传输工具,但按传统,习惯称CURL为下载工具。


获取curl 

curl 命令行下载工具

curl的官方网站为: 
http://curl.haxx.se
官方下载页面为:http://curl.haxx.se/download.html 

你可能并不清楚你需要下载哪个版本,没关系,官方提供了下载向导: 

http://curl.haxx.se/dlwiz/你可以根据自己的情况一步步选择后下载。我使用的版本 
我的最终选择页面为: 

http://curl.haxx.se/dlwiz/?type=bin&os=Win32&flav=-&ver=2000%2FXP 

下载的版本是:curl version: 7.19.5 (SSL disabled) 即上述页面第二个: 

http://curl.haxx.se/download/curl-7.19.5-win32-nossl-sspi.zip 

因为第一个不能下载,403error,第三个使用中存在缺失dll文件等问题

如何使用curl 

curl并不是双击即可运行,你需要在命令提示符下使用它 
如何进入命令提示符 
点击“开始”——“运行”——输入CMD 

或,WIN+R,输入CMD 

下载我下载版本的CURL后,解压后文件夹放在如:D:\curl的文件夹里(curl路径) 

命令提示符窗口中输入"d:"回车,然后输入“cd curl”即可跳转到curl文件夹, 

至此可以输入curl命令了(根据你的curl类推)或你也可以将curl加入到系统环境变量如何将curl所在文件夹加入系统变量 
右键单击“我的电脑”——“属性”——“高级”——“环境变量”—— 

“系统变量”——“Path”——“编辑”——加入“;D:\curl”(注意分号, 

D:\curl换成你的curl路径)——“确定”加入到系统环境变量后可在命令提示符内直接运行如 

“curl -O http://curl.haxx.se/download/curl-7.19.5-win32-ssl-sspi.zip” 

这样的命令,无需进入curl所在文件夹curl命令用法

一个不错的Curl教程
1) 
二话不说,先从这里开始吧! 
curl http://www.yahoo.com 

回车之后,www.yahoo.com 的html就稀里哗啦地显示在屏幕上了~~~~~ 

2) 
嗯,要想把读过来页面存下来,是不是要这样呢? 
curl http://www.yahoo.com > page.html 

当然可以,但不用这么麻烦的! 
用curl的内置option就好,存下http的结果,用这个option: -o 
curl -o page.html http://www.yahoo.com 

这样,你就可以看到屏幕上出现一个下载页面进度指示。等进展到100%,自然就OK咯 

3) 
什么什么?!访问不到?肯定是你的proxy没有设定了。 
使用curl的时候,用这个option可以指定http访问所使用的proxy服务器及其端口: -x 
curl -x 123.45.67.89:1080 -o page.html http://www.yahoo.com 


4) 
访问有些网站的时候比较讨厌,他使用cookie来记录session信息。 
像IE/NN这样的浏览器,当然可以轻易处理cookie信息,但我们的curl呢?..... 
我们来学习这个option: -D <-- 这个是把http的response里面的cookie信息存到一个特别的文件中去 
curl -x 123.45.67.89:1080 -o page.html -D cookie0001.txt http://www.yahoo.com 

这样,当页面被存到page.html的同时,cookie信息也被存到了cookie0001.txt里面了 


5) 
那么,下一次访问的时候,如何继续使用上次留下的cookie信息呢?要知道,很多网站都是靠监视你的cookie信息, 
来判断你是不是不按规矩访问他们的网站的。 
这次我们使用这个option来把上次的cookie信息追加到http request里面去: -b 
curl -x 123.45.67.89:1080 -o page1.html -D cookie0002.txt -b cookie0001.txt http://www.yahoo.com 

这样,我们就可以几乎模拟所有的IE操作,去访问网页了! 


6) 
稍微等等~~~~~我好像忘记什么了~~~~~ 
对了!是浏览器信息~~~~ 

有些讨厌的网站总要我们使用某些特定的浏览器去访问他们,有时候更过分的是,还要使用某些特定的版本~~~~ 
NND,哪里有时间为了它去找这些怪异的浏览器呢!? 

好在curl给我们提供了一个有用的option,可以让我们随意指定自己这次访问所宣称的自己的浏览器信息: -A 
curl -A "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0)" -x 123.45.67.89:1080 -o page.html -D cookie0001.txt http://www.yahoo.com 

这样,服务器端接到访问的要求,会认为你是一个运行在Windows 2000上的IE6.0,嘿嘿嘿,其实也许你用的是苹果机呢! 

而"Mozilla/4.73 [en] (X11; U; Linux 2.2; 15 i686"则可以告诉对方你是一台PC上跑着的Linux,用的是Netscape 4.73,呵呵呵 


7) 
另外一个服务器端常用的限制方法,就是检查http访问的referer。比如你先访问首页,再访问里面所指定的下载页,这第二次访问的 referer地址就是第一次访问成功后的页面地址。这样,服务器端只要发现对下载页面某次访问的referer地址不是首页的地址,就可以断定那是个盗连了~~~~~ 

讨厌讨厌~~~我就是要盗连~~~~~!! 
幸好curl给我们提供了设定referer的option: -e 
curl -A "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0)" -x 123.45.67.89:1080 -e "mail.yahoo.com" -o page.html -D cookie0001.txt http://www.yahoo.com 

这样,就可以骗对方的服务器,你是从mail.yahoo.com点击某个链接过来的了,呵呵呵 


8) 
写着写着发现漏掉什么重要的东西了!----- 利用curl 下载文件 

刚才讲过了,下载页面到一个文件里,可以使用 -o ,下载文件也是一样。 
比如, curl -o 1.jpg http://cgi2.tky.3web.ne.jp/~zzh/screen1.JPG 
这里教大家一个新的option: -O 
大写的O,这么用: curl -O http://cgi2.tky.3web.ne.jp/~zzh/screen1.JPG 
这样,就可以按照服务器上的文件名,自动存在本地了! 

再来一个更好用的。 
如果screen1.JPG以外还有screen2.JPG、screen3.JPG、....、screen10.JPG需要下载,难不成还要让我们写一个script来完成这些操作? 
不干! 
在curl里面,这么写就可以了: 
curl -O http://cgi2.tky.3web.ne.jp/~zzh/screen[1-10].JPG 

呵呵呵,厉害吧?!~~~ 

9) 
再来,我们继续讲解下载! 
curl -O http://cgi2.tky.3web.ne.jp/~/[001-201].JPG 

这样产生的下载,就是 
~zzh/001.JPG 
~zzh/002.JPG 
... 
~zzh/201.JPG 
~nick/001.JPG 
~nick/002.JPG 
... 
~nick/201.JPG 

够方便的了吧?哈哈哈 

咦?高兴得太早了。 
由于zzh/nick下的文件名都是001,002...,201,下载下来的文件重名,后面的把前面的文件都给覆盖掉了~~~ 

没关系,我们还有更狠的! 
curl -o #2_#1.jpg http://cgi2.tky.3web.ne.jp/~/[001-201].JPG 

--这是.....自定义文件名的下载? 
--对头,呵呵! 

#1是变量,指的是这部分,第一次取值zzh,第二次取值nick 
#2代表的变量,则是第二段可变部分---[001-201],取值从001逐一加到201 
这样,自定义出来下载下来的文件名,就变成了这样: 
原来: ~zzh/001.JPG ---> 下载后: 001-zzh.JPG 
原来: ~nick/001.JPG ---> 下载后: 001-nick.JPG 

这样一来,就不怕文件重名啦,呵呵 


9) 
继续讲下载 
我们平时在windows平台上,flashget这样的工具可以帮我们分块并行下载,还可以断线续传。 
curl在这些方面也不输给谁,嘿嘿 

比如我们下载screen1.JPG中,突然掉线了,我们就可以这样开始续传 
curl -c -O http://cgi2.tky.3wb.ne.jp/~zzh/screen1.JPG 

当然,你不要拿个flashget下载了一半的文件来糊弄我~~~~别的下载软件的半截文件可不一定能用哦~~~ 

分块下载,我们使用这个option就可以了: -r 
举例说明 
比如我们有一个http://cgi2.tky.3web.ne.jp/~zzh/zhao1.mp3 要下载(赵老师的电话朗诵 :D ) 
我们就可以用这样的命令: 
curl -r 0-10240 -o "zhao.part1" http:/cgi2.tky.3web.ne.jp/~zzh/zhao1.mp3 &\ 
curl -r 10241-20480 -o "zhao.part1" http:/cgi2.tky.3web.ne.jp/~zzh/zhao1.mp3 &\ 
curl -r 20481-40960 -o "zhao.part1" http:/cgi2.tky.3web.ne.jp/~zzh/zhao1.mp3 &\ 
curl -r 40961- -o "zhao.part1" http:/cgi2.tky.3web.ne.jp/~zzh/zhao1.mp3 

这样就可以分块下载啦。 
不过你需要自己把这些破碎的文件合并起来 
如果你用UNIX或苹果,用 cat zhao.part* > zhao.mp3就可以 
如果用的是Windows,用copy /b 来解决吧,呵呵 

上面讲的都是http协议的下载,其实ftp也一样可以用。 
用法嘛, 
curl -u name:passwd ftp://ip:port/path/file 
或者大家熟悉的 
curl ftp://name:passwd@ip:port/path/file 



10) 
说完了下载,接下来自然该讲上传咯 
上传的option是 -T 

比如我们向ftp传一个文件: curl -T localfile -u name:passwd ftp://upload_site:port/path/ 

当然,向http服务器上传文件也可以 
比如 curl -T localfile http://cgi2.tky.3web.ne.jp/~zzh/abc.cgi 
注意,这时候,使用的协议是HTTP的PUT method 

刚才说到PUT,嘿嘿,自然让老服想起来了其他几种methos还没讲呢! 
GET和POST都不能忘哦。 

http提交一个表单,比较常用的是POST模式和GET模式 

GET模式什么option都不用,只需要把变量写在url里面就可以了 
比如: 
curl http://www.yahoo.com/login.cgi?user=nickwolfe&password=12345 

而POST模式的option则是 -d 

比如,curl -d "user=nickwolfe&password=12345" http://www.yahoo.com/login.cgi 
就相当于向这个站点发出一次登陆申请~~~~~ 

到底该用GET模式还是POST模式,要看对面服务器的程序设定。 

一点需要注意的是,POST模式下的文件上的文件上传,比如 
<form method="POST" enctype="multipar/form-data" action="http://cgi2.tky.3web.ne.jp/~zzh/up_file.cgi"> 
<input type=file name=upload> 
<input type=submit name=nick value="go"> 
</form> 
这样一个HTTP表单,我们要用curl进行模拟,就该是这样的语法: 
curl -F upload=@localfile -F nick=go http://cgi2.tky.3web.ne.jp/~zzh/up_file.cgi 

罗罗嗦嗦讲了这么多,其实curl还有很多很多技巧和用法 
比如 https的时候使用本地证书,就可以这样 
curl -E localcert.pem https://remote_server 

再比如,你还可以用curl通过dict协议去查字典~~~~~ 
curl dict://dict.org/d:computer

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

curl 命令行下载工具使用方法小结 的相关文章

  • 智能化汽车3D ToF摄像头

    理想L9 xff08 理想ONE之后的第二款车 xff09 将搭载3D ToF传感器 xff0c 除了驾驶员眼睛注视和头部跟踪监控 xff0c 还将作为理想自研的深度学习 43 多模态三维空间交互技术的主要硬件载体 而此前 xff0c 大部
  • 汽车驾驶自动化分级L1~L5

    在 汽车驾驶自动化分级 里面 xff0c 自动驾驶的标准称呼是 驾驶自动化 xff0c 指车辆以自动的方式持续地执行部分或全部动态驾驶任务的行为 自动驾驶级别分级 基于驾驶自动化系统能够执行动态驾驶任务的程度 xff0c 驾驶自动化分成 0
  • 质量管理五大工具详解

    1 统计过程控制 xff08 SPC xff0c Statistical Process Control xff09 xff1b Statistical Process Control 是一种制造控制方法 xff0c 是将制造中的控制项目
  • 用pyinstaller打包python遇到的坑

    最近写了一个小程序 xff0c 用到了pandas xff0c matplotlib模块 xff0c 打包时出现各种问题 xff0c 总结下走过的坑 因为之前使用openpyxl写过一个更简单的程序 xff0c 仅用来读写excel xff
  • 8D报告组成部分

    8D问题解决法 xff08 Eight Disciplines Problem Solving xff0c 缩写 xff1a 8D xff09 也称为团队导向问题解决方法或8D report xff0c 是一个处理及解决问题的方法 xff0
  • 高通cDSP介绍汇总

    Qualcomm Hexagon Compute DSP cDSP 是高通平台上专门用来做通用计算的硬件加速单元 xff0c 与主机 CPU 相比 xff0c DSP 通常以较低的时钟速度运行 xff0c 并提供更多的并行指令级 这使得 D
  • PCB拼板方式

    Pcb拼板方式一般有三种 xff1a V割 V CUT 邮票孔以和空心连接条 PCB拼板方式 V割 V割 xff0c 又称V CUT xff0c 在规则板中使用较多 V割是在两个板子的连接处画一个槽 xff0c 只要将两个板子拼在一起 xf
  • 车联网名词缩写含义

    TSP xff1a Telematics Service Provider xff1b DSRC xff1a 专用短程通信技术是一种新型的技术 xff0c Dedicated Short RangeCommunication DSRC xf
  • 质量管理PPAP说明

    PPAP是英文Production Part Approval Process的缩写 xff0c 中文翻译为生产件批准程序 PPAP是TS16949质量管理体系五大工具之一 xff0c 用于汽车整车或零部件生产过程的质量管控 各种质量管理类
  • Vlookup最经典的10种用法

    该函数的语法规则如下 xff1a VLOOKUP lookup value table array col index num range lookup 参数 简单说明 输入数据类型 lookup value 要查找的值 数值 引用或文本字
  • 宝马项目化流程标准(BMW ABC flyer requirement)

    ABC flyer BMWQMT build phase requirement 宝马的项目流程标准叫做ABC flyer 也叫QMT build phase requirement 为什么叫这么名字 xff0c 是因为宝马项目的产品零件分
  • 数字无线广播(DAB、DRM)

    1 什么是数字广播 数字化技术指的是运用0和1两位数字编码 xff0c 通过电子计算机 光缆 通信卫星等设备 xff0c 来表达 传输和处理所有信息的技术 数字化技术一般包括 数字编码 数字压缩 数字传输 数字调制 与解调 等技术 所谓的数
  • 什么是IPD管理体系?

    集成产品开发 xff08 Integrated Product Development 简称IPD xff09 是一套产品开发的模式 理念与方法 源于美国PRTM公司出版的 产品及生命周期优化法 一书 最具有代表实践者有IBM和华为 IPD
  • 全球整车开发流程(GVDP)

    整车开发流程用于整车开发的管理控制 xff0c 其中换代开发 换型开发 年度改型开发和变型开发可以根据所开发产品的特点或资源环境需求 产品开发流程图 产品开发参考周期 如下 xff1a 1 平台项目 开发全新的车型平台 xff0c 采用全新
  • DataFrame 切片取值

    基本格式 xff1a dataframe 列名 1 取多列 列名要用中括号括起来 xff0c 所以下述命令 dataframe P4 profit rate P3PS P3NS 没问题 返回pandas core frame DataFra
  • APQP(advanced product quality planning先期产品质量策划)

    APQP xff08 advanced product quality planning先期产品质量策划 xff09 xff0c 圈子里面无论是做研发 做项目还是做SQE的都不陌生 xff0c 很多时候 xff0c 尤其是SQE会比较困惑
  • 8D和A3报告

    8D和3A报告 xff0c 他们都不仅仅是记录问题的一种文书 xff0c 而是解决问题的工具 A3发展于TPS xff08 Toyota Production system xff09 xff0c 可以用来解决问题 xff0c 沟通 xff
  • Ubuntu出现包依赖错误的解决方法

    大家在使用apt get安装软件时经常会出现这种包依赖错误 这主要是因为apt get的源中没有所要安装的package的依赖包 主要有以下两种解决方案 xff1a xff11 将CD加入Ubuntu的apt get源 参见我的另一篇博客
  • stm32 类型转换

    stm32怎么把uint8 t类型转换成int类型 可以使用强制类型转换 xff1a int n 61 int uint8 t 参考例子 xff1a include lt stdio h gt int main void uint8 t a
  • C语言不带头结点链表创建,删除,插入总结

    一 创建链表 1 第一种创建链表的方法 xff0c 注意对比和第二种创建链表的细微之处 xff0c typedef struct mynode int num float score struct mynode next Node Pnod

随机推荐

  • http协议基本认证 Authorization

    http协议是无状态的 xff0c 浏览器和web服务器之间可以通过cookie来身份识别 桌面应用程序 比如新浪桌面客户端 xff0c skydrive客户端 跟Web服务器之间是如何身份识别呢 xff1f 阅读目录 什么是HTTP基本认
  • Java 中大小端 int 与 byte 数组转换

    1 小端模式转换 1 1 int 转 byte 数组 xff0c 低位在前 xff0c 高位在后 将int数值转换为占四个字节的byte数组 xff0c 本方法适用于 低位在前 xff0c 高位在后 的顺序 和bytesToInt xff0
  • 无人机/FPV穿越机航模的遥控器/接收机等配件厂商

    本人最近迷恋上了穿越机 整理一些资料 xff0c 方便后来人学习 有其他更新资料 xff0c 欢迎留言 xff0c 争取打造成好的工具书 新手入门可以看百科 xff1a http wiki fpvbang com 穿越机电子系统表 xff1
  • FPV穿越机一启动就加速翻滚(死亡翻滚)解决办法

    最近不是开始入坑穿越机吗 xff0c 买了一个moblite7玩玩 xff0c 碰到了这个问题 大家在购买其他穿越机 xff0c 或者自组穿越机 xff0c 还有重置了穿越机的设置好 也很有可能碰到问题 xff0c 我把自己搜索并解决这个问
  • Python读取Microsoft Access Database

    公司有一个小零件进出库管理系统 xff0c 数据库是使用Microsoft Access Database xff0c 因长期存储会有生锈问题 xff0c 导致零件报废 因此基于原数据的进库出库在库数据 xff0c 做一个python脚本
  • Android13 新特性和开发适配须知

    前言 目前 Google 已经发布了 Android 13 的正式版 xff0c 虽然国内的手机能用上 Android 13 还有一段时间 xff0c 不过开发者们可以通过模拟器来体验 xff0c 那么我们来看看 Android 13 都有
  • ./configure 的配置和用法

    Linux环境下的软件安装 xff0c 并不是一件容易的事情 xff1b 如果通过源代码编译后在安装 xff0c 当然事情就更为复杂一些 xff1b 现在安装各种软件的教程都非常普遍 xff1b 但万变不离其中 xff0c 对基础知识的扎实
  • JDK1.8(jdk8.0)新特性

    Java is still not dead and people are starting to figure that out 本教程将用带注释的简单代码来描述新特性 xff0c 你将看不到大片吓人的文字 一 接口的默认方法 Java
  • MQTT协议通俗讲解

    参考 Reference 协议文档 Offical Docs v3 1 1 英文原版 中文翻译版 其他资源 网站 MQTT官方主页 Eclipse Paho 项目主页 测试工具 MQTT Spy xff08 基于JDK xff09 Chro
  • mqtt实现库对比

    发现一片非常好的文章 xff0c 从17个方面 xff0c 介绍几个分布式消息队列系统 xff0c 非常棒的内容 xff0c 方便做技术选型 xff0c 平衡各种 xff1a 17 个方面 xff0c 综合对比 Kafka RabbitMQ
  • 几种直播流媒体协议

    题外话 xff1a HTTP渐进下载流媒体播放 基于TCP yy 乐视 爱奇艺 优酷土豆 搜狐视频 花椒直播 xff0c 主要还是通过rtmp amp hls来实现的 xff0c 但他们也意识到rtmp的天生缺陷 xff0c 所以不管是技术
  • Android9.0(androidP)系统API和行为变化

    这篇文章 xff0c 是Android官方文档的中文版本 注意事项 xff08 AndroidP 特性 xff09 xff1a 1 android os Build VERSION RELEASE xff0c 需要当做字符串类型处理 2 依
  • Android version名称,版本号,API level,代号 表(updateing)

    系统版本OS Version 版本号API level 发布日期release Date 发布代号nick Name 主要特性feature android1 0 API1 2008 10 android1 1 API2 2009 2 an
  • Android10.0(Q)新特性和行为变更

    Android Q 还为开发者们带去了许多新功能 xff0c 如折叠屏增强项 新网络连接 API 全新的媒体解码器 摄像头新功能 NNAPI 扩展 Vulkan 1 1 图形支持等等 2019 4 Beta2版本发布 点击查看Google官
  • JNI 使用案例详解(一)

    很久没有写博客了 xff0c 今天来写一下关于在android开发过程中使用JNI的详细案例及操作步骤 首先 xff0c JNI xff0c 我的理解 xff0c 他就是java和C之间的桥梁 xff0c 很多写C 43 43 和JAVA的
  • Echarts添加鼠标点击事件

    1 通常我们只使用了以下代码 xff0c 通过配置项和数据显示图表 var myChart 61 echarts init document getElementById 39 tree chart 39 myChart setOption
  • linux下进程的进程最大数、最大线程数、进程打开的文件数和ulimit命令修改硬件资源限制

    ulimit命令查看和更改系统限制 ulimit命令详解 ulimit用于shell启动进程所占用的资源 xff0c 可以用来设置系统的限制 语法格式 ulimit acdfHlmnpsStvw size 在 etc security li
  • c++ http服务器客户端程序-传输json解析json数据(2)

    1 服务器端的实例 xff1a include 34 stdafx h 34 include lt iostream gt include lt chrono gt include lt cstdio gt include 34 httpl
  • 读华为C语言编程规范(标识符、变量)

    标识符 xff1a 命名规则 xff1a unix like风格 xff0c 单词小写 xff0c 用 分割 xff0c text mutex windows风格 xff0c 大小写混用 xff0c 单词连一起 xff0c 每个单词首字母大
  • curl 命令行下载工具使用方法小结

    CURL是一个利用URL语法在命令行下工作的文件传输工具 它支持文件的上传和下载 xff0c 所以是综合传输工具 xff0c 但按传统 xff0c 习惯称CURL为下载工具 获取curl curl 命令行下载工具 curl的官方网站为 xf