百度360必应搜狗淘宝本站头条
grid 设置导航栏dedecms模版移位运算context xml
当前位置：网站首页 > 文章教程 > 正文

linux之curl使用技巧 linux curl命令使用

xsobi 2024-12-23 14:20 1 浏览


获取页面内容

> curl https://json.im

显示 HTTP 头

> curl -I https://json.im
HTTP/1.1 200 OK
Server: openresty
Date: Fri, 04 Jun 2021 07:38:32 GMT
Content-Type: text/html
Content-Length: 12864
Last-Modified: Thu, 29 Apr 2021 01:39:01 GMT
Connection: keep-alive
Vary: Accept-Encoding
ETag: "608a0e35-3240"
Expires: Fri, 04 Jun 2021 08:38:32 GMT
Cache-Control: max-age=3600
Accept-Ranges: bytes

同时显示 HTTP 头和文件内容，使用 -i 选项

> curl -i https://json.im

将链接保存到文件

我们可以使用 > 符号将输出重定向到本地文件中。

> curl https://json.im > index.html

也可以通过 curl 自带的 -o/-O 选项将内容保存到文件中。

  • -o（小写的 o）：结果会被保存到命令行中提供的文件名
  • -O（大写的 O）：URL 中的文件名会被用作保存输出的文件名
> curl -o index.html https://json.im
> curl -O https://json.im/index.html

注意：使用 -O 选项时，必须确保链接末尾包含文件名，否则 curl 无法正确保存文件。如果遇到链接中无文件名的情况，应该使用 -o 选项手动指定文件名，或使用重定向符号

同时下载多个文件

我们可以使用-o 或-O选项来同时指定多个链接，按照以下格式编写命令：

> curl -O html https://json.im/1.html   -O html https://json.im/2.html
> curl -o p1.html https://json.im/1.html  -o p2.html https://json.im/2.html

使用 -L 跟随链接重定向

如果直接使用 curl 打开某些被重定向后的链接，这种情况下就无法获取我们想要的网页内容。例如：

> curl http://json.im
<html>
<head><title>301 Moved Permanently</title></head>
<body>
<center><h1>301 Moved Permanently</h1></center>
<hr><center>openresty</center>
</body>
</html>

而当我们通过浏览器打开该链接时，会自动跳转到https://json.im 。此时我们想要 curl 做的，就是像浏览器一样跟随链接的跳转，获取最终的网页内容。我们可以在命令中添加 -L 选项来跟随链接重定向：

> curl -L http://json.im

使用 -A 自定义 User-Agent

我们可以使用 -A 来自定义用户***，例如下面的命令将伪装成安卓火狐浏览器对网页进行请求：

> curl -A "Mozilla/5.0 (Android; Mobile; rv:35.0) Gecko/35.0 Firefox/35.0" https://json.im

使用 -H 自定义 header

当我们需要传递特定的 header 的时候，可以仿照以下命令来写：

> curl -H "Referer: https://rumenz.com" -H "User-Agent: Custom-User-Agent" https://json.im

header 中传递 Cookie

> curl -H "Cookie: JSESSIONID=xxx" https://json.im

使用-c保存Cookie

使用 cURL 访问页面的时候，默认是不会保存 Cookie 的

> curl -c "cookie.txt" https://json.im

使用 -b 读取 Cookie

> curl -b "cookie.txt" https://json.im

使用-d发送POST请求

有一个登录页面 https://json.im/login，只需要提交用户名和密码便可登录。我们可以使用 cURL 来完成这一 POST 请求，-d 用于指定发送的数据，-X 用于指定发送数据的方式

> curl -d "userName=rumenz&passwd=123456" -X POST https://json.im/login

在使用 -d 的情况下，如果省略 -X，则默认为 POST 方式：

> curl -d "userName=rumenz&passwd=123456" https://json.im/login

从文件中读取data.txt文本

> curl -d "@data.txt" https://json.im/upload

恢复中断下载

> curl -C - -O https://json.im/jdk.tar.gz

从文件下载URL

如果将curl与xargs结合使用，则可以从文件中的URL列表中下载文件。

> xargs -n 1 curl -O < urls.txt

CURL设置代理

> curl https://json.im/  -U user:password  -x 127.0.0.1:3128

如果您的代理不需要身份验证,您可以跳过-U user:password 。

比如Nginx配置代理

server {
    listen                         3128;
    resolver                       8.8.8.8;
    proxy_connect;
    proxy_connect_allow            443 563;
    proxy_connect_connect_timeout  10s;
    proxy_connect_read_timeout     10s;
    proxy_connect_send_timeout     10s;
    location / {
        proxy_pass http://$host;
        proxy_set_header Host $host;
    }
}

上传文件到ftp

> curl -u username:password -T jdk.tar.gz ftp://json.im

修改名称解析

> curl --resolve json.im:443:127.0.0.1 https://json.im:443/

对https://json.im的查询将告诉curl从127.0.0.1请求该站点，而不是使用DNS或/etc/hosts文件。

限制下载率

> curl --limit-rate 100K https://json.im/jdk.tar.gz -O

HTTP认证

有些网域需要HTTP认证，这时curl需要用到–user参数。

> curl --user name:passwd https://json.im

原文链接:https://rumenz.com/rumenbiji/linux-curl-skills.html

相关推荐

好用的云函数!后端低代码接口开发，零基础编写API接口

前言在开发项目过程中，经常需要用到API接口，实现对数据库的CURD等操作。不管你是专业的PHP开发工程师，还是客户端开发工程师，或者是不懂编程但懂得数据库SQL查询，又或者是完全不太懂技术的人，通过...

快速上手:Windows 平台上 cURL 命令的使用方法

在工作流程中，为了快速验证API接口有效性，团队成员经常转向直接执行cURL命令的方法。这种做法不仅节省时间，而且促进了团队效率的提升。对于使用Windows系统的用户来说，这里有一套详细...

使用 Golang net/http 包:基础入门与实战

简介Go的net/http包是构建HTTP服务的核心库，功能强大且易于使用。它提供了基本的HTTP客户端和服务端支持，可以快速构建RESTAPI、Web应用等服务。本文将介绍ne...

#小白接口# 使用云函数，人人都能编写和发布自己的API接口

你只需编写简单的云函数，就可以实现自己的业务逻辑，发布后就可以生成自己的接口给客户端调用。果创云支持对云函数进行在线接口编程，进入开放平台我的接口-在线接口编程，设计一个新接口，设计和配置好接口参...

极度精神分裂:我家没有墙面开关，但我虚拟出来了一系列开关

本内容来源于@什么值得买APP，观点仅代表作者本人｜作者：iN在之前和大家说过，在iN的家里是没有墙面开关的。...

window使用curl命令的注意事项 curl命令用法

cmd-使用curl命令的注意点前言最近在cmd中使用curl命令来测试restapi,发现有不少问题,这里记录一下。在cmd中使用curl命令的注意事项json不能由单引号包括起来json...

Linux 系统curl命令使用详解 linuxctrl

curl是一个强大的命令行工具，用于在Linux系统中进行数据传输。它支持多种协议，包括HTTP、HTTPS、FTP等，用于下载或上传数据，执行Web请求等。curl命令的常见用法和解...

Tornado 入门:初学者指南 tornados

Tornado是一个功能强大的PythonWeb框架和异步网络库。它最初是为了处理实时Web服务中的数千个同时连接而开发的。它独特的Web服务器和框架功能组合使其成为开发高性能Web...

PHP Curl的简单使用 php curl formdata

本文写给刚入PHP坑不久的新手们，作为工具文档，方便用时查阅。CURL是一个非常强大的开源库，它支持很多种协议，例如，HTTP、HTTPS、FTP、TELENT等。日常开发中，我们经常会需要用到cur...

Rust 服务器、服务和应用程序:7 Rust 中的服务器端 Web 应用简介

本章涵盖使用Actix提供静态网页...

我给 Apache 顶级项目提了个 Bug apache顶级项目有哪些

这篇文章记录了给Apache顶级项目-分库分表中间件ShardingSphere提交Bug的历程。说实话，这是一次比较曲折的Bug跟踪之旅。10月28日，我们在GitHub上提...

linux文件下载、服务器交互(curl)

基础环境curl命令描述...

curl简单使用 curl sh

1.curl--help#查看关键字2.curl-A“（添加user-agent<name>SendUser-Agent<name>toserver）”...

常用linux命令:curl 常用linux命令大全

//获取网页内容//不加任何选项使用curl时，默认会发送GET请求来获取内容到标准输出$curlhttp://www.baidu.com//输出<!DOCTYPEh...

三十七，Web渗透提高班之hack the box在线靶场注册及入门知识

一.注册hacktheboxHackTheBox是一个在线平台，允许测试您的渗透技能和代码，并与其他类似兴趣的成员交流想法和方法。它包含一些不断更新的挑战，并且模拟真实场景，其风格更倾向于CT...

一周热门
最近发表
标签列表