抓取资源（fetch）

• 描述
• 请求
  • 请求语法
  • 访问权限
  • 请求参数
  • 头部信息
  • 请求内容
• 响应
  • 响应语法
  • 头部信息
  • 响应内容
  • 响应状态码
• 示例
  • 命令行示例
  • 请求示例
  • 响应示例
• 附注
• 内部参考资源

描述

从指定URL抓取资源，并将该资源存储到指定空间中。

请求

请求语法

POST /fetch/<EncodedURL>/to/<EncodedEntryURI> HTTP/1.1
Host:           iovip.qbox.me
Content-Type:   application/x-www-form-urlencoded
Authorization:  QBox <AccessToken>

EncodedURL参数为对指定URL地址进行URL安全的Base64编码后的字符串，EncodedEntryURI为 <bucket>:<key> 或者 <bucket> 的 urlsafe base64 编码。如果指定为<bucket>的 urlsafe base64 编码，默认文件的hash值作为key。

访问权限

管理凭证方式。

请求参数

该请求无需设置任何参数。

头部信息

头部名称	必填	说明
Authorization	是	该参数应严格按照管理凭证格式进行填充，否则会返回401错误码 一个合法的Authorization值应类似于：QBox QNJi_bYJlmO5LeY08FfoNj9w_r7...

请求内容

该请求无需指定请求内容。

响应

响应语法

HTTP/1.1 200 OK
Content-Type: application/json
Cache-Control: no-store

{
    "hash": "<hash>",
    "key":  "<key>"
}

头部信息

头部名称	必填	说明
Content-Type	是	正常情况下该值将被设为application/json，表示返回JSON格式的文本信息

其它可能返回的头部信息，请参考常见响应头部信息。

响应内容

• 如果请求成功，返回文件的hash值和key。
• 如果请求失败，返回包含如下内容的JSON字符串（已格式化，便于阅读）：
  

{
    "error":   "<errMsg    string>",
}

字段名称	必填	说明
error	是	与HTTP状态码对应的消息文本

响应状态码

HTTP状态码	含义
200	抓取成功
400	请求报文格式错误
401	管理凭证无效
404	抓取资源不存在
478	源站返回404外，所有非200的response都返回478
599	服务端操作失败 如遇此错误，请将完整错误信息（包括所有HTTP响应头部）通过邮件发送给我们
其余状态码	源站返回的状态码，请检查源站资源的可访问性

命令行示例

curl -i \
     -o - \
     -H 'Content-Type: application/x-www-form-urlencoded' \
     -H 'Authorization: QBox u8WqmQu1jH21kxpIQmo2LqntzugM1VoHE9_pozCU:2LJIG...' \
     -X POST \
     'http://iovip.qbox.me/fetch/aHR0cDovL3Fpbml1LmNvbS9pbmRleC5odG1s/to/bmV3ZG9jczpmaW5kLm1hbi50eHQ='

请求示例

POST /fetch/aHR0cDovL3Fpbml1LmNvbS9pbmRleC5odG1s/to/bmV3ZG9jczpmaW5kLm1hbi50eHQ= HTTP/1.1
User-Agent: curl/7.30.0
Host: iovip.qbox.me
Accept: */*
Authorization: QBox u8WqmQu1jH21kxpIQmo2LqntzugM1VoHE9_pozCU:2LJIG...(过长已省略)

注意：要在Authorization头部的<AccessToken>前添加QBox和半角空格。

响应示例

HTTP/1.1 200 OK
Server: nginx/1.0.8
Date: Thu, 05 Dec 2013 06:55:29 GMT
Content-Type: application/json
Connection: keep-alive
Content-Length: 0
X-Log: RS.in;RS.mo;qtbl.mv:3;MQ;MC/404;RS.mcd:1;RS:5
X-Reqid: wxIAAD3btw-v3TwT

附注

• 本接口执行同步操作，如果抓取的资源过大，可能会导致超时。

内部参考资源

• 管理凭证
• EncodedEntryURI格式
• URL安全的Base64编码
• 七牛etag算法