English
中文简体
  • 如何开始

  • 如何使用IpStar代理

  • 常见问题解答

  • 数据 API

通用网页抓取 API 文档

1. 提交爬虫任务 API
POST

https://scraper.ipstar.io/v1/scraper/web/task

Header
Key类型描述示例
AuthorizationstringBearer + api-keyBearer
Body
Key类型描述是否必需
geostring国家位置编码可选
localestring语言编码可选
js_renderbooleanJS 渲染可选
formatarray[string] 结果格式可选
screen_typeinteger
  • 1: 全屏截图
  • 2: 可视区截图
可选
urlstring 链接地址必需
2. 爬虫任务列表 API
GET

https://scraper.ipstar.io/v1/scraper/web/tasks

Header
Key类型描述示例
AuthorizationstringBearer + api-keyBearer
Params
Key类型描述是否必需
start_timestring开始时间可选
end_timestring结束时间可选
page_indexinteger分页索引可选
page_sizeinteger分页容量可选
Result
Key类型描述是否必需
codeinteger200
msgstringsuccess
dataobject
count
integer必需
list
array
task_id
string任务 ID必需
url
string链接地址必需
status
integer
  • 0: 待处理
  • 1: 运行中
  • 2: 成功
  • 3: 失败
必需
req_num
integer 提交数量必需
suc_num
integer成功数量必需
formats
array[string] 结果格式必需
duration
integer时长必需
start_time
string开始时间必需
end_time
string结束时间必需
create_time
string创建时间必需
result
object必需
html
stringHTML必需
png
stringPNG必需