抓取新闻或网页正文内容
  • 66
  • 14034

网页正文抓取

抓取新闻或网页正文内容按次计费正常服务
  • 该接口申请即送200次测试调用额度
  • 价格:50天豆/次(≤0.005元)
该接口可支持实时抓取网页正文内容(包含图片等富媒体url)。由于网页结构复杂多变,建议对content字段进行非空判断。请注意:如网页url实际访问时跳转到了https等情况,请用跳转后的真实地址传参。禁止抓取违法违规内容,版权内容需获得对方授权。

接入点列表:

  • 网页正文查询
▼ 接口信息

根据url返回抓取到的正文数据

  • 接口地址:https://apis.tianapi.com/htmltext/index
  • 请求示例:https://apis.tianapi.com/htmltext/index?key=你的APIKEY&url=https://www.tianapi.com/article/131
  • 支持协议:http/https
  • 请求方式:get/post
  • 返回格式:utf-8 json
▼ 请求参数

post方式请求时,enctype应为application/x-www-form-urlencoded

上传文件二进制数据流方式,enctype必须为multipart/form-data

参数url、base64中有特殊字符时,建议对值urlencode编码后传递

名称类型必须示例值/默认值说明
keystring您自己的APIKEY(注册账号后获得)API密钥
urlstringhttps://www.tianapi.com/article/131网页地址
▼ 返回示例

接口数据样例仅作为预览参考,请以实际测试结果为准

旧域名返回的json结构和现在略有不同,请点击此处查看说明

	
	

成功调用,code=>200并产生计费:

错误调用,查看接口错误码释义:

▼ 返回参数

公共参数指所有接口都会返回的参数,应用参数每个接口都不同

名称类型示例值说明
公共参数
codeint200状态码
msgstringsuccess错误信息
resultobject{}返回结果集
应用参数
titlestring科尔透露追梦将于本周五归队标题
contenttext勇士主帅科尔在赛后接受采访时表示...网页内容
picturestringhttps://www.sohu.com/201903091552128845326601.png网页中的第一张图片
ctimeDate2011-08-20 23:54:41网页时间
▼ 接口价格
充值金额可用次数参考单价
免费200次≈0元/次
10元(10W天豆)2000次≈0.005元/次
100元(110W天豆)22000次≈0.0045元/次
500元(600W天豆)120000次≈0.0042元/次
2000元(2600W天豆)520000次≈0.0038元/次
本接口为按次计费类接口,基础价格为50天豆(0.005元)/次,如接口可用次数不足请点此充值天豆(优惠)
▼ 返回状态码

错误信息可能会有所调整,请根据错误状态码(code)进行流程判断

错误状态码错误信息解释帮助
100内部服务器错误报此错误码请及时反馈或等待官方修复
110当前API已下线接口已下线无法使用,可关注相关通知
120API暂时维护中接口暂时关闭维护中,请注意相关公告
130API调用频率超限超过每秒请求数上限,可在控制台-接口管理中查询
140API没有调用权限请检查是否自行在接口管理中停用或被禁用了该接口
150API可用次数不足免费类接口套餐超限或计次类接口余额不足,点此查看说明
160账号未申请该API请先在接口文档页面申请该接口,点此查看说明
170Referer请求来源受限设置了Referer白名单,但来源Referer不在白名单内
180IP请求来源受限设置了IP白名单,但来源IP不在白名单内
190当前key不可用通常为账号无效,此状态无法恢复
230key错误或为空请检查apikey是否填写错误,点此查看帮助
240缺少key参数请检查是否传递了key参数或者编码格式是否符合要求
250数据返回为空数据查询或转换失败,请检查输入值或注意中文编码问题
260参数值不得为空请检查关键参数是否传递了空值
270参数值不符合要求参数值不符合基本格式要求,点此查看说明
280缺少必要的参数缺少必填的参数,请根据接口文档检查
290超过最大输入限制参数值超过输入范围,请查看接口文档的说明
错误码1开头的是系统级错误,2开头的是用户级错误,其中200表示请求成功处理并计费。
▼ 参考代码

此处代码仅演示关键请求片段,实际使用请根据具体环境修改

如需深入学习参考,可点击此处查看部分第三方完整开源项目

活动推荐EXERCISE 更多>

开通会员专享福利
工单 客服