nodejs爬虫,POST请求发送Request Playload格式数据

57 篇文章 34 订阅
58 篇文章 16 订阅

nodejs爬虫,POST请求发送Request Playload格式数据。

本文以网易云课堂其中2个POST请求为例,使用request模块实现。

例子1

1、地址:

http://study.163.com/dwr/call/plaincall/MongoAttributesBean.obtainByRandomWithLimitTime.dwr?1521595046314

2、请求截图


从上图可以看到"Content-Type"为"text/plain";数据发送方式:Request Payload,

数据就是普通换行的字符串,而不是JSON字符串。

3、nodejs代码

  let request = require("request");
  let url = `http://study.163.com/dwr/call/plaincall/MongoAttributesBean.obtainByRandomWithLimitTime.dwr?${+new Date()}`;
  let body = `callCount=1\nscriptSessionId=\${scriptSessionId}190\nhttpSessionId=17faef42e6db4291819618913dc7f8da\nc0-scriptName=MongoAttributesBean\nc0-methodName=obtainByRandomWithLimitTime\nc0-id=0\nc0-param0=string:spjdt\nc0-param1=number:7\nbatchId=1521527406791\n`;
  let opts = {
    url,
    method: "POST",
    headers: { "Content-Type": "text/plain" },
    body: body
  }
  request(opts, (e, b, d) => {
    if (e) return console.log(e);
    console.log(d);
  })
4、运行结果


能正常获取返回的数据。

例子2

1、地址:http://study.163.com/p/search/studycourse.json
这是网易云课堂搜索课程的请求地址。
2、请求截图

"Content-Type"为"application/json";数据发送方式也是:Request Payload,
数据格式为标准的JSON字符串。
3、nodejs代码
  let request = require("request");
  let url = `http://study.163.com/p/search/studycourse.json`;
  let body = {
    activityId: 0,
    keyword: "nodejs",
    orderType: 5,
    pageIndex: 1,
    pageSize: 50,
    priceType: -1,
    relativeOffset: 0,
    searchTimeType: -1,
  };
  let opts = {
    url,
    method: "POST",
    headers: { "Content-Type": "application/json" },
    body: JSON.stringify(body)
  }
  request(opts, (e, b, d) => {
    if (e) return console.log(e);
    console.log(d);
  })
4、运行结果

这个list就是搜索到的课程结果。
  • 6
    点赞
  • 5
    收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
©️2022 CSDN 皮肤主题:编程工作室 设计师:CSDN官方博客 返回首页
评论

打赏作者

意外金喜

你的鼓励将是我创作的最大动力

¥2 ¥4 ¥6 ¥10 ¥20
输入1-500的整数
余额支付 (余额:-- )
扫码支付
扫码支付:¥2
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、C币套餐、付费专栏及课程。

余额充值