IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 网络协议 -> 怎么发送采集数据到网站-http接口方式 -> 正文阅读

[网络协议]怎么发送采集数据到网站-http接口方式

采集完成的数据,要怎么发送到网站上呢?

我们可以使用http的post方式来传输数据,需要有接收数据的接口文件,然后在工具中对接参数映射要传输的数据即可。

例如用简数采集器,它就支持把采集到的数据,快速自动化批量发送到用户的网站,设置也挺人性化的,需要用户自行提供的接收数据的http接口。

该发送方式十分通用灵活,几乎可以给任何网站传输数据,但是主要是给用户自己开发的系统使用,因为需要程序员才会使用。

如果是开源的CMS系统,也可以去官方商城中寻找对应的接口或插件,如果是非官方的请务必检查有无安全问题,再使用。

一、http自定义接口传输方式:

????????发送数据时,简数采集器会把数据组装为http请求的格式:

????????????????参数名1=参数值1&参数名2=参数值2...

????????然后将组装的数据通过http的post方式传输给用户的自定义http接口,每发送一条数据就调用一次接口。

????????例如post表单数据: myTitle=测试标题&myContent=这是正文的内容...

??????? 自定义http接口接收到数据后,会对数据进行处理,最后写入网站,就完成了数据发送。

?

?

二、创建对接发送配置:

1. 自定义HTTP接口入口

??在要发送的采集任务的【导出目标管理】栏,点击【+自定义HTTP接口配置】按钮,创建自定义HTTP接口发送目标;

2. 自定义HTTP接口目标配置

I、基本信息配置

??????? 带星号是必填项,建议要设置安全校验参数,在【密码参数名】与 【发送密码】对应填写,也可到下一步第二步【添加URL参数及与抓取字段映射】中填写的,二选一填写即可。

????????【POST内容类型】可以选择表单格式或者JSON格式,默认是表单格式。

??????? 【状态】的选择是用户自己的标记信息,不影响系统执行;

?

II、映射字段配置

????????第一列填写用户http接口中需要接收的自定义的参数名;

????????第二列选择对应采集数据中已存在的字段名,如果是固定值,请在第三列填写(二选一生效,此时第二列不需要选择字段);

???提示:如果接口有设置密码安全验证,可在基本信息或者第二步映射字段中选择一处填写;

III、添加HTTP请求头(非必填项,可选)

??添加HTTP请求头这一步是可选的,一般不需要可以直接跳过的;

??如果需要在HTTP请求头添加一些信息,请在【HTTP请求头参数名】列填写对应参数名,然后在来源1选择对应数据的字段,或者来源2填写对应的固定值,二选一。

?

三、返回json格式数据

??自定义HTTP接口接收到数据后,进行处理再写入到网站中,最后再返回json格式信息给简数采集器服务器,表示数据是发送成功或失败:

{"rs":1,"code":0,"data":{"url":"文档的url,也不可以填"},"msg":""}

  • rs: 请求结果,成功请返回1,失败返回0 (必有项);
  • code:返回编码 (可选项);
  • msg:一般是错误信息(可选项);
  • data:数据对象 (可选项);

这样就完成了用http接口方式发送数据到网站,非常方便与灵活的。

  网络协议 最新文章
使用Easyswoole 搭建简单的Websoket服务
常见的数据通信方式有哪些?
Openssl 1024bit RSA算法---公私钥获取和处
HTTPS协议的密钥交换流程
《小白WEB安全入门》03. 漏洞篇
HttpRunner4.x 安装与使用
2021-07-04
手写RPC学习笔记
K8S高可用版本部署
mySQL计算IP地址范围
上一篇文章      下一篇文章      查看所有文章
加:2022-10-31 12:34:56  更:2022-10-31 12:35:06 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/25 20:47:48-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码