admin管理员组

文章数量:1566222

2024年1月14日发(作者:)

八爪鱼使用答疑

API就是操作系统留给应用程序的一个调用接口,应用程序通过调用操作系统的 API 而使操作系统去执行应用程序的命令。

满足多种业务场景

适合产品、运营、销售、数据分析、政府机关、电商从业者、学术研究等多种身份职业

免费模板 N个

问题:任务停止后,下次采集时可以从停止的地方继续采集吗?

回答:目前不可以,任务停止后,下次采集会从头开始采集,不能实现断点续采。断点续采功能正在开发中,尽请期待。

问题1:八爪鱼能采什么数据?

回答:八爪鱼是一款通用的网页数据采集器, 通过内置浏览器访问网页并采集数据,满足以下2个条件的数据均可采集

① 网页上公开显示的数据、通过账号密码登录后可以查看到的数据。

② 可以用鼠标复制粘贴下来的数据、网页上没显示但是网页源码中有的数据。

问题2:八爪鱼能采集XX网站吗?

回答:八爪鱼可以采集99%的网站。有2种采集方式:

① 使用八爪鱼提供的模板采集:八爪鱼客户端中内置了很多网站的采集模板,在客户端中搜索是否有XX网站的模板,如果有,直接使用即可。

② 自定义配置采集规则:如果没有想要的模板,可以自己配置采集规则。

问题3:八爪鱼能采集XX行业的数据吗?

回答:可以,但是首先需明确XX行业的数据存在于哪个网站上。

例如,电商行业的数据在淘宝/京东/亚马逊等等电商网站上有,那么采集电商行业的数据,就转化成采集淘宝/京东/亚马逊的网站了,此时参见问题2。

如果您不确定想要的行业数据哪个网站上有,可以咨询客服进行数据付费定制,或者参考我们的文章:106个数据分析师专用数据源 。

问题1:八爪鱼能采集QQ邮箱 / 用户浏览数据 / 卖家信息 / 客户数据吗?

回答:八爪鱼是一款通用的网页数据采集器, 通过内置浏览器访问网页并采集数据,满足以下2个条件的数据均可采集:① 网页上公开显示的数据、通过账号密码登录后可以查看到的数据。② 可以用鼠标复制粘贴下来的数据、网页上没显示但是网页源码中有的数据。

因此,首先需明确,您需要的QQ邮箱 / 用户浏览数据 / 卖家信息 / 客户数据等数据,是否在网页上展示出来,或者您是否有权限登录查看,如果是,则可以采集。如果这些数据并未在页面中显示出来,您也没有账号权限登录查看,那就是无法采集的,八爪鱼也不会去突破网站的隐私数据。

问题:网页数据有多种类型,文本 / 链接 / 图片 / 视频 / html源码等,这些数据类型八爪鱼都可以采集吗?

回答:这些数据类型八爪鱼都可以采集。不同的数据类型有不同的采集方式。

文本 / 链接 / html源码:直接提取采集即可。详情请看 自定义抓取方式 教程 。

图片:目前只能采集图片地址,再通过工具将图片地址批量转换为图片。详情请看 图片采集与下载 教程 。

视频:目前只能采集视频地址,再通过工具将视频地址批量转换为视频。

问题:八爪鱼可以采集手机APP里面的数据吗?

回答:八爪鱼是通用的网页数据采集器,基于网址去进行规则配置和数据采集的。如果数据有网址,可以在电脑的浏览器里面打开,一般就可以采集。

如果数据只能在APP里面查看,没有网址,那就无法通过八爪鱼采集器直接采集。如果您需要采集APP中的数据,可以通过数据定制的形式交付。如有抖音或APP等大型数据采集需求,请 点击此链接提交需求 或直接联系客服。

问题:可以采集微信公众号 / 微信小程序 / 微信好友 / 微信朋友圈的数据吗?

回答:八爪鱼是一款通用的网页数据采集器, 通过内置浏览器访问网页并采集数据,满足以下2个条件的数据均可采集:① 网页上公开显示的数据、通过账号密码登录后可以查看到的数据。② 可以用鼠标复制粘贴下来的数据、网页上没显示但是网页源码中有的数据。

微信公众号采集:搜狗微信收录很多微信公众号的文章。目前,都是通过采集搜狗微信,去采集微信公众号文章的。值得注意的是,搜狗微信上的文章链接是临时链接,不是永久链接。八爪鱼采集下来的也是临时链接。

微信小程序 / 微信好友 / 微信朋友圈:在微信APP中才可查看,没有网址,目前通过八爪鱼无法采集这些数据。

问题:可以采集国外网站的数据吗?

回答:可以国外网站的数据。

八爪鱼是一款通用的网页数据采集器, 通过内置浏览器访问网页并采集数据,满足以下2个条件的数据均可采集:

① 网页上公开显示的数据、通过账号密码登录后可以查看到的数据。

② 可以用鼠标复制粘贴下来的数据、网页上没显示但是网页源码中有的数据。

问题:国外网站需要翻墙才能访问和采集怎么办?

回答:本地采集(使用自己的电脑进行采集):八爪鱼内置浏览器访问网页,与使用普通浏览器访问网页是一样的。如果国外网站需要翻墙才能访问,那么就需要现在本地电脑上进行翻墙,然后再用八爪鱼进行数据采集。

云采集(使用八爪鱼提供的云服务器进行采集):八爪鱼云采集默认是国内的服务器,无法翻墙。如果需要用云采集翻墙采集国外网站数据,请联系人工客服,单独购买海外的云服务器。

问题:八爪鱼是否可以实时采集?数据源一更新,马上就将其采集下来?

回答:通过八爪鱼云采集的定时采集功能,可以满足实时采集的需求,实现数据源一更新,马上就将其采集下来。

了解网站数据的更新频率,相对应地在八爪鱼中对任务设置定时采集。支持按 星期 / 月 /

时间间隔 设置定时,最短可1分钟启动1次云采集。到了设置的定时采集点,八爪鱼就会全自动进行数据采集。

问题:没有在教程和常见问题中找到答案怎么办?

回答:请点击官网右侧 联系人工客服

或者加QQ群提问

(工作时间:周一至周五,9-12:30,14-18:30,法定节假日正常休息)

问题:八爪鱼验证码套餐是什么?

回答:八爪鱼采集器现已对接验证码打码平台,购买验证码套餐后,可实现自动识别验证码。

问题:支持识别哪些类型的验证码?

回答:最大八位的汉字与字母、数字与汉字的混合运算验证码、部分滑块验证码。

问题1:八爪鱼最新的版本是8版本,但是我的电脑配置无法安装8版本,如何下载八爪鱼7版本并安装?

回答:无法安装八爪鱼8版本时,可安装7版本。以下为具体安装方法

一、7版本支持系统

Win7/8/8.1/10(x64位 32位)

XP系统

二、7版本安装包

点击下载 V7.6.4

三、7版本需要.NET3.5 SP1支持

Win7/8/8.1/10系统已经内置支持,无需下载;XP系统无内置支持,需下载。

安装八爪鱼时,会自动检测是否安装了.NET3.5 SP1 。如果检测出没有安装,会自动从微软官网在线安装。

国内在线安装速度很慢,建议先下载安装.NET3.5 SP1,再安装八爪鱼采集器。点击下

载.NET3.5 SP1 离线安装包 。

四、7版本安装步骤

1. 下载八爪鱼采集器安装包(.zip)并解压

2. 关闭所有杀毒软件

3. 解压后,双击.exe文件,开始安装

4. 安装完成后,在开始菜单或桌面上找到八爪鱼采集器快捷方式

5. 启动八爪鱼采集器,使用您的账号登录(还没有账号?点击免费注册)

八爪鱼的用途

新闻资讯与政务公告采集

实时采集全网全渠道的新闻资讯和政府公告数据,涵盖媒体门户网站:人民网/新华网/央视网等;自媒体平台:今日头条/百家号/一点资讯等;垂直新闻媒体网站:汽车之家/东方财富等;各级政府机构门户网站:银监会/证监会/中国政府采购网等。

社交媒体采集

社交媒体采集解决方案,实时采集全网全渠道的社交媒体数据,助力企业社交媒体监控、KOL挖掘、社会化聆听、活动监控等业务快速发展。

电商采集

实时采集全网全渠道的电商数据,包括淘宝、天猫、京东、苏宁、唯品会、阿里巴巴、Amazon、eBay、AliExpress等国内外主流电商平台和一些官方/第三方电商数据分析平台。

电商评论采集与分析

帮助品牌方采集全网电商平台用户评论数据,并对评论数据进行文本分析,进而洞察消费者的典型观点与情感正负向,辅助企业各部门倾听消费者声音,不断优化产品、开拓市场和提升口碑。

云听CEM 价格监控

价格监控解决方案,采集全网电商平台产品信息,实时监控商品价格(挂牌价/到手价)动态变化,实时推送预警消息,帮助企业及时掌握分销渠道经营情况与市场竞争情况。

招投标采集

采集全网各类招投标网站,及时掌握一手的招投标信息。

房地产采集

实时采集全国各级市区县的房地产数据(包括房产基础数据、房产租售交易数据、土地交易数据),涵盖各类房产信息网站:中原、搜房、房天下、房多多、赶集网、房星网、Q房网、合房网、乐有家、21世纪房产等、各省市房管局网站和各省市土地招拍挂网站。

金融采集

金融采集解决方案,帮助金融公司或机构,实时采集互联网上的海量数据,包括政府监管、媒体资讯、信用评级、交易所、股票、信贷、资管、VCPE、期货、投研等,以在金融/保险/证券研究汇总获得竞争优势、获取第一手信息降低成本和业务风险。

数据服务

八爪鱼数据服务,根据您的需求直接交付数据。覆盖电商、新闻、社交媒体、招投标、房产、商户、旅游、科研等多个行业主流网站数据源。

本文标签: 数据采集网站网页电商