当前位置:首页 > 修改聊天记录 > 正文内容

如何使用Apify进行数据采集?

下面用零代码、最快速的方式,带你完整走一遍 Apify 采集数据流程(从注册到导出,约 3 分钟)。

1. 注册并登录 Apify

  1. 打开官网:https://apify.com

  2. 用邮箱注册,免费版每月有额度,不用绑卡

    image

2. 在 Apify Store 选爬虫(Actor)

  1. 进入 Store(顶部菜单)。

    image
  2. 搜索目标网站 / 用途,例如:

    • Amazon → 商品 / 评论爬虫

    • Google Maps → 商家信息

    • Web Scraper → 通用动态页采集Apify

  3. 选一个评分高、使用人数多的,点 Try for free / Create taskApify


3. 配置采集参数(重点)

Web Scraper(通用爬虫) 为例:
image

Input 填写

  • Start URLs:要爬的网页,一行一个

    示例:

    plaintext
    https://example.com
    https://example.com/page2
  • Page function(核心:告诉 Apify 要抓什么)

    最简单写法(抓标题、URL):

    javascript
    运行
    async function pageFunction(context) {
        const { request, $ } = context;
        return {
            url: request.url,
            title: $('title').text()
        };}
image

常用设置(Options)

  • Max pages per run:限制采集页数,避免跑太多Apify

  • Proxy configuration

    • 高反爬网站 → 选 Apify Proxy(自动轮换 IP)。

      image
  • Wait for:动态页可设置 wait: 3000(等 3 秒加载)。


4. 运行任务

  1. Start → 任务进入队列,云端运行。

  2. 页面会实时显示:

    • 已爬页数、成功 / 失败数

    • 日志预览(可看是否被反爬)Apify

      image

5. 查看并导出数据

  1. 运行结束后,进入 Dataset(结果集)。

  2. 可在线预览表格,也可导出:

    • CSV(Excel 可开)

    • JSON

    • Excel

  3. 一键下载到本地,或同步到 Google Sheets、Make.com 等。


6. 进阶:定时 / 长期采集

  • 保存当前配置为 Task,下次一键复用。

  • 开启 Schedule:按小时 / 天 / 周自动跑,适合价格监控、舆情跟踪。


快速示例:爬商品名称 + 价格

用 Web Scraper,pageFunction 写:
javascript
运行
async function pageFunction(context) {
  const { $ } = context;
  const products = [];
  $('.product').each((i, el) => {
    products.push({
      name: $(el).find('.name').text().trim(),
      price: $(el).find('.price').text().trim()
    });
  });
  return products;}

小提醒(合规)

  • 只爬公开、非隐私数据,遵守网站 robots.txt

  • 控制频率,避免给对方服务器造成压力。


扫描二维码推送至手机访问。

版权声明:本文由手机数据加工厂发布,如需转载请注明出处。

本文链接:https://gaijilu.com/?id=109

“ 如何使用Apify进行数据采集?” 的相关文章

普通版袁大头真假鉴别/手把手教你银元鉴定

普通版袁大头真假鉴别/手把手教你银元鉴定

  一块普通版袁大头行情在800-1500左右,今天我们来看看它的真假鉴别一、银质辨伪:辩别银元的真假,首先从辨识银质的真假开始,银元连银都不是怎么能称为银元呢,从古有“银子发白眼睛发黑”之说,就是说真币越擦越白,晶莹锃亮,表里一致,反之一擦就发黑或灰白,如镀银所制,则有一种浮躁感。二、...

如何与客服对话

如何找到客服,有两种方式。一种是在本站的任意页面右下角找到悬浮的“在线客服”,点击即可与客服对话,此办法的好处是不需要添加其它通信方式,可以直接对话。二种是,添加客服微信:gaijilu-com。复制进入微信添加好友即可对话(不需要等客服通过验证即可发消息)。...

为什么你的手机总卡顿?关闭这10个隐藏设置,让你的手机流畅如新

为什么你的手机总卡顿?关闭这10个隐藏设置,让你的手机流畅如新

“家人们,你们有没有这样的体验,半年不到,手机就卡成狗,刷视频,聊微信,一直转圈圈,不管怎么点屏幕都没有任何反应!”最近后台一堆粉丝吐槽:“科普君,新手机像牛奶般丝滑,半年后卡成拖拉机,难道非得换(机)?”别急!今天直接上硬核操作——关闭10个隐藏设置,老机瞬间原地复活!1.关闭 系统自动更新-坑爹...

手机用久了变卡顿,教你6步操作,手机立马流畅如新

手机用久了变卡顿,教你6步操作,手机立马流畅如新

手机卡顿,就如同一条,搁浅的电子“咸鱼”每一次滑动时,都伴随着,沉重的喘息。屏幕反应,慢上半拍,游戏帧率,犹如疯狂地跳水,就连扫码付款,也变成了一种,耐心的考验。但切莫着急换新机!今日这6步操作,便可让你的手机,由“老黄牛”变回“小猎豹”,流畅如初!一、深度清理:揪出空间"隐形杀手&quo...

手机这样设置轻松省好几个G

手机这样设置轻松省好几个G

好多朋友都说手机流量总是不够用,没到月末早就没了,今天就手把手教你开启省流量模式,让你每月能省好几个G,如何设置?具体路径(👀图文字)如下第一步打开手机设置第二步点移动网络第三步点流量管理第四步点智能省流量第五步系统默认智能省流量是关闭的(灰色)我们把它打开(蓝色)这样就设置好了简单几步就搞定赶快去...

4 种方法永久保存微信聊天记录,永不丢失

4 种方法永久保存微信聊天记录,永远不会丢方法一:用电脑微信备份(最靠谱、最全)登录电脑版微信,找到备份功能,把手机聊天记录完整存到电脑里。文字、图片、语音、视频、文件全都能保存,不会漏掉。备份好之后,再复制一份存到 U 盘或者移动硬盘里。就算换手机、卸载微信、手机坏掉,记录也能随时找回来。方法二:...

发表评论

访客

◎欢迎参与讨论,请在这里发表您的看法和观点。