• master-nodeseek

    图片

    主楼
  • verse4

    有可能是 这种价格数据应该不需要定时采集 幅度比较少 动态数据只有汇率

    #1
  • master-nodeseek

    有点费时间

    #2
  • verse4

    发布于2026/9/9 03:30:58
    @verse4 #1 有点费时间

    还好吧 一次采集基本很长时间不用改变

    #3
  • Daydream5532

    发布于2026/9/9 03:50:53

    @master #2 发布于2026/9/9 03:30:58
    @verse4 #1 有点费时间

    还好吧 一次采集基本很长时间不用改变

    你想太多了,售价随时都在变化。尤其是team之类的炸弹车,几个小时开一班,然后随着时间慢慢降价,只要你爬虫频率不够高,数据就没有时效性

    链动也是这样被逼的加了验证码,你同时打开几个商品链接就触发了

    #5
  • verse4

    发布于2026/9/9 04:00:20

    @verse4 #3 发布于2026/9/9 03:50:53

    @master #2 发布于2026/9/9 03:30:58
    @verse4 #1 有点费时间

    还好吧 一次采集基本很长时间不用改变

    你想太多了,售价随时都在变化。尤其是team之类的炸弹车,几个小时开一班,然后随着时间慢慢降价,只要你爬虫频率不够高,数据就没有时效性
    链动也是这样被逼的加了验证码,你同时打开几个商品链接就触发了

    对于正价plus pro这些不需要吧

    #7
  • Daydream5532

    发布于2026/9/9 04:41:26

    @Daydream5532 #5 发布于2026/9/9 04:00:20

    @verse4 #3 发布于2026/9/9 03:50:53

    @master #2 发布于2026/9/9 03:30:58
    @verse4 #1 有点费时间

    还好吧 一次采集基本很长时间不用改变

    你想太多了,售价随时都在变化。尤其是team之类的炸弹车,几个小时开一班,然后随着时间慢慢降价,只要你爬虫频率不够高,数据就没有时效性
    链动也是这样被逼的加了验证码,你同时打开几个商品链接就触发了

    对于正价plus pro这些不需要吧

    确实,只不过比价网站不包含team这种羊毛的比价还挺奇怪的

    #8
  • verse4

    发布于2026/9/9 04:44:49

    @verse4 #7 发布于2026/9/9 04:41:26

    @Daydream5532 #5 发布于2026/9/9 04:00:20

    @verse4 #3 发布于2026/9/9 03:50:53

    @master #2 发布于2026/9/9 03:30:58
    @verse4 #1 有点费时间

    还好吧 一次采集基本很长时间不用改变

    你想太多了,售价随时都在变化。尤其是team之类的炸弹车,几个小时开一班,然后随着时间慢慢降价,只要你爬虫频率不够高,数据就没有时效性
    链动也是这样被逼的加了验证码,你同时打开几个商品链接就触发了

    对于正价plus pro这些不需要吧

    确实,只不过比价网站不包含team这种羊毛的比价还挺奇怪的

    羊毛就太多了 渠道多 就看站长信息源了

    #9
  • Daydream5532

    就是爬虫,每个小时爬一次就行了

    #4
  • dimension

    通过定时采集更新,一般30min一次,对于热门商品调高采集频率就行,比如10分钟集中一次,加上动态采集调度策略,以及动态ip代理,成本还行

    #6
  • corenuclear

    热门商品得高频爬

    #10

发表回复

登录后回复