• 大陈大

    佬友们,请教下。

    目前有很多GEO爬虫任务,关于XHS,deepseek,doubao,

    目前遇到的问题,只要xhs,deepseek,doubao页面元素改变,就需要重新开发,特别是豆包,还要各种验证码,

    是否有computer use agent 这样的工具,遇到稍微小的页面改动,或者验证码,可以自动的过掉

    主楼
  • Bear_King

    我想问下 geo 现在 联网搜索是模型搜索 还是自己定义工具搜索

    #1
  • 大陈大

    应该是模型吧

    #2
  • safe_1day

    找特征开发呀,不要只啃dom元素,像图标啥的很久才变

    #3
  • dunNaNa

    试试cua吧,挺多接入的 github : trycua/cua

    #4
  • Jack

    是要把网页内容抽成markdown?

    开源的挺多的 收费的也有tavily saerch

    另外原理也很简单 网页内容千变万化 html标签就那么几十个

    一般固定的标签放同类内容 原理上使用正则表达式就能抽取出来网页内容

    #5
  • 大陈大

    感谢佬,豆包的验证码比较难过,想着用大模型手动滑过去

    #6
  • 大陈大

    理上使用正

    理上使用正

    佬,主要是验证码那一块

    #7
  • 绿豆粥稀饭

    我的方法是在影刀上写工作流,这样还挺好修改的

    #8
  • Jack

    验证码就别想了 魔高一尺道高一丈

    #9
  • safe_1day

    这个找三方的接口做就好了,一次好像几毛钱

    #10

发表回复

登录后回复