• Maple

    用DSH全默认配置 + V4 flash试水 给了个任务 发现会自己调用视觉工具然后报错^-^

    图片

    也就是说,要么是deepseek考虑继续搞多模态模型,所以提前在harness里做了,要么是图开源精神,方便大家用别的模型? ^-^

    但是自家的模型没有视觉居然还默认给了视觉工具且自己调用了,这个肯定是有点问题的,看来确实是有点赶鸭子上架了hhh

    主楼
  • hax

    暂时不用想了,估计和zhipu一样,搞一个mcp工具识图,ps:可能花钱

    #1
  • 绎袅

    图片

    蛤?有吗…没看出来,工具调用的out,没看懂…

    #2
  • Maple

    看那个tool call,是调用的看图工具

    #3
  • 绎袅

    现在看上去的样子好像是有这个工具然后没有填充支持图片的模型?

    看这个out好像是吧..

    #4
  • xiaoyan

    我感觉应该是兼容

    图片

    总不能做个残废的agent出来吧

    #5
  • xiaoyan

    没有报错,直接就是看模型id,然后判断这个模型不支持识图,避免了报错

    #6
  • Maple

    但按理说应该要对是否多模态的模型做个区分,非多模态的模型直接不给视觉的tool就好了

    (然后v4 flash还很理所当然的就开始调工具看图了,甚至怀疑是不是蒸馏了哪家多模态模型hhh)

    #7
  • xiaoyan

    他这个相当于多一步,先调用,然后判断支不支持多模态,如果非多模态的模型直接不给视觉的tool,那是做个会话的硬限制么,万一中途切换模型呢,还是写入上下文,看模型id呢,那就增加了一写长期上下文,所以感觉dsh目前的解决方案其实算比较好的

    怀疑是不是蒸馏了哪家多模态模型

    这个是看tool吧,总不能一种训练模型,告诉模型,你不支持看图吧

    万一用户自己整个视图的tool,就支持了,站内好像有佬这么玩过

    #8
  • Maple

    万一中途切换模型呢

    这个角度确实没考虑过,这么说的话还真是该给tool,挺合理的

    #9
  • Hamotim

    类型定义里面有多模态的内容,毕竟还可以接其他家的

    #10
  • scp3500

    有个图片转述的dsh-vision插件

    #11
  • lzh

    deepseek的招聘岗位里面有多模态相关的,他们好像不是放弃多模态,而是战略地位稍微低一点

    #12
  • Maple

    梁子不是说觉得现阶段多模态不重要来着,说等智能程度上去了多模态能力会自己长出来(忘了原话了,反正大概是这个意思)

    #13

发表回复

登录后回复