实测文心一言: 是人类预期太高还是技术不行?

1.jpeg

百度类ChatGPT产品文心一言发布,股价一波三折。

  3月16日下午,在发布会进行的同时,百度港股股价一度下跌10%至120.1港元/股。截至16日收盘,百度股价下跌6.36%,报收125.1港元/股。到了当晚美股开盘,百度股价出现上涨,截至收盘涨3.8%。

  3月17日,百度港股回升,美股继续上涨。截至收盘,港股股价上涨13.67%至142.2港元,美股股价上涨6.28%至146.84美元。

  “股价的波动体现了投资者对于百度这款AI产品既寄予期望又担心失望的矛盾心态。”艾媒咨询CEO张毅接受第一财经采访时说。

  他认为,就目前百度港股的表现,投资者和市场信心明显。一方面,百度围绕AI前沿布局有技术储备和基础,另一方面过去不少AI商业化布局围绕to B方向,但这种招投标模式往往压价严重,导致不少AI企业至今没有实现盈利,但to C方向蕴藏机会。

  如何回答百度股价波动

  如何看待百度在发布文心一言产品之后的股价波动?第一财经记者把这个问题抛给文心一言,这款AI产品自己给出的答案是:

  “百度在发布文心一言产品之后的股价波动是正常的市场表现,因为投资者们对于人工智能和对话式人工智能产品的发展前景存在着不同的看法。在发布文心一言之前,百度的主营业务是搜索引擎和互联网广告,这两个领域一直是百度的核心业务,但是随着互联网流量红利的逐渐消失,公司的营收增长面临着一定的压力。而文心一言的发布,被认为是百度在人工智能领域的一次重大突破,可以帮助公司拓展新的业务领域。”

  “因此,在百度发布文心一言之前,市场对其前景持乐观态度,股价也出现了明显上涨。而在文心一言正式发布后,市场对其前景的看法出现了分化,一些投资者认为文心一言并没有达到市场预期的效果,股价出现了下跌。但是,从长期来看,人工智能和对话式人工智能产品的发展前景仍然广阔,因此投资者们仍然对百度的未来发展保持了乐观态度,股价也出现了回升。”

  不少回答出现漏洞

  不过,第一财经记者在测试中发现,ChatGPT“一本正经胡说八道”的问题,在文心一言上也有出现。

  当记者问它中国市场有哪些类ChatGPT产品时,文心一言在回答中错把自己变成了由OpenAI开发,但记者提醒它有错误后,它道歉并做出了修改和补充。

  记者希望文心一言给出百度过去5年的营收和利润情况,但它只给出了营收情况,而且数字错误,例如,文心一言称2022年百度营收为827.87亿元,但经记者核实,当年实际营收应为1236.75亿元。如果人类要让AI整理数据信息要当心了。

  例如, 16日百度文心一言发布会因为采用的是PPT中视频演示而非实时演示,而被大家调侃成“ChatPPT”。当记者提问文心一言什么是ChatPPT时,它一本正经地给出了答案:ChatPPT是一款由百度推出的可在移动端使用的 AI 自然语言处理工具,它能够支持多种语言和文本格式,并且提供了便捷的聊天机制和智能化的交互方式,可以帮助你更高效地与人沟通。

  在逻辑思维方面,在当日发布会上文心一言正确展示了对于经典逻辑思维题目“鸡兔同笼”的解题思路,但第一财经记者又拿出了一道小学奥数题和一道高考数学题考考它,都未能给出正确答案。

  在知识实时性方面,记者实测发现,对于当天的热点新闻,文心一言并不知情。

  以近期的一则热点新闻为例,财政部网站公开了对德勤和华融依法作出行政处罚,没收德勤北京分所违法所得并处罚款总额21190.44万元,德勤总所承担连带责任。

  对于该消息,文心一言回答道:“我不清楚具体的罚款金额,因为这是财政部的内部信息。我作为一个AI,无法了解具体情况。我建议您查阅相关财政部官方公布的信息或向相关监管机构咨询,以获取准确的信息。”

  此外,也有经过测试的业内人士对记者表示,在多轮对话上表现与ChatGPT差距大。“这其实就像人类,一个已经会走了,一个刚刚学会爬。走和爬差几个月就感觉问题挺大,只有多‘虐’它,才会进步。”

  业内预计,随着文心一言的逐步开放,将建立起真实的用户调用和模型迭代,效果会迅速提升,模型有望变得越来越聪明。


产品图.jpg

赞 (0)
上一篇 2024年11月23日 00:40
下一篇 2024年11月23日 00:40