作为国内第一家发布的类ChatGPT大模型:文心一言。2023年03月16日在这一历史性时刻发布了文心一言,此后开始可以申请内测,关于内测和发布会demo,可以参考我之前的博客:2023.03.16百度发布类GPT-4多模态大模型:文心一言,非常感谢百度在周末就通过了内测的申请,怀着激动的心情开始内测,“激动的心,颤抖的手”。
在地址(https://yiyan.baidu.com/invitationCode)中输入内测码,如下图所示,即可开启内测:
测试的Prompt可以下面的文本框输入,系统预置了五个Prompt,可以直接点击使用,也可以在文本框输入自己的Prompt。
复现李彦宏在发布会的内容 :
复现结论是:
1、5个场景的内容基本都能复现,除了生成视频;
2、“电视剧三体的演员都有谁?”这个Prompt的测试与百度搜索一致,推测生成的内容来自百度检索信息;
3、发现长期记忆方面出现了混乱,比如在5个场景后继续测试梳理逻辑推算游戏;
4、从藏头诗可以看出,除了生成藏头诗之外,明显把上一个问题的信息带入到这个问题了;
文学创作
第一次输入“ 《三体》的作者是哪里人? ”,下面是文心一言给出的答案,看着还不错
由于短时间没有操作,系统需要重新登录,不过可以保留之前的记录,但是第二次输入通用的“ 《三体》的作者是哪里人? ”,系统给出的答案比较简短了
继续测试“ 可以总结一下三体的核心内容吗?如果要续写的话,可以从哪些角度出发? ”
继续测试“ 如何从哲学的角度续写? ”
继续测试“ 电视剧三体的演员都有谁? ”
继续测试“ 于和伟和张鲁一有哪些共同点? ”
继续测试“ 于和伟和张鲁一谁更高? ”
商业文案创作
测试“ 如果要成立一个用大模型服务中小企业数字化升级的科技服务公司,可以起个什么公司名? ”
继续测试“ 数智云图这个名称不错,给我起一个公司的服务Slogan,表达共赢的概念 ”
继续测试“ 帮我生成一篇公司成立的新闻稿,数智云图以共赢的服务理念用大模型服务中小企业数字化升级。600字左右。 ”
数理逻辑推算
测试“ 下面我们来玩一个鸡兔同笼的游戏。1只鸡有2只脚1个头,1只兔子有4只脚1个头。那么,如果有一个笼子里有9个头, 40只脚 ,应该有多少只鸡,多少只兔子? ”
继续测试“ 下面我们来玩一个鸡兔同笼的游戏。1只鸡有2只脚1个头,1只兔子有4只脚1个头。那么,如果有一个笼子里有9个头, 30只脚 ,应该有多少只鸡,多少只兔子? ”
中文理解
测试“ 洛阳纸贵是什么意思? ”
继续测试“ 这个成语在现在的经济学原理里,对应的理论是什么? ”
继续测试“ 用洛阳纸贵四个字写一首藏头诗 ”
多模态生成
测试“ 请为2023世界智能交通大会创作一张海报 ”
继续测试“ 你认为智能交通最适合那个城市发展 ”
继续测试“ 请用四川话将以上内容讲出来 ”
继续测试“ 请将以上内容生成视频 ”
至此,已经完全复现了李彦宏在文心一言新闻发布会的Prompt。
下面针对数理逻辑推算方面在上面Prompt测试之后,进一步测试
发现上下文记忆出现了混乱