2024-12-12 科技 0
克雷西 发自 凹非寺
量子位 公众号 QbitAI
这个GitHub新项目,能让ChatGPT完成复杂任务,GPT3.5和GPT-4都支持。
它通过将问题拆解,并调用外部资源,提高了GPT的工作能力。
在它的调教下,GPT-4回答的准确率从68%提高到了85%。
经过调教之后嘛……虽然不理解为什么不直接用6升的,但也有很大进步了。
我们也用倒拔垂杨柳的问题进行了测试,提供了诸葛亮、孙悟空和林黛玉三个选项。
需要说明的是,由于没有GPT-4的API,测试是按照开发者介绍的方法手工完成的。
当然了,个例并不能说明它的表现,还是要用数据集测试一下。
开发者使用了MMLU数据集分别对调教前后的GPT-4进行了测试。
结果显示,无经调教版本只答对60%,而调教后的版本答对85%。