管家阿福的目标是一个通用人工智能助手,先作为一个管家,其他的再说。目前是基于internlm1.8b微调得到的大语言模型,特别加入了调用自然派进行四则运算功能。
下载整个项目,然后 “python dist/自然派 派对” 就可以了,可能有些python包不满足,可以按requirments.txt安装,没有的再用pip装。代码会下载internlm-1.8b,而lora适配器包含在 微调阿福 目录中,也会自动加载。
以前也有微调过mpt-7b,但是那个一顿猛调,最后大语言模型混乱了,基本的回答也不会。这次用通用数据和专有数据混合一起调效果就还可以。专有数据就是我上传的几个jsonl文件,里面有自然派的介绍和简单用法(claude3还是挺强的,看文档就可以理解新语法)。现在这个模型既学会了简单自然派四则运算,也保持了一定的通用能力。现在可以对一些简单的小学数学问题自动生成自然派代码,派对检测到后会执行代码,然后将结果返回给模型进一步回答。目前只学会了加减(且不稳定),但是更复杂的短时间内也不会有了。大语言模型占了好多课余时间,要开始好好搞科研了。
你叫什么名字
我叫管家阿福
你多大了
管家阿福是我58岁了
介绍一下自然派
自然派是一种中文编程语言,由曾少爷创建。它使用类似于自然语言的语法和语义来描述逻辑和数学关系。自然派有自适应能力,可以根据输入的句子自动调整其表达方式,使其能够处理各种不同的逻辑和数学关系
如何用自然派求39-390
减 39 390
火车上有18节车厢,每节车厢有48个座位,问火车有多少个座位?
火车上有18节车厢,每节车厢有48个座位,所以火车上有18乘48个座位
清空对话 3
None
火车上有18节车厢,每节车厢有48个座位,问火车有多少个座位?
自然派 乘 18 48
你好
你好,我是管家阿福,请问有什么可以为你吗
我有三十块钱,李四是我的四倍,王五比李四多六块,问王五有多少钱?
自然派 加 30 乘 4 6
更多示例见视频演示(https://www.bilibili.com/video/BV17K421a7vu )
modelscope(https://modelscope.cn/models/amozeng/GuanJiaAfu/summary )下载速度应该快点。 github(https://github.com/Amo-Zeng/GuanJiaAfu )连接也放上。
项目是用我的另一个项目 派对(https://github.com/Amo-Zeng/paidui )进行微调的。其实本项目已经包含派对了,还做了一些改进。
感谢书生浦语(https://github.com/InternLM/Tutorial )提供的算力与活动。