专栏名称: CTO肉饼
robbin是前JavaEye网站创始人,现在是丁香园CTO。如果你是技术人员,正在创业或者希望加入创业,关注互联网产品、研发、运营、创业管理,请关注我。
51好读  ›  专栏  ›  CTO肉饼

什么?iPhone都可以跑AI大模型了

CTO肉饼  · 公众号  ·  · 2024-01-09 19:44

正文

你能想象,在自己的手机上跑一个AI大模型,而且速度还飞快吗?其实现在的iPhone 15 Pro已经足够了。苹果公司在秘密研发AppleGPT,而且在2024年底就会推出。但我们根本不需要等到年底,现在就可以用了。


在应用商店下载 「Offline Chat」App ,他里面运行了一个开源的AI大模型 Mistral 7B ,也就是参数70亿的小尺寸版本,这个模型下载下来呢,有3.3GB的大小,运行起来需要大约6GB的内存。我们来试试看:








请到「今天看啥」查看全文