2026年7月2日 周四晚上19:30,报名腾讯会议了解“如何构建自进化的动态知识库(Brain)”(限30人)
免费POC, 零成本试错
FDE知识库

FDE知识库

学习大模型的前沿技术与行业落地应用


收藏

口袋AI:五分钟把世界知识装进口袋

发布日期:2024-11-02 17:33:30 浏览次数: 3547
作者:云中江树

微信搜一搜,关注“云中江树”

现在我日常已经离不开使用 AI 了。

但是目前这些 AI 的使用都有一个问题,那就是需要联网,一旦在没网或者网不好的情况下,AI就得歇菜。

好几次,我在飞机上脑子里想到了某个东西,但是具体是什么不清楚,都会想,要是没网的时候也能用 AI 大模型就好了。

大模型几乎学习了世界知识,如果能把大模型离线部署到手机上,这样我就相当于把世界知识装进了口袋随身携带。

再也不用担心没网了。

说干就干,于是通过各种方法折腾,我在手机上安装了一个轻量的大模型,在网络不好的时候,作为我的替代品。使用一段时间下来,真的很不错。

在手机上使用大模型已经有一段时间后,我在群里分享了我的方法,群友表示非常想要一篇教程。

我很想写,但是当时能使用的方法太折腾了。

需要来来回回安装很多软件,需要特殊的网络,还需要会一点代码,同时,每次用起来也很不方便。

但是现在,站在开源的肩膀上,江树给大家带来「口袋AI」,让大家不用写代码,不用特殊上网,不用看英文,不用换手机,不用更新系统,不用花钱,也能直接在手机离线使用大模型。

我在我3年前买的旧手机上测试了多款模型,运行流畅,毫无压力。

直接看视频:

那么这个应用去哪儿下载呢?

关注公众号,回复「口袋AI」获取下载链接。

如果你是 LangGPT 社区群友,安装包我已经发群里了,可以直接使用。

这应该是国内目前手机离线部署大模型最简单的方法了。

其他方法江树已经帮大家尝试过了,很折腾,使用体验一言难尽。

Termux 安装法

就是在手机上安装 Termux,然后安装linux系统,再安装 Ollama,下载及运行大模型。全程步骤很多,要输一大堆命令,而且全程都要在下面这个黑框里面操作,包括对话也是,很麻烦。

具体怎么安装我就不讲了,感兴趣的技术专家自己查看下面的文章

https://www.53ai.com/news/qianyanjishu/1795.html

APP 安装法

通过 APP 安装的方法也有,比如 Maid,可以直接安装使用。

Maid APP

但是 Maid 的问题是,需要特殊网络,同时因为设计方案的问题,在手机上运行非常、非常的慢!不推荐!

maid

既然是方案的问题,优化方案是不是就可以了?

MLC-Chat

手机端也有 GPU,调用 GPU 算起来是不是快一点?目前比较推荐的方案是 MLC-Chat,如下图,看着很牛逼。

MLC-Chat

于是我还真的自己按照官方的教程打包编译了 MLC-Chat,但是很遗憾,在我三年前的旧手机上,每次使用 MLC-Chat 都会黑屏,也许是占用 GPU 资源太多的原因,也许新手机会好很多。

于是我继续寻找,看看有没有更方便的方案。

PocketPal

还真的让我找到了,就是国外的 PocketPal 。用下来很方便,速度也不错。

img

但是,国内用不上 PocketPal !安装包只能在谷歌商店下载,同时还要特殊上网!

因为模型很大,下载模型的时候不仅慢,而且经常失败,浪费很多时间!

还有不支持中文,并且一些功能也是缺失的!

有没有一款更适合中国宝宝体质的应用呢?

江树目前没有找到。

更适合中国宝宝体质的「口袋 AI」

于是综合了上面各种方案以后,我在 PocketPal 开源项目的基础上打造了更符合中国宝宝体质的「口袋AI」APP。

不用看英文了!内容全部翻译为中文。

不用特殊网络了!国内流畅访问。

精选中文最好的模型,针对国内用户习惯精心调教。

更漂亮的 UI,更齐全的功能,更友好的使用。

5min 内就能让你在手机上用上本地大模型!也许是国内目前最快捷的部署方法

不过「口袋AI」也有缺点,就是目前只支持安卓,如果是苹果用户,推荐你去商店下载 「PocketPal」,就是可能需要一点特殊网络。

沟通自如
模型自由

希望能让大家在手机上更方便省心的用好 AI。

软件信息
精选图标

同时,精选可爱搞怪的多啦A梦头像作为 Logo,希望大家看到这张笑脸可以天天开心,也希望多啦A梦的百宝箱能装进你的「口袋」。

以上,既然都看到这里了,如果你也喜欢本期内容,欢迎给我们一键三连,如果通过这种方法让你用上了本地大模型,欢迎评论区分享你的喜悦。


53AI,企业落地大模型首选服务商

产品:场景落地咨询+大模型应用平台+行业解决方案

承诺:免费POC验证,效果达标后再合作。零风险落地应用大模型,已交付160+中大型企业

联系我们

售前咨询
186 6662 7370
预约演示
185 8882 0121

微信扫码

添加专属顾问

回到顶部

加载中...

扫码咨询

扫码登录
登录即表示您同意《53AI网站服务协议》
服务协议

欢迎您使用【53AI 官方网站】(以下简称“本网站”或“我们”)。本《会员服务协议》(以下简称“本协议”)是您(以下简称“会员”或“用户”)与【深圳市博思协创网络科技有限公司】之间关于注册、登录及使用本网站会员服务所订立的法律协议。

在您注册或登录前,请务必审慎阅读、充分理解各条款内容,特别是免除或限制责任的条款、知识产权条款、争议解决条款等。此类条款将以加粗形式提示您注意。 当您通过微信公众号授权、手机验证码验证或其他方式成功登录本网站时,即视为您已完全理解并同意接受本协议的全部内容。

一、 定义

本网站:指由【深圳市博思协创网络科技有限公司】运营的,域名为【53ai.com】的网站及相关移动端页面。

会员服务:指本网站向注册会员提供的知识库文章查阅、内容检索及其他相关增值服务。

知识库内容:指本网站发布的包括但不限于文字、图表、数据、研究报告、行业分析等数字化内容资源。

二、 账号注册与登录

登录方式:本网站支持以下登录方式,您可根据实际情况选择:

微信公众号授权登录:您同意将您的微信OpenID信息授权给本网站,用于创建或关联会员账号。

手机验证码登录:您需提供真实有效的手机号码,并通过短信验证码完成身份验证与登录/注册。

账号安全:您的账号仅限您本人使用,禁止赠与、借用、租用、转让或售卖。因您保管不善导致的账号被盗、密码泄露等损失,由您自行承担。

实名认证:根据相关法律法规要求,我们可能要求您在特定功能下完成实名认证。如您拒绝提供,可能无法使用部分或全部服务。

未成年人保护:若您未满18周岁,请在法定监护人的陪同下阅读本协议,并在征得监护人同意后使用本服务。

三、 服务内容与规范

知识库查阅权限:会员登录后,有权按照其会员等级对应的权限范围,在线浏览、检索本网站知识库中的相关文章及内容。

服务变更:我们有权根据业务发展需要,调整、变更或终止部分服务内容,并将以网站公告、公众号消息等方式提前通知。

禁止行为:您在使用服务时不得实施以下行为:

利用技术手段批量爬取、下载、转存知识库内容;

将知识库内容用于商业目的或未经授权地向第三方传播;

干扰本网站正常运行或侵犯其他用户合法权益;

发布违法违规信息或从事违反公序良俗的活动。

四、 知识产权声明

权利归属:本网站知识库中的排版设计、软件代码等内容的知识产权均归【公司全称】或原权利人所有,受《中华人民共和国著作权法》等法律保护。

有限许可:本网站授予会员一项非独占、不可转让、不可转授权的普通许可,仅限于个人学习、研究之目的在线查阅知识库内容。

侵权追责:未经书面许可,任何单位或个人不得以任何形式复制、转载、摘编、镜像、汇编或以其他方式使用上述内容。一经发现,我们保留追究其法律责任的权利。

五、 个人信息保护

我们重视对您个人信息的保护。关于我们如何收集、使用、存储和保护您的个人信息,请单独阅读 《隐私政策》。

您通过微信公众号授权或手机号验证所提供的信息,我们将严格按照《个人信息保护法》的规定处理,仅用于身份识别、服务提供及安全验证等必要用途。

您可以随时通过网站设置或联系客服行使查阅、更正、删除个人信息及撤回授权同意的权利。

六、 免责声明

内容准确性:知识库内容仅供参考,不构成专业建议。我们不对其完整性、准确性、时效性作任何明示或暗示的保证,您应自行判断并承担使用风险。

不可抗力:因自然灾害、政策法规变化、网络故障、第三方平台接口异常(如微信接口维护、运营商短信通道故障)等不可抗力导致的服务中断或延迟,我们不承担违约责任。

第三方链接:本网站可能包含指向第三方网站的链接,该等网站的内容和服务不受我们控制,请您自行甄别风险。

七、 违约责任

如您违反本协议约定,我们有权视情节采取警告、限制功能、暂停服务、注销账号等措施,并保留要求赔偿损失的权利。

如因您的违约行为导致我们遭受行政处罚、第三方索赔或商誉损失,您应承担全部赔偿责任(包括但不限于罚款、赔偿金、律师费、公证费等)。

八、 法律适用与争议解决

本协议的订立、执行和解释均适用中华人民共和国大陆地区法律。

因本协议产生的或与本协议有关的任何争议,双方应友好协商解决;协商不成的,任何一方均可向【公司所在地】有管辖权的人民法院提起诉讼。

九、 其他

本协议构成双方就本服务达成的完整协议,取代此前任何口头或书面约定。

本协议任一条款被认定为无效或不可执行的,不影响其他条款的效力。

我们对本协议享有最终解释权,并在法律允许的范围内保留随时修改的权利。修改后的协议一经公布即生效,继续使用服务即视为同意修订内容。


已查阅