操作系统
MacOS
最近更新
2024-08-24
使用许可
开源
语言
不支持中文
文件大小
338.83 MB

LocalAI是一款专为本地部署设计的开源项目,旨在帮助开发者在本地环境中快速搭建和运行人工智能应用,无需云端依赖。

作为一款专为本地部署设计的开源AI项目,LocalAI凭借其多模型支持、本地运行与隐私保护、性能优化、易于集成与扩展等特点,为开发者提供了一个低门槛、高效能的AI应用解决方案。


多模型支持:

LocalAI支持多种预训练模型,如图像识别、文本分类、音频转录等,并进行了封装,只需几行代码即可调用。

兼容多种大模型,如llama.cpp、alpaca.cpp、gpt4all.cpp、rwkv.cpp、whisper.cpp、vicuna、koala、gpt4all-j、cerebras等。

支持与ggml格式兼容的多个模型系列,如GPT4ALL-J和带有ggml的cerebras-GPT。


本地运行与隐私保护:

所有计算和数据处理都在本地进行,无需将数据上传到云端,大大增强了数据安全性和隐私保护。

无需GPU和互联网访问,即可在消费级硬件上运行,降低了使用门槛和成本。


性能优化:

使用C++绑定来优化推理过程,实现更快的推理速度和更好的性能。

首次加载模型后,会将其加载到内存中以进行更快的推理。


易于集成与扩展:

提供了一套简洁明了的API接口,方便开发者快速集成到现有系统中。

支持多种操作系统,包括Windows、macOS和各种Linux发行版,实现了跨平台支持。

允许用户导入TensorFlow、PyTorch等深度学习库构建的自定义或新模型,增强了可扩展性。


模型管理:

提供了轻量级的模型管理器,支持模型的加载、存储和管理。

可以通过简单的命令或API调用,实现模型的快速切换和更新。


应用场景广泛:

智能家居:在物联网设备上实现本地化的语音识别和智能控制。

移动应用:为应用添加实时的图像分析或自然语言处理能力,提高用户体验。

企业内部工具:用于数据分析和报告生成,提升工作效率。

隐私敏感项目:如医疗健康领域,确保患者数据的安全性。

2.19.4 版本更新说明:

模型

常规任务 (model-gallery):

  • 由 @localai-bot 更新校验和。


模型库 (gallery):

  • 添加 magnum-32b-v1 由 @mudler 提交
  • 添加 lumimaid-v0.2-70b-i1 由 @mudler 提交
  • 添加 sekhmet_aleph-l3.1-8b-v0.1-i1 由 @mudler 提交
  • 添加 l3.1-8b-llamoutcast-i1 由 @mudler 提交
  • 添加 l3.1-8b-celeste-v1.5 由 @mudler 提交
  • 添加 llama-guard-3-8b 由 @mudler 提交
  • 添加 meta-llama-3-instruct-8.9b-brainstorm-5x-form-11 由 @mudler 提交
  • 添加 sunfall-simpo 由 @mudler 提交
  • 添加 genius-llama3.1-i1 由 @mudler 提交
  • 添加 seeker-9b 由 @mudler 提交
  • 添加 llama3.1-chinese-chat 由 @mudler 提交
  • 添加 gemmasutra-pro-27b-v1 由 @mudler 提交
  • 添加 leetwizard 由 @mudler 提交
  • 添加 tarnished-9b-i1 由 @mudler 提交
  • 添加 meta-llama-3-instruct-12.2b-brainstorm-20x-form-8 由 @mudler 提交
  • 添加 loki-base-i1 由 @mudler 提交
  • 添加 tifa 由 @mudler 提交



依赖库

常规任务 (deps):

  • 由 @dependabot 将 langchain 从 0.2.10 升级到 0.2.11 在 /examples/langchain/langchainpy-localai-example 目录下。
  • 由 @dependabot 将 openai 从 1.37.0 升级到 1.37.1 在 /examples/langchain/langchainpy-localai-example 目录下。
  • 由 @dependabot 将 setuptools 从 70.3.0 升级到 72.1.0 在 /backend/python/autogptq 目录下。
  • 由 @dependabot 将 setuptools 从 70.3.0 升级到 72.1.0 在 /backend/python/vllm 目录下。
  • 由 @dependabot 将 chromadb 从 0.5.4 升级到 0.5.5 在 /examples/langchain-chroma 目录下。
  • 由 @dependabot 将 setuptools 从 70.3.0 升级到 72.1.0 在 /backend/python/parler-tts 目录下。
  • 由 @dependabot 将 setuptools 从 70.3.0 升级到 72.1.0 在 /backend/python/rerankers 目录下。
  • 由 @dependabot 将 setuptools 从 69.5.1 升级到 72.1.0 在 /backend/python/transformers-musicgen 目录下。
  • 由 @dependabot 将 setuptools 从 70.3.0 升级到 72.1.0 在 /backend/python/coqui 目录下。
  • 由 @dependabot 将 setuptools 从 70.3.0 升级到 72.1.0 在 /backend/python/vall-e-x 目录下。
  • 由 @dependabot 将 setuptools 从 70.3.0 升级到 72.1.0 在 /backend/python/petals 目录下。
  • 由 @dependabot 将 setuptools 从 69.5.1 升级到 72.1.0 在 /backend/python/transformers 目录下。
  • 由 @dependabot 将 streamlit 从 1.36.0 升级到 1.37.0 在 /examples/streamlit-bot 目录下。



其他修改

文档:

  • 更新文档版本 mudler/LocalAI 由 @localai-bot 提交


修复:

  • 安装脚本中特定于 Bash 的等号检查 由 @dave-gray101 提交
  • 更新 openvoice 检查点 URL 由 @mudler 提交


常规任务:

  • 更新 ggerganov/llama.cpp 由 @localai-bot 提交


撤销:

  • 撤销 "常规任务 (deps): 将 setuptools 从 69.5.1 升级到 72.1.0 在 /backend/python/transformers-musicgen 目录下" 由 @mudler 提交
  • 撤销 "常规任务 (deps): 将 setuptools 从 69.5.1 升级到 72.1.0 在 /backend/python/transformers 目录下" 由 @mudler 提交
  • 撤销 "常规任务 (deps): 将 setuptools 从 70.3.0 升级到 72.1.0 在 /backend/python/vllm 目录下" 由 @mudler 提交


修复 (llama-cpp):

  • 不使用 UPX 压缩 由 @mudler 提交

其他版本
最近更新软件·MacOS 软件更新列表
妙笔 [应用软件] 妙笔 2.5.4.7486 Intel/Silicon
今天 09:47
网易邮箱大师 [网络] 网易邮箱大师 5.1.2 Intel/Silicon
今天 08:52
115浏览器 [网络] 115浏览器 27.0.3.7 Intel
今天 07:39
115浏览器 [网络] 115浏览器 27.0.3.7 Silicon
今天 07:38
抖店 [行业] 抖店 0.12.20 Intel/Silicon
今天 07:35
Todoist [应用软件] Todoist 9.7.5 Silicon
今天 07:24
Todoist [应用软件] Todoist 9.7.5 Intel
今天 07:24
Zotero [应用软件] Zotero 7.0.5 Intel/Silicon
今天 07:21
Apifox [开发] Apifox 2.6.16 Intel
今天 07:18
GameViewer [网络] GameViewer 2.1.2 Intel/Silicon
今天 07:18
新软件·MacOS 新软件列表
奥维互动地图 [行业] 奥维互动地图 2.7.0 Intel/Silicon
09-11
小鱼易连 [网络] 小鱼易连 3.3.3.93222 Intel/Silicon
09-11
腾讯会议 [网络] 腾讯会议 3.28.21.411 Silicon
09-10
Tropy [媒体] Tropy 1.16.2 Silicon
09-10
Tropy [媒体] Tropy 1.16.2 Intel
09-10
Zotero [应用软件] Zotero 7.0.5 Intel/Silicon
今天 07:21
夸克浏览器 [网络] 夸克浏览器 1.7.0.108 Intel/Silicon
09-09
欧路词典 [教育] 欧路词典 4.6.9 Intel/Silicon
09-09
Todo清单 [应用软件] Todo清单 3.7.8 Intel/Silicon
09-09
知网研学 [应用软件] 知网研学 4.3.1 Intel/Silicon
09-09