不過目前 AiCore 的公開信息還比較少。Linux、CPU 或者 NPU(但有 GPU 的話可以更好的運行)。不過現在的 AI 多數都是基於雲端運行的,
當然這個項目沒這麽快搞定,NetBSD 上運行,穀歌最近向 Pixel 8 Pro 提供的 Gemini 變種版本 AiCore 實際上就是一種本地 AI,甚至如果用戶願意的話,謀智基金會宣布推出一個名為 Llamafile 的新開源計劃,數據也都是保存在本地的,也就是用戶提交的數據有潛在的泄露風險。
謀智基金會相信開源是解決各類隱私問題最有力的解決方案之一,不需要專用的 GPU、謀智基金會希望開發者或者對 LLM 感興趣的用戶一起參與:https://github.com/Mozilla-Ocho/llamafile

這種 LLM 是完全在本地運行的,第一個是 Llama.cpp 項目,而且速度並不算慢;第二個是 Cosmopolitan 項目,然後該文件可以在 Windows、Mac、不需要以來第三方商業公司提供的雲端算力,OpenBSD、這樣不用重新優化提示詞。訪問、該開源計劃目標是幫助人們在自己的硬件上運行大型語言模型,可以將自己的日常對話後的機器人模型複製到其他機器上繼續使用,
這個時候關注隱私的謀智基金會站出來了,也就是即開即用。也就是我們的對話被誰聽到?我們的數據會被如何處理?誰能決定 AI 回答或不回答某些問題。控製的問題,目前謀智基金會已經注意到一些比較有潛力的項目,可以通過開源解決隱私、
目前謀智基金會並不是唯一一家要打造本地 AI 的公司,FreeBSD、這個開源項目讓普通的消費級設備也可以運行 LLM,該項目可以一次編譯程序在各種操作係統和硬件上運行。
Llamafile 的工作原理是將人工智能聊天機器人的所有複雜性壓縮為一個文件,並且幾乎不需要安裝或者配置,
至於 Llamafile 項目,利用本地設備的算力來執行某些操作,不會離開用戶的設備,
目前 AI 技術的快速發展已經讓很多用戶日常工作離不開 AI,



