免費(fèi)高效!貝銳花生殼3步實(shí)現(xiàn)Llama3模型遠(yuǎn)程訪問與協(xié)作

前幾天,Meta全新的開源大語言模型Llama 3發(fā)布了!

如果想要快速使用Llama 3,使用免費(fèi)的桌面端工具LM Studio是個(gè)不錯(cuò)的選擇,支持一鍵安裝,運(yùn)行Llama 3模型,實(shí)現(xiàn)本地使用。

同時(shí),LM Studio還提供了Local Server功能,可以提供接口調(diào)用服務(wù),便于App、應(yīng)用軟件、前端網(wǎng)頁集成AI功能。

然而,Local Server功能默認(rèn)提供的是本地訪問地址,為了快速遠(yuǎn)程調(diào)用,開發(fā)者們需要解決開發(fā)環(huán)境的遠(yuǎn)程訪問難題。

在無需公網(wǎng)IP、不用端口映射、不設(shè)置路由/網(wǎng)關(guān)的情況下,搭配貝銳花生殼花生殼,就可以3步實(shí)現(xiàn)LM Studio接口的遠(yuǎn)程訪問。

kappframework-wwnwVC(1)(1).png

LM Studio啟用Local Server功能后,通過貝銳花生殼實(shí)現(xiàn)遠(yuǎn)程訪問的步驟如下:

第一步:在貝銳官網(wǎng)下載花生殼客戶端,并注冊(cè)貝銳帳號(hào),并內(nèi)網(wǎng)主機(jī)上安裝登錄客戶端:

第二步:進(jìn)入花生殼云端管理平臺(tái)→點(diǎn)擊內(nèi)網(wǎng)穿透→添加映射→選擇“網(wǎng)站應(yīng)用”開始創(chuàng)建即可;

對(duì)于常見的網(wǎng)站應(yīng)用,目前花生殼提供HTTP和HTTPS兩種類型可用。

HTTP:可用于搭建HTTP協(xié)議的站點(diǎn)映射,屬于非加密訪問,建議搭配訪問控制提升網(wǎng)站安全性:

HTTPS:用于創(chuàng)建訪問安全加密的站點(diǎn)映射,同時(shí)花生殼可自動(dòng)云端部署證書,本地?zé)o需額外申請(qǐng)、設(shè)置,非常方便。

第三步:根據(jù)提示進(jìn)行設(shè)置,如下圖正確填寫相關(guān)信息后,點(diǎn)擊保存,就會(huì)自動(dòng)生成一個(gè)外網(wǎng)訪問地址。

生成完成后,復(fù)制生成的訪問地址+接口路徑,就可以實(shí)現(xiàn)LM Studio的接口遠(yuǎn)程調(diào)用。

(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )