在 AI 領域，每天都在推出新的大型語言模型，並且一切都在以驚人的速度發生變化。在短短幾個月的開發中，我們現在可以在我們的 PC 上離線運行類似 ChatGPT 的 LLM。不僅如此，我們還可以訓練 AI 聊天機器人並創建個性化的 AI 助手。但最近讓我感興趣的是微軟的 AI 開發實踐方法。微軟目前正在開發一種名為 JARVIS （明顯指的是漫威的鋼鐵俠）的高級人工智能係統，它可以連接到多個人工智能模型並以最終結果作為響應。它的演示託管在 Huggingface 上，任何人都可以立即查看 JARVIS 的功能。因此，如果您有興趣，請立即學習如何使用 Microsoft JARVIS (HuggingGPT)。
目錄
什麼是 Microsoft JARVIS (HuggingGPT)?
Microsoft 開發了一種獨特的協作系統，可以使用多個 AI 模型來完成給定的任務。在所有這一切中，ChatGPT 充當任務的控制器。該項目在 GitHub 上名為 JARVIS（訪問），現在可以在 Huggingface（因此稱為 HuggingGPT）上使用人們嘗試一下。在我們的測試中，它在處理文本、圖像、音頻甚至視頻方面表現出色。
它的工作原理與 OpenAI 展示 GPT 4 的文本和圖像多模式功能的方式類似。然而，JARVIS 更進一步，集成了各種用於圖像、視頻、音頻等的開源 LLM。這裡最好的部分是它還可以連接到互聯網和訪問文件。例如，您可以輸入網站的 URL 並提出相關問題。這很酷，對吧?
您可以在單個查詢中添加多個任務。例如，您可以要求它生成外星人入侵的圖像並寫下有關它的詩歌。在這裡，ChatGPT 分析請求併計劃任務。之後，ChatGPT 選擇正確的模型（託管在 Huggingface 上）來完成任務。所選模型完成任務並將結果返回給 ChatGPT。
最後，ChatGPT 使用所有模型的推理結果生成響應。對於這項任務，JARVIS 使用 Stable Diffusion 1.5 模型生成圖像，並使用 ChatGPT 本身寫一首詩。
有多達 20 個模型鏈接到 JARVIS（擁抱GPT）。其中一些是 t5-base、stable-diffusion 1.5、bert、Facebook 的 bart-large-cnn、Intel 的 dpt-large 等等。總而言之，如果您現在想要多模式功能，請立即查看 Microsoft JARVIS。我們已經在此處解釋瞭如何設置和測試它:
第 1 步:獲取使用 Microsoft JARVIS 的密鑰
1。首先，前往此鏈接，登錄您的 OpenAI 帳戶，然後點擊“新建密鑰”以獲取您的 OpenAI API 密鑰。將密鑰保存在記事本文件中以備後用。
2.接下來，打開 huggingface.co 網站（訪問）並創建一個免費帳戶。
3.之後，單擊此鏈接以生成您的擁抱面令牌。單擊右側窗格中的“新令牌”。
4.在這裡，輸入一個名字（例如，我輸入了名字“jarvis”）。然後，將角色更改為“寫入”，然後單擊“生成令牌”。
5.接下來，點擊“複製”按鈕，令牌將被複製到剪貼板。將令牌保存到記事本文件。
第二步:開始使用Microsoft JARVIS (HuggingGPT)
1.要使用 Microsoft JARVIS，請打開此鏈接並粘貼 OpenAI API 密鑰在第一個領域。之後，單擊“提交”。同樣，將 Huggingface 標記粘貼到第二個字段中，然後單擊“提交”。
2.驗證兩個令牌後，向下滾動並輸入您的查詢。首先，我問 JARVIS 這張照片是關於什麼的，並分享了圖片的 URL。
3.它自動下載圖像並使用三種 AI 模型完成任務，包括 ydshieh/vit-gpt2-coco-en（將圖像轉換為文本）、facebook/detr-resnet-101（用於對象-檢測）和 dandelin/vilt-b32-finetuned-vqa（用於視覺問答）。最後，它得出結論，照片中有一隻貓在照鏡子。這不是很神奇嗎?
4.在另一個示例中，我要求它轉錄一個音頻文件，它使用 OpenAI/whisper-base 模型來完成。 JARVIS的用例很多，大家可以在HuggingFace上免費試用。
使用 HuggingGPT 同時使用多個 AI 模型
這就是你的方式可以使用 HuggingGPT 使用不同的 AI 模型完成任務。我多次測試了 JARVIS，它運行良好，只是你需要經常排在隊列後面。你不能在任何一台像樣的 PC 上本地運行 JARVIS，因為它需要至少 16GB 的 VRAM 和各種型號大約 300GB 的空間。
在 Huggingface 上也是一樣，你不能克隆它並跳過免費帳戶下的隊列。您需要訂閱才能在 Nvidia A10G 上運行強大的模型——這是一個每小時 3.15 美元的大型 GPU。無論如何，這都是我們的。如果您想在編程時使用 VS Code 中的 CodeGPT 獲得幫助，請訪問我們的鏈接指南。要免費使用 ChatGPT 4，我們為您準備了一份清單。最後，如果您有任何疑問，請在下面的評論部分告訴我們。
發表評論
去年，MSI 推出了配備英特爾酷睿 i9-12900HX 和 RTX 3080 Ti 筆記本電腦 GPU 的 Titan GT77，它是地球上最強大的遊戲筆記本電腦。這是重中之重 […]
自 iPhone 14 系列推出以來已經幾個月了，人們已經確定今年是 Pro 機型的元年。但是，如果您打算追求華麗的專業人士，那麼在過去的幾年裡，Wondershare 一直在開發一些最好的軟件和工具來簡化我們的生活和創造性的努力。特別是，Wondershare Filmora 獲得了無數讚譽。它是視頻編輯領袖獎的獲得者 […]
