91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

酷睿輕薄本也能運行大語言模型,英特爾推動 PC 生成式 AI 落地

looger123 ? 來源:looger123 ? 作者:looger123 ? 2023-08-25 09:26 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

IT之家8 月 24 日消息,2023 年 8 月 18 日上午,英特爾在大灣區(qū)舉辦了一場技術(shù)分享會,主題是英特爾在 AIGC(人工智能生成式計算)領(lǐng)域的最新進展。會上,英特爾的技術(shù)專家向與會者展示了他們在 AIGC 上的技術(shù)方向,并進行了多個應(yīng)用的演示。

首先,英特爾介紹了他們在大語言模型方面的優(yōu)化和支持。在我們傳統(tǒng)的認知里,運行類似 ChatGPT 這種大語言模型必須要有大顯存的顯卡支持。但這場交流會卻顛覆了我們的認知。英特爾為了讓 12、13代酷睿平臺也能夠順利運行各種大語言模型并提供流暢的使用體驗,構(gòu)建了 BigDL-LLM 庫。通過這個庫,可以對各種大語言模型進行優(yōu)化和支持,包括一些開源的、可以在本地運行的大語言模型。這個庫甚至可以在一臺搭載 16GB 內(nèi)存的英特爾輕薄本的機器上運行參數(shù)量高達 16B 的大語言模型。此外還支持 LLaMA / LLaMA2、ChatGLM / ChatGLM2 等多個大語言模型。

接下來,英特爾展示了他們在大語言模型應(yīng)用方面的表現(xiàn)。通過集成了 ChatGLM2、LLaMA2 和 StarCoder 這三個大語言模型的 Demo,他們演示了這些模型在中文和英文應(yīng)用上的表現(xiàn)。通過優(yōu)化和量化操作,這些大語言模型在生成回答時能夠以非??斓乃俣壬?,并且不影響閱讀體驗。英特爾已經(jīng)發(fā)布了這套 Demo,任何搭載 12、13代酷睿的電腦都可以直接安裝并體驗。

我們這里選擇了一臺通過英特爾Evo平臺認證的輕薄本:華為 MateBook 16s 來進行測試。處理器為酷睿 i9-13900H + 32G 內(nèi)存,看看在核顯輕薄本上究竟能不能跑 AIGC。

英特爾大語言模型的 Demo 安裝過程非常傻瓜,英特爾已經(jīng)打包成了 EXE 文件,安裝并導(dǎo)入.Bin 格式的大語言模型就可以運行了。打開界面我們可以看到左側(cè)可以選擇聊天內(nèi)容、調(diào)整模型參數(shù)和查看運算延遲,右側(cè)則是聊天框。

wKgaomToAy6APZN-AAD3K3E2GZE492.png

筆者先嘗試問了他一些人情世故方面的問題,沒想到回答非常出色,響應(yīng)速度也很快。這樣一個問題只花了 658.87ms 就完成了響應(yīng)。

wKgZomToAy-AZijhAAK_uxoFikA008.png

在運算過程中我們可以看到,i9-13900H 占用率達到了 100%,內(nèi)存占用達到了 16G,Xe 核顯也有一定占用??磥磉@個運算過程確實是在本地進行的。經(jīng)過英特爾不斷的優(yōu)化和 13代酷睿處理器算力的提升,我們真的在輕薄本上實現(xiàn)了 AIGC 的落地。

wKgaomToAy-AA8nCAADZ5jTDLt0978.png

在情感分析功能中,我們讓大語言模型分析了一段經(jīng)典散文??梢钥吹诫m然分析的角度比較淺顯,但沒有邏輯錯誤,還是可以自洽的。

wKgZomToAy-AUDnYAAR8sEEjX9k713.png

而在這個中文翻譯功能中,英特爾大語言,模型的表現(xiàn)就更加令我意外了,它的翻譯質(zhì)量相當高,速度也很快。哪怕是有如此多專有名詞的稿件,也能準確無誤地翻譯。

wKgaomToAzCAWZR-AAQvkh6HHSM181.png

在故事創(chuàng)作方面,這套大語言模型也展現(xiàn)出了令我驚訝的邏輯能力和創(chuàng)造能力。我這邊讓它寫一篇關(guān)羽大戰(zhàn)林黛玉,最后林黛玉取勝的故事。但 AI 居然認識到了這兩人根本不是一個時代的,最后寫了一個穿越時空的戲碼,雖然漏洞百出,但大體上沒有問題。

wKgZomToAzCAZ8eVAARce_HOUD4171.png

生成大綱功能則是一個非常有用的功能,我們只要輸入想要撰寫的稿件,就能幫我們列出一套邏輯清晰的稿件大綱了。這對于經(jīng)常需要寫文章的群體來說能起到很好的輔助作用。

wKgaomToAzGAQ_OtAAIodgQOTzA339.png

信息提取功能對于經(jīng)常需要閱讀報告的群體來說很有幫助??梢钥焖購拈L篇文章中提取核心信息。我這邊嘗試讓 AI 從英文文章中提取中文信息,效果卻依然非常好。

wKgZomToAzGABOe5AARn_cviFiY339.png

最后,筆者讓 AI 給出一份青島美食建議和青島旅游建議。由于這個大語言模型是完全離線運行的,所以給到的信息也會比較陳舊,但單從撰寫水平來看還是不錯的。

wKgaomToAzKAEZ2UAAPeMSbjK24867.png

wKgZomToAzKASNTOAAM9pewLIeQ798.png

除了大語言模型應(yīng)用外,英特爾還展示了在 AI 文生圖算法 Stable Diffusion 上的支持。他們啟用了 OpenVINO 的加速,開發(fā)了一套 AI 框架,通過一行代碼的安裝,就可以加速 PyTorch 模型的運行。通過 Stable Diffusion 的 WebUI,可以在集成顯卡和 Arc 獨立顯卡上運行 Stable Diffusion Automatic1111。通過演示,可以看到在 Evo 輕薄本和搭載 i7-13700H 處理器的機器上,Stable Diffusion 在集成顯卡上的表現(xiàn)效果。96EU 版本的英特爾銳炬 Xe 顯卡強大的算力,可以支持 Stable Diffusion 軟件上運行 FP16 精度的模型,快速生成高質(zhì)量圖片。

同時,他們還展示了在搭載 i7-13700K CPU + Arc A770 獨顯的機器上運行 Stable Diffusion 的效果,速度非???。

此外,英特爾還展示了基于 Arc 顯卡的人物動作的三維數(shù)字重建技術(shù)。通過 Arc 強大的算力和 OpenVINO 框架對 AI 算法的優(yōu)化推理,可以實時探測和重建人物動作,并進行后期渲染。這項技術(shù)不需要智能穿戴設(shè)備,只需連接家用攝像頭,即可實現(xiàn)實時探測和重建人物動作,并通過數(shù)字人的形象進行動畫渲染。通過實時的骨骼點信息和 3D 重建,數(shù)字人可以展現(xiàn)出靈活多樣的肢體動作,實現(xiàn)真實的三維動效。同時,根據(jù)用戶的需求,可以自定義渲染器的畫風(fēng),快速打造各種元宇宙應(yīng)用。

在最后的渦輪卡展示環(huán)節(jié),英特爾展示了他們新的渦輪 GPU 卡,Arc A770 16G。這張卡具有雙槽全長全高的設(shè)計,適應(yīng)各種邊緣側(cè)服務(wù)器機箱或設(shè)備機箱。它采用渦輪風(fēng)扇設(shè)計,減少對機箱內(nèi)流場的干擾,更適合多卡混合計算的服務(wù)器、煉丹爐場景。

wKgZomToAzSAeHmWAAIGGO30mfg71.jpeg

從本次分享會看來,英特爾一直著力于發(fā)展 AI 技術(shù),特別是當下火熱的 AIGC 領(lǐng)域,英特爾也沒有缺席。憑借 13代酷睿強勁的算力和不斷的算法優(yōu)化,現(xiàn)在即便是輕薄本也可支持大語言模型的本地運行。而在 Arc 顯卡的加持下,Stable Diffusion 文生圖的支持也在不斷開展。同時,英特爾也在探索 AI 的下一代應(yīng)用場景,并為企業(yè)級用戶提供算力更強的解決方案。

wKgaomToAzSAFiKpAAG2d-U6IlA19.jpeg

通過這些技術(shù)的展示,英特爾向大家展示了他們在 AIGC 領(lǐng)域的領(lǐng)先地位和不斷創(chuàng)新的能力。他們致力于為用戶提供更智能、高效的計算體驗,推動人工智能技術(shù)的發(fā)展和應(yīng)用。隨著技術(shù)的不斷進步和完善,我們可以期待在未來看到更多來自英特爾的 AIGC 應(yīng)用和解決方案。


審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 英特爾
    +關(guān)注

    關(guān)注

    61

    文章

    10301

    瀏覽量

    180449
  • 酷睿
    +關(guān)注

    關(guān)注

    2

    文章

    440

    瀏覽量

    37179
  • AI
    AI
    +關(guān)注

    關(guān)注

    91

    文章

    39793

    瀏覽量

    301404
  • 語言模型
    +關(guān)注

    關(guān)注

    0

    文章

    571

    瀏覽量

    11310
  • AIGC
    +關(guān)注

    關(guān)注

    1

    文章

    391

    瀏覽量

    3227
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    英特爾與華陽通用聯(lián)手推出全新AI Box解決方案

    英特爾宣布推出基于最新英特爾 Ultra 架構(gòu)的AI Box解決方案,將PC級旗艦算力引入
    的頭像 發(fā)表于 03-02 14:15 ?312次閱讀

    英特爾創(chuàng)新引領(lǐng)AI NAS:軟硬結(jié)合引領(lǐng)本地數(shù)據(jù)智慧管理與多場景創(chuàng)新應(yīng)用

    展示面向中小企業(yè)、消費者和專業(yè)用戶,賦新場景、加速產(chǎn)品落地的最新技術(shù)方案。會上,綠聯(lián)、極空間、鐵威馬、暢網(wǎng)、飛牛等AI NAS 廠商,發(fā)布和展示了一系列基于英特爾?
    的頭像 發(fā)表于 12-12 15:45 ?489次閱讀
    <b class='flag-5'>英特爾</b>創(chuàng)新引領(lǐng)<b class='flag-5'>AI</b> NAS:軟硬結(jié)合引領(lǐng)本地數(shù)據(jù)智慧管理與多場景創(chuàng)新應(yīng)用

    大顯存突破!解鎖120B MoE大模型,英特爾Ultra 285H拓展AI新應(yīng)用

    一段時間,但是我們給它帶來了全新的能力,通過軟件和配置的升級,讓它們做到以前做不到的新的應(yīng)用場景。 這次重磅官宣的核心亮點在于,大顯存跑贏大模型Ultra9 285H高達128GB系統(tǒng)統(tǒng)一內(nèi)存,其中超過120GB可作為可變
    的頭像 發(fā)表于 11-23 08:00 ?9495次閱讀
    大顯存突破!解鎖120B MoE大<b class='flag-5'>模型</b>,<b class='flag-5'>英特爾</b><b class='flag-5'>酷</b><b class='flag-5'>睿</b>Ultra 285H拓展<b class='flag-5'>AI</b>新應(yīng)用

    英特爾舉辦行業(yè)解決方案大會,共同打造機器人“芯”動脈

    11月19日,在2025英特爾行業(yè)解決方案大會上,英特爾展示了基于英特爾? ? Ultra平臺的最新邊緣
    的頭像 發(fā)表于 11-19 21:51 ?6762次閱讀
    <b class='flag-5'>英特爾</b>舉辦行業(yè)解決方案大會,共同打造機器人“芯”動脈

    英特爾舉辦工業(yè)AI與具身智能生態(tài)大會,加速智造升級,共推工業(yè)AI規(guī)?;?b class='flag-5'>落地

    解決方案與算力平臺?;顒由习l(fā)布的基于英特爾? ? Ultra平臺的工廠落地案例,生動描繪出具身智能驅(qū)動智能制造發(fā)展的人機協(xié)同新范式。
    的頭像 發(fā)表于 09-24 15:38 ?3039次閱讀
    <b class='flag-5'>英特爾</b>舉辦工業(yè)<b class='flag-5'>AI</b>與具身智能生態(tài)大會,加速智造升級,共推工業(yè)<b class='flag-5'>AI</b>規(guī)?;?b class='flag-5'>落地</b>

    英特爾可變顯存技術(shù)讓32GB內(nèi)存筆記流暢運行Qwen 30B大模型

    英特爾? ? Ultra 200H處理器和32GB內(nèi)存的AI PC上,英特爾可變顯存技術(shù)(I
    的頭像 發(fā)表于 08-14 15:39 ?1648次閱讀

    硬件與應(yīng)用同頻共振,英特爾Day 0適配騰訊開源混元大模型

    于OpenVINO? 構(gòu)建的 AI 軟件平臺的可擴展性,英特爾助力ISV生態(tài)伙伴率先實現(xiàn)應(yīng)用端Day 0 模型適配,大幅加速了新模型落地
    的頭像 發(fā)表于 08-07 14:42 ?1365次閱讀
    硬件與應(yīng)用同頻共振,<b class='flag-5'>英特爾</b>Day 0適配騰訊開源混元大<b class='flag-5'>模型</b>

    英特爾發(fā)布邊緣AI控制器與邊緣智算一體機,創(chuàng)造“AI新視界”

    在2025北京機器視覺展覽會(VisionChina)以“AI 視界:英特爾推動智能制造革新浪潮”為主題的英特爾論壇中,英特爾與諾達佳聯(lián)合發(fā)
    發(fā)表于 06-24 17:50 ?1517次閱讀
    <b class='flag-5'>英特爾</b>發(fā)布邊緣<b class='flag-5'>AI</b>控制器與邊緣智算一體機,創(chuàng)造“<b class='flag-5'>AI</b>新視界”

    英特爾銳炫Pro B系列,邊緣AI的“智能引擎”

    CTO、高級首席AI工程師張宇博士 英特爾客戶端計算事業(yè)部邊緣計算CTO、高級首席AI工程師張宇博士在MWC AI終端峰會上指出,邊緣將崛起為AI
    的頭像 發(fā)表于 06-20 17:32 ?892次閱讀
    <b class='flag-5'>英特爾</b>銳炫Pro B系列,邊緣<b class='flag-5'>AI</b>的“智能引擎”

    從想象到現(xiàn)實,英特爾與MAXHUB帶你走進AI PC新視界

    事業(yè)部邊緣計算CTO、英特爾客戶端計算事業(yè)部高級首席AI工程師張宇博士、MAXHUB總裁林宇升出席會議,并就研發(fā)理念、產(chǎn)品技術(shù)進行分享。 張宇博士表示:“大語言模型、
    的頭像 發(fā)表于 04-21 10:40 ?526次閱讀
    從想象到現(xiàn)實,<b class='flag-5'>英特爾</b>與MAXHUB帶你走進<b class='flag-5'>AI</b> <b class='flag-5'>PC</b>新視界

    英特爾Ultra 200HX游戲本發(fā)布

    近日,英特爾舉辦了“英特爾 Ultra 200HX新品分享會”,來自10家OEM的20款高性能筆記本集中亮相,為廣大游戲發(fā)燒友和高性能專業(yè)用戶帶來更多選擇。借助
    的頭像 發(fā)表于 04-09 09:24 ?1221次閱讀

    英特爾Ultra AI PC上部署多種圖像生成模型

    全新英特爾Ultra 200V系列處理器對比上代Meteor Lake,升級了模塊化結(jié)構(gòu)、封裝工藝,采用全新性能核與效核、英特爾硬件線
    的頭像 發(fā)表于 04-02 15:47 ?1485次閱讀
    在<b class='flag-5'>英特爾</b><b class='flag-5'>酷</b><b class='flag-5'>睿</b>Ultra <b class='flag-5'>AI</b> <b class='flag-5'>PC</b>上部署多種圖像<b class='flag-5'>生成</b><b class='flag-5'>模型</b>

    英特爾Ultra處理器助力亦心AI閃繪本地功能上線

    英特爾Ultra處理器支持的AI實時繪畫軟件“亦心AI閃繪”本地功能已正式上線,能夠基于本地大模型
    的頭像 發(fā)表于 04-02 15:27 ?1253次閱讀

    微星攜英特爾為玩家打造非凡游戲體驗,兩款泰坦家族新品均搭載全新英特爾Ultra HX處理器

    3月29日,在英特爾Ultra 200HX新品分享會上,搭載該處理器的高性能筆記齊聚一堂,英特爾攜手生態(tài)合作伙伴致力于以創(chuàng)新技術(shù)滿足用
    的頭像 發(fā)表于 04-02 09:37 ?1319次閱讀

    英特爾發(fā)布最強大的商用AI PC產(chǎn)品陣容

    處理器。在臺式機和移動設(shè)備形態(tài)中,該產(chǎn)品組合為全球企業(yè)提供包含計算性能、效、連接性、安全性和可管理性的全面解決方案。 如今是PC更新?lián)Q代的關(guān)鍵節(jié)點,憑借英特爾?
    的頭像 發(fā)表于 03-08 09:28 ?1185次閱讀