RM新时代网站-首页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

AIGC系統(tǒng)中多個模型的切換調(diào)用方案探索

京東云 ? 來源:京東科技 賈玉龍 ? 作者:京東科技 賈玉龍 ? 2024-11-27 11:43 ? 次閱讀

作者:京東科技 賈玉龍

1 背景

1.1 現(xiàn)狀

AIGC系統(tǒng)中多個模型的切換調(diào)用通常指的是在同一個AIGC系統(tǒng)或應(yīng)用中,可以根據(jù)不同的輸入條件或任務(wù)需求,動態(tài)地選擇并調(diào)用不同的機器學習模型進行處理。是一個AIGC系統(tǒng)能力不可或缺的環(huán)節(jié)。

目前現(xiàn)行方案中,一般直接請求不同的會話聊天對應(yīng)不同的鏈接地址,又對應(yīng)不同的算法模型。

1.2 現(xiàn)有技術(shù)及缺點

1、需要建立多個不同類型的AIGC聊天窗口,對應(yīng)不同的鏈接,以對應(yīng)不同的模型;

2、無法直接動態(tài)切換模型,交互流程復(fù)雜;

3、由于異步問題,聊天窗中需要的初始化數(shù)據(jù)不能及時傳入。

2 方案目的

本問通過統(tǒng)一AIGC聊天窗中不同的卡片模型傳值,來動態(tài)切換不同聊天內(nèi)容對應(yīng)的模型;在用戶側(cè)交互上可以不用新建聊天窗口。

3 完整技術(shù)方案

3.1 方案原理

如下圖所示,聊天欄目“智能實驗室”是外框DOM,紅色部分為子聊天窗體,子窗體中1、2、3等為三種聊天source類型的卡片,需要對應(yīng)算法的3種模型,每個模型的對話可以直接點擊切換,并且需要外框DOM傳入相應(yīng)的初始化數(shù)據(jù)。

wKgZO2dGlVeAGSPbAAN1ji89o54366.png

3.2 詳細描述

如下圖所示:

wKgZPGdGlViAUVO0AARtyHl1-rs167.png

當用戶想使用對應(yīng)聊天功能進行AIGC內(nèi)容生成時,可選擇聊天窗對應(yīng)按鈕,聊天窗將對應(yīng)按鈕的source類型傳給外框DOM,外框DOM根據(jù)業(yè)務(wù)場景把對應(yīng)的初始化數(shù)據(jù)準備好,一起再發(fā)給子聊天窗,然后把數(shù)據(jù)傳給算法模型引擎,算法模型引擎根據(jù)source及參數(shù)類型,切換對應(yīng)的模型來進行內(nèi)容處理,然后返回生產(chǎn)的內(nèi)容給子聊天窗,子聊天窗再渲染展示給用戶。

4 總結(jié)

本方案里在AIGC的消息傳遞中,不直接發(fā)送不同初始化或不同相應(yīng)消息給大模型進行識別,而是讓外框DOM做模型主調(diào)度和消息總控調(diào)度,以方便及時調(diào)用和傳入?yún)?shù)。

審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 模型
    +關(guān)注

    關(guān)注

    1

    文章

    3226

    瀏覽量

    48806
  • AIGC
    +關(guān)注

    關(guān)注

    1

    文章

    361

    瀏覽量

    1539
收藏 人收藏

    評論

    相關(guān)推薦

    Linux內(nèi)核系統(tǒng)調(diào)用詳解

    Linux內(nèi)核設(shè)置了一組用于實現(xiàn)各種系統(tǒng)功能的子程序,稱為系統(tǒng)調(diào)用。用戶可以通過系統(tǒng)調(diào)用命令在
    發(fā)表于 08-23 10:37 ?785次閱讀
    Linux內(nèi)核<b class='flag-5'>中</b><b class='flag-5'>系統(tǒng)</b><b class='flag-5'>調(diào)用</b>詳解

    LabVIEw調(diào)用多個simulink模型

    哥哥姐姐們,求助啊,小弟最近才開始看LabVIEW,老師讓做個在一個LabVIEW的面板,通過下拉菜單來選擇加入不同的simulink模型的仿真信息,一個面板里面通過下拉菜單可以選擇顯示多個simulink
    發(fā)表于 07-20 10:37

    uCOS51 Proteus仿真調(diào)試任務(wù)切換時跑飛

    任務(wù)切換調(diào)用匯編函數(shù)(OSStartHighRdy()和OS_TASK_SW()),Step Over就會跑飛,進入到函數(shù)里面,單步執(zhí)行時沒有問題,任務(wù)切換也正確。
    發(fā)表于 04-21 00:56

    請問UCOS任務(wù)切換調(diào)用OSTimeDlyHMSM延時函數(shù) 延時時間到了會立即返回嗎?

    UCOS 任務(wù)切換調(diào)用OSTimeDlyHMSM延時函數(shù),延時結(jié)束后會立即返回原來的任務(wù)嗎?比如說這時候有更高優(yōu)先級的任務(wù)正在執(zhí)行,但是延時的時間到了,那么會立即返回嗎。還有一個問題,比如我用
    發(fā)表于 03-30 01:05

    科技大廠競逐AIGC,中國的ChatGPT在哪?

    來看,國內(nèi)大模型開發(fā)廠商一是布局以大模型為基礎(chǔ)的通用對話、生成等能力;二是將其能力整合到搜索引擎、智能客服、智能音箱等產(chǎn)品線;三是通過能力調(diào)用為中小企業(yè)滿足具體場景落地需求。”董曉飛
    發(fā)表于 03-03 14:28

    異構(gòu)無線網(wǎng)絡(luò)聯(lián)合切換調(diào)度和資源分配算法

    在宏蜂窩和微蜂窩并存的異構(gòu)無線網(wǎng)絡(luò),為了提高系統(tǒng)能效,提出了一種聯(lián)合切換調(diào)度和資源分配( JSRA)算法。首先,利用基于微基站睡眠的集中式切換調(diào)度算法(CUSA)來確定用戶的關(guān)聯(lián)基站
    發(fā)表于 01-08 14:41 ?0次下載
    異構(gòu)無線網(wǎng)絡(luò)聯(lián)合<b class='flag-5'>切換調(diào)</b>度和資源分配算法

    在LabVIEW調(diào)用OpenVINO? 模型

    自帶機器視覺函數(shù)庫,并提供OpenCV接口庫,開發(fā)機器視覺與自動化應(yīng)用程序速度快使用LabVIEW調(diào)用OpenVINO IR模型,可以快速完成深度學習項目開發(fā)與交付。
    的頭像 發(fā)表于 03-21 10:05 ?3721次閱讀

    如何結(jié)合使用系統(tǒng)級和詳細模型探索設(shè)計空間

    在設(shè)計電源轉(zhuǎn)換器時,可以使用仿真模型來幫助權(quán)衡多個設(shè)計標準。簡單的基于開關(guān)的有源器件模型用于快速仿真,從而獲得更多工程洞察力。但是,簡單的設(shè)備模型不會像詳細的制造商設(shè)備
    發(fā)表于 09-11 09:19 ?474次閱讀
    如何結(jié)合使用<b class='flag-5'>系統(tǒng)</b>級和詳細<b class='flag-5'>模型</b>來<b class='flag-5'>探索</b>設(shè)計空間

    AIGC是什么 AIGC有哪些應(yīng)用價值

    AIGC 即 AI Generated Content,利用人工智能技術(shù)來生成內(nèi)容,它被認為是繼PGC、UGC之后的新型內(nèi)容創(chuàng)作方式。2022年AIGC高速發(fā)展,這其中深度學習模型不斷完善、開源模式的推動、大
    的頭像 發(fā)表于 11-17 09:24 ?1.2w次閱讀

    Linux系統(tǒng)調(diào)用是怎樣實現(xiàn)

    系統(tǒng)調(diào)用和普通的函數(shù)調(diào)用沒有本質(zhì)區(qū)別,普通的函數(shù)調(diào)用一般調(diào)用的是我們自己編寫的函數(shù)或者其它庫函數(shù),而系統(tǒng)
    的頭像 發(fā)表于 02-15 11:40 ?1237次閱讀
    Linux<b class='flag-5'>中</b>的<b class='flag-5'>系統(tǒng)</b><b class='flag-5'>調(diào)用</b>是怎樣實現(xiàn)

    ChatGPT/AIGC研究框架原理和應(yīng)用實踐

    隨著ChatGPT等語言大模型落地,AIGC技術(shù)落地在各行各業(yè)得到發(fā)展和推進。根據(jù)模型的分類,AIGC的應(yīng)用可被分為單模態(tài)和多模態(tài)兩類。單
    發(fā)表于 03-30 10:35 ?677次閱讀

    軟國際解放號入選中國信通院《2023大模型AIGC產(chǎn)業(yè)圖譜》

    7月7日,2023世界人工智能大會(WAIC)期間,中國信息通信研究院正式發(fā)布《2023大模型AIGC產(chǎn)業(yè)圖譜》(以下簡稱“圖譜”)。軟國際解放號憑借多年積累的人工智能技術(shù)能力,以及數(shù)據(jù)治理
    的頭像 發(fā)表于 07-11 18:05 ?641次閱讀

    系統(tǒng)調(diào)用:用戶棧與內(nèi)核棧的切換(上)

    sysenter / sysexit 再到 syscall / sysret 實現(xiàn)方式的轉(zhuǎn)變,關(guān)于具體的演化和區(qū)別、系統(tǒng)調(diào)用的其他細節(jié)等將在以后的系統(tǒng)調(diào)用專欄里分析。本文從
    的頭像 發(fā)表于 07-31 11:27 ?869次閱讀
    <b class='flag-5'>系統(tǒng)</b><b class='flag-5'>調(diào)用</b>:用戶棧與內(nèi)核棧的<b class='flag-5'>切換</b>(上)

    aigc是什么概念?aigc的應(yīng)用場景

    新的概念和工具,旨在加速機器學習和深度學習的發(fā)展,提高人工智能在各個領(lǐng)域的應(yīng)用效率和質(zhì)量。AIGC可以幫助開發(fā)人員在從數(shù)據(jù)到模型的整個過程,更快、更準確地進行模型選擇、測試和優(yōu)化,將
    的頭像 發(fā)表于 08-21 17:16 ?7104次閱讀

    AIGC是什么及其應(yīng)用 AIGC的定義和工作原理

    AIGC的定義 AIGC是一種新興的技術(shù)領(lǐng)域,它結(jié)合了機器學習、自然語言處理(NLP)、計算機視覺和音頻處理等多個子領(lǐng)域。AIGC的目標是使計算機能夠理解、生成和編輯內(nèi)容,就像人類一樣
    的頭像 發(fā)表于 11-22 16:00 ?446次閱讀
    RM新时代网站-首页