Qual è il livello del grande modello linguistico di WeChat rilasciato prima di ChatGPT?

L’emergere di ChatGPT ha reso la tecnologia AI un popolare pollo fritto nel circolo tecnologico.

Il quasi onnipotente ChatGPT rende prive di significato attività ripetitive come scrivere e-mail e redigere contratti, ed è ancora più utile per scrivere codice, scrivere romanzi e scrivere PPT.

Ma è obsoleto discutere cosa può fare ChatGPT e cosa può sostituire Ora le persone vogliono sapere dov’è il prossimo “ChatGPT”?

Il nuovo Bing di Microsoft? Ora la coda potrebbe durare per sempre.

Le parole letterarie di Baidu? Si sta avvicinando al suo lancio ufficiale il 16 marzo.

Bardo di Google? Questo è ancora più di un’incognita.

Non esiste un chat robot oltre a ChatGPT adesso?

Non preoccuparti, WeChat, che sa un po’ di tutto, non ti deluderà facilmente.

Nell’ottobre dello scorso anno, WeChat ha rilasciato un modello linguistico chiamato WeLM in modo discreto.A quel tempo, la definizione di WeChat di WeLM era solo un’intelligenza artificiale che poteva “chattare”.

Guardando indietro ora, la capacità di WeLM di “chattare” è stata in grado di soddisfare le nostre aspettative per l’intelligenza artificiale che genera testo.

Tuttavia, WeChat sottolinea che WeLM non è un chat robot, ma un modello generativo che integra le informazioni di input dell’utente.

Secondo il feedback di WeChat, WeLM è solo un progetto sperimentale innovativo all’interno di WeChat. Non ha intenzione di essere applicato a prodotti reali e non sarà correlato all’esperienza dell’app WeChat. In futuro, WeLM potrebbe essere rimosso di tanto in tanto dagli scaffali.

Octathlon

Cosa può fare WeLM?

Prima fai una domanda su Efang Palace per vedere la sua riserva di conoscenza.

Sembra che non ci sia niente di sbagliato nella risposta, vediamo quanto sa della seconda dimensione.

Sembra che un po’ di buon senso bidimensionale di base sia ancora troppo semplice per WeLM.

Poiché il buon senso non può sconfiggerlo, chiedi le ultime informazioni per vedere se WeLM può rispondere.

Quando ho chiesto se sapeva di ChatGPT, le risposte di WeLM hanno iniziato a essere sbagliate e le risposte erano lontane dalla verità.

Quindi fai alcune domande specifiche, come qual è la prima riga di “Lovely Woman”?

Anche le prestazioni di WeLM sono insoddisfacenti.

Questa è anche la limitazione di WeLM. Secondo la spiegazione fornita dal team di WeChat, WeLM non è un robot per il dialogo diretto, ma un modello generativo che completa le informazioni di input dell’utente.

Il nome completo di WeLM è Well-Read Language Model.La versione più grande del modello ha 10 miliardi di parametri di allenamento.La sua forza risiede nella sua capacità di comprendere e generare il cinese e può completare una varietà di attività NLP (inclusa l’attività multilingue).

Secondo il tutorial ufficiale delle domande, il focus delle risposte alle domande di WeLM dovrebbe essere su “frasi complete”.

Ad esempio, nell’esempio di “dare un nome al gatto”, l’interrogante deve prima fornire a WeLM alcuni esempi, quindi lasciare che WeLM lo completi.

Forse è a causa della versione di prova.Al momento, la divergenza del completamento della risposta di WeLM sembra essere maggiore dell’accuratezza, quindi scoprirai che WeLM può rispondere a tutto, ma la risposta non è necessariamente accurata.

Per alcune delle sue “sciocchezze”, posso solo dire che tutti ridono.

Questo tipo di meccanismo di risposta per il completamento dei contenuti può dare vita a una varietà di gameplay. A tale scopo, WeChat fornisce ufficialmente un totale di otto modalità: “dialogo, generazione di copie, riscrittura del testo, comprensione della lettura, traduzione, continuazione dell’articolo e compito gratuito “.

Proviamo prima la generazione della copia del prodotto.L’ho usata per generare una copia del prodotto per la testa di ricarica delle caramelle dure della fabbrica di zucchero.La prima metà sembra decente, ma quando si scrive la descrizione del prodotto in seguito, sembra che la CPU sia sovraccarica.

Devo dire che l’ultima frase “un dolce sapore solo per amore” è un po’ intrigante.

Riproviamo la traduzione, che è la forza di WeChat.

L’ho usato per tradurre un’introduzione OpenAI a ChatGPT e WeLM ha svolto il lavoro con facilità.

Secondo l’introduzione ufficiale, WeLM può non solo tradurre tra più lingue, ma anche tradurre testi misti con più lingue contemporaneamente.

Ad esempio, questa frase complessa che contiene contemporaneamente cinese, inglese e giapponese può essere completamente tradotta da WeLM .

Quando stai guardando un articolo lungo e complicato come il rapporto finanziario di un’azienda, puoi copiarlo in WeLM e utilizzare la “comprensione della lettura” per recuperare direttamente le informazioni desiderate.

Tuttavia, la capacità di comprensione di WeLM è relativamente superficiale.In pratica può solo rispondere alle informazioni che possono essere recuperate direttamente nell’articolo.Se vuoi chiedere le entrate di Apple per il 2021 in base alle entrate e al tasso di crescita di Apple nel 2022, non può calcolare il problema un angolo.

In altre parole, è necessario utilizzare un comando prompt più preciso per rendere possibile la risposta.

La funzione di dialogo di WeLM è una funzione molto giocabile: puoi impostare una persona per WeLM attraverso una serie di parole rapide (diventa Li Bai, diventa Jobs, diventa Musk) e realizzare un dialogo che abbraccia il tempo e lo spazio.

Ho provato a chiedere a Li Bai, interpretato da WeLM, di commentare Du Fu. “Li Bai” ha commentato che leggere le poesie di Du Fu è come bere un boccale di buon vino, e ha anche citato “Aijiangtou” di Du Fu.

“Aijiangtou” è stato scritto nel secondo anno di Zhide (757), e Li Bai è morto nel primo anno di Baoying (762).Forse Li Bai ha davvero letto “Aijiangtou” di Du Fu prima della sua morte.

Puoi anche lasciare che WeLM interpreti Musk, lascia che commenti su Tesla, Twitter , guida autonoma e altri problemi e persino intervistare le sue opinioni su Li Bai.

Come ha fatto WeLM a farlo?

Dopo un po’ di esperienza, ritengo ovviamente che WeLM dipenda più da precise parole rapide rispetto a ChatGPT.

Sebbene entrambi abbiano una forte comprensione del linguaggio naturale e capacità di espressione, WeLM ha un costo di apprendimento e un costo di utilizzo più elevati. Prima di chiedere a WeLM di rispondere alle domande, è necessario spiegare chiaramente la logica delle risposte alle domande (ad esempio). Le parole di richiesta dovrebbero anche essere continuamente lucido, e finalmente otterrai la risposta che desideri.

Al contrario, ChatGPT è un eremita accessibile, che può entrare nelle montagne e nei fiumi e ritirarsi presso il popolo della Liba. Che si tratti di una semplice domanda, di un riepilogo di un articolo o di una complessa domanda di programmazione, ChatGPT può sostanzialmente rispondere insieme.

Ciò è ovviamente anche correlato all’algoritmo del modello e ai parametri di addestramento dei due.Uno dei vantaggi di WeLM è che utilizza una vasta e diversificata raccolta di pagine Web cinesi, libri, notizie, forum e documenti accademici per la formazione. capire il cinese sarà più importante.

La fonte dei dati di apprendimento di WeLM sono principalmente i dati delle pagine Web cinesi scaricati da Common Crawl negli ultimi due anni. Inoltre, include anche un gran numero di libri, notizie, dati di forum e documenti accademici, con un volume di dati totale di 10 TB .

A parte i migliori studenti come ChatGPT, quando WeLM viene confrontato con modelli dello stesso livello di CPM, Huawei Pangu e Baidu Ernie 3.0 (predecessore di Wenxinyiyan), WeLM supera WeLM su 14 attività NLP.  Fondamentalmente può raggiungere il vantaggio.

È un peccato che questo sia solo un tentativo sperimentale di WeChat, e potrebbe essere tolto dagli scaffali di volta in volta in futuro.Dovrebbe essere difficile per noi vedere simili funzioni di smart chat su WeChat a breve termine.Questo articolo è condiviso solo come esperienza funzionale.

Sito web dell’esperienza: https://welm.weixin.qq.com/docs/playground/

Nota: WeLM è solo un progetto sperimentale innovativo all’interno di WeChat. Non ha intenzione di essere applicato a prodotti reali e non sarà correlato all’esperienza dell’app WeChat. Si prega di mantenere una mente aperta ed esplorativa per sperimentarlo.

#Benvenuti a prestare attenzione all’account pubblico WeChat ufficiale di Aifaner: Aifaner (ID WeChat: ifanr), altri contenuti interessanti ti verranno presentati il ​​prima possibile.

Ai Faner | Link originale · Visualizza i commenti · Sina Weibo