La traduzione in lingua dei segni di Huawei HDC2021 è in fiamme: perché “lei” può essere così geniale?

Huawei, sia duro che morbido, ha bisogno di essere ricompreso.

Il 22 ottobre, la Huawei Developer Conference 2021 (Insieme) si è aperta ufficialmente a Songshan Lake, Dongguan.Nel discorso di apertura, Huawei ha rilasciato ufficialmente la nuova funzionalità di servizio core mobile Huawei multi-terminale, cross-OS, full-scene HMS Core 6, e sviluppatori Costruisci, condividi e ottieni un nuovo ecosistema HMS. Ma non appartiene solo agli sviluppatori, può appartenere a ciascuno di noi. La tecnologia software di base non è lontana da noi.

HMS Core (Huawei Mobile Core Services) è una raccolta di funzionalità aperte software e hardware di Huawei, che viene eseguito sul sistema operativo e utilizza varie funzionalità aperte per fornire una ricca varietà di servizi. Come parte importante dell’ecosistema HMS, HMS Core collega sviluppatori e utenti, consentendo agli sviluppatori di sviluppare applicazioni in modo efficiente e innovativo, migliorando al contempo l’esperienza dell’utente.

Se lo paragoni alla costruzione di una casa, Huawei fornisce materiali da costruzione e strumenti come mattoni, piastrelle, cemento, barre d’acciaio, camion, vetro, ecc. Per quanto riguarda la costruzione di case rurali in legno, ville suburbane o grandi magazzini del centro, The lo sviluppatore decide.

Sebbene HDC2021 sia una conferenza principalmente per sviluppatori, ci sono anche molte notizie fuori cerchio: ad esempio, l’interprete della lingua dei segni che accompagna la trasmissione in diretta della conferenza è diverso dalla traduzione in diretta che abbiamo visto nell’angolo in basso a sinistra della stazione TV. L’interprete inviata da Huawei questa volta She è una “digital human”. “She” ha davvero raggiunto la destrezza. La mente è derivata dall’”algoritmo di traduzione automatica” e la destrezza deriva dall’”algoritmo multimodale di generazione umana digitale” .

Questo traduttore di lingua dei segni non è solo una dimostrazione dell’ultima tecnologia di Huawei, ma anche una tecnologia di base che può avvantaggiare molti sviluppatori.Se lo sviluppatore lo desidera, può organizzare un interprete di lingua dei segni simile nella sua applicazione, proprio come Huawei. .

Questo traduttore della lingua dei segni è una manifestazione concreta di un’importante capacità di HMS Core 6 che è appena stato rilasciato.

Entro il 2021, HMS Core 6 è già sfuggito ai limiti dello sviluppo di applicazioni mobili, quindi oltre i limiti, dove può essere ampliato il suo stadio?

Cosa può aiutare gli sviluppatori HMS Core 6?

Dopo aver capito cos’è HMS Core 6, possiamo capire cosa può fare? Questa volta la traduzione in lingua dei segni è una manifestazione concreta delle capacità di HMS Core 6. In effetti, la tecnologia alla base si chiama SignPal Kit. Poiché dietro di esso c’è un Kit (kit di strumenti), significa che gli sviluppatori possono usarlo per fare più cose. In breve, il Sign Language Service (SignPal Kit) offre la capacità di generare il linguaggio dei segni, che può tradurre il testo in dati di movimento della lingua dei segni fluidi e naturali conformi alle abitudini di espressione dei gruppi con problemi di udito in tempo reale, aiutando a costruire informazioni applicazioni innovative senza barriere.

Più grave di quanto si immagini, gli ultimi dati dell’Organizzazione Mondiale della Sanità mostrano che circa 466 milioni di persone nel mondo soffrono di ipoacusia con disabilità, che è quasi più del 5% della popolazione mondiale, quindi aiuta queste persone a utilizzare facilmente anche i prodotti elettronici per raggiungere L’accessibilità delle informazioni è quasi una delle importanti responsabilità sociali delle grandi aziende. SignPal Kit è uno strumento per insegnare alle persone a pescare, ma non è facile da completare.In primo luogo, Huawei ha completato il modello linguistico di pre-formazione sviluppato autonomamente, l’algoritmo di traduzione automatica e l’algoritmo di generazione del movimento umano digitale multimodale. allo stesso tempo, ha lavorato con il Consiglio di ricerca sull’accessibilità delle informazioni. , E in collaborazione con la Facoltà di Educazione dell’Università Normale di Pechino, integrare la conoscenza esperta della linguistica del linguaggio dei segni per realizzare la generazione di posture, gesti ed espressioni del corpo del linguaggio dei segni coerenti e naturali .

Al momento, ha più di 10.000 vocabolario e il tasso di precisione è superiore al 90%. Gli sviluppatori possono anche personalizzare l’immagine del personaggio 3D per esprimere movimenti naturali e fluidi della mano, posture del corpo ed espressioni facciali conformi alle abitudini umane.

La capacità di modellazione 3D (Kit di modellazione 3D) è un altro importante aggiornamento di HMS Core 6. In effetti, la capacità di modellazione 3D non è nuova, ma la differenza questa volta è che è necessaria solo una normale fotocamera RGB per generare in modo efficiente il 3D tramite un telefono cellulare. Modello.

La chiave è abbassare la “soglia”. Negli ultimi anni ho visto molte apparecchiature di scansione e modellazione 3D in molte fiere tecnologiche. Sono tutte ingombranti e costose, ma ora si affidano solo a un normale smartphone. Insieme a questo Kit di modellazione 3D, può supportare la segmentazione dello sfondo degli oggetti.Il modello ricostruito non ha sfondo e i bordi sono più chiari e puliti. Lo scenario più semplice per questa capacità dovrebbe essere l’applicazione per lo shopping.Ora voglio vedere l’intera immagine di un prodotto, con otto o nove immagini o facendo un video.Ora è possibile generare un modello 3D per visualizzare il prodotto in tre dimensioni. Naturalmente, questa capacità non si limita alle scene di shopping.Molti oggetti di scena di gioco sono spesso modellati sulla base di oggetti reali e poi ridisegnati.Naturalmente, il kit di modellazione 3D può essere conveniente anche per gli sviluppatori di giochi.

HMS Core 6 ha diverse nuove funzionalità a vantaggio degli sviluppatori di giochi: tracciamento della luce dell’ambiente AR, Computer Graphics Kit (kit di elaborazione grafica) e Scene kit (motore grafico).

Se la capacità di modellazione 3D serve a rendere il reale più reale, allora queste nuove capacità servono a rendere reale il virtuale. Per ottenere l’immersione nell’esperienza AR, è necessaria la coerenza visiva tra l’oggetto virtuale e l’oggetto reale, altrimenti farà agire le persone. Il tracciamento della luce ambientale Huawei AR è il primo a realizzare la capacità di fusione virtuale e reale a livello di centimetro.Può stimare le condizioni di luce ambientale, combinato con il motore di rendering, in modo che gli oggetti virtualizzati da AR possano avere gli stessi effetti di luce e ombra del reale oggetti.

Computer Graphics Kit (kit di calcolo grafico) è il primo a ottenere effetti di foschia dinamici sul terminale mobile; Scene kit (motore grafico) è il primo a utilizzare la tecnologia di ray tracing su dispositivi mobili per simulare effetti di riflessione e rifrazione della luce del mondo reale, in precedenza È possibile simulare scene che soffrono di mal di testa, come i riflessi del lago e i riflessi speculari. Allo stesso tempo, il realismo fornito dal kit Scene (motore grafico) include anche gli effetti di collisione, caduta e rotazione del modello 3D, oltre a fornire effetti speciali di post-elaborazione come allagamento, profondità di campo e sfocatura del movimento. Insomma, molte volte i problemi di grafica sono in realtà problemi fisici, alla fine del problema di fisica c’è il problema di matematica.

Alla conferenza stampa della serie Huawei P50, è presente una tecnologia di potenziamento del segnale chiamata tecnologia di comunicazione eterogenea AI. In quanto area tecnologica leader di Huawei, questa tecnologia è aperta anche a tutti gli sviluppatori insieme a HMS Core 6, aiutando gli utenti a ottenere stabilità ad alta velocità. esperienza di rete, questa esperienza copre le reti WiFi e mobili. Ad esempio, il mio gioco deve essere aggiornato. Il pacchetto di aggiornamento ha 2G. Se il Network Kit nella tecnologia di comunicazione eterogenea AI non è connesso, potrebbero essere necessari più di dieci minuti sotto la rete 4G, ma con il Network Kit, attraverso il download multi-threading, l’algoritmo di frammentazione intelligente, può accelerare la velocità di download, attraverso la tecnologia di compressione trasparente, può ridurre la quantità di dati scaricati, i due sovrapposti, il download finale può essere in pochi minuti. E dopo essere entrati nel gioco, questa tecnologia può anche svolgere un ruolo, in modo che il ritardo della rete di gioco si riduca molto, finché le tue mani possono tenere il passo con il tuo cervello, la risposta del telefono può tenere il passo.

Come aggiornamento principale, HMS Core 6 ha una varietà di nuove funzionalità, ed è certamente difficile da trattare con un articolo, ma ho detto così tanto, in effetti, c’è solo una direzione: utilizzare funzionalità pratiche per aiutare gli sviluppatori a risolvere pratiche problemi e in definitiva migliorare l’esperienza dell’utente. Ad esempio, il kit di editing audio può riprodurre diversi componenti dell’audio nella posizione spaziale specificata per ottenere gli ultimi effetti audio spaziali; la funzione di guida a livello di corsia della piattaforma Petal Maps può rendere la navigazione più precisa e umana; il modulo chip di sicurezza e il modulo Trusted Management Services può aiutare l’ambiente di accettazione del RMB digitale e rendere le transazioni sicure e veloci…

Tra queste molte funzionalità, alcune servono a risolvere vecchi problemi, come i problemi di velocità del segnale e della rete; mentre alcune sono multipiattaforma e cross-device orientate al futuro, come capacità di modellazione 3D a soglia ultra bassa, rilevamento della luce dell’ambiente AR, ecc. E così via, ce ne sono anche alcuni che hanno entrambi e hanno una natura di benessere pubblico, come i servizi di lingua dei segni e la tecnologia umana digitale.

Dal punto di vista dei gemelli digitali, HMS Core 6 può essere applicato anche al concetto di “meta universo”.

Prima, abbiamo scritto “Metacosm ha bisogno di “Infrastructure Madness””, che ha registrato molti produttori che hanno costruito l’infrastruttura per Metaverse nella fase iniziale del concetto, come Unity, Nvidia, Epic e così via. Il nostro punto fondamentale è che se parliamo dell’effettiva esperienza del meta-universo 30 anni dopo, ci dispiace non poterla dare ora. Se si parla di una piccola condizione realizzativa sulla strada che porta alla sua visione, allora è probabile che i tecnici siano in grado di dare una soluzione fattibile. Alla fine, quando molte condizioni saranno gradualmente soddisfatte, l’esperienza del meta-universo non sarà lontana.

Questo è un viaggio di raccolta della sabbia in una torre.

Tuttavia, a volte raccogliendo sabbia, raccogliendo insieme, alla fine è ancora una sabbia sciolta. Ciò richiede una varietà di strumenti di sviluppo per raccogliere efficacemente i granelli di sabbia insieme per formare una forma finale.

Metaverse manca di concetti e visioni, ma manca di potenza di calcolo, reti ad alta velocità e bassa latenza, manca di piattaforme, manca di contenuti, per così dire, modellazione 3D a bassa soglia in HMS Core 6, trasmissione in tempo reale del linguaggio dei segni + umano digitale , AR Environmental light tracking, tecnologia di tracciamento della luce per dispositivi mobili e Petal Maps sono tutte tecnologie che possono contribuire con contenuti futuri al concetto di meta-universo e diventare funzionalità di base.

Il futuro è troppo lontano, qual è il significato pratico di HMS Core 6?

Molte persone hanno un malinteso di base che il meta universo è approssimativamente uguale alla realtà virtuale, e questo spazio virtuale ha poco a che fare con il mondo reale.

Ma di fatto, agli occhi degli esperti tecnici, nel suo specifico processo di realizzazione, lo spazio virtuale puro è solo una parte di esso; la combinazione organica con il mondo fisico, che viene solitamente chiamata sistema cyberfisico CPS, o gemello digitale, può essere più efficace Esprimere accuratamente la tendenza tecnologica e l’intenzione originale della tecnologia basata sulle persone.

In ultima analisi, tutti gli oggetti nello spazio fisico, compresi i loro attributi, comportamenti e relazioni, devono essere modellati digitalmente e mappati nel cyberspazio, in modo che lo spazio fisico diventi un oggetto che può essere calcolato nel cyberspazio. Ma, cosa ancora più importante, i risultati dei calcoli nel cyberspazio devono anche essere mappati nello spazio fisico, in modo da migliorare le capacità degli esseri umani nel mondo reale.

Pertanto, se non parliamo del concetto di futuro e parliamo solo di una delle logiche di sviluppo fondamentali della tecnologia Internet, infatti, è quella di “rendere lo spazio fisico un oggetto computazionale nel cyberspazio e rafforzare le capacità umane nel mondo reale.”

In questo processo di sviluppo, sono innumerevoli i problemi da risolvere e le aree da coprire. Ad esempio, l’animazione del telefono cellulare, dall’animazione lineare iniziale all’animazione non lineare che si conforma ai sentimenti intuitivi delle persone e alle leggi fisiche del mondo reale, è un esempio di progresso.

Quindi, dai modelli piatti 2D ai modelli 3D stereo, puoi migliorare l’esperienza dell’applicazione di acquisto; Il tracciamento della luce ambientale AR e la tecnologia di tracciamento della luce del dispositivo mobile possono aiutare a creare una migliore esperienza di gioco mobile, in modo che i giochi mobili non stiano più solo sfregando lo schermo. .

La trasmissione in tempo reale della lingua dei segni + persona digitale ha due significati di inclusività: aiutare le persone con disabilità ad apprezzare meglio i risultati dello sviluppo tecnologico e aiutare gli sviluppatori a servire questo gruppo di persone. L’ingegnosa traduzione in lingua dei segni su HDC2021 può esistere in ogni telefono cellulare.

Se la frase “rendere lo spazio fisico un oggetto computazionale nel cyberspazio e rafforzare le capacità umane nel mondo reale” è troppo ambiziosa, la trasmissione in diretta della lingua dei segni + la tecnologia umana digitale è un esempio appropriato di questa frase. Huawei HMS Core, sviluppatori e utenti sono entrati in questa grande proposta in un piccolo ma importante incrocio.

Quando ci saranno sempre più esempi del genere, l’ecologia dell’HMS inizierà a prendere forma.

Finora Huawei ha registrato più di 5,1 milioni di sviluppatori in tutto il mondo e più di 173.000 applicazioni hanno integrato HMS Core a livello globale. HMS Core può essere trovato in applicazioni Web, applicazioni veloci e applicazioni e servizi come Android e HarmonyOS, nonché su telefoni cellulari, tablet, schermi intelligenti, orologi intelligenti e macchine per auto.

Questa volta, HMS Core 6 ha ulteriormente aperto capacità e funzionalità innovative nelle cinque aree di grafica, media, intelligenza artificiale, servizi app e sistema (grafica, contenuti multimediali, intelligenza artificiale, servizi e sistemi applicativi) e ha lanciato 9 nuovi kit . Simile all’esecuzione rapida di HarmonyOS, l’attuale HMS Core copre un totale di sette aree e 69 Kit, che fornisce una vasta assistenza alla comunità degli sviluppatori.Naturalmente, queste funzionalità in ultima analisi servono gli utenti di massa.

Come accennato all’inizio, HMS Core fornisce mattoni, piastrelle, cemento, barre d’acciaio, camion, vetro e altri materiali da costruzione e strumenti per aiutare gli sviluppatori a costruire case, ma in realtà possiamo anche immaginare che le capacità di HMS Core 6 possano essere possibile Dopo aver aiutato gli sviluppatori a costruire strade, fare decorazioni raffinate e progettare paesaggi, l’immaginazione dell’ecologia HMS non si limita a una collezione di case, ma può essere una città vibrante, o anche una più eccitante.

#Benvenuto a seguire l’account WeChat ufficiale di Aifaner: Aifaner (ID WeChat: ifanr), i contenuti più interessanti ti verranno forniti il ​​prima possibile.

Ai Faner | Link originale · Visualizza commenti · Sina Weibo