A tradução em linguagem de sinais do Huawei HDC2021 está pegando fogo. Por que “ela” pode ser tão engenhosa?
A Huawei, tanto dura quanto mole, precisa ser re-compreendida.
Em 22 de outubro, a Huawei Developer Conference 2021 (Together) foi oficialmente aberta em Songshan Lake, Dongguan. No discurso de abertura, a Huawei lançou oficialmente a nova capacidade de serviço principal móvel HMS Core 6 multi-terminal, cross-OS e cena completa da Huawei, e desenvolvedores Construir, compartilhar e ganhar um novo ecossistema HMS. Mas não pertence apenas aos desenvolvedores, pode pertencer a cada um de nós. A tecnologia básica de software não está longe de nós.
O HMS Core (Huawei Mobile Core Services) é uma coleção de recursos abertos de software e hardware da Huawei. É executado no sistema operacional e usa vários recursos abertos para fornecer uma ampla variedade de serviços. Como uma parte importante do ecossistema HMS, o HMS Core conecta desenvolvedores e usuários, capacitando os desenvolvedores a desenvolver aplicativos de maneira eficiente e inovadora, ao mesmo tempo em que aprimora a experiência do usuário.
Se você comparar com a construção de uma casa, a Huawei fornece materiais de construção e ferramentas como tijolos, telhas, concreto, barras de aço, caminhões, vidro, etc. Quanto à construção de casas rurais de madeira, vilas suburbanas ou lojas de departamento no centro da cidade, o desenvolvedor decide.
Embora HDC2021 seja uma conferência principalmente para desenvolvedores, também há muitas notícias fora do círculo. Por exemplo, o intérprete de linguagem de sinais que acompanha a transmissão ao vivo da conferência é diferente da tradução ao vivo que vimos no canto esquerdo inferior da estação de TV. A intérprete enviada pela Huawei desta vez Ela é uma "humana digital". "Ela" realmente alcançou a destreza. A mente é derivada do "algoritmo de tradução automática", e a destreza vem do "algoritmo de geração humana digital multimodal" .
Este tradutor de linguagem de sinais não é apenas uma exibição da tecnologia mais recente da Huawei, mas também uma tecnologia básica que pode beneficiar muitos desenvolvedores. Contanto que o desenvolvedor esteja disposto, ele pode providenciar um intérprete de linguagem de sinais semelhante em seu próprio aplicativo, assim como a Huawei. .
Este tradutor de linguagem de sinais é uma manifestação concreta de uma habilidade importante no HMS Core 6 que acaba de ser lançado.
Em 2021, o HMS Core 6 já escapou das limitações do desenvolvimento de aplicativos móveis, portanto, além das limitações, onde seu estágio pode ser expandido?
O que o HMS Core 6 pode ajudar os desenvolvedores?
Depois de entender o que é o HMS Core 6, podemos descobrir o que ele pode fazer? A tradução da linguagem de sinais é uma manifestação concreta da capacidade do HMS Core 6 desta vez. Na verdade, a tecnologia por trás dela é chamada SignPal Kit. Como há um Kit (kit de ferramentas) por trás dele, isso significa que os desenvolvedores podem usá-lo para fazer mais coisas. Em suma, o serviço de linguagem de sinais (SignPal Kit) fornece a capacidade de gerar linguagem de sinais, que pode traduzir o texto em dados de movimento de linguagem de sinais naturais e suaves que se adaptam aos hábitos de expressão de grupos com deficiência auditiva em tempo real, ajudando a construir informações aplicações inovadoras sem barreiras.
Mais sério do que se imaginava, os dados mais recentes da Organização Mundial de Saúde mostram que aproximadamente 466 milhões de pessoas em todo o mundo sofrem de deficiência auditiva, o que é quase mais de 5% da população mundial. Portanto, ajudar essas pessoas também a usar facilmente produtos eletrônicos para alcançar A acessibilidade à informação é quase uma das responsabilidades sociais importantes das grandes empresas. SignPal Kit é uma ferramenta para ensinar as pessoas a pescar, mas não é fácil completá-la. Primeiro, a Huawei concluiu o modelo de linguagem de pré-treinamento desenvolvido por você mesmo, o algoritmo de tradução automática e o algoritmo de geração de movimento humano digital multimodal. ao mesmo tempo, trabalhou com o Conselho de Pesquisa em Acessibilidade de Informação. E em cooperação com a Faculdade de Educação da Universidade Normal de Pequim, integrou o conhecimento especializado da linguística da linguagem de sinais para realizar a geração de posturas corporais, gestos e expressões coerentes e naturais em linguagem de sinais .
No momento, ele tem mais de 10.000 vocabulário e a taxa de precisão é de mais de 90%. Os desenvolvedores também podem personalizar a imagem 3D do personagem para expressar movimentos naturais e suaves das mãos, posturas corporais e expressões faciais de acordo com os hábitos humanos.
A capacidade de modelagem 3D (3D Modeling Kit) é outra atualização importante do HMS Core 6. Na verdade, a capacidade de modelagem 3D não é nova, mas a diferença desta vez é que apenas uma câmera RGB comum é necessária para gerar 3D com eficiência por meio de um telefone móvel. Modelo.
O segredo é diminuir o "limite". Vi muitos equipamentos de digitalização e modelagem 3D em muitas exposições de tecnologia nos últimos anos. Todos são volumosos e caros, mas agora dependem apenas de um smartphone comum. Junto com isso Kit de modelagem 3D, pode suportar segmentação de fundo de objeto.O modelo reconstruído não tem fundo e as bordas são mais claras e limpas. O cenário mais fácil para essa capacidade deve ser o aplicativo de compras. Agora quero ver a imagem completa de um produto, seja com oito ou nove fotos ou fazendo um vídeo. Agora, um modelo 3D pode ser gerado para exibir o produto em três dimensões. Claro, essa capacidade não se limita a cenas de compras. Muitos adereços de jogo são frequentemente modelados com base em objetos reais e depois redesenhados. Naturalmente, o Kit de modelagem 3D também pode ser conveniente para desenvolvedores de jogos.
O HMS Core 6 tem vários novos recursos que beneficiam os desenvolvedores de jogos: rastreamento de luz de ambiente AR, Kit de computação gráfica (kit de computação gráfica) e kit de cena (mecanismo gráfico).
Se a capacidade de modelagem 3D é para tornar o real mais real, então esses novos recursos são para tornar o real virtual. Para alcançar a imersão na experiência de RA, a consistência visual entre o objeto virtual e o objeto real é necessária, caso contrário, fará com que as pessoas atuem. O rastreamento de luz ambiente AR da Huawei é o primeiro a realizar a capacidade de fusão virtual e real em nível de centímetro. Ele pode estimar as condições de luz ambiente, combinadas com o mecanismo de renderização, para que objetos virtualizados por AR possam ter os mesmos efeitos de luz e sombra reais. objetos.
O Computer Graphics Kit (kit de cálculo gráfico) é o primeiro a obter efeitos dinâmicos de neblina no terminal móvel; o Scene kit (mecanismo gráfico) é o primeiro a usar a tecnologia de rastreamento de raios em dispositivos móveis para simular efeitos de reflexão e refração de luz do mundo real, anteriormente Cenas desenvolvidas que sofrem de dores de cabeça, como reflexos em lago e reflexos especulares, podem ser simuladas. Ao mesmo tempo, o realismo fornecido pelo Scene kit (motor gráfico) também inclui os efeitos de colisão, queda e rotação do modelo 3D. Ele também pode fornecer efeitos especiais de pós-processamento, como inundação, profundidade de campo e desfoque de movimento. Resumindo, muitas vezes, os problemas gráficos são, na verdade, problemas físicos.No fim do problema da física, é o problema da matemática.
Na conferência de imprensa da série Huawei P50, há uma tecnologia de aprimoramento de sinal chamada tecnologia de comunicação heterogênea AI. Como área líder em tecnologia da Huawei, essa tecnologia também está aberta a todos os desenvolvedores, juntamente com o HMS Core 6, ajudando os usuários a obter estabilidade em alta velocidade. experiência de rede, esta experiência cobre redes Wi-Fi e móveis. Por exemplo, meu jogo precisa ser atualizado. O pacote de atualização tem 2G. Se o Kit de rede na tecnologia de comunicação heterogênea AI não estiver conectado, pode levar mais de dez minutos na rede 4G, mas com o Kit de rede, através de Download multi-threading, algoritmo de fragmentação inteligente, pode acelerar a velocidade de download, através da tecnologia de compressão transparente, pode reduzir a quantidade de dados baixados, os dois sobrepostos, o download final pode ser em poucos minutos. E depois de entrar no jogo, essa tecnologia também pode desempenhar um papel, de forma que o atraso da rede do jogo seja muito reduzido, desde que suas mãos possam acompanhar seu cérebro, a resposta do telefone possa acompanhar.
Como uma atualização importante, o HMS Core 6 tem uma variedade de novos recursos e é certamente difícil de cobrir com um artigo, mas eu já disse muito, na verdade, há apenas uma direção: use recursos práticos para ajudar os desenvolvedores a resolver problemas práticos problemas e, em última análise, melhorar a experiência do usuário. Por exemplo, o Kit de edição de áudio pode renderizar diferentes componentes do áudio para a posição espacial especificada para obter os mais recentes efeitos de áudio espacial; a função de orientação no nível da pista da plataforma Petal Maps pode tornar a navegação mais precisa e humana; o módulo de chip de segurança e os serviços de gerenciamento confiáveis do módulo podem ajudar o ambiente de aceitação do RMB digital e tornar as transações seguras e rápidas …
Entre esses muitos recursos, alguns são para resolver problemas antigos, como problemas de sinal e velocidade de rede; enquanto alguns são orientados para o futuro em plataforma cruzada e dispositivo cruzado, como recursos de modelagem 3D de limiar ultrabaixo, rastreamento de luz de ambiente AR, etc. E assim por diante, também há alguns que têm ambos e têm uma natureza de bem-estar público, como serviços de linguagem de sinais e tecnologia humana digital.
Do ponto de vista dos gêmeos digitais, o HMS Core 6 pode até ser aplicado ao conceito de "metauniverso".
Antes, escrevemos "Metacosm needs" Infrastructure Madness "", que registrou muitos fabricantes que construíram a infraestrutura para o Metaverso no estágio inicial do conceito, como Unity, Nvidia, Epic e assim por diante. Nosso ponto central é que, se falarmos sobre a experiência real do metaniverso 30 anos depois, lamentamos não poder dar agora. Se você falar sobre uma pequena condição de realização na estrada que leva à sua visão, é provável que os técnicos sejam capazes de fornecer uma solução viável. No final, quando muitas condições forem preenchidas gradualmente, a experiência do metauniverso não estará longe.
Esta é uma jornada de coleta de areia em uma torre.
Porém, às vezes juntando areia, juntando, no final ainda é uma areia solta. Isso requer uma variedade de ferramentas de desenvolvimento para reunir efetivamente os grãos de areia para formar uma forma final.
O metaverso carece de conceitos e visões, mas carece de poder de computação, redes de alta velocidade e baixa latência, carece de plataformas, carece de conteúdo, por assim dizer, modelagem 3D de baixo limiar no HMS Core 6, transmissão ao vivo em linguagem de sinais em tempo real + humano digital , Rastreamento de luz ambiental AR, tecnologia de rastreamento de luz de dispositivo móvel e Petal Maps são todas tecnologias que podem contribuir com conteúdo futuro para o conceito de metauniverso e se tornarem recursos básicos.
O futuro está muito longe, qual é o significado prático do HMS Core 6?
Muitas pessoas têm um mal-entendido básico de que o metauniverso é aproximadamente igual à realidade virtual e que esse espaço virtual tem pouco a ver com o mundo real.
Mas, na verdade, aos olhos dos especialistas técnicos, em seu processo de realização específico, o espaço virtual puro é apenas uma parte dele; a combinação orgânica com o mundo físico, que geralmente é chamado de sistema ciberfísico CPS, ou gêmeo digital, pode ser mais eficaz. Expressar com precisão a tendência da tecnologia e a intenção original da tecnologia baseada nas pessoas.
Em última análise, todos os objetos no espaço físico, incluindo seus atributos, comportamentos e relações, precisam ser modelados digitalmente e mapeados para o ciberespaço, para que o espaço físico se torne um objeto que pode ser calculado no ciberespaço. Mas o mais importante é que os resultados do cálculo no ciberespaço também precisam ser mapeados de volta ao espaço físico, de modo a aumentar a capacidade dos seres humanos no mundo real.
Portanto, se não falamos sobre o conceito de futuro e apenas falamos sobre uma das lógicas centrais de desenvolvimento da tecnologia da Internet, na verdade, é "fazer do espaço físico um objeto computacional no ciberespaço e fortalecer as capacidades humanas no mundo real."
Nesse processo de desenvolvimento, são inúmeros os problemas que precisam ser resolvidos e as áreas a serem percorridas. Por exemplo, a animação do telefone móvel, da animação linear inicial à animação não linear que se conforma aos sentimentos intuitivos das pessoas e às leis físicas do mundo real, é um exemplo de progresso.
Portanto, de modelos planos 2D a 3D estéreo, você pode melhorar a experiência do aplicativo de compras; o rastreamento de luz ambiente de AR e a tecnologia de rastreamento de luz de dispositivo móvel podem ajudar a criar uma melhor experiência de jogo para celular, para que os jogos para celular não fiquem mais apenas esfregando a tela. .
A transmissão ao vivo em linguagem de sinais em tempo real + pessoa digital tem dois significados de inclusão: ajudar as pessoas com deficiência a apreciar melhor as conquistas do desenvolvimento tecnológico e ajudar os desenvolvedores a servir a esse grupo de pessoas. A engenhosa tradução em linguagem de sinais do HDC2021 pode existir em todos os telefones celulares.
Se a frase "tornar o espaço físico um objeto computacional no ciberespaço e fortalecer as capacidades humanas no mundo real" é muito ambiciosa, então a transmissão ao vivo em linguagem de sinais + tecnologia humana digital é um exemplo apropriado dessa frase. Huawei HMS Core, desenvolvedores e usuários entraram nesta grande proposição em um cruzamento pequeno, mas importante.
Quando houver mais e mais exemplos assim, a ecologia do HMS começará a tomar forma.
Até agora, a Huawei registrou mais de 5,1 milhões de desenvolvedores em todo o mundo e mais de 173.000 aplicativos integraram o HMS Core globalmente. O HMS Core pode ser encontrado em aplicativos da web, aplicativos rápidos e aplicativos e serviços como Android e HarmonyOS, bem como em telefones celulares, tablets, telas inteligentes, relógios inteligentes e máquinas de automóveis.
Desta vez, o HMS Core 6 abriu ainda mais recursos e recursos inovadores nas cinco áreas de gráficos, mídia, IA, serviços de aplicativos e sistema (gráficos, conteúdo de mídia, inteligência artificial, serviços de aplicativos e sistemas) e lançou 9 novos kits . Semelhante ao funcionamento rápido do HarmonyOS, o HMS Core atual cobre um total de sete áreas e 69 Kits, o que fornece uma grande ajuda para a comunidade de desenvolvedores.Claro, esses recursos, em última análise, atendem aos usuários em massa.
Como mencionado no início, o HMS Core fornece tijolos, telhas, concreto, barras de aço, caminhões, vidro e outros materiais de construção e ferramentas para ajudar os desenvolvedores a construir casas, mas, na verdade, também podemos imaginar que os recursos do HMS Core 6 podem ser possível Depois de ajudar os desenvolvedores a construir estradas, fazer decoração fina e projetar paisagismo, a imaginação da ecologia do HMS não se limita a uma coleção de casas, mas pode ser uma cidade vibrante, ou até mais emocionante. O universo colorido.
#Bem-vindo a seguir a conta oficial do WeChat da Aifaner: Aifaner (WeChat ID: ifanr), mais conteúdo interessante será fornecido a você o mais rápido possível.
