Regis Rossi Alves Faria.

Projeto de divulgação cultural voltado para a produção e disseminação em canais digitais de ampla penetração na internet da produção musical, científica e artística de alunos, docentes e pesquisadores do Departamento de Música da FFCLRP/USP. O projeto aborda o uso de ferramentas para produção em 3D de programas audiovisuais como videoclips e videotutoriais no Laboratório de Acústica e Tecnologia Musical (LATM) da FFCLRP/USP e divulgação no seu canal YouTube em https://www.youtube.com/channel/UCSXoNyeH6JCSZShXrY-298w

Este projeto abordou o estudo de plataformas e meios digitais existentes na internet voltados para a divulgação de conteúdo musical e cultural, e objetiva a prototipagem de uma solução e modelos para produção de programas interativos e imersivos e sua disseminação, em canais digitais de ampla penetração na internet. O projeto foi desenvolvido no Laboratório de Acústica e Tecnologia Musical (LATM) da FFCLRP-USP com suporte da Pró-Reitoria de Cultura e Extensão da USP

Este projeto conjunto entre a Universidade de São Paulo (USP) e a Oxford Brookes University (OBU) do Reino Unido objetiva a pesquisa em meios e processos e o desenvolvimento de soluções computacionais para integração da plataforma VSAT (Virtual Storytelling Application and Toolkit) de contação de estórias em RV imersiva da OBU e a plataforma de áudio espacial AUDIENCE do LATM (Laboratório de Áudio e Tecnologia Musical) da EACH-USP, de forma a permitir uma experiência de imersão em cena 3D/360 graus mais fidedigna e ampliada, além do alcançado pela versão atual do aplicativo VSAT. O projeto é uma parceria dos laboratórios LATM e LabArteMídia da ECA-USP e a Oxford Brookes University (OBU) do Reino Unido

O projeto objetiva a pesquisa e o desenvolvimento de meios e tecnologias para produção e escuta sonora espacial e de música 3D, investigando estéticas para criação e algoritmos para mixagem de cena auditiva 3D. Resultados esperados incluem um mapeamento e experimentação de estéticas para produção musical espacial, explorações em personalização da escuta de cenas imersivas, e a investigação de processos e ferramentas para renderização de cenas sonoras com múltiplas fontes. Ferramentas incluem codificadores e sistemas de autoria para MPEG-H, MPEG-I e o sistema AUDIENCE de áudio espacial do Laboratório de Áudio e Tecnologias Musicais (LATM, EACH-USP). Projeto prevê parcerias institucionais e conta com fomento de bolsas CAPES e do programa de Iniciação Científica (IC) da USP

O projeto TV3.0 (Fase 2) objetiva a realização de testes de campo e laboratoriais para a avaliação das tecnologias propostas para a 3a geração do Sistema Brasileiro de Televisão Digital Terrestre. Escopo no projeto: codificação de áudio. Os resultados dos testes devem, em conjunto com outros elementos de análise de mercado e de propriedade intelectual das tecnologias candidatas, subsidiar as decisões do Governo Federal sobre a adoção das novas tecnologias apropriadas para o Brasil

Projeto de pesquisa e desenvolvimentos em Arte e Tecnologia para o Carnaval 2020 de São Paulo. Idealizado e conduzido por uma parceria entre a Sociedade Rosas de Ouro (São Paulo) e uma rede de universidades (Universidade de São Paulo USP, Centro Universitário FEI, Instituto Mauá de Tecnologia, Insper - Instituto de Ensino e Pesquisa, e UFABC). Com o enredo 'Tempos Modernos', que trata da Revolução 4.0, o projeto envolve o Laboratório de Arte, Mídia e Tecnologias Digitais(LabArteMídia, ECA-USP) e o Laboratório de Áudio e Tecnologias Musicais (LATM, EACH-USP) que participam com soluções artísticas e tecnológicas para Realidade Aumentada/Virtual, captação e produção de áudio e vídeo 3D/360, com apoios do Projeto Jandig Arte e da Superintendência de Tecnologia da Informação (STI) da Universidade de São Paulo. Resultados: protótipos de processos e dispositivos para produção, e produções audiovisuais em suporte 3D/360. Em andamento: produção de um documentário audiovisual 3D

Este projeto é proposto no contexto interdisciplinar de pesquisa e desenvolvimento em instrumentação sonora espacial, com inovações tecnológicas para aplicações transversais em artes (música), engenharias (processamento de áudio espacial), ciências biológicas (bioacústica) e humanidades (sistemas de comunicação sonora). A proposta integra linhas de pesquisa e desenvolvimentos de referência fundamentais no contexto atual e futuro da tecnologia de produção e reprodução de cenas sonoras, envolvendo: a captura ou gravação de cenas sonoras espaciais com microfones espaciais; a modelagem, expansão ou processamento por meio de sistemas computadorizados dos sinais sonoros dos objetos em cena; e finalmente a projeção destas cenas sonoras no espaço de audição, por meio de sistemas de alto-falantes. O projeto assim extrapola uma linha de pesquisa ou desenvolvimento específica e configura-se pela confluência de linhas complementares. Bolsa de Produtividade CNPq DT-2, processo 313481/2017-2.

Abordando problemas e soluções para aplicações musicais interativas e aumentadas este projeto propõe o desenvolvimento e integração inéditos de dispositivos e recursos para captação, processamento e reprodução sonora espacial. A proposta é integrar em uma única infra-estrutura de performance e audição recursos de captação sonora espacial e auralização multicanal que sirvam concomitantemente a experimentações na área de instrumentação musical aumentada e modelos de audição interativa, bem como ao desenvolvimento de tecnologias diferenciais, hardware e software, para modelagem, microfonação e auralização de cenas sonoras. O projeto desdobra-se em uma fase de implantações tecnológicas e uma aberta a experimentações musicais aumentadas, motivando novas perspectivas artísticas e fronteiras tecnológicas na área de performance interacional-integrativa (músico-instrumento-audiência)

Importantes desafios colocam-se à frente da engenharia e computação para a concepção de arquiteturas para codificação sonora, especialmente no que diz respeito às técnicas para reprodução personalizada, interfaces de usuário e processos intuitivos e colaborativos de criação. Este projeto objetiva suportar ações paralelas e complementares de pesquisa sistemática e desenvolvimentos tecnológicos em novas perspectivas para organização da informação musical, processamento e modelagem do espaço de audição utilizando-se plataformas eletrônicas. Dois focos de pesquisa foram escolhidos: codificação de cenas sonoras e auralização musical. Através do desenvolvimentos de ferramentas espera-se a produção de tecnologias e conhecimento que contribuam para o avanço interdisciplinar na área, e agreguem valor para a cadeia produtiva de sistemas interativos e instrumentação avançadas para música. Projeto Desenvolvimento Tecnológico com Bolsa de Produtividade CNPq DT II

O projeto objetivou a implementação progressiva de uma suíte de processadores musicais em software, integrável à instrumentação musical virtual e aumentada, baseada na modelagem da interatividade entre usuário-software-música, contemplando diferentes graus de reatividade dos processadores ao gestual dos músicos e à própria música gerada ou processada. Resultados propiciaram o design e prototipagem de uma série de processadores tempo-espectrais, detetores de gestos, filtros harmônicos e outras ferramentas, articulando-se com demandas não atendidas por softwares comerciais. O projeto foi desenvolvido com alunos do Laboratório de Áudio e Tecnologias Musicais (LATM) inicialmente no Departamento de Música da FFCLRP-USP e a partir de 2019 na Escola de Artes, Ciências e Humanidades (EACH-USP), com suporte dos programas de Iniciação Científica PUB-USP, PIBIC-CNPq e Programa Ensinar com Pesquisa da USP. A biblioteca REACTIVE é distribuída em https://github.com/latm-lab/reactive

Projeto Temático FAPESP (processo no. 2008/08632-8) que teve como tema central a utilização e o desenvolvimento de processos interativos no âmbito da produção musical mediada tecnologicamente. O projeto promoveu um cruzamento entre a produção teórica, tecnológica e artística, possibilitando que trabalhos de criação fossem desenvolvidos dentro deste contexto. Os trabalhos foram agrupados em quatro linhas de pesquisa de maneira integrada: 1. Sonologia; 2. Desenvolvimento de sistemas interativos; 3. Produção artística com sistemas interativos; e 4. Acústica musical, psicoacústica e auralização. Participaram do projeto professores, pesquisadores e estudantes de graduação e pós-graduação dos Deptos. de Música (ECA-USP e FFCLRP-USP), Artes Plásticas (ECA-USP), Ciência da Computação (IME-USP) e Escola Politécnica (EP-USP) da Universidade de São Paulo. O projeto foi desenvolvido entre abril de 2009 e abril de 2013 e deu origem ao NuSom, um núcleo permanente de pesquisas em Sonologia. Página do projeto: http://www.eca.usp.br/mobile/. Página do NuSom: http://www2.eca.usp.br/nusom/

Este projeto de pesquisa focaliza a proposição de um novo software integrado para produção, codificação MPEG-4 AAC e monitoramento de múltiplos programas de áudio multicanal/surround compatível com as normas do Sistema Brasileiro de TV Digital (ISDB-T). As principais inovações consistem na introdução de um novo processo de produção orientada a cenas sonoras, mais intuitivo ao profissional de estúdio e produtor, e a capacidade de geração de conteúdo sonoro nos formatos oficiais, com flexibilidade e portabilidade. O programa objetiva atender a novas demandas operacionais da cadeia de produção e distribuição das produtoras de áudio e emissoras de TV, além de se adequar à base instalada de sistemas de produção profissional. O projeto prevê cinco fases de execução iniciando-se em 2009, conta com o apoio/parceria do estúdio Yb de São Paulo (www.yb.com.br) e com o suporte do CNPq através do processo RHAE no. 573424/2008-0

Criação e gestão científica da empresa "Organia Engenharia e Tecnologias Audiovisuais" na área de engenharia e computação sonora, voltada para inovação em mídias, formatos digitais e plataformas interativas para música digital, concepção estratégica de produtos, serviços, projetos de sonorização espacial, e novas tecnologias para produção, distribuição e reprodução sonora em mídias digitais

O mercado atual de música digital se baseia fortemente no consumo da mídia estática, como o CD e o MP3. Tecnologias orientadas a objetos tornam obsoleto este paradigma permitindo a segmentação da programação em componentes elementares, e consequentemente o acesso individual ao conteúdo, levando a uma reformulação do conceito de produção e de consumo de fonogramas. Este projeto de pesquisa propõe um levantamento de informações do mercado fonográfico e um alinhamento de tecnologias para a proposição de um novo paradigma para música digital reconfigurável. Objetivam-se a pesquisa de modelos para implantação deste paradigma, o desenvolvimento de um formato inovador para música digital reconfigurável, um codificador para gerar fonogramas neste formato (software de autoria) e um decodificador (tocador) para reprodução musical personalizável. O projeto conta com o suporte da FAPESP através do processo no. 07/01634-2, e com o apoio do Laboratório de Sistemas Integráveis (LSI) da Escola Politécnica da USP

Desenvolvimento de hardware/software para visualização e auralização para a Rede Brasileira de Visualização (RBV)

Projeto continuado de desenvolvimento do software AUDIENCE e versão livre OpenAUDIENCE para gravação, processamento, produção e reprodução de áudio espacial e cenas sonoras 2D/3D sobre plataformas abertas. O projeto foi inicialmente hospedado na Incubadora FAPESP (openaudience.incubadora.fapesp.br) e sucede a trajetória do projeto AUDIENCE (www.lsi.usp.br/interativos/neac/audience) de pesquisa e desenvolvimento de tecnologias para imersão sonora e áudio 2D/3D para realidade virtual acústica, som surround, auralização e espacialização musical. Site: www.lsi.usp.br/audience. Github: github.com/latm-lab/audience (em breve)

Projeto de pesquisa orientado à especificação e desenvolvimento de um codificador/decodificador de áudio MPEG-4 AAC (Advanced Audio Coding) para o Sistema Brasileiro de TV Digital (ISDB-T). Proposta aprovada por edital FINEP (ref. RFP 10/2004). Executado em consócio com instituições de P&D e empresas. Valor e fonte do financiamento aprovado: R$ 1.497.975,15 (Fundo Nacional das Telecomunicações)

Projeto de pesquisa orientado ao desenvolvimento da arquitetura e implementação do subsistema de processamento de áudio do Terminal de Acesso para o SBTVD. Proposta aprovada por edital FINEP (ref. RFP 05/2004). Executado em consócio com instituições de P&D e empresas. Valor e fonte do financiamento aprovado: R$ 4.500.000,00 (Fundo Nacional de Telecomunicações)

Pesquisa e desenvolvimento de sistemas flexíveis e escaláveis e tecnologias para sonorização espacial (surround), realidade virtual acústica e auralização imersiva, multicanal ou biaural

Projeto em parceria industrial para o desenvolvimento de plataformas set-top boxes para acesso a serviços de TV digital e analógica. O projeto levou ao desenvolvimento de gerações de set-top boxes digitais para integração com televisão analógica e protótipos para TV digital, utilizando tecnologias como VHDL, MPEG, PAL e Java. Contou com o desenvolvimento e integração de sistema operacional, modem, processadores de vídeo e áudio e interfaces interativas, como EPGs

Programa multi-institucional dirigido à articulação de projetos que proporcionem a aproximação entre a criação musical e os âmbitos científico e tecnológico, buscando integrar a produção em pesquisa musical e ciências afins no estado de São Paulo, e formar um Centro de Excelência que possa servir de referência na área. Website: www.lsi.usp.br/musarts

P&D de um sistema para localização estereotáxica em tempo real para aplicação em tratamento radioterápico de neoplasias, em parceria com entidade beneficente Hospital Albert Einstein

P&D de ferramentas de visualização estereoscópica para área petrolífera, e desenvolvimento de aglomerado computacional experimental de alto desempenho (cluster gráfico)

Pesquisa aplicada e desenvolvimento de aplicações e serviços audiovisuais interativos para redes digitais como CATV, com parceria industrial. O projeto levou à produção de dois serviços interativos: AoD (Audio on Demand: Musiface) e VoD (Video on Demand: POLIMIDIA) utilizando tecnologias como MPEG, HFC, ATM, SDH e JAVA, e propiciou a pesquisa básica em TV digital, terminais de acesso, tecnologias de atores sintéticos, serviços de telemedicina e entretenimento avançados