A NASA produz algumas das imagens mais impressionantes do planeta. Mas um mapa de calor que depende só da visão deixa de fora quem não enxerga. O Jam Space transforma esses mapas em música, para que a ciência da Terra possa ser ouvida e sentida por todo mundo.
Para quem
- Pessoas cegas ou com baixa visão. Como o Mateus, 24 anos, que hoje não tem acesso aos gráficos do clima. Tudo no site funciona pelo teclado e com leitor de tela, e a música carrega a informação inteira.
- Professores e museus. Como a professora Camila, 38 anos, que quer mostrar o aquecimento global com mais de um sentido. Um ano frio e um ano quente soam como músicas diferentes, e a turma percebe a mudança sem ler um número.
Objetivos de Desenvolvimento Sustentável (ONU)
- ODS 10, redução das desigualdades: ciência espacial acessível sem depender da visão. No Brasil, cerca de 7,9 milhões de pessoas têm dificuldade permanente para enxergar (Censo IBGE).
- ODS 4, educação de qualidade: aprendizado multissensorial em sala de aula.
- ODS 13, ação climática: números de planilha viram emoção. Ouvir 1910 e depois 2023 deixa a urgência clara.
Como a música nasce
Há dois jeitos de ouvir. Ano a ano: cada ano (ou mês, no gelo) vira um compasso, e você ouve a mudança ao longo do período. Retrato do período: o site tira a média dos dados do período escolhido e toca uma música só, em loop. Serve para comparar, por exemplo, 1950–1960 com 2013–2023.
Usamos sonificação por mapeamento de parâmetros: cada característica do dado controla uma característica do som. Escolhemos os mapeamentos com base em estudos sobre como as pessoas interpretam sons.
O que cada dado controla
| Dado | O que você ouve | Por quê |
| Temperatura | Frio: música lenta (70 batidas por minuto), flauta grave, acordes serenos, vento agudo e sinos de gelo. Quente: rápida (até 140), violoncelo agudo e áspero, acordes tensos, bateria cheia, prato e um zumbido grave. No extremo quente entra uma "sirene" de duas notas vizinhas. No modo ano a ano, o ano mais frio e o mais quente do período escolhido viram os extremos da música, para a diferença aparecer mesmo quando ela é de décimos de grau; no modo retrato vale o valor absoluto, para comparar períodos. | Ouvintes associam "mais" a mais agudo: é a polaridade positiva (Walker, 2002; Walker & Kramer, 2005). "Uma nota por ano, mais aguda quanto mais quente" segue a peça de Crawford (2013) com os dados de temperatura da NASA. O mesmo dado controla vários aspectos do som ao mesmo tempo (andamento, altura, timbre, densidade) para que os extremos fiquem bem diferentes (Grond & Berger, 2011). |
| Gelo do Ártico | Sinos nas notas do acorde. Menos gelo, menos sinos. Abaixo da metade do maior mês do período, os sinos descem e entra um som grave contínuo. Sozinho, o gelo anda mês a mês, de maio de 2021 a abril de 2023 (média mensal da área de gelo lida no SVS 5099). Junto com temas anuais, esses 24 meses voltam em ciclo, um por compasso. | Quantidade mapeada para densidade de eventos, um dos mapeamentos mais fáceis de perceber (Grond & Berger, 2011). |
| Raios | Caixa nos tempos 2 e 4 e batidas extras, sempre no ritmo. Mais raios, mais batidas. | Eventos discretos viram sons percussivos curtos; a distribuição euclidiana mantém o ritmo musical (Toussaint, 2005). |
| Chuva | Uma garoa suave ao fundo e gotas: notas curtas do acorde, como pingos numa calha. Mais chuva, mais gotas e garoa mais cheia. O padrão das gotas gira a cada compasso, como chuva de verdade. O valor é a fração da área com chuva em 24 retratos do modelo GEOS-FP (SVS 5149), de 29 de outubro a 13 de novembro de 2026; junto com temas anuais, eles voltam em ciclo. | Quantidade mapeada para densidade de eventos e volume do ruído de fundo (Grond & Berger, 2011). |
| Luzes noturnas | Um arpejo com as notas do acorde. Mais luz, mais notas. | Densidade de notas como medida de intensidade (Grond & Berger, 2011). |
Por que soa como música
- Tudo está em Ré maior, e cada instrumento toca só notas do acorde do momento.
- Os cinco temas podem tocar juntos: cada um tem a sua faixa de altura (baixo embaixo, melodia no meio, arpejo e gotas de chuva acima, sinos no topo) e o volume de cada um baixa quando outros entram.
- A tensão vem de acordes emprestados do modo menor (♭VI, ♭VII, iv), usados quando o dado se afasta do normal.
- Nada é sorteado: a mesma receita sempre gera a mesma música. Quando 2023 soa mais tenso que 1980, é o dado falando.
Dados da NASA
As visualizações abaixo vêm do NASA Scientific Visualization Studio, coleção Earth Information Center. Crédito: NASA's Scientific Visualization Studio. A temperatura é lida dos pixels dos mapas do SVS 5207: para cada ano, o último quadro, cada cor convertida em °C pela escala oficial (−2 a +2 °C) e a média feita com peso pela área. Conferimos com 2023: a leitura dá +1,03 °C, como o GISTEMP. Os outros temas são lidos do mesmo jeito: raios (SVS 5011, fração da área com raios, média das janelas de 10 dias do ano; sem dados no Ártico, fora da órbita da ISS), luzes (SVS 5313, brilho médio das terras, 2012–2023), chuva (SVS 5149, fração da área com chuva, pela legenda oficial) e gelo (SVS 5099, área de gelo marinho no Ártico, média de cada mês, mostrada como fração do maior mês). Nenhum valor é inventado.
Estudos de sonificação
- Hermann, T.; Hunt, A.; Neuhoff, J. G. (orgs.). The Sonification Handbook. Berlim: Logos, 2011.
- Grond, F.; Berger, J. Parameter Mapping Sonification. In: The Sonification Handbook, cap. 15, 2011.
- Walker, B. N. Magnitude estimation of conceptual data dimensions for use in sonification. Journal of Experimental Psychology: Applied, 8(4), 2002.
- Walker, B. N.; Kramer, G. Mappings and metaphors in auditory displays: an experimental assessment. ACM Transactions on Applied Perception, 2(4), 2005.
- Crawford, D. A Song of Our Warming Planet. Universidade de Minnesota, 2013 (peça para violoncelo com dados de temperatura da NASA GISS).
- Toussaint, G. The Euclidean algorithm generates traditional musical rhythms. Proceedings of BRIDGES, 2005.
- NASA Chandra, A Universe of Sound: exemplo de sonificação no SVS (Caldwell 73, SVS 13786).
Time
Jam Space é um time do Rio Grande do Sul, com integrante da Colômbia, criado no Tecnovates para o NASA Space Apps Challenge 2026, em Lajeado (RS).
Código, fontes e IA
- three.js 0.170 (licença MIT): disco em 3D.
- Web Audio API e Web Speech API (padrões da web): som e narração.
- Fontes Unbounded e Atkinson Hyperlegible, do Google Fonts (SIL Open Font License). A Atkinson Hyperlegible foi criada pelo Braille Institute para pessoas com baixa visão.
- Todos os sons são sintetizados ao vivo; não usamos música gravada.
- Claude (Anthropic), via Claude Code, ajudou a planejar, pesquisar e escrever código e textos.
NASA produces some of the most striking images of our planet. But a heat map that depends only on sight leaves out people who cannot see. Jam Space turns those maps into music, so that Earth science can be heard and felt by everyone.
Who it is for
- Blind and low-vision people. Like Mateus, 24, who today has no access to climate charts. Everything on the site works from the keyboard and with a screen reader, and the music carries the whole message.
- Teachers and museums. Like Camila, 38, a teacher who wants to show global warming with more than one sense. A cold year and a hot year sound like different songs, and the class notices the change without reading a number.
UN Sustainable Development Goals
- SDG 10, reduced inequalities: space science that does not depend on sight. In Brazil, about 7.9 million people have a permanent difficulty seeing (IBGE census).
- SDG 4, quality education: multisensory learning in the classroom.
- SDG 13, climate action: spreadsheet numbers become emotion. Listening to 1910 and then to 2023 makes the urgency clear.
How the music is made
There are two ways to listen. Year by year: each year (or month, for sea ice) becomes one bar, and you hear the change across the period. Period portrait: the site averages the data of the chosen period and plays a single piece in a loop. Use it to compare, for example, 1950–1960 with 2013–2023.
We use parameter-mapping sonification: each feature of the data controls one feature of the sound. The mappings were chosen from studies on how people interpret sound.
What each dataset controls
| Data | What you hear | Why |
| Temperature | Cold: slow music (70 beats per minute), low flute, serene chords, high wind and ice bells. Hot: fast (up to 140), high and rough cello, tense chords, full drums, cymbal and a low hum. At the hot extreme a two-note "siren" enters. In year-by-year mode, the coldest and the hottest year of the chosen period become the extremes of the music, so the difference is audible even when it is tenths of a degree; in portrait mode the absolute value is used, to compare periods. | Listeners link "more" with higher pitch: this is positive polarity (Walker, 2002; Walker & Kramer, 2005). "One note per year, higher when hotter" follows Crawford's piece (2013) with NASA temperature data. The same value drives several aspects of the sound at once (tempo, pitch, timbre, density) so the extremes are clearly different (Grond & Berger, 2011). |
| Arctic sea ice | Bells on the notes of the chord. Less ice, fewer bells. Below half of the largest month of the period, the bells drop and a continuous low drone enters. On its own, the ice moves month by month, from May 2021 to April 2023 (monthly mean of the ice area read from SVS 5099). Together with yearly layers, these 24 months loop, one per bar. | Quantity mapped to event density, one of the easiest mappings to perceive (Grond & Berger, 2011). |
| Lightning | Snare on beats 2 and 4 and extra hits, always in time. More lightning, more hits. | Discrete events become short percussive sounds; the Euclidean distribution keeps the rhythm musical (Toussaint, 2005). |
| Rain | A soft drizzle in the background and drops: short notes of the chord, like drips in a gutter. More rain, more drops and a fuller drizzle. The drop pattern rotates every bar, like real rain. The value is the fraction of the area with rain in 24 snapshots of the GEOS-FP model (SVS 5149), from 29 October to 13 November 2026; together with yearly layers, they loop. | Quantity mapped to event density and to the volume of the background noise (Grond & Berger, 2011). |
| Night lights | An arpeggio on the notes of the chord. More light, more notes. | Note density as a measure of intensity (Grond & Berger, 2011). |
Why it sounds like music
- Everything is in D major, and each instrument only plays notes of the current chord.
- All five layers can play together: each has its own pitch range (bass at the bottom, melody in the middle, arpeggio and raindrops above, bells at the top), and each one gets quieter when others join.
- Tension comes from chords borrowed from the minor mode (♭VI, ♭VII, iv), used when the data moves away from normal.
- Nothing is random: the same recipe always makes the same music. When 2023 sounds tenser than 1980, that is the data speaking.
NASA data
The visualizations below come from NASA's Scientific Visualization Studio, Earth Information Center collection. Credit: NASA's Scientific Visualization Studio. Temperature is read from the pixels of the SVS 5207 maps: for each year, the last frame; each colour converted to °C with the official scale (−2 to +2 °C) and averaged with area weights. We checked 2023: the reading gives +1.03 °C, like GISTEMP. The other layers are read the same way: lightning (SVS 5011, fraction of the area with lightning, mean of the year's 10-day windows; no data in the Arctic, outside the ISS orbit), night lights (SVS 5313, mean brightness over land, 2012–2023), rain (SVS 5149, fraction of the area with rain, from the official legend) and sea ice (SVS 5099, Arctic sea-ice area, mean of each month, shown as a fraction of the largest month). No value is made up.
Sonification studies
- Hermann, T.; Hunt, A.; Neuhoff, J. G. (eds.). The Sonification Handbook. Berlin: Logos, 2011.
- Grond, F.; Berger, J. Parameter Mapping Sonification. In: The Sonification Handbook, ch. 15, 2011.
- Walker, B. N. Magnitude estimation of conceptual data dimensions for use in sonification. Journal of Experimental Psychology: Applied, 8(4), 2002.
- Walker, B. N.; Kramer, G. Mappings and metaphors in auditory displays: an experimental assessment. ACM Transactions on Applied Perception, 2(4), 2005.
- Crawford, D. A Song of Our Warming Planet. University of Minnesota, 2013 (cello piece with NASA GISS temperature data).
- Toussaint, G. The Euclidean algorithm generates traditional musical rhythms. Proceedings of BRIDGES, 2005.
- NASA Chandra, A Universe of Sound: a sonification example on SVS (Caldwell 73, SVS 13786).
Team
Jam Space is a team from Rio Grande do Sul, Brazil, with a member from Colombia, formed at Tecnovates for the NASA Space Apps Challenge 2026 in Lajeado (RS).
Code, fonts and AI
- three.js 0.170 (MIT licence): 3D disc.
- Web Audio API and Web Speech API (web standards): sound and narration.
- Unbounded and Atkinson Hyperlegible fonts, from Google Fonts (SIL Open Font License). Atkinson Hyperlegible was created by the Braille Institute for people with low vision.
- All sounds are synthesized live; no recorded music is used.
- Claude (Anthropic), through Claude Code, helped plan, research and write code and texts.