Pular para o conteúdo
jsonW Paper GitHub

Grafia, sinais e coluna por bloco

Vídeo em cenas, com as medidas de cada trecho

Quadros e som entram; saem os cortes de cena, a luz, o contraste, o movimento, as cores, a forma, o dHash, os sinais do áudio de cada trecho e um mosaico.

· jsonW 1.3.11

O problema

Para analisar um vídeo, a maior parte dos sistemas precisa achar os cortes, medir cada trecho e guardar quadros de referência, com uma ferramenta para cada etapa.

Como o jsonW resolve

Quem chama decodifica e entrega os quadros em RGB24 e o som em PCM. O jsonW acha os cortes pelo limiar de Otsu sobre a diferença entre quadros, só quando a série tem dois grupos claros, mede cada cena e monta um mosaico dos quadros. Cada cena sai como uma linha de jsonW-texto.

void *v = jsonw_video_novo(64, 36, 2.0, erro, sizeof erro);
for (int k = 0; k < 12; k++) jsonw_video_quadro(v, quadro[k], 0);
jsonw_video_audio(v, pcm, n, 16000);
int64_t cenas = jsonw_video_cenas(v);                     /* 2 */
jsonw_video_cena(v, 1, "sintetico", "v1", saida, sizeof saida);

{origem: "sintetico", chave: "v1", cena: 1, ini_s: 3, fim_s: 6, quadros: 6, luz: 223.248, contraste: 21.4207, saturacao: 0.0993358, movimento: 4.64062, corte: 0.880697, cores: vf32[0.59042, 0, 0.40958, 0, 0, 0, 0, 0, 0, 0, 0, 0], forma: vf32[0.044666, 0.044666, …], dhash: "00000c0c0c0c0000", f0_hz: null, intensidade_db: null, pausas: null, taxa_fala: null, silencio_pct: null}

Saída real da libjsonw 1.3.11 com 12 quadros sintéticos: 6 escuros e 6 claros. Ela cortou em 2 cenas; a segunda cena saiu sem áudio porque o som de teste tinha 2 s.

Onde está

Na ABI (jsonw_video_novo, jsonw_video_quadro, jsonw_video_audio, jsonw_video_cenas, jsonw_video_cena e jsonw_video_mosaico). O jsonW não decodifica vídeo: o codec continua sendo o seu.

Leia a seção completa no paper →