Introduzione a libavfilter

Introduzioneal progetto

Introduzioneall’architetturadi libavfilter

Esempi

Sviluppi futuri

Appendici

Introduzione a Libavfilter

Stefano Sabatinimailto:[email protected]

GULCH

Linux Day Cagliari - 22 Ottobre 2011

1 / 20



Esempi

Sviluppi futuri

Appendici

Sommario

1 Introduzione al progetto

2 Introduzione all’architettura di libavfilter

3 Esempi

4 Sviluppi futuri

5 Appendici

2 / 20



Esempi

Sviluppi futuri

Appendici

Obiettivi

fornisce supporto a filtraggio a contenuti multimedialiimplementato come libreria, interfaccia accessibili daglistrumenti a linea di comandosemplifica il progetto dei tools ff*, estende laflessibilità/versatilitàestende l’infrastruttura di test, supporto a filtri/sorgentidi test

3 / 20



Esempi

Sviluppi futuri

Appendici

Dipendenze di libavfilter

4 / 20



Esempi

Sviluppi futuri

Appendici

Caratteristiche

focus sulla performance (evita copie addizionali, evitaconversioni)supporta tutti i formati supportati da FFmpegimplementa un sistema sofisticato di negoziazione deiformati, minimizza il numero di conversioni di formatoaudio/videopresenta supporto embrionale a caratteristicheinterattive (comandi/eventi processati in modointerattivo)gestisce grafi di filtri, piuttosto che catene linearisupporta sorgenti e pozzi (sink)supporta filtraggio transmedia

5 / 20



Esempi

Sviluppi futuri

Appendici

Stato di sviluppo

filtraggio video (-vf) integrato in ffmpeg.c nel Maggio2010, incluso negli ultimi rilasci formali diFFmpeg/Libav (0.7/0.8)integrazione audio è in corso

6 / 20



Esempi

Sviluppi futuri

Appendici

Anatomia di un filtro

Un filtro contiene uno o più input/output padOgni pad è associato a un tipo particolare di media(A/V), supporta uno o più formati di input/outputinput e output pad sono connessi da un linkvari filtri possono essere collegati in modo da formareun grafoun grafo può essere rappresentato tramite undescrizione testuale

7 / 20



Esempi

Sviluppi futuri

Appendici

Anatomia di un filtro - 2

8 / 20



Esempi

Sviluppi futuri

Appendici

Modello di filtraggio

un filtro processa buffer, un buffer può contenere unframe video o dei campioni audiole proprietà di ogni buffer (tipo del frame I/P/B etc.,timestamp, posizione nel file) possono essere accedutie modificati durante la fase di filtraggiomodello ibrido pull/push

9 / 20



Esempi

Sviluppi futuri

Appendici

Lavfi input

Fornisce un dispositivo di input virtuale, legge ladescrizione di un grafo di filtri e associa ogni outputaperto ad uno stream in uscita.

Example

ffplay -f lavfi "testsrc[out0];aevalsrc=0.5*sin(2*PI*440*t)[out1]"

10 / 20



Esempi

Sviluppi futuri

Appendici

Filtri

scale - basato su libswscalepad, crop, vflip, hflipfrei0r / frei0r_src wrappermp wrapper (wrapper dei filtri di MPlayer)altri: boxblur, delogo, drawtext, lutyuv, lutrgb, yadif,select, unsharp...correntemente 60 tra filtri/sorgenti/sink (vedi l’opzione-filters)

11 / 20



Esempi

Sviluppi futuri

Appendici

Example

color=pink,nullsink

Example

pad="3/2*iw:3/2*ih:(ow-iw)/2:(oh-ih)/2:bikeshed"

Example

crop="iw/2:ih/2:(iw-ow)/2+((iw-ow)/2)*sin(n/10):(ih-oh)/2+((ih-oh)/2)*sin(n/7)"

Example

scale="3/2*oh:5/3*ih"

12 / 20



Esempi

Sviluppi futuri

Appendici

Example

drawtext="fontsize=40:[email protected]:box=1:[email protected]:fontfile=FreeSerif.ttf:text=hello:x=50+20*t:y=(h/2)"

Example

movie=linuxday-logo.png,scale=50:-1 [logo]; [in][logo]overlay=(W-w)/2:(H-h)/2"

13 / 20



Esempi

Sviluppi futuri

Appendici

Example

frei0r=sobel

Example

ocv="dilate=5x5+2x2/cross:2"

14 / 20



Esempi

Sviluppi futuri

Appendici

Example

ffplay -f lavfi "aevalsrc=sin(2*PI*440*t) * 0.5*abs(sin(2*PI*t))- 0.1+0.2*random(1)"

15 / 20



Esempi

Sviluppi futuri

Appendici

Sviluppi futuri - 1

integrazione del supporto a filtri audio, wrappersox+ladspamodifiche a livello di infrastruttura - e.g. integrazionepiù stretta con libavcodec, supporto a direct rendering

16 / 20



Esempi

Sviluppi futuri

Appendici

Sviluppi futuri - 2

filtraggio transmedia (A -> V)filtraggio di sottotitolitransmedia+filtraggio di sottotitoli: riconoscimento voce/ sintesi vocale / rendering di sottotitolipiù filtri!

17 / 20



Esempi

Sviluppi futuri

Appendici

Come contribuire

feedback: report di bug, richieste di nuove featurepatches are welcome!soldi/cartoline/altro

18 / 20



Esempi

Sviluppi futuri

Appendici

Risorse

http://ffmpeg.org/libavfilter.html

libavfilter/*.{h,c}doc/examples/filtering.cffmpeg-user, ffmpeg-devel mailing-list, IRC

19 / 20

http://ffmpeg.org/libavfilter.html



Esempi

Sviluppi futuri

Appendici

Licenza di questo documento

Rilasciato con licenza Creative CommonsAttribution-NonCommercial-ShareAlike (vedi: http://creativecommons.org/licenses/by-nc-sa/3.0/)

20 / 20

http://creativecommons.org/licenses/by-nc-sa/3.0/

http://creativecommons.org/licenses/by-nc-sa/3.0/

Introduzione a libavfilter

Documents

Transcript of Introduzione a libavfilter