Project X

[andrewk]

Come si deve configurare Project X?
Noto sempre che alla fine del demultiplex,
mi dice che ci sono stati degli errori, a volte solo una decina,
altre volte molti di più.

P.S:
Ci sono alternative per trattare i file TS HD?

[Izza]

Non c'è troppo da configurare sia project-x che pvastrumento alla fine "estraggono" e basta, al massimo io imposto di far preparare Audio e Video per Mpeg2Schnitt (che uso per tagliare), cosi che non devo rifare l'analisi successivamente.

Invece col vostro aiuto vorrei capire come interpretare i log.
Ho fatto una registrazione da FoxLife di un 1.00h, vado ad estrarre con Project-X 0.90.4:

mercoledì 29 aprile 2009 16.44.00 CEST
ProjectX 0.90.4.00 (30.03.2006)

-> working with collection 0

-> save big log file
-> save normal log file
-> write all video data
-> write all other data
-> create *.idd Projectfile on demux: Mpeg2Schnitt idd version: V2/A3
-> patch c.d.flagged infos of pictures
-> add sequence end code
-> set resolution in SDE
-> PVA: strictly specs. for audio streams
-> VOB: determine diff. Cell timelines
-> TS: ignore scrambled packets
-> TS: enhanced search for open packets
-> TS: join file segments (of Dreambox®)
-> TS: generate PMT stream dependent
-> get only enclosed PES/TS packets
-> concatenate different recordings
-> ensure 1st PES-packet start with video
-> generate PCR/SCR from PTS

-> write output files to: 'F:\Record'

-> Input File 0: 'F:\Record\Fox.Life.Cold.Case.ts' (1.260.418.176 bytes)
-> Filetype is TS (generic PES Container)
-> demux
-> Service ID 0x1FC5
-> PMT 0x107 refers to these usable streams:
Video:
PID: 0x994
Audio:
PID: 0x995(ita)
PID: 0x996(eng)
Teletext:
PID: 0xA19(ita_i100 ita_s777 )
Subpict.:
n/a

!> PID 0x0 (PAT) (0 #1) -> ignored
ok> PID 0x995 has PES-ID 0xC0 (MPEG Audio) (1128 #7)
ok> PID 0x994 has PES-ID 0xE0 (MPEG Video) (15980 #86)
!> PID 0x107 (PMT) (37788 #202) -> ignored
-> video basics: 544*576 @ 25fps @ 0.6735 (4:3) @ 15000000bps, vbvBuffer 112
-> starting export of video data @ GOP# 0
!> dropping useless B-Frames @ GOP# 0 / new Timecode 00:00:00.000
!> PID 0x994 - invalid start_code of buffered packet..
!> dropping GOP# 1741 @ orig.PTS 04:26:03.359 (1436702351), errorcode: 24
!> Pics exp/cnt 12/11, inGOP PTS diff. 0ms, new Timecode 00:13:55.600
!> PTS difference of 43200 (00:00:00.480) to last exported GOP detected
!> dropping useless B-Frames @ GOP# 1742 / new Timecode 00:13:55.600
!> PID 0x994 - invalid start_code of buffered packet..
!> dropping GOP# 7304 @ orig.PTS 05:10:33.599 (1677023951), errorcode: 24
!> Pics exp/cnt 12/11, inGOP PTS diff. 0ms, new Timecode 00:58:25.280
!> PTS difference of 43200 (00:00:00.480) to last exported GOP detected
!> dropping useless B-Frames @ GOP# 7305 / new Timecode 00:58:25.280
packs: 6686946 100% 1260418176

-> Video: fr/ ct/ 1p/ cg/ og/ dg -> 89982/ 3/ 0/ 7499/ 0/ 2
-> Video length: 89982 frames @ 00:59:59.280
-> GOP summary: min. 20, max. 24 fields; contains interlaced frames
-> avg. nom. bitrate 2560954bps (min/max: 686800/5742000)
-> set first sequenceheader bitrate to 5742000bps
---> new File: F:\Record\Fox.Life.Cold.Case.mpv

--> MPEG Audio (0xC0) on PID 0x995
-> check CRC of AC-3 / MPEG-Audio L1,2
-> delete CRC in MPEG-Audio Layer1,2
-> add frames
Audio PTS: first packet 04:12:06.839, last packet 05:12:07.799
Video PTS: start 1.GOP 04:12:07.759, end last GOP 05:12:08.159
-> adjusting audio at video-timeline
-> src_audio: MPEG-1, Layer2, 48000Hz, stereo, 160kbps, CRC @ 00:00:00.000
!> 7 frame(s) (168ms) added @ 00:59:59.112
audio frames: wri/pre/skip/ins/add 149970/0/0/0/7 @ 00:59:59.280 done...
---> new File: 'F:\Record\Fox.Life.Cold.Case.mpa'

summary of created media files:
.Video (m2v): 89982 Frames 00:59:59.280 'F:\Record\Fox.Life.Cold.Case.mpv'
Audio 0 (mp2): 149970 Frames 00:59:59.280 0/0/0/7 'F:\Record\Fox.Life.Cold.Case.mpa'
=> 1.224.184.715 bytes written...
-> we have 14 warnings/errors.

Quindi da quanto ho potuto capire ci sono dei problemi in prossimità di 00:13:55.600 e 00:58:25.280 e quindi vengono "tagliati" dei frame.
Difatti se si guarda il risultato a quel esatto tempo, si notarà che manca qualche frame. La domanda è, quanti ne mancano?

Mentre andando ad estrarre lo stesso identico .TS con PVAStrumento 2.1.0.22 il log è totalmente diverso:

***
*** PVAStrumento 2.1.0.22
*** running at 04-29-2009 17:18
***

Pre-Scanning input. May take some time.


Stream info for
F:\Record\Fox.Life.Cold.Case.ts

Found 1 video stream.
Found 1 MPEG audio stream.

VIDEO #1, PID 0x994
Resolution 544 x 576
Aspect ratio is 4:3
Frame rate 25.00 fps
Nominal bitrate 15000000 bps
VBV size 224 kB
First PTS: 17:27:30.018

MPEG AUDIO #1, PID 0x995
MPEG1, Layer 2
stereo, sampled at 48.0 kHz.
Bitrate 160 kbps
Each frame contains 24.0 ms audio (480 bytes)
First PTS: 17:27:28.890

PIDs in TS
PAT: found
TSID: 0x22c4
PMTID: 0x107
VPID: 0x994
APID[1]: 0x995
APID[2]: 0x996
TXTID: 0xa19

** these pids were found but it doesnot denote
** that all content are really available!


<<DEMUXING>>
Input: F:\Record\Fox.Life.Cold.Case.ts
Options
.. extract video stream.
.. extract audio stream.
.. fixing startup delay.
.. fixing stream synch.
.. keeping track of audio offset accumulation.
.. strict checking of audio framing.
.. falling back to relaxed semantics on TS
.. dropping GOPs longer than 980 KB
.. splitting on change of video format.
.. splitting on change of audio format.
.. splitting on number of audio tracks.
.. do not use AC3 substream header (VDR)
.. clearing CDF
.. creating new GOP timecodes.

Closing starting GOP.
Aiming for sync at 17:27:30.098
Cutting audio.
Audio stream 1 now starts at 17:27:30.090
Video stream 1 now starts at 17:27:30.098
New MPEG video : F:\Record\Fox.Life.Cold.Case.mpv
generating F:\Record\Fox.Life.Cold.Case.idd
New MPEG audio : F:\Record\Fox.Life.Cold.Case - DELAY -8ms.mpa
generating F:\Record\Fox.Life.Cold.Case - DELAY -8ms.mpa.idd

ALERT> Temporal structure wrong in GOP at 17:41:25.298. Dropping.
Re-syncing.
Closing starting GOP.
Aiming for sync at 17:41:25.778
Cutting audio.
Audio stream 1 now starts at 17:41:25.770
Video stream 1 now starts at 17:41:25.778
ALERT> PTS jump in video
Closing starting GOP.
Aiming for sync at 17:41:25.778
Streamstart seems to be in (reasonable) sync:
Video 1 starts at 17:41:25.778
Audio 1 starts at 17:41:25.770

ALERT> Temporal structure wrong in GOP at 18:25:55.538. Dropping.
Re-syncing.
Closing starting GOP.
Aiming for sync at 18:25:56.018
Cutting audio.
Audio stream 1 now starts at 18:25:56.010
Video stream 1 now starts at 18:25:56.018
ALERT> PTS jump in video
Closing starting GOP.
Aiming for sync at 18:25:56.018
Streamstart seems to be in (reasonable) sync:
Video 1 starts at 18:25:56.018
Audio 1 starts at 18:25:56.010

Last fileset:
1223808355 total bytes written
Video 1: 89958 frames, 00:59:58.320
Audio 1: 149931 frames, 00:59:58.344

Sync estimate at EOF:
MPEG Audio #1 : sync

Video statistics
================
GOP length (min/avg/max):
10 / 11 / 12 [frames]
41142 / 153554 / 344434 [Bytes]
GOP bitrate (min/avg/max):
685 / 2559 / 5740 [kbps]

Needed time for the job 00:00:41 (hh.mm.ss)

(Autosaving log to F:\Record\Fox.Life.Cold.Case.txt)

Solamente che sia ad 17:41:25 che a 18:25:56 non si nota assolutamente nulla, mentre rimangono le "mancanze di frame" segnalate nei log di Project-X.
Ciò mi inizia a far dubitare abbastanza della bontà di PVAStrumento.

Qualcuno sà spiegarmi meglio come interpretare questi log?

[andrewk]

Tornando al mio problema,
ho dei problemi con le registrazioni.
Ho registrato un evento live in PPV della durata di circa 3 ore, sul canale Sky Calcio 14, quando ho demultiplexato il file (.TS), ProjectX, mi ha dato la bellezza di 15.357 errori a fine log, infatti il video nella prima mezzora, si vede bene, poi è una disperazione, ogni minuto, salta l'audio e il video, ma il timer del lettore DVD, scorre normalmente.
Stessa cosa mi è capitata l'altro ieri, con la registrazione da Sky Cinema 1, però in questo caso ho avuto solo 17 errori, e infatti il film scatta solo un paio di volte.

Uso l'ultima versione di DVBViewer regolare, SOFTCSA e NDSCam 0.0.0.7.

[amancini]

Prova ad abilitare i log anche del DVBViewer così vedi se riporta qualche errore in fase di registrazione.

[Izza]

Nel mio caso ad esempio ho:

Fox Life (ita) 04/05/2009

F:\DVBViewer\05-04_15-52-20_Fox Life (ita)_Cherry.ts

Device: TechniSat Mantis DVBS BDA Receiver

15.52.20 / 0.00.00 (~ 0,0 MB) Start
15.52.21 / 0.00.01 (~ 0,5 MB) PID 2452: MPEG2 Video, 4:3, 544x576, 25 fps
15.52.21 / 0.00.01 (~ 0,5 MB) PID 2453: MPEG Audio Stereo, 48 khz, 160 kbps
16.28.37 / 0.36.17 (~ 605,8 MB) Errors: 3
16.51.18 / 0.58.58 (~ 1036,7 MB) Errors: 3
17.13.07 / 1.20.47 (~ 1437,9 MB) Stop

Average Data Rate: 0,297 MB/s
Total Size: 1437,9 MB (1507707924 Bytes)

E quindi ovviamente in fase di estrazione del .TS con Project-X:

...
!> missing syncword @ 43531201, @ 00:36:15.840
!> found syncword @ 43531832
!> 5 frame(s) (120ms) inserted @ 00:36:15.864
!> missing syncword @ 70747833, @ 00:58:56.160
!> found syncword @ 70748464
!> 5 frame(s) (120ms) inserted @ 00:58:56.184
...

Quello che non ho capito è se questi errori sono di ricezione o del plugin per leggere NDS (Sky)?
Perche spulciandosi i log di ACamd non sembra esserci nulla di strano.

[andrewk]

Io ho paura che sia proprio colpa del plugin NDSCam.

Vediamo cosa dicono i nostri epserti.

[andrewk]

Questi sono i log di DVBviewer:

[General]
Version=1.1
[Media]
Created=04/05/2009 22.55.02
Channel=SKY Cinema 1 (AC3,ita)
LastShown=30/12/1899
LastPosition=0
Played=0
[0]
Id=664
Date=04/05/2009
Time=22.55.00
Duration=1.30.00
Title=Empire
Info=
Description=Parte 1 - Epopea sull'impero romano in una mini serie con Emily Blunt. 44 a.c. Cesare, prima di morire, chiede al gladiatore Tyrannus di proteggere il suo successore Augusto. La notizia verra' data al popolo dalla madre di Augusto, durante il funerale di Cesare, col disappunto di Marco Antonio. Az. (81') Di J. Gray e K. Manners. Con S. Cabrera, E. Blunt (USA 2005) Prox: 05/05/2009 12:00 Sc1|Video, 4:3, 25 Hz|Audio, stereo (2 channel)
Charset=1
Content=0
[Stats]
Errors=0
Size=3,30 GB (3542117400 bytes)
Avr. Datarate=0,469 MB/s
Device=USB 2.0 BDA DVB-S Tuner

SKY Cinema 1 (AC3,ita) 04/05/2009

D:\VCR\VCR SAT 2\05-04_22-55-02_SKY Cinema 1 (AC3,ita)_Empire PART 1.ts

Device: USB 2.0 BDA DVB-S Tuner

22.55.02 / 0.00.00 (~ 0,0 MB) Start
22.55.05 / 0.00.02 (~ 0,2 MB) PID 160: MPEG2 Video, 16:9, 720x576, 25 fps
22.55.05 / 0.00.02 (~ 0,2 MB) PID 402: AC3 Audio Stereo, 48 khz, 384 kbps
0.26.10 / 1.31.08 (~ 2535,4 MB) PID 402: AC3 Audio 5.1, 48 khz, 384 kbps
0.55.01 / 1.59.58 (~ 3378,0 MB) Stop

Average Data Rate: 0,469 MB/s
Total Size: 3378,0 MB (3542117400 Bytes)

[andrewk]

Mentre questo è i log di ProjectX:

martedì 5 maggio 2009 17.49.14 CEST
ProjectX 0.90.4.00 (30.03.2006)

-> lavorando con la collezione n. 0

-> salva registro notifiche normale
-> scrive tutti i dati video
-> scrive tutti gli altri dati
-> aggiunge il codice di fine sequenza
-> flusso di tipo PES disabilitato: Teletext
-> flusso di tipo PES disabilitato: Subpicture
-> PVA: specifiche strette, per i flussi audio
-> VOB: determina differenti Cell timelines
-> TS: ignorare i pacchetti codificati
-> TS: ricerca avanzata dei pacchetti aperti
-> TS: unisce diversi segmenti (per il Dreambox®)
-> TS: genera un flusso dipendente dai PMT
-> usa solo pacchetti PES/TS chiusi
-> concatena diverse registrazioni
-> assicura il primo pacchetto del primo PES sia Video
-> genera PCR/SCR dal PTS

-> scrivere il file in uscita in: 'D:\VCR\VCR SAT 2'
-> 2 punto/i di taglio definito/i ( (0) usa BytePos. per i punti di taglio )

-> File in ingresso 0: 'D:\VCR\VCR SAT 2\05-04_22-55-02_SKY Cinema 1 (AC3,ita)_Empire PART 1.ts' (3.542.117.400 bytes)
-> Tipo del file e {0}
-> demultiplex
-> Service ID 0x2B5D
-> PMT 0x454 si riferisce a questi flussi utili:
Video:
PID: 0xA0
Audio:
PID: 0x190(ita)
PID: 0x191(eng)
PID: 0x192(ita)(AC-3)(AC-3)[PD]
Teletext:
PID: 0x1D6(ita_i100 ita_s777 )
Subpict.:
n/a

!> mancanza del byte di sincronizzazione @ 18964760
!> byte di sincronizzazione trovato @ 18964876
ok> PID 0x192 ha PES-ID 0xBD (private stream 1) (18966380 #9)
ok> PID 0xA0 ha PES-ID 0xE0 (MPEG Video) (19010560 #244)
!> PID 0x0 (PAT) (19033496 #366) -> ignorato
!> PID 0x454 (PMT) (19045904 #432) -> ignorato
-> taglio di ingresso @ GOP# 13 / nuovo vframe 0 / nuovo Timecode 00:00:00.000 (21352100)
-> elemnti video: 720*576 @ 25fps @ 0.7031 (16:9) @ 15000000bps, vbvBuffer 112
-> inizio esportazione dei dati video @ GOP# 13
!> ignorando B-Frames inutile @ GOP# 13 / nuova base dei tempi 00:00:00.000
!> PID 0x192 - invalid start_code of buffered packet..
!> PID 0xA0 - invalid start_code of buffered packet..
!> ignorando GOP# 526 @ orig.PTS 05:12:05.933 (1685334058), errorcode: 24
!> Immagini esp/cnt 12/11, inGOP PTS diff. 0ms, nuova base dei tempi 00:04:10.120
!> individuata una differenza di PTS 43200 (00:00:00.480) dallultimo GOP esportato
!> ignorando B-Frames inutile @ GOP# 527 / nuova base dei tempi 00:04:10.120
!> PID 0x192 - invalid start_code of buffered packet..
!> PID 0xA0 - invalid start_code of buffered packet..
!> PID 0x192 - invalid start_code of buffered packet..
!> PID 0xA0 - invalid start_code of buffered packet..
!> PID 0x192 - invalid start_code of buffered packet..
!> ignorando GOP# 5316 @ orig.PTS 05:51:04.493 (1895804458), errorcode: 24
!> Immagini esp/cnt 18/16, inGOP PTS diff. 0ms, nuova base dei tempi 00:43:08.120
!> individuata una differenza di PTS 64800 (00:00:00.720) dallultimo GOP esportato
!> ignorando B-Frames inutile @ GOP# 5317 / nuova base dei tempi 00:43:08.120
!> PID 0x192 - invalid start_code of buffered packet..
!> PID 0xA0 - invalid start_code of buffered packet..
!> PID 0x192 - invalid start_code of buffered packet..
!> ignorando GOP# 7122 @ orig.PTS 06:05:45.173 (1975065658), errorcode: 24
!> Immagini esp/cnt 12/11, inGOP PTS diff. 0ms, nuova base dei tempi 00:57:48.000
!> individuata una differenza di PTS 43200 (00:00:00.480) dallultimo GOP esportato
!> ignorando B-Frames inutile @ GOP# 7123 / nuova base dei tempi 00:57:48.000
!> PID 0xA0 - invalid start_code of buffered packet..
!> PID 0x192 - invalid start_code of buffered packet..
!> ignorando GOP# 8392 @ orig.PTS 06:16:04.973 (2030847658), errorcode: 24
!> Immagini esp/cnt 12/11, inGOP PTS diff. 0ms, nuova base dei tempi 01:08:07.240
!> individuata una differenza di PTS 43200 (00:00:00.480) dallultimo GOP esportato
!> ignorando B-Frames inutile @ GOP# 8393 / nuova base dei tempi 01:08:07.240
!> PID 0x192 - invalid start_code of buffered packet..
!> PID 0xA0 - invalid start_code of buffered packet..
!> ignorando GOP# 8757 @ orig.PTS 06:19:04.973 (2047047658), errorcode: 24
!> Immagini esp/cnt 12/11, inGOP PTS diff. 0ms, nuova base dei tempi 01:11:06.680
!> individuata una differenza di PTS 43200 (00:00:00.480) dallultimo GOP esportato
!> ignorando B-Frames inutile @ GOP# 8758 / nuova base dei tempi 01:11:06.680
-> taglio di uscita @ GOP# 9830 (2317651968)
pacchetti: 12190229 65% 2319588744

-> Video: fr/ ct/ 1p/ cg/ og/ dg -> 119685/ 23/ 0/ 9812/ 0/ 5
-> Lunghezza del Video: 119685 frame @ 01:19:47.400
-> GOP sintesi: min. 18, max. 36 fields; contiene interlacciato & progressivo frame
-> avg. nom. bitrate 3313449bps (min/max: 630000/7294000)
-> imposta il primo sequenceheader bitrate a 7294000bps
---> file di destinazione: D:\VCR\VCR SAT 2\05-04_22-55-02_SKY Cinema 1 (AC3,ita)_Empire PART 1.m2v

--> AC-3/DTS Audio in PID 0x192
-> Audio: una un numero limitato di PTS per la sincronizzazione
-> verifica il CRC dei flussi AC-3 / MPEG-Audio L1,2
-> cancella i CRC in MPEG-Audio Layer1,2
-> aggiunge frames
Audio PTS: primo pacchetto 05:07:48.056, ultimo pacchetto 06:27:48.472
Video PTS: inizio 1.GOP 05:07:55.813, fine ultimo GOP 06:27:46.253
-> adeguando l'Audio alla base dei tempi del video
-> src_audio: AC-3, CM, 2/0(2.0), dn -27dB, 48000Hz, 384kbps @ 00:00:00.000
!> controllo CRC2 fallito @ 12357120
!> syncword mancante @ 12357122, @ 00:04:09.696
!> syncword trovata @ 12358656
!> 2 frame(s) (64ms) inseriti @ 00:04:09.728
!> controllo CRC1 fallito @ 124635648
!> syncword mancante @ 124635650, @ 00:43:08.128
!> syncword trovata @ 124637184
!> controllo CRC1 fallito @ 156312576
!> syncword mancante @ 156312578, @ 00:54:07.520
!> syncword trovata @ 156314112
!> 1 frame(s) (32ms) inseriti @ 00:54:07.552
!> controllo CRC2 fallito @ 166872576
!> syncword mancante @ 166872578, @ 00:57:47.520
!> syncword trovata @ 166874112
!> 3 frame(s) (96ms) inseriti @ 00:57:47.552
!> controllo CRC1 fallito @ 196632576
!> syncword mancante @ 196632578, @ 01:08:07.040
!> syncword trovata @ 196634112
!> 2 frame(s) (64ms) inseriti @ 01:08:07.072
!> controllo CRC1 fallito @ 205271040
!> syncword mancante @ 205271042, @ 01:11:06.464
!> syncword trovata @ 205272576
!> 2 frame(s) (64ms) inseriti @ 01:11:06.496
audio frames: scritti/pre/ignorati/inseriti/aggiunti 149606/0/0/10/0 @ 01:19:47.392 fatti...
---> file di destinazione: 'D:\VCR\VCR SAT 2\05-04_22-55-02_SKY Cinema 1 (AC3,ita)_Empire PART 1.ac3'

sintesi dei file multimediali creati:
.Video (m2v): 119685 Frames 01:19:47.400 'D:\VCR\VCR SAT 2\05-04_22-55-02_SKY Cinema 1 (AC3,ita)_Empire PART 1.m2v'
Audio 0 (ac3): 149606 Frames 01:19:47.392 0/0/10/0 'D:\VCR\VCR SAT 2\05-04_22-55-02_SKY Cinema 1 (AC3,ita)_Empire PART 1.ac3'
=> 2.212.645.983 bytes scritti...
-> we have 62 warnings/errors.