¿La frecuencia de muestreo afecta el proceso de sincronización con una fuente de video?

Puedes saber cuál se desincroniza así:

Configura tu cámara y tu teléfono como lo haces habitualmente. Coloque un reloj que muestre los segundos justo en frente de la cámara. Luego, aunque suene aburrido, grábate contando los segundos.

Sincronice el video y el audio en Premiere Pro como lo hace habitualmente. Cuando se desincronicen, verifique si el video perdió un segundo o si el audio perdió un segundo. Debería poder saberlo según el ritmo repetitivo.

Luego, como señaló @AJHenderson, debe reemplazar el equipo que falló. Estoy de acuerdo en que una cámara que puede aceptar una entrada de audio externa es probablemente la mejor opción, aunque es costosa.

Hay muchas posibilidades, pero las más probables implican obtener un mejor equipo. Los problemas de sincronización más severos con los teléfonos tienden a provenir de teléfonos que usan video con velocidad de fotogramas variable o tienden a tener codificadores baratos que tienden a perder o retrasar los fotogramas.

Cuando está grabando video, cada cuadro debe grabarse más o menos en tiempo real. Hay un pequeño búfer disponible para almacenar cuadros mientras se procesan, pero si las imágenes no se procesan a la velocidad a la que se toman, eventualmente ese búfer se llena. Si un teléfono no puede seguir el ritmo, tiene dos opciones, soltar un cuadro directamente y pasar al siguiente o usar un formato de archivo que le permita alterar la velocidad de cuadros sobre la marcha y grabar menos cuadros por segundo cuando tenga problemas. .

Ambos enfoques a menudo destruyen cualquier tipo de sincronización de audio. La velocidad de fotogramas variable, si está bien implementada, debería limitar un poco más la deriva, ya que los fotogramas deberían seguir avanzando a una velocidad de tiempo bastante constante, pero pueden retrasarse y perder la sincronización. Los marcos caídos son generalmente mucho peores. Dado que no existe nada para ese cuadro, el siguiente cuadro simplemente se usa y se pierde una porción de tiempo en el video que no se pierde en una secuencia de audio separada que no tenía el cuadro eliminado.

Desafortunadamente, ambos problemas dependen del hardware y no hay forma de solucionarlos en el hardware que tiene. (Supongo que podría intentar reducir la resolución para facilitar el trabajo del codificador). Si uno de estos es el origen del problema, obtener otra cámara con un mejor codificador es la única otra opción que realmente tiene disponible si desea mantener la resolución que está utilizando.

Otro posible problema que es menos común hoy en día es que el reloj de código de tiempo interno simplemente puede ser rápido o lento. En su mayor parte, la sincronización de fotogramas es bastante consistente con la tecnología moderna, pero si hay un problema, puede intentar sincronizar al principio y al final del video y ajustar la velocidad del audio en consecuencia. Verifique varias veces en el medio cuando haga esto, porque la mayoría de los problemas modernos probablemente no serán tan simples y el medio aún no estará sincronizado.

Una solución aún mejor es usar una cámara que pueda aceptar una entrada de audio externa. Al sincronizar el audio con el video en tiempo real mientras se graba en el mismo dispositivo, puede asegurarse de que el codificador mantenga la sincronización adecuada. Probablemente también sea una buena idea hacer una grabación externa, ya que esto ayudará a detectar si hubo problemas de captura, pero usar una entrada de audio externa es mucho más simple que lidiar con los problemas de sincronización después del hecho.

Los problemas de sincronización A/V se notan aproximadamente en +/- 0,1 segundos. El reloj de frecuencia de muestreo en su teléfono y cámara tendría que tener exactamente la misma velocidad dentro de 0.1 segundos durante 10 minutos, o la duración de sus clips, para que pueda alinearlos en un solo punto.

0.1 / (10 * 60) = .0001. Eso es aproximadamente 1 parte en 10k. Wikipedia dice que los relojes de cuarzo suelen tener una estabilidad de 6 partes por millón. Las cosas que leí en eso y esto indican que probablemente cueste un poco más obtener la frecuencia de reloj que cierra de fábrica. (y las 6 ppm son el tipo de deriva a largo plazo que puede esperar alrededor del punto de partida, no la precisión absoluta del equipo típico).

Tenga en cuenta que la mayoría de las cámaras, esp. los que están hechos principalmente para fotografías de imágenes fijas, no necesitan un reloj tan preciso como un reloj de pulsera, por lo que probablemente no tengan uno. Porque eso costaría extra.

Vi exactamente este tipo de deriva entre el audio de mi Panasonic Lumix y el audio grabado al mismo tiempo en una computadora portátil Dell. Consulte Sincronizar audio por separado con video+audio de cámara defectuoso, recomendaciones NLE gratuitas , donde describo una forma lenta de sincronizar clips manualmente y solicito una forma automatizada más rápida.

De todos modos, esta falta de sincronización del reloj no me sorprendió en absoluto. No tiene nada que ver con la caída del marco o el equipo de mala calidad. Debería funcionar bien asumir que ambos relojes involucraron cada carrera a una velocidad constante, pero no a la MISMA velocidad. Entonces puede corregir un clip con una corrección lineal de 2 parámetros: compensación + estiramiento.

Estoy de acuerdo con la sugerencia de AJ Henderson de que probablemente sea el reloj de la cámara el que tenga menos probabilidades de acertar. Los teléfonos tienen receptores GPS para el cronometraje, y pueden o no usar esa fuente de tiempo precisa como reloj para su frecuencia de muestreo de entrada de audio. Y también, como señala AJ, es necesario hacer wifi, lo que probablemente requiera fuentes de reloj calibradas, a menos que puedan bloquearse en una frecuencia recibida. No estoy seguro de cuán importantes son los relojes precisos con las modulaciones wifi modernas, pero probablemente sea un gran problema.

Habría esperado problemas al grabar en dos dispositivos que no derivan su reloj de muestra de la misma fuente de tiempo. Hasta que estuvieron disponibles los receptores GPS portátiles, los estudios de cine tenían un reloj maestro que distribuía el tiempo a todos los dispositivos de grabación de A/V, por lo que 1 hora real de metraje de una cámara tendría exactamente tantos fotogramas como 1 hora real de metraje de otra cámara.