Video Shorts: TikTok/Reels mit Auto-Übersetzung
Rohe Bildschirm- und Gesichtsaufnahmen in ein fertiges, vertikales Short (9:16) mit Schnitt, Effekten, Untertiteln und übersetzter Vertonung zu verwandeln, ist manuell extrem zeitaufwendig und erfordert mehrere Spezial-Tools. Der Connector montiert automatisch rohe Aufnahmen in ein TikTok-/Instagram-/Facebook-Short (9:16) mit Übersetzung der Vertonung nach EN oder DE. Die Pipeline hat zehn Schritte: ffprobe liest Metadaten, FFmpeg extrahiert das Audio (16 kHz Mono) für OpenAI Whisper, das mit Wort-Timestamps transkribiert (RU/UA). Danach arbeiten drei Claude-CLI-Aufrufe: #1 erstellt aus dem Transkript einen Schnittplan (keep/cut plus frei benannte Effekte wie zoom_in, glitch, ken_burns), #2 generiert daraus echten JS-Effekt-Code (über interpolate()/spring()/Easing), der per new Function() zur Laufzeit in Remotion ausgeführt wird (kein Datei-Schreiben, kein Webpack-Rebuild — Ansatz aus den Remotion-AI-Docs), #3 übersetzt die Segmente nach EN/DE. ElevenLabs erzeugt TTS mit Alex' geklontem Stimm-Profil samt Wort-Timestamps; daraus werden wortgenaue Karaoke-Untertitel gebaut (weißer Text, schwarze Kontur, farbige Pille auf dem aktuellen Wort).
Was wir erreicht haben
Voll konfigurierbar über CLI-Flags (Inhalt und visueller Stil), mehrere Screen-Aufnahmen werden sequenziell abgespielt, --no-publish überspringt den linkobox-Upload.
Voraussetzung: lokal installierte und authentifizierte Claude CLI sowie ffmpeg im PATH.
Video Shorts
Content / Medien
KI, Produkte
Sie haben ein ähnliches Projekt?
Erzählen Sie uns von Ihrem Vorhaben — wir zeigen Ihnen, wie wir ähnliche Ergebnisse für Ihr Unternehmen erzielen können.