Ekstrak wawasan dari video

Kesimpulan

Dalam pola kode ini, pelajari cara mengekstrak catatan harian pembicara dan laporan wawasan bermakna menggunakan IBM® Watson™ Speech To Text, Watson Natural Language Processing, dan Watson Tone Analysis saat diberikan video apa pun.

Deskripsi Produk

Di dunia yang serba terhubung, tetap fokus pada pekerjaan atau pendidikan sangatlah penting. Penelitian menunjukkan bahwa banyak orang kehilangan fokus dalam pertemuan virtual langsung atau sesi kelas virtual setelah sekitar 20 menit. Oleh karena itu, banyak pertemuan dan ruang kelas virtual yang direkam sehingga seseorang dapat menontonnya nanti.

Mungkin akan membantu jika rekaman ini dapat dianalisis, dan laporan rinci tentang pertemuan atau kelas dihasilkan dengan menggunakan kecerdasan buatan (AI). Pola kode ini menjelaskan cara melakukannya. Diberikan rekaman video pertemuan virtual atau ruang kelas virtual, ini menjelaskan cara mengekstrak audio dari file video menggunakan perpustakaan sumber terbuka FFmpeg, mentranskripsikan audio untuk mendapatkan catatan harian pembicara dengan bahasa terlatih dan ucapan akustik ke model teks, dan menghasilkan laporan pemahaman bahasa alami yang terdiri dari kategori, konsep, emosi, entitas, kata kunci, sentimen, kalimat positif teratas, dan awan kata menggunakan runtime Python Flask.

Setelah menyelesaikan pola kode, Anda memahami cara:

• Gunakan layanan Watson Speech to Text untuk mengubah suara manusia menjadi kata-kata tertulis
• Gunakan pemrosesan bahasa alami tingkat lanjut untuk menganalisis teks dan mengekstrak metadata dari konten seperti konsep, entitas, kata kunci, kategori, sentimen, dan emosi
• Leverage Watson Tone Analyzer, analisis linguistik kognitif untuk mengidentifikasi berbagai nada baik pada tingkat kalimat maupun dokumen

Aliran

1. Pengguna mengunggah file video rekaman pertemuan virtual atau ruang kelas virtual.
2. Pustaka FFmpeg mengekstrak audio dari file video.
3. Layanan Watson Speech To Text mentranskripsikan audio untuk menghasilkan keluaran tekstual yang diary.
4. (Opsional) Layanan Penerjemah Bahasa Watson menerjemahkan bahasa lain ke dalam transkrip bahasa Inggris.
5. Watson Tone Analyzer menganalisis transkrip dan mengambil pernyataan positif teratas dari transkrip tersebut.
6. Pemahaman Bahasa Alami Watson membaca transkrip untuk mengidentifikasi petunjuk utama dan untuk mendapatkan sentimen dan emosi.
7. Petunjuk utama dan ringkasan video disajikan kepada pengguna dalam aplikasi.
8. Pengguna dapat mengunduh wawasan tekstual.

petunjuk

Temukan langkah-langkah terperinci di menu README mengajukan. Langkah-langkah itu menjelaskan cara:

1. Klon repositori GitHub.
2. Tambahkan kredensial ke aplikasi.
3. Menyebarkan aplikasi.
4. Jalankan aplikasi.

Pola kode ini adalah bagian dari Mengekstrak wawasan dari video dengan IBM Watson gunakan seri kasus, yang menampilkan solusi untuk mengekstraksi wawasan yang berarti dari video menggunakan Watson Speech to Text, Watson Natural Language Processing, dan layanan Watson Tone Analyzer.