]> git.sesse.net Git - kdenlive/blobdiff - src/kthumb.cpp
Small thumbs optimization
[kdenlive] / src / kthumb.cpp
index e80222fdd50b3aacc58b8d4643e15ad2b4bcc2b0..56ec4a5ed7080cf654b259d4f53a63a12e14496c 100644 (file)
 #include <qxml.h>
 #include <QImage>
 #include <QApplication>
+#include <QtConcurrentRun>
+#include <QVarLengthArray>
 
-void MyThread::init(QObject *parent, KUrl url, QString target, double frame, double frameLength, int frequency, int channels, int arrayWidth) {
-    stop_me = false;
-    m_parent = parent;
-    m_isWorking = false;
-    f.setFileName(target);
-    m_url = url;
-    m_frame = frame;
-    m_frameLength = frameLength;
-    m_frequency = frequency;
-    m_channels = channels;
-    m_arrayWidth = arrayWidth;
-}
-
-bool MyThread::isWorking() {
-    return m_isWorking;
-}
-
-void MyThread::run() {
-    if (!f.open(QIODevice::WriteOnly)) {
-        kDebug() << "++++++++  ERROR WRITING TO FILE: " << f.fileName() << endl;
-        kDebug() << "++++++++  DISABLING AUDIO THUMBS" << endl;
-        KdenliveSettings::setAudiothumbnails(false);
-        return;
-    }
-    m_isWorking = true;
-    Mlt::Profile prof((char*) KdenliveSettings::current_profile().toUtf8().data());
-    Mlt::Producer m_producer(prof, m_url.path().toUtf8().data());
-
-
-    if (KdenliveSettings::normaliseaudiothumbs()) {
-        Mlt::Filter m_convert(prof, "volume");
-        m_convert.set("gain", "normalise");
-        m_producer.attach(m_convert);
-    }
-
-    //QApplication::postEvent(m_parent, new ProgressEvent(-1, (QEvent::Type)10005));
-
-    int last_val = 0;
-    int val = 0;
-    kDebug() << "for " << m_frame << " " << m_frameLength << " " << m_producer.is_valid();
-    for (int z = (int) m_frame;z < (int)(m_frame + m_frameLength) && m_producer.is_valid();z++) {
-        if (stop_me) break;
-        val = (int)((z - m_frame) / (m_frame + m_frameLength) * 100.0);
-        if (last_val != val && val > 1) {
-            emit audioThumbProgress(val);
-            //QApplication::postEvent(m_parent, new ProgressEvent(val, (QEvent::Type)10005));
-
-            last_val = val;
-        }
-        m_producer.seek(z);
-        Mlt::Frame *mlt_frame = m_producer.get_frame();
-        if (mlt_frame && mlt_frame->is_valid()) {
-            double m_framesPerSecond = mlt_producer_get_fps(m_producer.get_producer());   //mlt_frame->get_double( "fps" );
-            int m_samples = mlt_sample_calculator(m_framesPerSecond, m_frequency, mlt_frame_get_position(mlt_frame->get_frame()));
-            mlt_audio_format m_audioFormat = mlt_audio_pcm;
-
-            qint16* m_pcm = mlt_frame->get_audio(m_audioFormat, m_frequency, m_channels, m_samples);
-
-            for (int c = 0;c < m_channels;c++) {
-                QByteArray m_array;
-                m_array.resize(m_arrayWidth);
-                for (uint i = 0; i < m_array.size(); i++) {
-                    m_array[i] = ((*(m_pcm + c + i * m_samples / m_array.size())) >> 9) + 127 / 2 ;
-                }
-                f.write(m_array);
-
-            }
-        } else {
-            f.write(QByteArray(m_arrayWidth, '\x00'));
-        }
-        if (mlt_frame)
-            delete mlt_frame;
-    }
-    kDebug() << "done";
-    f.close();
-    m_isWorking = false;
-    if (stop_me) {
-        f.remove();
-    }
-    emit audioThumbOver();
-    //QApplication::postEvent(m_parent, new ProgressEvent(-1, (QEvent::Type)10005));
-
-}
-
-KThumb::KThumb(ClipManager *clipManager, KUrl url, const QString &id, const QString &hash, QObject * parent, const char */*name*/)
-  : QObject(parent),
-    audioThumbProducer(),
+KThumb::KThumb(ClipManager *clipManager, KUrl url, const QString &id, const QString &hash, QObject * parent, const char */*name*/) :
+    QObject(parent),
+    m_audioThumbProducer(),
     m_url(url),
     m_thumbFile(),
     m_dar(1),
+    m_ratio(1),
     m_producer(NULL),
     m_clipManager(clipManager),
     m_id(id),
-    m_mainFrame(-1)
+    m_stopAudioThumbs(false)
 {
     m_thumbFile = clipManager->projectFolder() + "/thumbs/" + hash + ".thumb";
-    connect(&audioThumbProducer, SIGNAL(audioThumbProgress(const int)), this, SLOT(slotAudioThumbProgress(const int)));
-    connect(&audioThumbProducer, SIGNAL(audioThumbOver()), this, SLOT(slotAudioThumbOver()));
-
 }
 
-KThumb::~KThumb() {
-    if (audioThumbProducer.isRunning()) {
+KThumb::~KThumb()
+{
+    m_requestedThumbs.clear();
+    m_intraFramesQueue.clear();
+    if (m_audioThumbProducer.isRunning()) {
+        m_stopAudioThumbs = true;
+        m_audioThumbProducer.waitForFinished();
         slotAudioThumbOver();
-        audioThumbProducer.stop_me = true;
-        audioThumbProducer.wait(300);
     }
+    m_future.waitForFinished();
+    m_intra.waitForFinished();
 }
 
-void KThumb::setProducer(Mlt::Producer *producer) {
+void KThumb::setProducer(Mlt::Producer *producer)
+{
+    m_mutex.lock();
+    m_requestedThumbs.clear();
+    m_intraFramesQueue.clear();
+    m_future.waitForFinished();
+    m_intra.waitForFinished();
     m_producer = producer;
-    m_dar = producer->profile()->dar();
+    // FIXME: the profile() call leaks an object, but trying to free
+    // it leads to a double-free in Profile::~Profile()
+    if (producer) {
+        m_dar = producer->profile()->dar();
+        m_ratio = (double) producer->profile()->width() / producer->profile()->height();
+    }
+    m_mutex.unlock();
 }
 
-void KThumb::clearProducer() {
-    m_producer = NULL;
+void KThumb::clearProducer()
+{
+    setProducer(NULL);
 }
 
-bool KThumb::hasProducer() const {
+bool KThumb::hasProducer() const
+{
     return m_producer != NULL;
 }
 
-void KThumb::updateThumbUrl(const QString &hash) {
+void KThumb::updateThumbUrl(const QString &hash)
+{
     m_thumbFile = m_clipManager->projectFolder() + "/thumbs/" + hash + ".thumb";
 }
 
-void KThumb::updateClipUrl(KUrl url, const QString &hash) {
+void KThumb::updateClipUrl(KUrl url, const QString &hash)
+{
     m_url = url;
-    if (m_producer) {
-        char *tmp = Render::decodedString(url.path());
-        m_producer->set("resource", tmp);
-        delete[] tmp;
-    }
+    //if (m_producer)
+        //m_producer->set("resource", url.path().toUtf8().constData());
     m_thumbFile = m_clipManager->projectFolder() + "/thumbs/" + hash + ".thumb";
 }
 
 //static
-QPixmap KThumb::getImage(KUrl url, int width, int height) {
+QPixmap KThumb::getImage(KUrl url, int width, int height)
+{
     if (url.isEmpty()) return QPixmap();
     return getImage(url, 0, width, height);
 }
 
-void KThumb::extractImage(int frame, int frame2) {
-    if (m_url.isEmpty() || !KdenliveSettings::videothumbnails() || m_producer == NULL) return;
+void KThumb::extractImage(int frame, int frame2)
+{
+    if (!KdenliveSettings::videothumbnails() || m_producer == NULL) return;
+    if (frame != -1 && !m_requestedThumbs.contains(frame)) m_requestedThumbs.append(frame);
+    if (frame2 != -1 && !m_requestedThumbs.contains(frame2)) m_requestedThumbs.append(frame2);
+    qSort(m_requestedThumbs);
+    if (!m_future.isRunning()) {
+        m_mutex.lock();
+        m_future = QtConcurrent::run(this, &KThumb::doGetThumbs);
+        m_mutex.unlock();
+    }
+}
 
-    const int twidth = (int)(KdenliveSettings::trackheight() * m_dar);
+void KThumb::doGetThumbs()
+{
     const int theight = KdenliveSettings::trackheight();
+    const int swidth = (int)(theight * m_ratio + 0.5);
+    const int dwidth = (int)(theight * m_dar + 0.5);
 
-    mlt_image_format format = mlt_image_yuv422;
-    if (m_producer->is_blank()) {
-        QPixmap pix(twidth, theight);
-        pix.fill(Qt::black);
-        emit thumbReady(frame, pix);
-        return;
-    }
-    Mlt::Frame *mltFrame;
-    if (frame != -1) {
-        //videoThumbProducer.getThumb(frame);
-        m_producer->seek(frame);
-        mltFrame = m_producer->get_frame();
-        if (frame2 != -1) m_producer->seek(frame2);
-        if (!mltFrame) {
-            kDebug() << "///// BROKEN FRAME";
-            QPixmap p(twidth, theight);
-            p.fill(Qt::red);
-            emit thumbReady(frame, p);
-            return;
-        } else {
-            int frame_width = 0;
-            int frame_height = 0;
-            mltFrame->set("normalised_height", theight);
-            mltFrame->set("normalised_width", twidth);
-            QPixmap pix(twidth, theight);
-            uint8_t *data = mltFrame->get_image(format, frame_width, frame_height, 0);
-            uint8_t *new_image = (uint8_t *)mlt_pool_alloc(frame_width * (frame_height + 1) * 4);
-            mlt_convert_yuv422_to_rgb24a((uint8_t *)data, new_image, frame_width * frame_height);
-
-            QImage image((uchar *)new_image, frame_width, frame_height, QImage::Format_ARGB32);
-
-            if (!image.isNull()) {
-                pix = QPixmap::fromImage(image.rgbSwapped());
-            } else
-                pix.fill(Qt::red);
-
-            mlt_pool_release(new_image);
-            delete mltFrame;
-            emit thumbReady(frame, pix);
-        }
-    } else if (frame2 != -1) m_producer->seek(frame2);
-    if (frame2 != -1) {
-        mltFrame = m_producer->get_frame();
-        if (!mltFrame) {
-            kDebug() << "///// BROKEN FRAME";
-            QPixmap p(twidth, theight);
-            p.fill(Qt::red);
-            emit thumbReady(frame, p);
-            return;
-        } else {
-            int frame_width = 0;
-            int frame_height = 0;
-            mltFrame->set("normalised_height", theight);
-            mltFrame->set("normalised_width", twidth);
-            QPixmap pix(twidth, theight);
-            uint8_t *data = mltFrame->get_image(format, frame_width, frame_height, 0);
-            uint8_t *new_image = (uint8_t *)mlt_pool_alloc(frame_width * (frame_height + 1) * 4);
-            mlt_convert_yuv422_to_rgb24a((uint8_t *)data, new_image, frame_width * frame_height);
-
-            QImage image((uchar *)new_image, frame_width, frame_height, QImage::Format_ARGB32);
-
-            if (!image.isNull()) {
-                pix = QPixmap::fromImage(image.rgbSwapped());
-            } else
-                pix.fill(Qt::red);
-
-            mlt_pool_release(new_image);
-            delete mltFrame;
-            emit thumbReady(frame2, pix);
+    while (!m_requestedThumbs.isEmpty()) {
+        int frame = m_requestedThumbs.takeFirst();
+        if (frame != -1) {
+            emit thumbReady(frame, getFrame(m_producer, frame, swidth, dwidth, theight));
         }
     }
 }
 
-QPixmap KThumb::extractImage(int frame, int width, int height) {
-    return getFrame(m_producer, frame, width, height);
+QPixmap KThumb::extractImage(int frame, int width, int height)
+{
+    m_mutex.lock();
+    QImage img = getFrame(m_producer, frame, (int) (height * m_ratio + 0.5), width, height);
+    m_mutex.unlock();
+    return QPixmap::fromImage(img);
 }
 
 //static
-QPixmap KThumb::getImage(KUrl url, int frame, int width, int height) {
-    Mlt::Profile profile((char*) KdenliveSettings::current_profile().data());
+QPixmap KThumb::getImage(KUrl url, int frame, int width, int height)
+{
+    Mlt::Profile profile(KdenliveSettings::current_profile().toUtf8().constData());
     QPixmap pix(width, height);
     if (url.isEmpty()) return pix;
 
-    char *tmp = Render::decodedString(url.path());
-    //"<westley><playlist><producer resource=\"" + url.path() + "\" /></playlist></westley>");
-    //Mlt::Producer producer(profile, "westley-xml", tmp);
-    Mlt::Producer *producer = new Mlt::Producer(profile, tmp);
-    delete[] tmp;
-
-    if (producer->is_blank()) {
-        pix.fill(Qt::black);
-        delete producer;
-        return pix;
-    }
-    pix = getFrame(producer, frame, width, height);
+    //"<mlt><playlist><producer resource=\"" + url.path() + "\" /></playlist></mlt>");
+    //Mlt::Producer producer(profile, "xml-string", tmp);
+    Mlt::Producer *producer = new Mlt::Producer(profile, url.path().toUtf8().constData());
+    double swidth = (double) profile.width() / profile.height();
+    pix = QPixmap::fromImage(getFrame(producer, frame, (int) (height * swidth + 0.5), width, height));
     delete producer;
     return pix;
 }
 
 //static
-/*
-QPixmap KThumb::getImage(QDomElement xml, int frame, int width, int height) {
-    Mlt::Profile profile((char*) KdenliveSettings::current_profile().data());
-    QPixmap pix(width, height);
-    QDomDocument doc;
-    QDomElement westley = doc.createElement("westley");
-    QDomElement play = doc.createElement("playlist");
-    doc.appendChild(westley);
-    westley.appendChild(play);
-    play.appendChild(doc.importNode(xml, true));
-    char *tmp = Render::decodedString(doc.toString());
-    Mlt::Producer producer(profile, "westley-xml", tmp);
-    delete[] tmp;
-
-    if (producer.is_blank()) {
-        pix.fill(Qt::black);
-        return pix;
+QImage KThumb::getFrame(Mlt::Producer *producer, int framepos, int frameWidth, int displayWidth, int height)
+{
+    if (producer == NULL || !producer->is_valid()) {
+        QImage p(displayWidth, height, QImage::Format_ARGB32_Premultiplied);
+        p.fill(QColor(Qt::red).rgb());
+        return p;
     }
-    return getFrame(producer, frame, width, height);
-}*/
 
-//static
-QPixmap KThumb::getFrame(Mlt::Producer *producer, int framepos, int width, int height) {
-    if (producer == NULL) {
-        QPixmap p(width, height);
-        p.fill(Qt::red);
+    if (producer->is_blank()) {
+        QImage p(displayWidth, height, QImage::Format_ARGB32_Premultiplied);
+        p.fill(QColor(Qt::black).rgb());
         return p;
     }
 
     producer->seek(framepos);
     Mlt::Frame *frame = producer->get_frame();
-    if (!frame) {
-        kDebug() << "///// BROKEN FRAME";
-        QPixmap p(width, height);
-        p.fill(Qt::red);
-        return p;
-    }
+    QImage p = getFrame(frame, frameWidth, displayWidth, height);
+    delete frame;
+    return p;
+}
 
-    mlt_image_format format = mlt_image_yuv422;
-    int frame_width = 0;
-    int frame_height = 0;
-    frame->set("normalised_height", height);
-    frame->set("normalised_width", width);
-    QPixmap pix(width, height);
-    uint8_t *data = frame->get_image(format, frame_width, frame_height, 0);
-    uint8_t *new_image = (uint8_t *)mlt_pool_alloc(frame_width * (frame_height + 1) * 4);
-    mlt_convert_yuv422_to_rgb24a((uint8_t *)data, new_image, frame_width * frame_height);
 
-    QImage image((uchar *)new_image, frame_width, frame_height, QImage::Format_ARGB32);
+//static
+QImage KThumb::getFrame(Mlt::Frame *frame, int frameWidth, int displayWidth, int height)
+{
+    QImage p(displayWidth, height, QImage::Format_ARGB32_Premultiplied);
+    if (frame == NULL || !frame->is_valid()) {
+        p.fill(QColor(Qt::red).rgb());
+        return p;
+    }
 
+    int ow = frameWidth;
+    int oh = height;
+    mlt_image_format format = mlt_image_rgb24a;
+    uint8_t *data = frame->get_image(format, ow, oh, 0);
+    QImage image((uchar *)data, ow, oh, QImage::Format_ARGB32_Premultiplied);
     if (!image.isNull()) {
-        pix = QPixmap::fromImage(image.rgbSwapped());
+        if (ow > (2 * displayWidth)) {
+            // there was a scaling problem, do it manually
+            QImage scaled = image.scaled(displayWidth, height);
+            image = scaled.rgbSwapped();
+        } else {
+            image = image.scaled(displayWidth, height, Qt::IgnoreAspectRatio).rgbSwapped();
+        }
+        p.fill(QColor(Qt::black).rgb());
+        QPainter painter(&p);
+        painter.drawImage(p.rect(), image);
+        painter.end();
     } else
-        pix.fill(Qt::red);
+        p.fill(QColor(Qt::red).rgb());
+    return p;
+}
 
-    mlt_pool_release(new_image);
-    delete frame;
-    return pix;
+//static
+uint KThumb::imageVariance(QImage image )
+{
+    uint delta = 0;
+    uint avg = 0;
+    uint bytes = image.numBytes();
+    uint STEPS = bytes/2;
+    QVarLengthArray<uchar> pivot(STEPS);
+    const uchar *bits=image.bits();
+    // First pass: get pivots and taking average
+    for( uint i=0; i<STEPS ; i++ ){
+        pivot[i] = bits[2 * i];
+#if QT_VERSION >= 0x040700
+        avg+=pivot.at(i);
+#else
+        avg+=pivot[i];
+#endif
+    }
+    avg=avg/STEPS;
+    // Second Step: calculate delta (average?)
+    for (uint i=0; i<STEPS; i++)
+    {
+#if QT_VERSION >= 0x040700
+        int curdelta=abs(int(avg - pivot.at(i)));
+#else
+        int curdelta=abs(int(avg - pivot[i]));
+#endif
+        delta+=curdelta;
+    }
+    return delta/STEPS;
 }
+
 /*
 void KThumb::getImage(KUrl url, int frame, int width, int height)
 {
     if (url.isEmpty()) return;
     QPixmap image(width, height);
-    char *tmp = KRender::decodedString(url.path());
-    Mlt::Producer m_producer(tmp);
-    delete tmp;
+    Mlt::Producer m_producer(url.path().toUtf8().constData());
     image.fill(Qt::black);
 
     if (m_producer.is_blank()) {
@@ -380,9 +285,7 @@ void KThumb::getThumbs(KUrl url, int startframe, int endframe, int width, int he
 {
     if (url.isEmpty()) return;
     QPixmap image(width, height);
-    char *tmp = KRender::decodedString(url.path());
-    Mlt::Producer m_producer(tmp);
-    delete tmp;
+    Mlt::Producer m_producer(url.path().toUtf8().constData());
     image.fill(Qt::black);
 
     if (m_producer.is_blank()) {
@@ -420,34 +323,41 @@ void KThumb::getThumbs(KUrl url, int startframe, int endframe, int width, int he
     emit thumbReady(endframe, image);
 }
 */
-void KThumb::stopAudioThumbs() {
-    if (audioThumbProducer.isRunning()) audioThumbProducer.stop_me = true;
+void KThumb::stopAudioThumbs()
+{
+    if (m_audioThumbProducer.isRunning()) {
+        m_stopAudioThumbs = true;
+        m_audioThumbProducer.waitForFinished();
+        slotAudioThumbOver();
+    }
 }
 
-void KThumb::removeAudioThumb() {
+void KThumb::removeAudioThumb()
+{
     if (m_thumbFile.isEmpty()) return;
     stopAudioThumbs();
     QFile f(m_thumbFile);
     f.remove();
 }
 
-void KThumb::getAudioThumbs(int channel, double frame, double frameLength, int arrayWidth) {
+void KThumb::getAudioThumbs(int channel, double frame, double frameLength, int arrayWidth)
+{
     if (channel == 0) {
         slotAudioThumbOver();
         return;
     }
-    if ((audioThumbProducer.isRunning() && audioThumbProducer.isWorking())) {
+    if (m_audioThumbProducer.isRunning()) {
         return;
     }
 
     QMap <int, QMap <int, QByteArray> > storeIn;
     //FIXME: Hardcoded!!!
-    int m_frequency = 48000;
-    int m_channels = channel;
+    m_frequency = 48000;
+    m_channels = channel;
 
     QFile f(m_thumbFile);
     if (f.open(QIODevice::ReadOnly)) {
-        QByteArray channelarray = f.readAll();
+        const QByteArray channelarray = f.readAll();
         f.close();
         if (channelarray.size() != arrayWidth*(frame + frameLength)*m_channels) {
             kDebug() << "--- BROKEN THUMB FOR: " << m_url.fileName() << " ---------------------- " << endl;
@@ -455,38 +365,153 @@ void KThumb::getAudioThumbs(int channel, double frame, double frameLength, int a
             slotAudioThumbOver();
             return;
         }
+
         kDebug() << "reading audio thumbs from file";
-        for (int z = (int) frame;z < (int)(frame + frameLength);z++) {
-            for (int c = 0;c < m_channels;c++) {
+
+        int h1 = arrayWidth * m_channels;
+        int h2 = (int) frame * h1;
+        int h3;
+        for (int z = (int) frame; z < (int)(frame + frameLength); z++) {
+            h3 = 0;
+            for (int c = 0; c < m_channels; c++) {
                 QByteArray m_array(arrayWidth, '\x00');
-                for (int i = 0; i < arrayWidth; i++)
-                    m_array[i] = channelarray[z*arrayWidth*m_channels + c*arrayWidth + i];
+                for (int i = 0; i < arrayWidth; i++) {
+                    m_array[i] = channelarray.at(h2 + h3 + i);
+                }
+                h3 += arrayWidth;
                 storeIn[z][c] = m_array;
             }
+            h2 += h1;
         }
         emit audioThumbReady(storeIn);
         slotAudioThumbOver();
     } else {
-        if (audioThumbProducer.isRunning()) return;
-        audioThumbProducer.init(this, m_url, m_thumbFile, frame, frameLength, m_frequency, m_channels, arrayWidth);
-        audioThumbProducer.start(QThread::LowestPriority);
-        kDebug() << "STARTING GENERATE THMB FOR: " << m_url << " ................................";
+        if (m_audioThumbProducer.isRunning()) return;
+        m_audioThumbFile.setFileName(m_thumbFile);
+        m_frame = frame;
+        m_frameLength = frameLength;
+        m_arrayWidth = arrayWidth;
+        m_audioThumbProducer = QtConcurrent::run(this, &KThumb::slotCreateAudioThumbs);
+        /*m_audioThumbProducer.init(m_url, m_thumbFile, frame, frameLength, m_frequency, m_channels, arrayWidth);
+        m_audioThumbProducer.start(QThread::LowestPriority);*/
+        // kDebug() << "STARTING GENERATE THMB FOR: " <<m_id<<", URL: "<< m_url << " ................................";
     }
 }
 
-void KThumb::slotAudioThumbProgress(const int progress) {
-    m_clipManager->setThumbsProgress(i18n("Creating thumbnail for %1", m_url.fileName()), progress);
+void KThumb::slotCreateAudioThumbs()
+{
+    Mlt::Profile prof((char*) KdenliveSettings::current_profile().toUtf8().data());
+    Mlt::Producer producer(prof, m_url.path().toUtf8().data());
+    if (!producer.is_valid()) {
+        kDebug() << "++++++++  INVALID CLIP: " << m_url.path();
+        return;
+    }
+    if (!m_audioThumbFile.open(QIODevice::WriteOnly)) {
+        kDebug() << "++++++++  ERROR WRITING TO FILE: " << m_audioThumbFile.fileName();
+        kDebug() << "++++++++  DISABLING AUDIO THUMBS";
+        KdenliveSettings::setAudiothumbnails(false);
+        return;
+    }
+
+    if (KdenliveSettings::normaliseaudiothumbs()) {
+        Mlt::Filter m_convert(prof, "volume");
+        m_convert.set("gain", "normalise");
+        producer.attach(m_convert);
+    }
+
+    int last_val = 0;
+    int val = 0;
+    //kDebug() << "for " << m_frame << " " << m_frameLength << " " << m_producer.is_valid();
+    for (int z = (int) m_frame; z < (int)(m_frame + m_frameLength) && producer.is_valid(); z++) {
+        if (m_stopAudioThumbs) break;
+        val = (int)((z - m_frame) / (m_frame + m_frameLength) * 100.0);
+        if (last_val != val && val > 1) {
+            m_clipManager->setThumbsProgress(i18n("Creating thumbnail for %1", m_url.fileName()), val);
+            last_val = val;
+        }
+        producer.seek(z);
+        Mlt::Frame *mlt_frame = producer.get_frame();
+        if (mlt_frame && mlt_frame->is_valid()) {
+            double m_framesPerSecond = mlt_producer_get_fps(producer.get_producer());
+            int m_samples = mlt_sample_calculator(m_framesPerSecond, m_frequency, mlt_frame_get_position(mlt_frame->get_frame()));
+            mlt_audio_format m_audioFormat = mlt_audio_pcm;
+            qint16* m_pcm = static_cast<qint16*>(mlt_frame->get_audio(m_audioFormat, m_frequency, m_channels, m_samples));
+
+            for (int c = 0; c < m_channels; c++) {
+                QByteArray m_array;
+                m_array.resize(m_arrayWidth);
+                for (int i = 0; i < m_array.size(); i++) {
+                    m_array[i] = ((*(m_pcm + c + i * m_samples / m_array.size())) >> 9) + 127 / 2 ;
+                }
+                m_audioThumbFile.write(m_array);
+
+            }
+        } else {
+            m_audioThumbFile.write(QByteArray(m_arrayWidth, '\x00'));
+        }
+        delete mlt_frame;
+    }
+    m_audioThumbFile.close();
+    if (m_stopAudioThumbs) {
+        m_audioThumbFile.remove();
+    } else {
+        slotAudioThumbOver();
+    }
 }
 
-void KThumb::slotAudioThumbOver() {
+void KThumb::slotAudioThumbOver()
+{
     m_clipManager->setThumbsProgress(i18n("Creating thumbnail for %1", m_url.fileName()), -1);
     m_clipManager->endAudioThumbsGeneration(m_id);
 }
 
-void KThumb::askForAudioThumbs(const QString &id) {
+void KThumb::askForAudioThumbs(const QString &id)
+{
     m_clipManager->askForAudioThumb(id);
 }
 
+#if KDE_IS_VERSION(4,5,0)
+void KThumb::queryIntraThumbs(QList <int> missingFrames)
+{
+    foreach (int i, missingFrames) {
+        if (!m_intraFramesQueue.contains(i)) m_intraFramesQueue.append(i);
+    }
+    qSort(m_intraFramesQueue);
+    if (!m_intra.isRunning()) {
+        m_mutex.lock();
+        m_intra = QtConcurrent::run(this, &KThumb::slotGetIntraThumbs);
+        m_mutex.unlock();
+    }
+}
+
+void KThumb::slotGetIntraThumbs()
+{
+    const int theight = KdenliveSettings::trackheight();
+    const int frameWidth = (int)(theight * m_ratio + 0.5);
+    const int displayWidth = (int)(theight * m_dar + 0.5);
+    QString path = m_url.path() + "_";
+    bool addedThumbs = false;
+
+    while (!m_intraFramesQueue.isEmpty()) {
+        int pos = m_intraFramesQueue.takeFirst();
+        if (!m_clipManager->pixmapCache->contains(path + QString::number(pos))) {
+            if (m_clipManager->pixmapCache->insertImage(path + QString::number(pos), getFrame(m_producer, pos, frameWidth, displayWidth, theight))) {
+                addedThumbs = true;
+            }
+            else kDebug()<<"// INSERT FAILD FOR: "<<pos;
+        }
+        m_intraFramesQueue.removeAll(pos);
+    }
+    if (addedThumbs) emit thumbsCached();
+}
+
+QImage KThumb::findCachedThumb(const QString path)
+{
+    QImage img;
+    m_clipManager->pixmapCache->findImage(path, &img);
+    return img;
+}
+#endif
 
 #include "kthumb.moc"