git.sesse.net Git - kdenlive/blob - src/clipmanager.cpp

   1 /***************************************************************************
   2  *   Copyright (C) 2008 by Jean-Baptiste Mardelle (jb@kdenlive.org)        *
   3  *                                                                         *
   4  *   This program is free software; you can redistribute it and/or modify  *
   5  *   it under the terms of the GNU General Public License as published by  *
   6  *   the Free Software Foundation; either version 2 of the License, or     *
   7  *   (at your option) any later version.                                   *
   8  *                                                                         *
   9  *   This program is distributed in the hope that it will be useful,       *
  10  *   but WITHOUT ANY WARRANTY; without even the implied warranty of        *
  11  *   MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the         *
  12  *   GNU General Public License for more details.                          *
  13  *                                                                         *
  14  *   You should have received a copy of the GNU General Public License     *
  15  *   along with this program; if not, write to the                         *
  16  *   Free Software Foundation, Inc.,                                       *
  17  *   51 Franklin Street, Fifth Floor, Boston, MA  02110-1301  USA          *
  18  ***************************************************************************/
  19
  20
  21 #include "clipmanager.h"
  22 #include "commands/addclipcommand.h"
  23 #include "kdenlivesettings.h"
  24 #include "docclipbase.h"
  25 #include "kdenlivedoc.h"
  26 #include "abstractclipitem.h"
  27 #include "abstractgroupitem.h"
  28 #include "titledocument.h"
  29 #include "subprojectitem.h"
  30 #include "kthumb.h"
  31
  32 #include <mlt++/Mlt.h>
  33
  34 #include <KDebug>
  35 #include <KMessageBox>
  36 #include <KFileDialog>
  37 #include <KApplication>
  38 #include <kio/netaccess.h>
  39 #include <kio/jobuidelegate.h>
  40
  41 #include <solid/device.h>
  42 #include <solid/storageaccess.h>
  43 #include <solid/storagedrive.h>
  44 #include <solid/storagevolume.h>
  45
  46 #include <QGraphicsItemGroup>
  47 #include <QtConcurrentRun>
  48
  49 #include <KFileMetaInfo>
  50
  51
  52 ClipManager::ClipManager(KdenliveDoc *doc) :
  53     QObject(),
  54     m_audioThumbsQueue(),
  55     m_doc(doc),
  56     m_abortThumb(false),
  57     m_closing(false),
  58     m_abortAudioThumb(false)
  59 {
  60     m_clipIdCounter = 1;
  61     m_folderIdCounter = 1;
  62     m_modifiedTimer.setInterval(1500);
  63     connect(&m_fileWatcher, SIGNAL(dirty(const QString &)), this, SLOT(slotClipModified(const QString &)));
  64     connect(&m_fileWatcher, SIGNAL(deleted(const QString &)), this, SLOT(slotClipMissing(const QString &)));
  65
  66     // Seems like a dirty signal is emitted anyways when a watched file is created, so don't react twice.
  67     //connect(&m_fileWatcher, SIGNAL(created(const QString &)), this, SLOT(slotClipAvailable(const QString &)));
  68     connect(&m_modifiedTimer, SIGNAL(timeout()), this, SLOT(slotProcessModifiedClips()));
  69
  70 #if KDE_IS_VERSION(4,5,0)
  71     KImageCache::deleteCache("kdenlive-thumbs");
  72     pixmapCache = new KImageCache("kdenlive-thumbs", 1000000);
  73     pixmapCache->setEvictionPolicy(KSharedDataCache::EvictOldest);
  74 #endif
  75 }
  76
  77 ClipManager::~ClipManager()
  78 {
  79     m_closing = true;
  80     m_abortThumb = true;
  81     m_abortAudioThumb = true;
  82     m_thumbsThread.waitForFinished();
  83     m_audioThumbsThread.waitForFinished();
  84     m_thumbsMutex.lock();
  85     m_requestedThumbs.clear();
  86     m_audioThumbsQueue.clear();
  87     m_thumbsMutex.unlock();
  88
  89     qDeleteAll(m_clipList);
  90     m_clipList.clear();
  91 #if KDE_IS_VERSION(4,5,0)
  92     delete pixmapCache;
  93 #endif
  94 }
  95
  96 void ClipManager::clear()
  97 {
  98     m_abortThumb = true;
  99     m_abortAudioThumb = true;
 100     m_thumbsThread.waitForFinished();
 101     m_audioThumbsThread.waitForFinished();
 102     m_thumbsMutex.lock();
 103     m_requestedThumbs.clear();
 104     m_audioThumbsQueue.clear();
 105     m_thumbsMutex.unlock();
 106     m_abortThumb = false;
 107     m_abortAudioThumb = false;
 108     m_folderList.clear();
 109     m_modifiedClips.clear();
 110     qDeleteAll(m_clipList);
 111     m_clipList.clear();
 112     m_clipIdCounter = 1;
 113     m_folderIdCounter = 1;
 114 #if KDE_IS_VERSION(4,5,0)
 115     pixmapCache->clear();
 116 #endif
 117 }
 118
 119 void ClipManager::clearCache()
 120 {
 121 #if KDE_IS_VERSION(4,5,0)
 122     pixmapCache->clear();
 123 #endif
 124 }
 125
 126 void ClipManager::requestThumbs(const QString id, QList <int> frames)
 127 {
 128     m_thumbsMutex.lock();
 129     foreach (int frame, frames) {
 130         m_requestedThumbs.insertMulti(id, frame);
 131     }
 132     m_thumbsMutex.unlock();
 133     if (!m_thumbsThread.isRunning() && !m_abortThumb) {
 134         m_thumbsThread = QtConcurrent::run(this, &ClipManager::slotGetThumbs);
 135     }
 136 }
 137
 138 void ClipManager::stopThumbs(const QString &id)
 139 {
 140     if (m_closing || (m_requestedThumbs.isEmpty() && m_processingThumbId != id && m_audioThumbsQueue.isEmpty() && m_processingAudioThumbId != id)) return;
 141     // Abort video thumbs for this clip
 142     m_abortThumb = true;
 143     m_thumbsThread.waitForFinished();
 144     m_thumbsMutex.lock();
 145     m_requestedThumbs.remove(id);
 146     m_audioThumbsQueue.removeAll(id);
 147     m_thumbsMutex.unlock();
 148     m_abortThumb = false;
 149
 150     // Abort audio thumbs for this clip
 151     if (m_processingAudioThumbId == id) {
 152         m_abortAudioThumb = true;
 153         m_audioThumbsThread.waitForFinished();
 154         m_abortAudioThumb = false;
 155     }
 156
 157     if (!m_thumbsThread.isRunning() && !m_requestedThumbs.isEmpty()) {
 158         m_thumbsThread = QtConcurrent::run(this, &ClipManager::slotGetThumbs);
 159     }
 160
 161     if (!m_audioThumbsThread.isRunning() && !m_audioThumbsQueue.isEmpty()) {
 162         m_audioThumbsThread = QtConcurrent::run(this, &ClipManager::slotGetAudioThumbs);
 163     }
 164 }
 165
 166 void ClipManager::slotGetThumbs()
 167 {
 168     QMap<QString, int>::const_iterator i;
 169     int max;
 170     int done = 0;
 171     int thumbType = 0; // 0 = timeline thumb, 1 = project clip zone thumb, 2 = clip properties thumb
 172
 173     while (!m_requestedThumbs.isEmpty() && !m_abortThumb) {
 174         m_thumbsMutex.lock();
 175         i = m_requestedThumbs.constBegin();
 176         m_processingThumbId = i.key();
 177         QList<int> values = m_requestedThumbs.values(m_processingThumbId);
 178         m_requestedThumbs.remove(m_processingThumbId);
 179         if (m_processingThumbId.startsWith("?")) {
 180             // if id starts with ?, it means the request comes from a clip property widget
 181             thumbType = 2;
 182             m_processingThumbId.remove(0, 1);
 183         }
 184         if (m_processingThumbId.startsWith("#")) {
 185             // if id starts with #, it means the request comes from project tree
 186             thumbType = 1;
 187             m_processingThumbId.remove(0, 1);
 188         }
 189         m_thumbsMutex.unlock();
 190         qSort(values);
 191         DocClipBase *clip = getClipById(m_processingThumbId);
 192         if (!clip) continue;
 193         max = m_requestedThumbs.size() + values.count();
 194         int pos;
 195         while (!values.isEmpty() && clip->thumbProducer() && !m_abortThumb) {
 196             pos = values.takeFirst();
 197             switch (thumbType) {
 198               case 1:
 199                   clip->thumbProducer()->getGenericThumb(pos, SubProjectItem::itemDefaultHeight(), thumbType);
 200                   break;
 201               case 2:
 202                   clip->thumbProducer()->getGenericThumb(pos, 180, thumbType);
 203                   break;
 204               default:
 205                   clip->thumbProducer()->getThumb(pos);
 206             }
 207             done++;
 208             if (max > 3) emit displayMessage(i18n("Loading thumbnails"), 100 * done / max);
 209         }
 210     }
 211     m_processingThumbId.clear();
 212     emit displayMessage(QString(), -1);
 213 }
 214
 215 void ClipManager::checkAudioThumbs()
 216 {
 217     if (!KdenliveSettings::audiothumbnails()) {
 218         if (m_audioThumbsThread.isRunning()) {
 219             m_abortAudioThumb = true;
 220             m_thumbsMutex.lock();
 221             m_audioThumbsQueue.clear();
 222             m_thumbsMutex.unlock();
 223             m_audioThumbsThread.waitForFinished();
 224             m_abortAudioThumb = false;
 225         }
 226         return;
 227     }
 228
 229     m_thumbsMutex.lock();
 230     for (int i = 0; i < m_clipList.count(); i++) {
 231         DocClipBase *clip = m_clipList.at(i);
 232         if (clip->hasAudioThumb() && !clip->audioThumbCreated())
 233             m_audioThumbsQueue.append(m_clipList.at(i)->getId());
 234     }
 235     m_thumbsMutex.unlock();
 236     if (!m_audioThumbsThread.isRunning() && !m_audioThumbsQueue.isEmpty()) {
 237         m_audioThumbsThread = QtConcurrent::run(this, &ClipManager::slotGetAudioThumbs);
 238     }
 239 }
 240
 241 void ClipManager::askForAudioThumb(const QString &id)
 242 {
 243     DocClipBase *clip = getClipById(id);
 244     if (clip && KdenliveSettings::audiothumbnails() && (clip->hasAudioThumb())) {
 245         m_thumbsMutex.lock();
 246         if (!m_audioThumbsQueue.contains(id)) m_audioThumbsQueue.append(id);
 247         m_thumbsMutex.unlock();
 248         if (!m_audioThumbsThread.isRunning()) m_audioThumbsThread = QtConcurrent::run(this, &ClipManager::slotGetAudioThumbs);
 249     }
 250 }
 251
 252 void ClipManager::slotGetAudioThumbs()
 253 {
 254     Mlt::Profile prof((char*) KdenliveSettings::current_profile().toUtf8().constData());
 255     mlt_audio_format audioFormat = mlt_audio_s16;
 256     while (!m_abortAudioThumb && !m_audioThumbsQueue.isEmpty()) {
 257         m_thumbsMutex.lock();
 258         m_processingAudioThumbId = m_audioThumbsQueue.takeFirst();
 259         m_thumbsMutex.unlock();
 260         DocClipBase *clip = getClipById(m_processingAudioThumbId);
 261         if (!clip || clip->audioThumbCreated()) continue;
 262         KUrl url = clip->fileURL();
 263         QString hash = clip->getClipHash();
 264         if (hash.isEmpty()) continue;
 265         QString audioPath = projectFolder() + "/thumbs/" + hash + ".thumb";
 266         double lengthInFrames = clip->duration().frames(m_doc->fps());
 267         int frequency = 48000;
 268         int channels = 2;
 269         QString data = clip->getProperty("frequency");
 270         if (!data.isEmpty()) frequency = data.toInt();
 271         data = clip->getProperty("channels");
 272         if (!data.isEmpty()) channels = data.toInt();
 273         int arrayWidth = 20;
 274         double frame = 0.0;
 275         int maxVolume = 0;
 276         audioByteArray storeIn;
 277         QFile f(audioPath);
 278         if (QFileInfo(audioPath).size() > 0 && f.open(QIODevice::ReadOnly)) {
 279             const QByteArray channelarray = f.readAll();
 280             f.close();
 281             if (channelarray.size() != arrayWidth*(frame + lengthInFrames) * channels) {
 282                 kDebug() << "--- BROKEN THUMB FOR: " << url.fileName() << " ---------------------- ";
 283                 f.remove();
 284                 continue;
 285             }
 286             kDebug() << "reading audio thumbs from file";
 287
 288             int h1 = arrayWidth * channels;
 289             int h2 = (int) frame * h1;
 290             int h3;
 291             for (int z = (int) frame; z < (int)(frame + lengthInFrames) && !m_abortAudioThumb; z++) {
 292                 h3 = 0;
 293                 for (int c = 0; c < channels; c++) {
 294                     QByteArray audioArray(arrayWidth, '\x00');
 295                     for (int i = 0; i < arrayWidth; i++) {
 296                         audioArray[i] = channelarray.at(h2 + h3 + i);
 297                         if (audioArray.at(i) > maxVolume) maxVolume = audioArray.at(i);
 298                     }
 299                     h3 += arrayWidth;
 300                     storeIn[z][c] = audioArray;
 301                 }
 302                 h2 += h1;
 303             }
 304             if (!m_abortAudioThumb) {
 305                 clip->setProperty("audio_max", QString::number(maxVolume - 64));
 306                 clip->updateAudioThumbnail(storeIn);
 307             }
 308             continue;
 309         }
 310
 311         if (!f.open(QIODevice::WriteOnly)) {
 312             kDebug() << "++++++++  ERROR WRITING TO FILE: " << audioPath;
 313             kDebug() << "++++++++  DISABLING AUDIO THUMBS";
 314             m_thumbsMutex.lock();
 315             m_audioThumbsQueue.clear();
 316             m_thumbsMutex.unlock();
 317             KdenliveSettings::setAudiothumbnails(false);
 318             break;
 319         }
 320
 321         Mlt::Producer producer(prof, url.path().toUtf8().constData());
 322         if (!producer.is_valid()) {
 323             kDebug() << "++++++++  INVALID CLIP: " << url.path();
 324             continue;
 325         }
 326
 327         producer.set("video_index", "-1");
 328
 329         if (KdenliveSettings::normaliseaudiothumbs()) {
 330             /*Mlt::Filter m_convert(prof, "volume");
 331             m_convert.set("gain", "normalise");
 332             producer.attach(m_convert);*/
 333         }
 334
 335         int last_val = 0;
 336         int val = 0;
 337         double framesPerSecond = mlt_producer_get_fps(producer.get_producer());
 338         Mlt::Frame *mlt_frame;
 339
 340         for (int z = (int) frame; z < (int)(frame + lengthInFrames) && producer.is_valid() &&  !m_abortAudioThumb; z++) {
 341             val = (int)((z - frame) / (frame + lengthInFrames) * 100.0);
 342             if (last_val != val && val > 1) {
 343                 setThumbsProgress(i18n("Creating audio thumbnail for %1", url.fileName()), val);
 344                 last_val = val;
 345             }
 346             producer.seek(z);
 347             mlt_frame = producer.get_frame();
 348             if (mlt_frame && mlt_frame->is_valid()) {
 349                 int samples = mlt_sample_calculator(framesPerSecond, frequency, mlt_frame->get_position());
 350                 qint16* pcm = static_cast<qint16*>(mlt_frame->get_audio(audioFormat, frequency, channels, samples));
 351                 for (int c = 0; c < channels; c++) {
 352                     QByteArray audioArray;
 353                     audioArray.resize(arrayWidth);
 354                     for (int i = 0; i < audioArray.size(); i++) {
 355                         double pcmval = *(pcm + c + i * samples / audioArray.size());
 356                         if (pcmval >= 0) {
 357                             pcmval = sqrt(pcmval) / 2.83 + 64;
 358                             audioArray[i] = pcmval;
 359                             if (pcmval > maxVolume) maxVolume = pcmval;
 360                         }
 361                         else {
 362                             pcmval = -sqrt(-pcmval) / 2.83 + 64;
 363                             audioArray[i] = pcmval;
 364                             if (-pcmval > maxVolume) maxVolume = -pcmval;
 365                         }
 366                     }
 367                     f.write(audioArray);
 368                     storeIn[z][c] = audioArray;
 369                 }
 370             } else {
 371                 f.write(QByteArray(arrayWidth, '\x00'));
 372             }
 373             delete mlt_frame;
 374         }
 375         f.close();
 376         setThumbsProgress(i18n("Creating audio thumbnail for %1", url.fileName()), -1);
 377         if (m_abortAudioThumb) {
 378             f.remove();
 379         } else {
 380             clip->updateAudioThumbnail(storeIn);
 381             clip->setProperty("audio_max", QString::number(maxVolume - 64));
 382         }
 383     }
 384     m_processingAudioThumbId.clear();
 385 }
 386
 387 void ClipManager::setThumbsProgress(const QString &message, int progress)
 388 {
 389     m_doc->setThumbsProgress(message, progress);
 390 }
 391
 392 QList <DocClipBase*> ClipManager::documentClipList() const
 393 {
 394     return m_clipList;
 395 }
 396
 397 QMap <QString, QString> ClipManager::documentFolderList() const
 398 {
 399     return m_folderList;
 400 }
 401
 402 void ClipManager::addClip(DocClipBase *clip)
 403 {
 404     m_clipList.append(clip);
 405     if (clip->clipType() != COLOR && clip->clipType() != SLIDESHOW  && !clip->fileURL().isEmpty()) {
 406         // listen for file change
 407         //kDebug() << "// LISTEN FOR: " << clip->fileURL().path();
 408         m_fileWatcher.addFile(clip->fileURL().path());
 409     }
 410     const QString id = clip->getId();
 411     if (id.toInt() >= m_clipIdCounter) m_clipIdCounter = id.toInt() + 1;
 412     const QString gid = clip->getProperty("groupid");
 413     if (!gid.isEmpty() && gid.toInt() >= m_folderIdCounter) m_folderIdCounter = gid.toInt() + 1;
 414 }
 415
 416 void ClipManager::slotDeleteClips(QStringList ids)
 417 {
 418     QUndoCommand *delClips = new QUndoCommand();
 419     delClips->setText(i18np("Delete clip", "Delete clips", ids.size()));
 420
 421     for (int i = 0; i < ids.size(); i++) {
 422         DocClipBase *clip = getClipById(ids.at(i));
 423         if (clip) {
 424             new AddClipCommand(m_doc, clip->toXML(), ids.at(i), false, delClips);
 425         }
 426     }
 427     m_doc->commandStack()->push(delClips);
 428 }
 429
 430 void ClipManager::deleteClip(const QString &clipId)
 431 {
 432     for (int i = 0; i < m_clipList.count(); i++) {
 433         if (m_clipList.at(i)->getId() == clipId) {
 434             DocClipBase *clip = m_clipList.takeAt(i);
 435             if (clip->clipType() != COLOR && clip->clipType() != SLIDESHOW  && !clip->fileURL().isEmpty()) {
 436                 //if (m_clipList.at(i)->clipType() == IMAGE || m_clipList.at(i)->clipType() == AUDIO || (m_clipList.at(i)->clipType() == TEXT && !m_clipList.at(i)->fileURL().isEmpty())) {
 437                 // listen for file change
 438                 m_fileWatcher.removeFile(clip->fileURL().path());
 439             }
 440             delete clip;
 441             clip = NULL;
 442             break;
 443         }
 444     }
 445 }
 446
 447 DocClipBase *ClipManager::getClipAt(int pos)
 448 {
 449     return m_clipList.at(pos);
 450 }
 451
 452 DocClipBase *ClipManager::getClipById(QString clipId)
 453 {
 454     //kDebug() << "++++  CLIP MAN, LOOKING FOR CLIP ID: " << clipId;
 455     clipId = clipId.section('_', 0, 0);
 456     for (int i = 0; i < m_clipList.count(); i++) {
 457         if (m_clipList.at(i)->getId() == clipId) {
 458             //kDebug() << "++++  CLIP MAN, FOUND FOR CLIP ID: " << clipId;
 459             return m_clipList.at(i);
 460         }
 461     }
 462     return NULL;
 463 }
 464
 465 const QList <DocClipBase *> ClipManager::getClipByResource(QString resource)
 466 {
 467     QList <DocClipBase *> list;
 468     QString clipResource;
 469     QString proxyResource;
 470     for (int i = 0; i < m_clipList.count(); i++) {
 471         clipResource = m_clipList.at(i)->getProperty("resource");
 472         proxyResource = m_clipList.at(i)->getProperty("proxy");
 473         if (clipResource.isEmpty()) clipResource = m_clipList.at(i)->getProperty("colour");
 474         if (clipResource == resource || proxyResource == resource) {
 475             list.append(m_clipList.at(i));
 476         }
 477     }
 478     return list;
 479 }
 480
 481
 482 void ClipManager::clearUnusedProducers()
 483 {
 484     for (int i = 0; i < m_clipList.count(); i++) {
 485         if (m_clipList.at(i)->numReferences() == 0) m_clipList.at(i)->deleteProducers();
 486     }
 487 }
 488
 489 void ClipManager::resetProducersList(const QList <Mlt::Producer *> prods, bool displayRatioChanged, bool fpsChanged)
 490 {
 491     for (int i = 0; i < m_clipList.count(); i++) {
 492         if (m_clipList.at(i)->numReferences() > 0 || displayRatioChanged || fpsChanged) {
 493             m_clipList.at(i)->deleteProducers();
 494         }
 495     }
 496     QString id;
 497     Mlt::Producer *prod;
 498     QStringList brokenClips;
 499     for (int i = 0; i < prods.count(); i++) {
 500         prod = prods.at(i);
 501         id = prod->get("id");
 502         if (id.contains('_')) id = id.section('_', 0, 0);
 503         DocClipBase *clip = getClipById(id);
 504         QString markup = prod->get("markup");
 505         if (prod->is_blank() || !prod->is_valid() || !markup.isEmpty()) {
 506             // The clip is broken (missing proxy or source clip)
 507             kDebug()<<"// WARNING, CLIP "<<id<<" Cannot be loaded";
 508             brokenClips << id;
 509         }
 510         else if (clip) {
 511             clip->setProducer(prod, false, true);
 512         }
 513     }
 514     emit checkAllClips(displayRatioChanged, fpsChanged, brokenClips);
 515 }
 516
 517 void ClipManager::slotAddClip(KIO::Job *job, const KUrl &, const KUrl &dst)
 518 {
 519     KIO::MetaData meta = job->metaData();
 520     QMap <QString, QString> data;
 521     data.insert("group", meta.value("group"));
 522     data.insert("groupid", meta.value("groupid"));
 523     data.insert("comment", meta.value("comment"));
 524     kDebug()<<"Finished copying: "<<dst<<" / "<<meta.value("group")<<" / "<<meta.value("groupid");
 525     slotAddClipList(KUrl::List () << dst, data);
 526 }
 527
 528 void ClipManager::slotAddClipList(const KUrl::List urls, QMap <QString, QString> data)
 529 {
 530     QUndoCommand *addClips = new QUndoCommand();
 531     // Update list of removable volumes
 532     //TODO: update only when new volume is plugged / unplugged
 533     listRemovableVolumes();
 534     foreach(const KUrl & file, urls) {
 535         if (QFile::exists(file.path())) {//KIO::NetAccess::exists(file, KIO::NetAccess::SourceSide, NULL)) {
 536             if (!data.contains("bypassDuplicate") && !getClipByResource(file.path()).empty()) {
 537                 if (KMessageBox::warningContinueCancel(kapp->activeWindow(), i18n("Clip <b>%1</b><br />already exists in project, what do you want to do?", file.path()), i18n("Clip already exists")) == KMessageBox::Cancel)
 538                     continue;
 539             }
 540             if (isOnRemovableDevice(file)) {
 541                 int answer = KMessageBox::warningYesNoCancel(kapp->activeWindow(), i18n("Clip <b>%1</b><br /> is on a removable device, will not be available when device is unplugged", file.path()), i18n("File on a Removable Device"), KGuiItem(i18n("Copy file to project folder")), KGuiItem(i18n("Continue")), KStandardGuiItem::cancel(), QString("copyFilesToProjectFolder"));
 542                 if (answer == KMessageBox::Cancel) continue;
 543                 else if (answer == KMessageBox::Yes) {
 544                     // Copy files to project folder
 545                     QString sourcesFolder = m_doc->projectFolder().path(KUrl::AddTrailingSlash) + "clips/";
 546                     KIO::NetAccess::mkdir(sourcesFolder, kapp->activeWindow());
 547                     //KIO::filesize_t m_requestedSize;
 548                     KIO::CopyJob *copyjob = KIO::copy (file, KUrl(sourcesFolder));
 549                     //TODO: for some reason, passing metadata does not work...
 550                     copyjob->addMetaData("group", data.value("group"));
 551                     copyjob->addMetaData("groupId", data.value("groupId"));
 552                     copyjob->addMetaData("comment", data.value("comment"));
 553                     copyjob->ui()->setWindow(kapp->activeWindow());
 554                     connect(copyjob, SIGNAL(copyingDone(KIO::Job *, const KUrl &, const KUrl &, time_t, bool, bool)), this, SLOT(slotAddClip(KIO::Job *, const KUrl &, const KUrl &)));
 555                     continue;
 556                 }
 557             }
 558             kDebug() << "Adding clip: " << file.path();
 559             QDomDocument doc;
 560             QDomElement prod = doc.createElement("producer");
 561             doc.appendChild(prod);
 562             prod.setAttribute("resource", file.path());
 563             uint id = m_clipIdCounter++;
 564             prod.setAttribute("id", QString::number(id));
 565             if (data.contains("comment")) prod.setAttribute("description", data.value("comment"));
 566             if (data.contains("group")) {
 567                 prod.setAttribute("groupname", data.value("group"));
 568                 prod.setAttribute("groupid", data.value("groupId"));
 569             }
 570             if (data.contains("video_index")) prod.setAttribute("video_index", data.value("video_index"));
 571             if (data.contains("audio_index")) prod.setAttribute("audio_index", data.value("audio_index"));
 572
 573             KMimeType::Ptr type = KMimeType::findByUrl(file);
 574             if (type->name().startsWith("image/")) {
 575                 prod.setAttribute("type", (int) IMAGE);
 576                 prod.setAttribute("in", 0);
 577                 prod.setAttribute("out", m_doc->getFramePos(KdenliveSettings::image_duration()) - 1);
 578                 if (KdenliveSettings::autoimagetransparency()) prod.setAttribute("transparency", 1);
 579                 // Read EXIF metadata for JPEG
 580                 if (type->is("image/jpeg")) {
 581                     KFileMetaInfo metaInfo(file.path(), QString("image/jpeg"), KFileMetaInfo::TechnicalInfo);
 582                     const QHash<QString, KFileMetaInfoItem> metaInfoItems = metaInfo.items();
 583                     foreach(const KFileMetaInfoItem & metaInfoItem, metaInfoItems) {
 584                         prod.setAttribute("meta.attr." + metaInfoItem.name().section('#', 1), metaInfoItem.value().toString());
 585                     }
 586                 }
 587             } else if (type->is("application/x-kdenlivetitle")) {
 588                 // opening a title file
 589                 QDomDocument txtdoc("titledocument");
 590                 QFile txtfile(file.path());
 591                 if (txtfile.open(QIODevice::ReadOnly) && txtdoc.setContent(&txtfile)) {
 592                     txtfile.close();
 593                     prod.setAttribute("type", (int) TEXT);
 594                     // extract embeded images
 595                     QDomNodeList items = txtdoc.elementsByTagName("content");
 596                     for (int i = 0; i < items.count() ; i++) {
 597                         QDomElement content = items.item(i).toElement();
 598                         if (content.hasAttribute("base64")) {
 599                             QString titlesFolder = m_doc->projectFolder().path(KUrl::AddTrailingSlash) + "titles/";
 600                             QString path = TitleDocument::extractBase64Image(titlesFolder, content.attribute("base64"));
 601                             if (!path.isEmpty()) {
 602                                 content.setAttribute("url", path);
 603                                 content.removeAttribute("base64");
 604                             }
 605                         }
 606                     }
 607                     QString titleData = txtdoc.toString();
 608                     prod.setAttribute("xmldata", titleData);
 609                     prod.setAttribute("transparency", 1);
 610                     prod.setAttribute("in", 0);
 611                     int out = txtdoc.documentElement().attribute("out").toInt();
 612                     if (out > 0)
 613                         prod.setAttribute("out", out);
 614                     else
 615                         prod.setAttribute("out", m_doc->getFramePos(KdenliveSettings::title_duration()) - 1);
 616                 } else
 617                     txtfile.close();
 618             }
 619             new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true, addClips);
 620         }
 621         else kDebug()<<"// CANNOT READ FILE: "<<file;
 622     }
 623     if (addClips->childCount() > 0) {
 624         addClips->setText(i18np("Add clip", "Add clips", addClips->childCount()));
 625         m_doc->commandStack()->push(addClips);
 626     }
 627 }
 628
 629 void ClipManager::slotAddClipFile(const KUrl &url, QMap <QString, QString> data)
 630 {
 631     slotAddClipList(KUrl::List(url), data);
 632 }
 633
 634 void ClipManager::slotAddXmlClipFile(const QString &name, const QDomElement &xml, const QString &group, const QString &groupId)
 635 {
 636     QDomDocument doc;
 637     doc.appendChild(doc.importNode(xml, true));
 638     QDomElement prod = doc.documentElement();
 639     prod.setAttribute("type", (int) PLAYLIST);
 640     uint id = m_clipIdCounter++;
 641     prod.setAttribute("id", QString::number(id));
 642     prod.setAttribute("name", name);
 643     if (!group.isEmpty()) {
 644         prod.setAttribute("groupname", group);
 645         prod.setAttribute("groupid", groupId);
 646     }
 647     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 648     m_doc->commandStack()->push(command);
 649 }
 650
 651 void ClipManager::slotAddColorClipFile(const QString &name, const QString &color, QString duration, const QString &group, const QString &groupId)
 652 {
 653     QDomDocument doc;
 654     QDomElement prod = doc.createElement("producer");
 655     doc.appendChild(prod);
 656     prod.setAttribute("mlt_service", "colour");
 657     prod.setAttribute("colour", color);
 658     prod.setAttribute("type", (int) COLOR);
 659     uint id = m_clipIdCounter++;
 660     prod.setAttribute("id", QString::number(id));
 661     prod.setAttribute("in", "0");
 662     prod.setAttribute("out", m_doc->getFramePos(duration) - 1);
 663     prod.setAttribute("name", name);
 664     if (!group.isEmpty()) {
 665         prod.setAttribute("groupname", group);
 666         prod.setAttribute("groupid", groupId);
 667     }
 668     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 669     m_doc->commandStack()->push(command);
 670 }
 671
 672 void ClipManager::slotAddSlideshowClipFile(QMap <QString, QString> properties, const QString &group, const QString &groupId)
 673 {
 674     QDomDocument doc;
 675     QDomElement prod = doc.createElement("producer");
 676     doc.appendChild(prod);
 677     QMap<QString, QString>::const_iterator i = properties.constBegin();
 678     while (i != properties.constEnd()) {
 679         prod.setAttribute(i.key(), i.value());
 680         ++i;
 681     }
 682     prod.setAttribute("type", (int) SLIDESHOW);
 683     uint id = m_clipIdCounter++;
 684     if (!group.isEmpty()) {
 685         prod.setAttribute("groupname", group);
 686         prod.setAttribute("groupid", groupId);
 687     }
 688     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 689     m_doc->commandStack()->push(command);
 690 }
 691
 692
 693
 694 void ClipManager::slotAddTextClipFile(const QString &titleName, int out, const QString &xml, const QString &group, const QString &groupId)
 695 {
 696     QDomDocument doc;
 697     QDomElement prod = doc.createElement("producer");
 698     doc.appendChild(prod);
 699     //prod.setAttribute("resource", imagePath);
 700     prod.setAttribute("name", titleName);
 701     prod.setAttribute("xmldata", xml);
 702     uint id = m_clipIdCounter++;
 703     prod.setAttribute("id", QString::number(id));
 704     if (!group.isEmpty()) {
 705         prod.setAttribute("groupname", group);
 706         prod.setAttribute("groupid", groupId);
 707     }
 708     prod.setAttribute("type", (int) TEXT);
 709     prod.setAttribute("transparency", "1");
 710     prod.setAttribute("in", "0");
 711     prod.setAttribute("out", out);
 712     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 713     m_doc->commandStack()->push(command);
 714 }
 715
 716 void ClipManager::slotAddTextTemplateClip(QString titleName, const KUrl &path, const QString &group, const QString &groupId)
 717 {
 718     QDomDocument doc;
 719     QDomElement prod = doc.createElement("producer");
 720     doc.appendChild(prod);
 721     prod.setAttribute("name", titleName);
 722     prod.setAttribute("resource", path.path());
 723     uint id = m_clipIdCounter++;
 724     prod.setAttribute("id", QString::number(id));
 725     if (!group.isEmpty()) {
 726         prod.setAttribute("groupname", group);
 727         prod.setAttribute("groupid", groupId);
 728     }
 729     prod.setAttribute("type", (int) TEXT);
 730     prod.setAttribute("transparency", "1");
 731     prod.setAttribute("in", "0");
 732
 733     int out = 0;
 734     QDomDocument titledoc;
 735     QFile txtfile(path.path());
 736     if (txtfile.open(QIODevice::ReadOnly) && titledoc.setContent(&txtfile)) {
 737         txtfile.close();
 738         out = titledoc.documentElement().attribute("out").toInt();
 739     } else txtfile.close();
 740
 741     if (out == 0) out = m_doc->getFramePos(KdenliveSettings::image_duration());
 742     prod.setAttribute("out", out);
 743
 744     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 745     m_doc->commandStack()->push(command);
 746 }
 747
 748 int ClipManager::getFreeClipId()
 749 {
 750     return m_clipIdCounter++;
 751 }
 752
 753 int ClipManager::getFreeFolderId()
 754 {
 755     return m_folderIdCounter++;
 756 }
 757
 758 int ClipManager::lastClipId() const
 759 {
 760     return m_clipIdCounter - 1;
 761 }
 762
 763 QString ClipManager::projectFolder() const
 764 {
 765     return m_doc->projectFolder().path();
 766 }
 767
 768 void ClipManager::addFolder(const QString &id, const QString &name)
 769 {
 770     m_folderList.insert(id, name);
 771 }
 772
 773 void ClipManager::deleteFolder(const QString &id)
 774 {
 775     m_folderList.remove(id);
 776 }
 777
 778 AbstractGroupItem *ClipManager::createGroup()
 779 {
 780     AbstractGroupItem *group = new AbstractGroupItem(m_doc->fps());
 781     m_groupsList.append(group);
 782     return group;
 783 }
 784
 785 void ClipManager::removeGroup(AbstractGroupItem *group)
 786 {
 787     m_groupsList.removeAll(group);
 788 }
 789
 790 QDomElement ClipManager::groupsXml() const
 791 {
 792     QDomDocument doc;
 793     QDomElement groups = doc.createElement("groups");
 794     doc.appendChild(groups);
 795     for (int i = 0; i < m_groupsList.count(); i++) {
 796         QDomElement group = doc.createElement("group");
 797         groups.appendChild(group);
 798         QList <QGraphicsItem *> children = m_groupsList.at(i)->childItems();
 799         for (int j = 0; j < children.count(); j++) {
 800             if (children.at(j)->type() == AVWIDGET || children.at(j)->type() == TRANSITIONWIDGET) {
 801                 AbstractClipItem *item = static_cast <AbstractClipItem *>(children.at(j));
 802                 ItemInfo info = item->info();
 803                 if (item->type() == AVWIDGET) {
 804                     QDomElement clip = doc.createElement("clipitem");
 805                     clip.setAttribute("track", info.track);
 806                     clip.setAttribute("position", info.startPos.frames(m_doc->fps()));
 807                     group.appendChild(clip);
 808                 } else if (item->type() == TRANSITIONWIDGET) {
 809                     QDomElement clip = doc.createElement("transitionitem");
 810                     clip.setAttribute("track", info.track);
 811                     clip.setAttribute("position", info.startPos.frames(m_doc->fps()));
 812                     group.appendChild(clip);
 813                 }
 814             }
 815         }
 816     }
 817     return doc.documentElement();
 818 }
 819
 820
 821 void ClipManager::slotClipModified(const QString &path)
 822 {
 823     //kDebug() << "// CLIP: " << path << " WAS MODIFIED";
 824     const QList <DocClipBase *> list = getClipByResource(path);
 825     for (int i = 0; i < list.count(); i++) {
 826         DocClipBase *clip = list.at(i);
 827         if (clip != NULL) {
 828             QString id = clip->getId();
 829             if (!m_modifiedClips.contains(id))
 830                 emit modifiedClip(id);
 831             m_modifiedClips[id] = QTime::currentTime();
 832         }
 833     }
 834     if (!m_modifiedTimer.isActive()) m_modifiedTimer.start();
 835 }
 836
 837 void ClipManager::slotProcessModifiedClips()
 838 {
 839     if (!m_modifiedClips.isEmpty()) {
 840         QMapIterator<QString, QTime> i(m_modifiedClips);
 841         while (i.hasNext()) {
 842             i.next();
 843             if (QTime::currentTime().msecsTo(i.value()) <= -1500) {
 844                 emit reloadClip(i.key());
 845                 m_modifiedClips.remove(i.key());
 846                 break;
 847             }
 848         }
 849     }
 850     if (m_modifiedClips.isEmpty()) m_modifiedTimer.stop();
 851 }
 852
 853 void ClipManager::slotClipMissing(const QString &path)
 854 {
 855     // kDebug() << "// CLIP: " << path << " WAS MISSING";
 856     const QList <DocClipBase *> list = getClipByResource(path);
 857     for (int i = 0; i < list.count(); i++) {
 858         DocClipBase *clip = list.at(i);
 859         if (clip != NULL) emit missingClip(clip->getId());
 860     }
 861 }
 862
 863 void ClipManager::slotClipAvailable(const QString &path)
 864 {
 865     // kDebug() << "// CLIP: " << path << " WAS ADDED";
 866     const QList <DocClipBase *> list = getClipByResource(path);
 867     for (int i = 0; i < list.count(); i++) {
 868         DocClipBase *clip = list.at(i);
 869         if (clip != NULL) emit availableClip(clip->getId());
 870     }
 871 }
 872
 873 int ClipManager::clipsCount() const
 874 {
 875     return m_clipList.count();
 876 }
 877
 878
 879 void ClipManager::listRemovableVolumes()
 880 {
 881     QList<SolidVolumeInfo> volumes;
 882     m_removableVolumes.clear();
 883
 884     QList<Solid::Device> devices = Solid::Device::listFromType(Solid::DeviceInterface::StorageAccess);
 885
 886     foreach(const Solid::Device &accessDevice, devices)
 887     {
 888         // check for StorageAccess
 889         if (!accessDevice.is<Solid::StorageAccess>())
 890             continue;
 891
 892         const Solid::StorageAccess *access = accessDevice.as<Solid::StorageAccess>();
 893
 894         if (!access->isAccessible())
 895             continue;
 896
 897         // check for StorageDrive
 898         Solid::Device driveDevice;
 899         for (Solid::Device currentDevice = accessDevice; currentDevice.isValid(); currentDevice = currentDevice.parent())
 900         {
 901             if (currentDevice.is<Solid::StorageDrive>())
 902             {
 903                 driveDevice = currentDevice;
 904                 break;
 905             }
 906         }
 907         if (!driveDevice.isValid())
 908             continue;
 909
 910         Solid::StorageDrive *drive = driveDevice.as<Solid::StorageDrive>();
 911         if (!drive->isRemovable()) continue;
 912
 913         // check for StorageVolume
 914         Solid::Device volumeDevice;
 915         for (Solid::Device currentDevice = accessDevice; currentDevice.isValid(); currentDevice = currentDevice.parent())
 916         {
 917             if (currentDevice.is<Solid::StorageVolume>())
 918             {
 919                 volumeDevice = currentDevice;
 920                 break;
 921             }
 922         }
 923         if (!volumeDevice.isValid())
 924             continue;
 925
 926         Solid::StorageVolume *volume = volumeDevice.as<Solid::StorageVolume>();
 927
 928         SolidVolumeInfo info;
 929         info.path = access->filePath();
 930         info.isMounted = access->isAccessible();
 931         if (!info.path.isEmpty() && !info.path.endsWith('/'))
 932             info.path += '/';
 933         info.uuid = volume->uuid();
 934         info.label = volume->label();
 935         info.isRemovable = drive->isRemovable();
 936         m_removableVolumes << info;
 937     }
 938 }
 939
 940 bool ClipManager::isOnRemovableDevice(const KUrl &url)
 941 {
 942     SolidVolumeInfo volume;
 943     QString path = url.path(KUrl::RemoveTrailingSlash);
 944     int volumeMatch = 0;
 945
 946     //FIXME: Network shares! Here we get only the volume of the mount path...
 947     // This is probably not really clean. But Solid does not help us.
 948     foreach (const SolidVolumeInfo &v, m_removableVolumes)
 949     {
 950         if (v.isMounted && !v.path.isEmpty() && path.startsWith(v.path))
 951         {
 952             int length = v.path.length();
 953             if (length > volumeMatch)
 954             {
 955                 volumeMatch = v.path.length();
 956                 volume = v;
 957             }
 958         }
 959     }
 960
 961     return volumeMatch;
 962 }
 963
 964 void ClipManager::projectTreeThumbReady(const QString &id, int frame, QImage img, int type)
 965 {
 966     switch (type) {
 967       case 2:
 968           emit gotClipPropertyThumbnail(id, img);
 969           break;
 970       default:
 971         emit thumbReady(id, frame, img);
 972     }
 973 }
 974