git.sesse.net Git - kdenlive/blob - src/clipmanager.cpp

   1 /***************************************************************************
   2  *   Copyright (C) 2008 by Jean-Baptiste Mardelle (jb@kdenlive.org)        *
   3  *                                                                         *
   4  *   This program is free software; you can redistribute it and/or modify  *
   5  *   it under the terms of the GNU General Public License as published by  *
   6  *   the Free Software Foundation; either version 2 of the License, or     *
   7  *   (at your option) any later version.                                   *
   8  *                                                                         *
   9  *   This program is distributed in the hope that it will be useful,       *
  10  *   but WITHOUT ANY WARRANTY; without even the implied warranty of        *
  11  *   MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the         *
  12  *   GNU General Public License for more details.                          *
  13  *                                                                         *
  14  *   You should have received a copy of the GNU General Public License     *
  15  *   along with this program; if not, write to the                         *
  16  *   Free Software Foundation, Inc.,                                       *
  17  *   51 Franklin Street, Fifth Floor, Boston, MA  02110-1301  USA          *
  18  ***************************************************************************/
  19
  20
  21 #include "clipmanager.h"
  22 #include "commands/addclipcommand.h"
  23 #include "kdenlivesettings.h"
  24 #include "docclipbase.h"
  25 #include "kdenlivedoc.h"
  26 #include "abstractclipitem.h"
  27 #include "abstractgroupitem.h"
  28 #include "titledocument.h"
  29 #include "subprojectitem.h"
  30 #include "kthumb.h"
  31
  32 #include <mlt++/Mlt.h>
  33
  34 #include <KDebug>
  35 #include <KMessageBox>
  36 #include <KFileDialog>
  37 #include <KApplication>
  38 #include <kio/netaccess.h>
  39 #include <kio/jobuidelegate.h>
  40
  41 #include <solid/device.h>
  42 #include <solid/storageaccess.h>
  43 #include <solid/storagedrive.h>
  44 #include <solid/storagevolume.h>
  45
  46 #include <QGraphicsItemGroup>
  47 #include <QtConcurrentRun>
  48
  49 #include <KFileMetaInfo>
  50
  51
  52 ClipManager::ClipManager(KdenliveDoc *doc) :
  53     QObject(),
  54     m_audioThumbsQueue(),
  55     m_doc(doc),
  56     m_abortThumb(false),
  57     m_closing(false),
  58     m_abortAudioThumb(false)
  59 {
  60     m_clipIdCounter = 1;
  61     m_folderIdCounter = 1;
  62     m_modifiedTimer.setInterval(1500);
  63     connect(&m_fileWatcher, SIGNAL(dirty(const QString &)), this, SLOT(slotClipModified(const QString &)));
  64     connect(&m_fileWatcher, SIGNAL(deleted(const QString &)), this, SLOT(slotClipMissing(const QString &)));
  65
  66     // Seems like a dirty signal is emitted anyways when a watched file is created, so don't react twice.
  67     //connect(&m_fileWatcher, SIGNAL(created(const QString &)), this, SLOT(slotClipAvailable(const QString &)));
  68     connect(&m_modifiedTimer, SIGNAL(timeout()), this, SLOT(slotProcessModifiedClips()));
  69
  70 #if KDE_IS_VERSION(4,5,0)
  71     KImageCache::deleteCache("kdenlive-thumbs");
  72     pixmapCache = new KImageCache("kdenlive-thumbs", 1000000);
  73     pixmapCache->setEvictionPolicy(KSharedDataCache::EvictOldest);
  74 #endif
  75 }
  76
  77 ClipManager::~ClipManager()
  78 {
  79     m_closing = true;
  80     m_abortThumb = true;
  81     m_abortAudioThumb = true;
  82     m_thumbsThread.waitForFinished();
  83     m_audioThumbsThread.waitForFinished();
  84     m_thumbsMutex.lock();
  85     m_requestedThumbs.clear();
  86     m_audioThumbsQueue.clear();
  87     m_thumbsMutex.unlock();
  88
  89     qDeleteAll(m_clipList);
  90     m_clipList.clear();
  91 #if KDE_IS_VERSION(4,5,0)
  92     delete pixmapCache;
  93 #endif
  94 }
  95
  96 void ClipManager::clear()
  97 {
  98     m_abortThumb = true;
  99     m_abortAudioThumb = true;
 100     m_thumbsThread.waitForFinished();
 101     m_audioThumbsThread.waitForFinished();
 102     m_thumbsMutex.lock();
 103     m_requestedThumbs.clear();
 104     m_audioThumbsQueue.clear();
 105     m_thumbsMutex.unlock();
 106     m_abortThumb = false;
 107     m_abortAudioThumb = false;
 108     m_folderList.clear();
 109     m_modifiedClips.clear();
 110     qDeleteAll(m_clipList);
 111     m_clipList.clear();
 112     m_clipIdCounter = 1;
 113     m_folderIdCounter = 1;
 114 #if KDE_IS_VERSION(4,5,0)
 115     pixmapCache->clear();
 116 #endif
 117 }
 118
 119 void ClipManager::clearCache()
 120 {
 121 #if KDE_IS_VERSION(4,5,0)
 122     pixmapCache->clear();
 123 #endif
 124 }
 125
 126 void ClipManager::requestThumbs(const QString id, QList <int> frames)
 127 {
 128     m_thumbsMutex.lock();
 129     foreach (int frame, frames) {
 130         m_requestedThumbs.insertMulti(id, frame);
 131     }
 132     m_thumbsMutex.unlock();
 133     if (!m_thumbsThread.isRunning() && !m_abortThumb) {
 134         m_thumbsThread = QtConcurrent::run(this, &ClipManager::slotGetThumbs);
 135     }
 136 }
 137
 138 void ClipManager::stopThumbs(const QString &id)
 139 {
 140     if (m_closing || (m_requestedThumbs.isEmpty() && m_processingThumbId != id && m_audioThumbsQueue.isEmpty() && m_processingAudioThumbId != id)) return;
 141     // Abort video thumbs for this clip
 142     m_abortThumb = true;
 143     m_thumbsThread.waitForFinished();
 144     m_thumbsMutex.lock();
 145     m_requestedThumbs.remove(id);
 146     m_audioThumbsQueue.removeAll(id);
 147     m_thumbsMutex.unlock();
 148     m_abortThumb = false;
 149
 150     // Abort audio thumbs for this clip
 151     if (m_processingAudioThumbId == id) {
 152         m_abortAudioThumb = true;
 153         m_audioThumbsThread.waitForFinished();
 154         m_abortAudioThumb = false;
 155     }
 156
 157     if (!m_thumbsThread.isRunning() && !m_requestedThumbs.isEmpty()) {
 158         m_thumbsThread = QtConcurrent::run(this, &ClipManager::slotGetThumbs);
 159     }
 160
 161     if (!m_audioThumbsThread.isRunning() && !m_audioThumbsQueue.isEmpty()) {
 162         m_audioThumbsThread = QtConcurrent::run(this, &ClipManager::slotGetAudioThumbs);
 163     }
 164 }
 165
 166 void ClipManager::slotGetThumbs()
 167 {
 168     QMap<QString, int>::const_iterator i;
 169     int max;
 170     int done = 0;
 171     int thumbType = 0; // 0 = timeline thumb, 1 = project clip zone thumb, 2 = clip properties thumb
 172
 173     while (!m_requestedThumbs.isEmpty() && !m_abortThumb) {
 174         m_thumbsMutex.lock();
 175         i = m_requestedThumbs.constBegin();
 176         m_processingThumbId = i.key();
 177         QList<int> values = m_requestedThumbs.values(m_processingThumbId);
 178         m_requestedThumbs.remove(m_processingThumbId);
 179         if (m_processingThumbId.startsWith("?")) {
 180             // if id starts with ?, it means the request comes from a clip property widget
 181             thumbType = 2;
 182             m_processingThumbId.remove(0, 1);
 183         }
 184         if (m_processingThumbId.startsWith("#")) {
 185             // if id starts with #, it means the request comes from project tree
 186             thumbType = 1;
 187             m_processingThumbId.remove(0, 1);
 188         }
 189         m_thumbsMutex.unlock();
 190         qSort(values);
 191         DocClipBase *clip = getClipById(m_processingThumbId);
 192         if (!clip) continue;
 193         max = m_requestedThumbs.size() + values.count();
 194         int pos;
 195         while (!values.isEmpty() && clip->thumbProducer() && !m_abortThumb) {
 196             pos = values.takeFirst();
 197             switch (thumbType) {
 198               case 1:
 199                   clip->thumbProducer()->getGenericThumb(pos, SubProjectItem::itemDefaultHeight(), thumbType);
 200                   break;
 201               case 2:
 202                   clip->thumbProducer()->getGenericThumb(pos, 180, thumbType);
 203                   break;
 204               default:
 205                   clip->thumbProducer()->getThumb(pos);
 206             }
 207             done++;
 208             if (max > 3) emit displayMessage(i18n("Loading thumbnails"), 100 * done / max);
 209         }
 210     }
 211     m_processingThumbId.clear();
 212     emit displayMessage(QString(), -1);
 213 }
 214
 215 void ClipManager::checkAudioThumbs()
 216 {
 217     if (!KdenliveSettings::audiothumbnails()) {
 218         if (m_audioThumbsThread.isRunning()) {
 219             m_abortAudioThumb = true;
 220             m_thumbsMutex.lock();
 221             m_audioThumbsQueue.clear();
 222             m_thumbsMutex.unlock();
 223             m_audioThumbsThread.waitForFinished();
 224             m_abortAudioThumb = false;
 225         }
 226         return;
 227     }
 228
 229     m_thumbsMutex.lock();
 230     for (int i = 0; i < m_clipList.count(); i++) {
 231         DocClipBase *clip = m_clipList.at(i);
 232         if (clip->hasAudioThumb() && !clip->audioThumbCreated())
 233             m_audioThumbsQueue.append(m_clipList.at(i)->getId());
 234     }
 235     m_thumbsMutex.unlock();
 236     if (!m_audioThumbsThread.isRunning() && !m_audioThumbsQueue.isEmpty()) {
 237         m_audioThumbsThread = QtConcurrent::run(this, &ClipManager::slotGetAudioThumbs);
 238     }
 239 }
 240
 241 void ClipManager::askForAudioThumb(const QString &id)
 242 {
 243     DocClipBase *clip = getClipById(id);
 244     if (clip && KdenliveSettings::audiothumbnails() && (clip->hasAudioThumb())) {
 245         m_thumbsMutex.lock();
 246         if (!m_audioThumbsQueue.contains(id)) m_audioThumbsQueue.append(id);
 247         m_thumbsMutex.unlock();
 248         if (!m_audioThumbsThread.isRunning()) m_audioThumbsThread = QtConcurrent::run(this, &ClipManager::slotGetAudioThumbs);
 249     }
 250 }
 251
 252 void ClipManager::slotGetAudioThumbs()
 253 {
 254     Mlt::Profile prof((char*) KdenliveSettings::current_profile().toUtf8().constData());
 255     mlt_audio_format audioFormat = mlt_audio_s16;
 256     while (!m_abortAudioThumb && !m_audioThumbsQueue.isEmpty()) {
 257         m_thumbsMutex.lock();
 258         m_processingAudioThumbId = m_audioThumbsQueue.takeFirst();
 259         m_thumbsMutex.unlock();
 260         DocClipBase *clip = getClipById(m_processingAudioThumbId);
 261         if (!clip || clip->audioThumbCreated()) continue;
 262         KUrl url = clip->fileURL();
 263         QString hash = clip->getClipHash();
 264         if (hash.isEmpty()) continue;
 265         QString audioPath = projectFolder() + "/thumbs/" + hash + ".thumb";
 266         double lengthInFrames = clip->duration().frames(m_doc->fps());
 267         int frequency = 48000;
 268         int channels = 2;
 269         QString data = clip->getProperty("frequency");
 270         if (!data.isEmpty()) frequency = data.toInt();
 271         data = clip->getProperty("channels");
 272         if (!data.isEmpty()) channels = data.toInt();
 273         int arrayWidth = 20;
 274         double frame = 0.0;
 275         int maxVolume = 0;
 276         audioByteArray storeIn;
 277         QFile f(audioPath);
 278         if (QFileInfo(audioPath).size() > 0 && f.open(QIODevice::ReadOnly)) {
 279             const QByteArray channelarray = f.readAll();
 280             f.close();
 281             if (channelarray.size() != arrayWidth*(frame + lengthInFrames) * channels) {
 282                 kDebug() << "--- BROKEN THUMB FOR: " << url.fileName() << " ---------------------- ";
 283                 f.remove();
 284                 continue;
 285             }
 286             kDebug() << "reading audio thumbs from file";
 287
 288             int h1 = arrayWidth * channels;
 289             int h2 = (int) frame * h1;
 290             int h3;
 291             for (int z = (int) frame; z < (int)(frame + lengthInFrames) && !m_abortAudioThumb; z++) {
 292                 h3 = 0;
 293                 for (int c = 0; c < channels; c++) {
 294                     QByteArray audioArray(arrayWidth, '\x00');
 295                     for (int i = 0; i < arrayWidth; i++) {
 296                         audioArray[i] = channelarray.at(h2 + h3 + i);
 297                         if (audioArray.at(i) > maxVolume) maxVolume = audioArray.at(i);
 298                     }
 299                     h3 += arrayWidth;
 300                     storeIn[z][c] = audioArray;
 301                 }
 302                 h2 += h1;
 303             }
 304             if (!m_abortAudioThumb) {
 305                 clip->setProperty("audio_max", QString::number(maxVolume - 64));
 306                 clip->updateAudioThumbnail(storeIn);
 307             }
 308             continue;
 309         }
 310
 311         if (!f.open(QIODevice::WriteOnly)) {
 312             kDebug() << "++++++++  ERROR WRITING TO FILE: " << audioPath;
 313             kDebug() << "++++++++  DISABLING AUDIO THUMBS";
 314             m_thumbsMutex.lock();
 315             m_audioThumbsQueue.clear();
 316             m_thumbsMutex.unlock();
 317             KdenliveSettings::setAudiothumbnails(false);
 318             break;
 319         }
 320
 321         Mlt::Producer producer(prof, url.path().toUtf8().constData());
 322         if (!producer.is_valid()) {
 323             kDebug() << "++++++++  INVALID CLIP: " << url.path();
 324             continue;
 325         }
 326
 327         producer.set("video_index", "-1");
 328
 329         if (KdenliveSettings::normaliseaudiothumbs()) {
 330             /*Mlt::Filter m_convert(prof, "volume");
 331             m_convert.set("gain", "normalise");
 332             producer.attach(m_convert);*/
 333         }
 334
 335         int last_val = 0;
 336         int val = 0;
 337         double framesPerSecond = mlt_producer_get_fps(producer.get_producer());
 338         Mlt::Frame *mlt_frame;
 339
 340         for (int z = (int) frame; z < (int)(frame + lengthInFrames) && producer.is_valid() &&  !m_abortAudioThumb; z++) {
 341             val = (int)((z - frame) / (frame + lengthInFrames) * 100.0);
 342             if (last_val != val && val > 1) {
 343                 setThumbsProgress(i18n("Creating audio thumbnail for %1", url.fileName()), val);
 344                 last_val = val;
 345             }
 346             producer.seek(z);
 347             mlt_frame = producer.get_frame();
 348             if (mlt_frame && mlt_frame->is_valid()) {
 349                 int samples = mlt_sample_calculator(framesPerSecond, frequency, mlt_frame->get_position());
 350                 qint16* pcm = static_cast<qint16*>(mlt_frame->get_audio(audioFormat, frequency, channels, samples));
 351                 for (int c = 0; c < channels; c++) {
 352                     QByteArray audioArray;
 353                     audioArray.resize(arrayWidth);
 354                     for (int i = 0; i < audioArray.size(); i++) {
 355                         double pcmval = *(pcm + c + i * samples / audioArray.size());
 356                         if (pcmval >= 0) {
 357                             pcmval = sqrt(pcmval) / 2.83 + 64;
 358                             audioArray[i] = pcmval;
 359                             if (pcmval > maxVolume) maxVolume = pcmval;
 360                         }
 361                         else {
 362                             pcmval = -sqrt(-pcmval) / 2.83 + 64;
 363                             audioArray[i] = pcmval;
 364                             if (-pcmval > maxVolume) maxVolume = -pcmval;
 365                         }
 366                     }
 367                     f.write(audioArray);
 368                     storeIn[z][c] = audioArray;
 369                 }
 370             } else {
 371                 f.write(QByteArray(arrayWidth, '\x00'));
 372             }
 373             delete mlt_frame;
 374         }
 375         f.close();
 376         setThumbsProgress(i18n("Creating audio thumbnail for %1", url.fileName()), -1);
 377         if (m_abortAudioThumb) {
 378             f.remove();
 379         } else {
 380             clip->updateAudioThumbnail(storeIn);
 381             clip->setProperty("audio_max", QString::number(maxVolume - 64));
 382         }
 383     }
 384     m_processingAudioThumbId.clear();
 385 }
 386
 387 void ClipManager::setThumbsProgress(const QString &message, int progress)
 388 {
 389     m_doc->setThumbsProgress(message, progress);
 390 }
 391
 392 QList <DocClipBase*> ClipManager::documentClipList() const
 393 {
 394     return m_clipList;
 395 }
 396
 397 QMap <QString, QString> ClipManager::documentFolderList() const
 398 {
 399     return m_folderList;
 400 }
 401
 402 void ClipManager::addClip(DocClipBase *clip)
 403 {
 404     m_clipList.append(clip);
 405     if (clip->clipType() != COLOR && clip->clipType() != SLIDESHOW  && !clip->fileURL().isEmpty()) {
 406         // listen for file change
 407         //kDebug() << "// LISTEN FOR: " << clip->fileURL().path();
 408         m_fileWatcher.addFile(clip->fileURL().path());
 409     }
 410     const QString id = clip->getId();
 411     if (id.toInt() >= m_clipIdCounter) m_clipIdCounter = id.toInt() + 1;
 412     const QString gid = clip->getProperty("groupid");
 413     if (!gid.isEmpty() && gid.toInt() >= m_folderIdCounter) m_folderIdCounter = gid.toInt() + 1;
 414 }
 415
 416 void ClipManager::slotDeleteClips(QStringList ids)
 417 {
 418     QUndoCommand *delClips = new QUndoCommand();
 419     delClips->setText(i18np("Delete clip", "Delete clips", ids.size()));
 420
 421     for (int i = 0; i < ids.size(); i++) {
 422         DocClipBase *clip = getClipById(ids.at(i));
 423         if (clip) {
 424             new AddClipCommand(m_doc, clip->toXML(), ids.at(i), false, delClips);
 425         }
 426     }
 427     m_doc->commandStack()->push(delClips);
 428 }
 429
 430 void ClipManager::deleteClip(const QString &clipId)
 431 {
 432     for (int i = 0; i < m_clipList.count(); i++) {
 433         if (m_clipList.at(i)->getId() == clipId) {
 434             DocClipBase *clip = m_clipList.takeAt(i);
 435             if (clip->clipType() != COLOR && clip->clipType() != SLIDESHOW  && !clip->fileURL().isEmpty()) {
 436                 //if (m_clipList.at(i)->clipType() == IMAGE || m_clipList.at(i)->clipType() == AUDIO || (m_clipList.at(i)->clipType() == TEXT && !m_clipList.at(i)->fileURL().isEmpty())) {
 437                 // listen for file change
 438                 m_fileWatcher.removeFile(clip->fileURL().path());
 439             }
 440             delete clip;
 441             clip = NULL;
 442             break;
 443         }
 444     }
 445 }
 446
 447 DocClipBase *ClipManager::getClipAt(int pos)
 448 {
 449     return m_clipList.at(pos);
 450 }
 451
 452 DocClipBase *ClipManager::getClipById(QString clipId)
 453 {
 454     //kDebug() << "++++  CLIP MAN, LOOKING FOR CLIP ID: " << clipId;
 455     clipId = clipId.section('_', 0, 0);
 456     for (int i = 0; i < m_clipList.count(); i++) {
 457         if (m_clipList.at(i)->getId() == clipId) {
 458             //kDebug() << "++++  CLIP MAN, FOUND FOR CLIP ID: " << clipId;
 459             return m_clipList.at(i);
 460         }
 461     }
 462     return NULL;
 463 }
 464
 465 const QList <DocClipBase *> ClipManager::getClipByResource(QString resource)
 466 {
 467     QList <DocClipBase *> list;
 468     QString clipResource;
 469     QString proxyResource;
 470     for (int i = 0; i < m_clipList.count(); i++) {
 471         clipResource = m_clipList.at(i)->getProperty("resource");
 472         proxyResource = m_clipList.at(i)->getProperty("proxy");
 473         if (clipResource.isEmpty()) clipResource = m_clipList.at(i)->getProperty("colour");
 474         if (clipResource == resource || proxyResource == resource) {
 475             list.append(m_clipList.at(i));
 476         }
 477     }
 478     return list;
 479 }
 480
 481
 482 void ClipManager::clearUnusedProducers()
 483 {
 484     for (int i = 0; i < m_clipList.count(); i++) {
 485         if (m_clipList.at(i)->numReferences() == 0) m_clipList.at(i)->deleteProducers();
 486     }
 487 }
 488
 489 void ClipManager::resetProducersList(const QList <Mlt::Producer *> prods, bool displayRatioChanged, bool fpsChanged)
 490 {
 491     for (int i = 0; i < m_clipList.count(); i++) {
 492         if (m_clipList.at(i)->numReferences() > 0 || displayRatioChanged || fpsChanged) {
 493             m_clipList.at(i)->deleteProducers();
 494         }
 495     }
 496     QString id;
 497     Mlt::Producer *prod;
 498     QStringList brokenClips;
 499     for (int i = 0; i < prods.count(); i++) {
 500         prod = prods.at(i);
 501         id = prod->get("id");
 502         if (id.contains('_')) id = id.section('_', 0, 0);
 503         DocClipBase *clip = getClipById(id);
 504         QString markup = prod->get("markup");
 505         if (prod->is_blank() || !prod->is_valid() || !markup.isEmpty()) {
 506             // The clip is broken (missing proxy or source clip)
 507             kDebug()<<"// WARNING, CLIP "<<id<<" Cannot be loaded";
 508             brokenClips << id;
 509         }
 510         else if (clip) {
 511             clip->setProducer(prod, false, true);
 512         }
 513     }
 514     emit checkAllClips(displayRatioChanged, fpsChanged, brokenClips);
 515 }
 516
 517 void ClipManager::slotAddClip(KIO::Job *job, const KUrl &, const KUrl &dst)
 518 {
 519     KIO::MetaData meta = job->metaData();
 520     QMap <QString, QString> data;
 521     data.insert("group", meta.value("group"));
 522     data.insert("groupid", meta.value("groupid"));
 523     data.insert("comment", meta.value("comment"));
 524     kDebug()<<"Finished copying: "<<dst<<" / "<<meta.value("group")<<" / "<<meta.value("groupid");
 525     slotAddClipList(KUrl::List () << dst, data);
 526 }
 527
 528 void ClipManager::slotAddClipList(const KUrl::List urls, QMap <QString, QString> data)
 529 {
 530     QUndoCommand *addClips = new QUndoCommand();
 531     // Update list of removable volumes
 532     //TODO: update only when new volume is plugged / unplugged
 533     listRemovableVolumes();
 534     foreach(const KUrl & file, urls) {
 535         if (QFile::exists(file.path())) {//KIO::NetAccess::exists(file, KIO::NetAccess::SourceSide, NULL)) {
 536             if (!data.contains("bypassDuplicate") && !getClipByResource(file.path()).empty()) {
 537                 if (KMessageBox::warningContinueCancel(kapp->activeWindow(), i18n("Clip <b>%1</b><br />already exists in project, what do you want to do?", file.path()), i18n("Clip already exists")) == KMessageBox::Cancel)
 538                     continue;
 539             }
 540             if (isOnRemovableDevice(file)) {
 541                 int answer = KMessageBox::warningYesNoCancel(kapp->activeWindow(), i18n("Clip <b>%1</b><br /> is on a removable device, will not be available when device is unplugged", file.path()), i18n("File on a Removable Device"), KGuiItem(i18n("Copy file to project folder")), KGuiItem(i18n("Continue")), KStandardGuiItem::cancel(), QString("copyFilesToProjectFolder"));
 542                 if (answer == KMessageBox::Cancel) continue;
 543                 else if (answer == KMessageBox::Yes) {
 544                     // Copy files to project folder
 545                     QString sourcesFolder = m_doc->projectFolder().path(KUrl::AddTrailingSlash) + "clips/";
 546                     KIO::NetAccess::mkdir(sourcesFolder, kapp->activeWindow());
 547                     //KIO::filesize_t m_requestedSize;
 548                     KIO::CopyJob *copyjob = KIO::copy (file, KUrl(sourcesFolder));
 549                     //TODO: for some reason, passing metadata does not work...
 550                     copyjob->addMetaData("group", data.value("group"));
 551                     copyjob->addMetaData("groupId", data.value("groupId"));
 552                     copyjob->addMetaData("comment", data.value("comment"));
 553                     copyjob->ui()->setWindow(kapp->activeWindow());
 554                     connect(copyjob, SIGNAL(copyingDone(KIO::Job *, const KUrl &, const KUrl &, time_t, bool, bool)), this, SLOT(slotAddClip(KIO::Job *, const KUrl &, const KUrl &)));
 555                     continue;
 556                 }
 557             }
 558             kDebug() << "Adding clip: " << file.path();
 559             QDomDocument doc;
 560             QDomElement prod = doc.createElement("producer");
 561             doc.appendChild(prod);
 562             prod.setAttribute("resource", file.path());
 563             uint id = m_clipIdCounter++;
 564             prod.setAttribute("id", QString::number(id));
 565             if (data.contains("comment")) prod.setAttribute("description", data.value("comment"));
 566             if (data.contains("group")) {
 567                 prod.setAttribute("groupname", data.value("group"));
 568                 prod.setAttribute("groupid", data.value("groupId"));
 569             }
 570             if (data.contains("video_index")) prod.setAttribute("video_index", data.value("video_index"));
 571             if (data.contains("audio_index")) prod.setAttribute("audio_index", data.value("audio_index"));
 572
 573             KMimeType::Ptr type = KMimeType::findByUrl(file);
 574             if (type->name().startsWith("image/")) {
 575                 prod.setAttribute("type", (int) IMAGE);
 576                 prod.setAttribute("in", 0);
 577                 prod.setAttribute("out", m_doc->getFramePos(KdenliveSettings::image_duration()) - 1);
 578                 if (KdenliveSettings::autoimagetransparency()) prod.setAttribute("transparency", 1);
 579                 // Read EXIF metadata for JPEG
 580                 if (type->is("image/jpeg")) {
 581                     KFileMetaInfo metaInfo(file.path(), QString("image/jpeg"), KFileMetaInfo::TechnicalInfo);
 582                     const QHash<QString, KFileMetaInfoItem> metaInfoItems = metaInfo.items();
 583                     foreach(const KFileMetaInfoItem & metaInfoItem, metaInfoItems) {
 584                         prod.setAttribute("meta.attr." + metaInfoItem.name().section('#', 1), metaInfoItem.value().toString());
 585                     }
 586                 }
 587             } else if (type->is("application/x-kdenlivetitle")) {
 588                 // opening a title file
 589                 QDomDocument txtdoc("titledocument");
 590                 QFile txtfile(file.path());
 591                 if (txtfile.open(QIODevice::ReadOnly) && txtdoc.setContent(&txtfile)) {
 592                     txtfile.close();
 593                     prod.setAttribute("type", (int) TEXT);
 594                     // extract embeded images
 595                     QDomNodeList items = txtdoc.elementsByTagName("content");
 596                     for (int i = 0; i < items.count() ; i++) {
 597                         QDomElement content = items.item(i).toElement();
 598                         if (content.hasAttribute("base64")) {
 599                             QString titlesFolder = m_doc->projectFolder().path(KUrl::AddTrailingSlash) + "titles/";
 600                             QString path = TitleDocument::extractBase64Image(titlesFolder, content.attribute("base64"));
 601                             if (!path.isEmpty()) {
 602                                 content.setAttribute("url", path);
 603                                 content.removeAttribute("base64");
 604                             }
 605                         }
 606                     }
 607                     prod.setAttribute("transparency", 1);
 608                     prod.setAttribute("in", 0);
 609                     if (!txtdoc.documentElement().hasAttribute("out")) {
 610                         prod.setAttribute("out", m_doc->getFramePos(KdenliveSettings::title_duration()) - 1);
 611                         txtdoc.documentElement().setAttribute("out", m_doc->getFramePos(KdenliveSettings::title_duration()) - 1);
 612                     }
 613                     else {
 614                         int out = txtdoc.documentElement().attribute("out").toInt();
 615                         if (out >= 0)
 616                             prod.setAttribute("out", out);
 617                         else {
 618                             prod.setAttribute("out", m_doc->getFramePos(KdenliveSettings::title_duration()) - 1);
 619                             txtdoc.documentElement().setAttribute("out", m_doc->getFramePos(KdenliveSettings::title_duration()) - 1);
 620                         }
 621                     }
 622                     QString titleData = txtdoc.toString();
 623                     prod.setAttribute("xmldata", titleData);
 624                 } else
 625                     txtfile.close();
 626             }
 627             new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true, addClips);
 628         }
 629         else kDebug()<<"// CANNOT READ FILE: "<<file;
 630     }
 631     if (addClips->childCount() > 0) {
 632         addClips->setText(i18np("Add clip", "Add clips", addClips->childCount()));
 633         m_doc->commandStack()->push(addClips);
 634     }
 635 }
 636
 637 void ClipManager::slotAddClipFile(const KUrl &url, QMap <QString, QString> data)
 638 {
 639     slotAddClipList(KUrl::List(url), data);
 640 }
 641
 642 void ClipManager::slotAddXmlClipFile(const QString &name, const QDomElement &xml, const QString &group, const QString &groupId)
 643 {
 644     QDomDocument doc;
 645     doc.appendChild(doc.importNode(xml, true));
 646     QDomElement prod = doc.documentElement();
 647     prod.setAttribute("type", (int) PLAYLIST);
 648     uint id = m_clipIdCounter++;
 649     prod.setAttribute("id", QString::number(id));
 650     prod.setAttribute("name", name);
 651     if (!group.isEmpty()) {
 652         prod.setAttribute("groupname", group);
 653         prod.setAttribute("groupid", groupId);
 654     }
 655     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 656     m_doc->commandStack()->push(command);
 657 }
 658
 659 void ClipManager::slotAddColorClipFile(const QString &name, const QString &color, QString duration, const QString &group, const QString &groupId)
 660 {
 661     QDomDocument doc;
 662     QDomElement prod = doc.createElement("producer");
 663     doc.appendChild(prod);
 664     prod.setAttribute("mlt_service", "colour");
 665     prod.setAttribute("colour", color);
 666     prod.setAttribute("type", (int) COLOR);
 667     uint id = m_clipIdCounter++;
 668     prod.setAttribute("id", QString::number(id));
 669     prod.setAttribute("in", "0");
 670     prod.setAttribute("out", m_doc->getFramePos(duration) - 1);
 671     prod.setAttribute("name", name);
 672     if (!group.isEmpty()) {
 673         prod.setAttribute("groupname", group);
 674         prod.setAttribute("groupid", groupId);
 675     }
 676     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 677     m_doc->commandStack()->push(command);
 678 }
 679
 680 void ClipManager::slotAddSlideshowClipFile(QMap <QString, QString> properties, const QString &group, const QString &groupId)
 681 {
 682     QDomDocument doc;
 683     QDomElement prod = doc.createElement("producer");
 684     doc.appendChild(prod);
 685     QMap<QString, QString>::const_iterator i = properties.constBegin();
 686     while (i != properties.constEnd()) {
 687         prod.setAttribute(i.key(), i.value());
 688         ++i;
 689     }
 690     prod.setAttribute("type", (int) SLIDESHOW);
 691     uint id = m_clipIdCounter++;
 692     if (!group.isEmpty()) {
 693         prod.setAttribute("groupname", group);
 694         prod.setAttribute("groupid", groupId);
 695     }
 696     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 697     m_doc->commandStack()->push(command);
 698 }
 699
 700
 701
 702 void ClipManager::slotAddTextClipFile(const QString &titleName, int duration, const QString &xml, const QString &group, const QString &groupId)
 703 {
 704     QDomDocument doc;
 705     QDomElement prod = doc.createElement("producer");
 706     doc.appendChild(prod);
 707     //prod.setAttribute("resource", imagePath);
 708     prod.setAttribute("name", titleName);
 709     prod.setAttribute("xmldata", xml);
 710     uint id = m_clipIdCounter++;
 711     prod.setAttribute("id", QString::number(id));
 712     if (!group.isEmpty()) {
 713         prod.setAttribute("groupname", group);
 714         prod.setAttribute("groupid", groupId);
 715     }
 716     prod.setAttribute("type", (int) TEXT);
 717     prod.setAttribute("transparency", "1");
 718     prod.setAttribute("in", "0");
 719     prod.setAttribute("out", duration - 1);
 720     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 721     m_doc->commandStack()->push(command);
 722 }
 723
 724 void ClipManager::slotAddTextTemplateClip(QString titleName, const KUrl &path, const QString &group, const QString &groupId)
 725 {
 726     QDomDocument doc;
 727     QDomElement prod = doc.createElement("producer");
 728     doc.appendChild(prod);
 729     prod.setAttribute("name", titleName);
 730     prod.setAttribute("resource", path.path());
 731     uint id = m_clipIdCounter++;
 732     prod.setAttribute("id", QString::number(id));
 733     if (!group.isEmpty()) {
 734         prod.setAttribute("groupname", group);
 735         prod.setAttribute("groupid", groupId);
 736     }
 737     prod.setAttribute("type", (int) TEXT);
 738     prod.setAttribute("transparency", "1");
 739     prod.setAttribute("in", "0");
 740
 741     int out = 0;
 742     QDomDocument titledoc;
 743     QFile txtfile(path.path());
 744     if (txtfile.open(QIODevice::ReadOnly) && titledoc.setContent(&txtfile)) {
 745         txtfile.close();
 746         out = titledoc.documentElement().attribute("out").toInt();
 747     } else txtfile.close();
 748
 749     if (out == 0) out = m_doc->getFramePos(KdenliveSettings::image_duration());
 750     prod.setAttribute("out", out);
 751
 752     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 753     m_doc->commandStack()->push(command);
 754 }
 755
 756 int ClipManager::getFreeClipId()
 757 {
 758     return m_clipIdCounter++;
 759 }
 760
 761 int ClipManager::getFreeFolderId()
 762 {
 763     return m_folderIdCounter++;
 764 }
 765
 766 int ClipManager::lastClipId() const
 767 {
 768     return m_clipIdCounter - 1;
 769 }
 770
 771 QString ClipManager::projectFolder() const
 772 {
 773     return m_doc->projectFolder().path();
 774 }
 775
 776 void ClipManager::addFolder(const QString &id, const QString &name)
 777 {
 778     m_folderList.insert(id, name);
 779 }
 780
 781 void ClipManager::deleteFolder(const QString &id)
 782 {
 783     m_folderList.remove(id);
 784 }
 785
 786 AbstractGroupItem *ClipManager::createGroup()
 787 {
 788     AbstractGroupItem *group = new AbstractGroupItem(m_doc->fps());
 789     m_groupsList.append(group);
 790     return group;
 791 }
 792
 793 void ClipManager::removeGroup(AbstractGroupItem *group)
 794 {
 795     m_groupsList.removeAll(group);
 796 }
 797
 798 QDomElement ClipManager::groupsXml() const
 799 {
 800     QDomDocument doc;
 801     QDomElement groups = doc.createElement("groups");
 802     doc.appendChild(groups);
 803     for (int i = 0; i < m_groupsList.count(); i++) {
 804         QDomElement group = doc.createElement("group");
 805         groups.appendChild(group);
 806         QList <QGraphicsItem *> children = m_groupsList.at(i)->childItems();
 807         for (int j = 0; j < children.count(); j++) {
 808             if (children.at(j)->type() == AVWIDGET || children.at(j)->type() == TRANSITIONWIDGET) {
 809                 AbstractClipItem *item = static_cast <AbstractClipItem *>(children.at(j));
 810                 ItemInfo info = item->info();
 811                 if (item->type() == AVWIDGET) {
 812                     QDomElement clip = doc.createElement("clipitem");
 813                     clip.setAttribute("track", info.track);
 814                     clip.setAttribute("position", info.startPos.frames(m_doc->fps()));
 815                     group.appendChild(clip);
 816                 } else if (item->type() == TRANSITIONWIDGET) {
 817                     QDomElement clip = doc.createElement("transitionitem");
 818                     clip.setAttribute("track", info.track);
 819                     clip.setAttribute("position", info.startPos.frames(m_doc->fps()));
 820                     group.appendChild(clip);
 821                 }
 822             }
 823         }
 824     }
 825     return doc.documentElement();
 826 }
 827
 828
 829 void ClipManager::slotClipModified(const QString &path)
 830 {
 831     //kDebug() << "// CLIP: " << path << " WAS MODIFIED";
 832     const QList <DocClipBase *> list = getClipByResource(path);
 833     for (int i = 0; i < list.count(); i++) {
 834         DocClipBase *clip = list.at(i);
 835         if (clip != NULL) {
 836             QString id = clip->getId();
 837             if (!m_modifiedClips.contains(id))
 838                 emit modifiedClip(id);
 839             m_modifiedClips[id] = QTime::currentTime();
 840         }
 841     }
 842     if (!m_modifiedTimer.isActive()) m_modifiedTimer.start();
 843 }
 844
 845 void ClipManager::slotProcessModifiedClips()
 846 {
 847     if (!m_modifiedClips.isEmpty()) {
 848         QMapIterator<QString, QTime> i(m_modifiedClips);
 849         while (i.hasNext()) {
 850             i.next();
 851             if (QTime::currentTime().msecsTo(i.value()) <= -1500) {
 852                 emit reloadClip(i.key());
 853                 m_modifiedClips.remove(i.key());
 854                 break;
 855             }
 856         }
 857     }
 858     if (m_modifiedClips.isEmpty()) m_modifiedTimer.stop();
 859 }
 860
 861 void ClipManager::slotClipMissing(const QString &path)
 862 {
 863     // kDebug() << "// CLIP: " << path << " WAS MISSING";
 864     const QList <DocClipBase *> list = getClipByResource(path);
 865     for (int i = 0; i < list.count(); i++) {
 866         DocClipBase *clip = list.at(i);
 867         if (clip != NULL) emit missingClip(clip->getId());
 868     }
 869 }
 870
 871 void ClipManager::slotClipAvailable(const QString &path)
 872 {
 873     // kDebug() << "// CLIP: " << path << " WAS ADDED";
 874     const QList <DocClipBase *> list = getClipByResource(path);
 875     for (int i = 0; i < list.count(); i++) {
 876         DocClipBase *clip = list.at(i);
 877         if (clip != NULL) emit availableClip(clip->getId());
 878     }
 879 }
 880
 881 int ClipManager::clipsCount() const
 882 {
 883     return m_clipList.count();
 884 }
 885
 886
 887 void ClipManager::listRemovableVolumes()
 888 {
 889     QList<SolidVolumeInfo> volumes;
 890     m_removableVolumes.clear();
 891
 892     QList<Solid::Device> devices = Solid::Device::listFromType(Solid::DeviceInterface::StorageAccess);
 893
 894     foreach(const Solid::Device &accessDevice, devices)
 895     {
 896         // check for StorageAccess
 897         if (!accessDevice.is<Solid::StorageAccess>())
 898             continue;
 899
 900         const Solid::StorageAccess *access = accessDevice.as<Solid::StorageAccess>();
 901
 902         if (!access->isAccessible())
 903             continue;
 904
 905         // check for StorageDrive
 906         Solid::Device driveDevice;
 907         for (Solid::Device currentDevice = accessDevice; currentDevice.isValid(); currentDevice = currentDevice.parent())
 908         {
 909             if (currentDevice.is<Solid::StorageDrive>())
 910             {
 911                 driveDevice = currentDevice;
 912                 break;
 913             }
 914         }
 915         if (!driveDevice.isValid())
 916             continue;
 917
 918         Solid::StorageDrive *drive = driveDevice.as<Solid::StorageDrive>();
 919         if (!drive->isRemovable()) continue;
 920
 921         // check for StorageVolume
 922         Solid::Device volumeDevice;
 923         for (Solid::Device currentDevice = accessDevice; currentDevice.isValid(); currentDevice = currentDevice.parent())
 924         {
 925             if (currentDevice.is<Solid::StorageVolume>())
 926             {
 927                 volumeDevice = currentDevice;
 928                 break;
 929             }
 930         }
 931         if (!volumeDevice.isValid())
 932             continue;
 933
 934         Solid::StorageVolume *volume = volumeDevice.as<Solid::StorageVolume>();
 935
 936         SolidVolumeInfo info;
 937         info.path = access->filePath();
 938         info.isMounted = access->isAccessible();
 939         if (!info.path.isEmpty() && !info.path.endsWith('/'))
 940             info.path += '/';
 941         info.uuid = volume->uuid();
 942         info.label = volume->label();
 943         info.isRemovable = drive->isRemovable();
 944         m_removableVolumes << info;
 945     }
 946 }
 947
 948 bool ClipManager::isOnRemovableDevice(const KUrl &url)
 949 {
 950     SolidVolumeInfo volume;
 951     QString path = url.path(KUrl::RemoveTrailingSlash);
 952     int volumeMatch = 0;
 953
 954     //FIXME: Network shares! Here we get only the volume of the mount path...
 955     // This is probably not really clean. But Solid does not help us.
 956     foreach (const SolidVolumeInfo &v, m_removableVolumes)
 957     {
 958         if (v.isMounted && !v.path.isEmpty() && path.startsWith(v.path))
 959         {
 960             int length = v.path.length();
 961             if (length > volumeMatch)
 962             {
 963                 volumeMatch = v.path.length();
 964                 volume = v;
 965             }
 966         }
 967     }
 968
 969     return volumeMatch;
 970 }
 971
 972 void ClipManager::projectTreeThumbReady(const QString &id, int frame, QImage img, int type)
 973 {
 974     switch (type) {
 975       case 2:
 976           emit gotClipPropertyThumbnail(id, img);
 977           break;
 978       default:
 979         emit thumbReady(id, frame, img);
 980     }
 981 }
 982