git.sesse.net Git - kdenlive/blob - src/clipmanager.cpp

   1 /***************************************************************************
   2  *   Copyright (C) 2008 by Jean-Baptiste Mardelle (jb@kdenlive.org)        *
   3  *                                                                         *
   4  *   This program is free software; you can redistribute it and/or modify  *
   5  *   it under the terms of the GNU General Public License as published by  *
   6  *   the Free Software Foundation; either version 2 of the License, or     *
   7  *   (at your option) any later version.                                   *
   8  *                                                                         *
   9  *   This program is distributed in the hope that it will be useful,       *
  10  *   but WITHOUT ANY WARRANTY; without even the implied warranty of        *
  11  *   MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the         *
  12  *   GNU General Public License for more details.                          *
  13  *                                                                         *
  14  *   You should have received a copy of the GNU General Public License     *
  15  *   along with this program; if not, write to the                         *
  16  *   Free Software Foundation, Inc.,                                       *
  17  *   51 Franklin Street, Fifth Floor, Boston, MA  02110-1301  USA          *
  18  ***************************************************************************/
  19
  20
  21 #include "clipmanager.h"
  22 #include "commands/addclipcommand.h"
  23 #include "kdenlivesettings.h"
  24 #include "docclipbase.h"
  25 #include "kdenlivedoc.h"
  26 #include "abstractclipitem.h"
  27 #include "abstractgroupitem.h"
  28 #include "titledocument.h"
  29 #include "subprojectitem.h"
  30 #include "kthumb.h"
  31
  32 #include <mlt++/Mlt.h>
  33
  34 #include <KDebug>
  35 #include <KMessageBox>
  36 #include <KFileDialog>
  37 #include <KApplication>
  38 #include <kio/netaccess.h>
  39 #include <kio/jobuidelegate.h>
  40
  41 #include <solid/device.h>
  42 #include <solid/storageaccess.h>
  43 #include <solid/storagedrive.h>
  44 #include <solid/storagevolume.h>
  45
  46 #include <QGraphicsItemGroup>
  47 #include <QtConcurrentRun>
  48
  49 #include <KFileMetaInfo>
  50
  51
  52 ClipManager::ClipManager(KdenliveDoc *doc) :
  53     QObject(),
  54     m_audioThumbsQueue(),
  55     m_doc(doc),
  56     m_abortThumb(false),
  57     m_closing(false),
  58     m_abortAudioThumb(false)
  59 {
  60     m_clipIdCounter = 1;
  61     m_folderIdCounter = 1;
  62     m_modifiedTimer.setInterval(1500);
  63     connect(&m_fileWatcher, SIGNAL(dirty(QString)), this, SLOT(slotClipModified(QString)));
  64     connect(&m_fileWatcher, SIGNAL(deleted(QString)), this, SLOT(slotClipMissing(QString)));
  65
  66     // Seems like a dirty signal is emitted anyways when a watched file is created, so don't react twice.
  67     //connect(&m_fileWatcher, SIGNAL(created(QString)), this, SLOT(slotClipAvailable(QString)));
  68     connect(&m_modifiedTimer, SIGNAL(timeout()), this, SLOT(slotProcessModifiedClips()));
  69
  70 #if KDE_IS_VERSION(4,5,0)
  71     KImageCache::deleteCache("kdenlive-thumbs");
  72     pixmapCache = new KImageCache("kdenlive-thumbs", 1000000);
  73     pixmapCache->setEvictionPolicy(KSharedDataCache::EvictOldest);
  74 #endif
  75 }
  76
  77 ClipManager::~ClipManager()
  78 {
  79     m_closing = true;
  80     m_abortThumb = true;
  81     m_abortAudioThumb = true;
  82     m_thumbsThread.waitForFinished();
  83     m_audioThumbsThread.waitForFinished();
  84     m_thumbsMutex.lock();
  85     m_requestedThumbs.clear();
  86     m_audioThumbsQueue.clear();
  87     m_thumbsMutex.unlock();
  88
  89     qDeleteAll(m_clipList);
  90     m_clipList.clear();
  91 #if KDE_IS_VERSION(4,5,0)
  92     delete pixmapCache;
  93 #endif
  94 }
  95
  96 void ClipManager::clear()
  97 {
  98     m_abortThumb = true;
  99     m_abortAudioThumb = true;
 100     m_thumbsThread.waitForFinished();
 101     m_audioThumbsThread.waitForFinished();
 102     m_thumbsMutex.lock();
 103     m_requestedThumbs.clear();
 104     m_audioThumbsQueue.clear();
 105     m_thumbsMutex.unlock();
 106     m_abortThumb = false;
 107     m_abortAudioThumb = false;
 108     m_folderList.clear();
 109     m_modifiedClips.clear();
 110     qDeleteAll(m_clipList);
 111     m_clipList.clear();
 112     m_clipIdCounter = 1;
 113     m_folderIdCounter = 1;
 114 #if KDE_IS_VERSION(4,5,0)
 115     pixmapCache->clear();
 116 #endif
 117 }
 118
 119 void ClipManager::clearCache()
 120 {
 121 #if KDE_IS_VERSION(4,5,0)
 122     pixmapCache->clear();
 123 #endif
 124 }
 125
 126 void ClipManager::slotRequestThumbs(const QString &id, const QList <int>& frames)
 127 {
 128     m_thumbsMutex.lock();
 129     foreach (int frame, frames) {
 130         m_requestedThumbs.insertMulti(id, frame);
 131     }
 132     m_thumbsMutex.unlock();
 133     if (!m_thumbsThread.isRunning() && !m_abortThumb) {
 134         m_thumbsThread = QtConcurrent::run(this, &ClipManager::slotGetThumbs);
 135     }
 136 }
 137
 138 void ClipManager::stopThumbs(const QString &id)
 139 {
 140     if (m_closing || (m_requestedThumbs.isEmpty() && m_processingThumbId != id && m_audioThumbsQueue.isEmpty() && m_processingAudioThumbId != id)) return;
 141     // Abort video thumbs for this clip
 142     m_abortThumb = true;
 143     m_thumbsThread.waitForFinished();
 144     m_thumbsMutex.lock();
 145     m_requestedThumbs.remove(id);
 146     m_audioThumbsQueue.removeAll(id);
 147     m_thumbsMutex.unlock();
 148     m_abortThumb = false;
 149
 150     // Abort audio thumbs for this clip
 151     if (m_processingAudioThumbId == id) {
 152         m_abortAudioThumb = true;
 153         m_audioThumbsThread.waitForFinished();
 154         m_abortAudioThumb = false;
 155     }
 156
 157     if (!m_thumbsThread.isRunning() && !m_requestedThumbs.isEmpty()) {
 158         m_thumbsThread = QtConcurrent::run(this, &ClipManager::slotGetThumbs);
 159     }
 160
 161     if (!m_audioThumbsThread.isRunning() && !m_audioThumbsQueue.isEmpty()) {
 162         m_audioThumbsThread = QtConcurrent::run(this, &ClipManager::slotGetAudioThumbs);
 163     }
 164 }
 165
 166 void ClipManager::slotGetThumbs()
 167 {
 168     QMap<QString, int>::const_iterator i;
 169     int max;
 170     int done = 0;
 171     int thumbType = 0; // 0 = timeline thumb, 1 = project clip zone thumb, 2 = clip properties thumb
 172
 173     while (!m_requestedThumbs.isEmpty() && !m_abortThumb) {
 174         m_thumbsMutex.lock();
 175         i = m_requestedThumbs.constBegin();
 176         m_processingThumbId = i.key();
 177         QList<int> values = m_requestedThumbs.values(m_processingThumbId);
 178         m_requestedThumbs.remove(m_processingThumbId);
 179         if (m_processingThumbId.startsWith("?")) {
 180             // if id starts with ?, it means the request comes from a clip property widget
 181             thumbType = 2;
 182             m_processingThumbId.remove(0, 1);
 183         }
 184         if (m_processingThumbId.startsWith("#")) {
 185             // if id starts with #, it means the request comes from project tree
 186             thumbType = 1;
 187             m_processingThumbId.remove(0, 1);
 188         }
 189         m_thumbsMutex.unlock();
 190         qSort(values);
 191         DocClipBase *clip = getClipById(m_processingThumbId);
 192         if (!clip) continue;
 193         max = m_requestedThumbs.size() + values.count();
 194         int pos;
 195         while (!values.isEmpty() && clip->thumbProducer() && !m_abortThumb) {
 196             pos = values.takeFirst();
 197             switch (thumbType) {
 198             case 1:
 199                 clip->thumbProducer()->getGenericThumb(pos, SubProjectItem::itemDefaultHeight(), thumbType);
 200                 break;
 201             case 2:
 202                 clip->thumbProducer()->getGenericThumb(pos, 180, thumbType);
 203                 break;
 204             default:
 205                 clip->thumbProducer()->getThumb(pos);
 206             }
 207             done++;
 208             if (max > 3) emit displayMessage(i18n("Loading thumbnails"), 100 * done / max);
 209         }
 210     }
 211     m_processingThumbId.clear();
 212     emit displayMessage(QString(), -1);
 213 }
 214
 215 void ClipManager::checkAudioThumbs()
 216 {
 217     if (!KdenliveSettings::audiothumbnails()) {
 218         if (m_audioThumbsThread.isRunning()) {
 219             m_abortAudioThumb = true;
 220             m_thumbsMutex.lock();
 221             m_audioThumbsQueue.clear();
 222             m_thumbsMutex.unlock();
 223             m_audioThumbsThread.waitForFinished();
 224             m_abortAudioThumb = false;
 225         }
 226         return;
 227     }
 228
 229     m_thumbsMutex.lock();
 230     for (int i = 0; i < m_clipList.count(); ++i) {
 231         DocClipBase *clip = m_clipList.at(i);
 232         if (clip->hasAudioThumb() && !clip->audioThumbCreated())
 233             m_audioThumbsQueue.append(m_clipList.at(i)->getId());
 234     }
 235     m_thumbsMutex.unlock();
 236     if (!m_audioThumbsThread.isRunning() && !m_audioThumbsQueue.isEmpty()) {
 237         m_audioThumbsThread = QtConcurrent::run(this, &ClipManager::slotGetAudioThumbs);
 238     }
 239 }
 240
 241 void ClipManager::askForAudioThumb(const QString &id)
 242 {
 243     DocClipBase *clip = getClipById(id);
 244     if (clip && KdenliveSettings::audiothumbnails() && (clip->hasAudioThumb())) {
 245         m_thumbsMutex.lock();
 246         if (!m_audioThumbsQueue.contains(id)) m_audioThumbsQueue.append(id);
 247         m_thumbsMutex.unlock();
 248         if (!m_audioThumbsThread.isRunning()) m_audioThumbsThread = QtConcurrent::run(this, &ClipManager::slotGetAudioThumbs);
 249     }
 250 }
 251
 252 void ClipManager::slotGetAudioThumbs()
 253 {
 254     Mlt::Profile prof((char*) KdenliveSettings::current_profile().toUtf8().constData());
 255     mlt_audio_format audioFormat = mlt_audio_s16;
 256     while (!m_abortAudioThumb && !m_audioThumbsQueue.isEmpty()) {
 257         m_thumbsMutex.lock();
 258         m_processingAudioThumbId = m_audioThumbsQueue.takeFirst();
 259         m_thumbsMutex.unlock();
 260         DocClipBase *clip = getClipById(m_processingAudioThumbId);
 261         if (!clip || clip->audioThumbCreated()) continue;
 262         KUrl url = clip->fileURL();
 263         QString hash = clip->getClipHash();
 264         if (hash.isEmpty()) continue;
 265         QString audioPath = projectFolder() + "/thumbs/" + hash + ".thumb";
 266         double lengthInFrames = clip->duration().frames(m_doc->fps());
 267         int frequency = 0;
 268         int channels = 0;
 269         QString data = clip->getProperty("frequency");
 270         if (!data.isEmpty()) frequency = data.toInt();
 271         if (frequency <= 0) frequency = 48000;
 272         data = clip->getProperty("channels");
 273         if (!data.isEmpty()) channels = data.toInt();
 274         if (channels <= 0) channels = 2;
 275         int arrayWidth = 20;
 276         double frame = 0.0;
 277         int maxVolume = 0;
 278         audioByteArray storeIn;
 279         QFile f(audioPath);
 280         if (QFileInfo(audioPath).size() > 0 && f.open(QIODevice::ReadOnly)) {
 281             const QByteArray channelarray = f.readAll();
 282             f.close();
 283             if (channelarray.size() != arrayWidth*(frame + lengthInFrames) * channels) {
 284                 kDebug() << "--- BROKEN THUMB FOR: " << url.fileName() << " ---------------------- ";
 285                 f.remove();
 286                 continue;
 287             }
 288             kDebug() << "reading audio thumbs from file";
 289
 290             int h1 = arrayWidth * channels;
 291             int h2 = (int) frame * h1;
 292             int h3;
 293             for (int z = (int) frame; z < (int)(frame + lengthInFrames) && !m_abortAudioThumb; z++) {
 294                 h3 = 0;
 295                 for (int c = 0; c < channels; c++) {
 296                     QByteArray audioArray(arrayWidth, '\x00');
 297                     for (int i = 0; i < arrayWidth; ++i) {
 298                         audioArray[i] = channelarray.at(h2 + h3 + i);
 299                         if (audioArray.at(i) > maxVolume) maxVolume = audioArray.at(i);
 300                     }
 301                     h3 += arrayWidth;
 302                     storeIn[z][c] = audioArray;
 303                 }
 304                 h2 += h1;
 305             }
 306             if (!m_abortAudioThumb) {
 307                 clip->setProperty("audio_max", QString::number(maxVolume - 64));
 308                 clip->updateAudioThumbnail(storeIn);
 309             }
 310             continue;
 311         }
 312
 313         if (!f.open(QIODevice::WriteOnly)) {
 314             kDebug() << "++++++++  ERROR WRITING TO FILE: " << audioPath;
 315             kDebug() << "++++++++  DISABLING AUDIO THUMBS";
 316             m_thumbsMutex.lock();
 317             m_audioThumbsQueue.clear();
 318             m_thumbsMutex.unlock();
 319             KdenliveSettings::setAudiothumbnails(false);
 320             break;
 321         }
 322
 323         Mlt::Producer producer(prof, url.path().toUtf8().constData());
 324         if (!producer.is_valid()) {
 325             kDebug() << "++++++++  INVALID CLIP: " << url.path();
 326             continue;
 327         }
 328
 329         producer.set("video_index", "-1");
 330
 331         if (KdenliveSettings::normaliseaudiothumbs()) {
 332             /*Mlt::Filter m_convert(prof, "volume");
 333             m_convert.set("gain", "normalise");
 334             producer.attach(m_convert);*/
 335         }
 336
 337         int last_val = 0;
 338         double framesPerSecond = mlt_producer_get_fps(producer.get_producer());
 339         Mlt::Frame *mlt_frame;
 340
 341         for (int z = (int) frame; z < (int)(frame + lengthInFrames) && producer.is_valid() &&  !m_abortAudioThumb; z++) {
 342             int val = (int)((z - frame) / (frame + lengthInFrames) * 100.0);
 343             if (last_val != val && val > 1) {
 344                 setThumbsProgress(i18n("Creating audio thumbnail for %1", url.fileName()), val);
 345                 last_val = val;
 346             }
 347             producer.seek(z);
 348             mlt_frame = producer.get_frame();
 349             if (mlt_frame && mlt_frame->is_valid()) {
 350                 int samples = mlt_sample_calculator(framesPerSecond, frequency, mlt_frame->get_position());
 351                 qint16* pcm = static_cast<qint16*>(mlt_frame->get_audio(audioFormat, frequency, channels, samples));
 352                 for (int c = 0; c < channels; c++) {
 353                     QByteArray audioArray;
 354                     audioArray.resize(arrayWidth);
 355                     for (int i = 0; i < audioArray.size(); ++i) {
 356                         double pcmval = *(pcm + c + i * samples / audioArray.size());
 357                         if (pcmval >= 0) {
 358                             pcmval = sqrt(pcmval) / 2.83 + 64;
 359                             audioArray[i] = pcmval;
 360                             if (pcmval > maxVolume) maxVolume = pcmval;
 361                         }
 362                         else {
 363                             pcmval = -sqrt(-pcmval) / 2.83 + 64;
 364                             audioArray[i] = pcmval;
 365                             if (-pcmval > maxVolume) maxVolume = -pcmval;
 366                         }
 367                     }
 368                     f.write(audioArray);
 369                     storeIn[z][c] = audioArray;
 370                 }
 371             } else {
 372                 f.write(QByteArray(arrayWidth, '\x00'));
 373             }
 374             delete mlt_frame;
 375         }
 376         f.close();
 377         setThumbsProgress(i18n("Creating audio thumbnail for %1", url.fileName()), -1);
 378         if (m_abortAudioThumb) {
 379             f.remove();
 380         } else {
 381             clip->updateAudioThumbnail(storeIn);
 382             clip->setProperty("audio_max", QString::number(maxVolume - 64));
 383         }
 384     }
 385     m_processingAudioThumbId.clear();
 386 }
 387
 388 void ClipManager::setThumbsProgress(const QString &message, int progress)
 389 {
 390     m_doc->setThumbsProgress(message, progress);
 391 }
 392
 393 QList <DocClipBase*> ClipManager::documentClipList() const
 394 {
 395     return m_clipList;
 396 }
 397
 398 QMap <QString, QString> ClipManager::documentFolderList() const
 399 {
 400     return m_folderList;
 401 }
 402
 403 void ClipManager::addClip(DocClipBase *clip)
 404 {
 405     m_clipList.append(clip);
 406     if (clip->clipType() != COLOR && clip->clipType() != SLIDESHOW  && !clip->fileURL().isEmpty()) {
 407         // listen for file change
 408         //kDebug() << "// LISTEN FOR: " << clip->fileURL().path();
 409         m_fileWatcher.addFile(clip->fileURL().path());
 410     }
 411     const QString id = clip->getId();
 412     if (id.toInt() >= m_clipIdCounter) m_clipIdCounter = id.toInt() + 1;
 413     const QString gid = clip->getProperty("groupid");
 414     if (!gid.isEmpty() && gid.toInt() >= m_folderIdCounter) m_folderIdCounter = gid.toInt() + 1;
 415 }
 416
 417 void ClipManager::slotDeleteClips(QStringList ids)
 418 {
 419     QUndoCommand *delClips = new QUndoCommand();
 420     delClips->setText(i18np("Delete clip", "Delete clips", ids.size()));
 421
 422     for (int i = 0; i < ids.size(); ++i) {
 423         DocClipBase *clip = getClipById(ids.at(i));
 424         if (clip) {
 425             new AddClipCommand(m_doc, clip->toXML(), ids.at(i), false, delClips);
 426         }
 427     }
 428     m_doc->commandStack()->push(delClips);
 429 }
 430
 431 void ClipManager::deleteClip(const QString &clipId)
 432 {
 433     for (int i = 0; i < m_clipList.count(); ++i) {
 434         if (m_clipList.at(i)->getId() == clipId) {
 435             DocClipBase *clip = m_clipList.takeAt(i);
 436             if (clip->clipType() != COLOR && clip->clipType() != SLIDESHOW  && !clip->fileURL().isEmpty()) {
 437                 //if (m_clipList.at(i)->clipType() == IMAGE || m_clipList.at(i)->clipType() == AUDIO || (m_clipList.at(i)->clipType() == TEXT && !m_clipList.at(i)->fileURL().isEmpty())) {
 438                 // listen for file change
 439                 m_fileWatcher.removeFile(clip->fileURL().path());
 440             }
 441             delete clip;
 442             clip = NULL;
 443             break;
 444         }
 445     }
 446 }
 447
 448 DocClipBase *ClipManager::getClipAt(int pos)
 449 {
 450     return m_clipList.at(pos);
 451 }
 452
 453 DocClipBase *ClipManager::getClipById(QString clipId)
 454 {
 455     //kDebug() << "++++  CLIP MAN, LOOKING FOR CLIP ID: " << clipId;
 456     clipId = clipId.section('_', 0, 0);
 457     for (int i = 0; i < m_clipList.count(); ++i) {
 458         if (m_clipList.at(i)->getId() == clipId) {
 459             //kDebug() << "++++  CLIP MAN, FOUND FOR CLIP ID: " << clipId;
 460             return m_clipList.at(i);
 461         }
 462     }
 463     return NULL;
 464 }
 465
 466 const QList <DocClipBase *> ClipManager::getClipByResource(const QString &resource)
 467 {
 468     QList <DocClipBase *> list;
 469     QString clipResource;
 470     QString proxyResource;
 471     for (int i = 0; i < m_clipList.count(); ++i) {
 472         clipResource = m_clipList.at(i)->getProperty("resource");
 473         proxyResource = m_clipList.at(i)->getProperty("proxy");
 474         if (clipResource.isEmpty()) clipResource = m_clipList.at(i)->getProperty("colour");
 475         if (clipResource == resource || proxyResource == resource) {
 476             list.append(m_clipList.at(i));
 477         }
 478     }
 479     return list;
 480 }
 481
 482
 483 void ClipManager::clearUnusedProducers()
 484 {
 485     for (int i = 0; i < m_clipList.count(); ++i) {
 486         if (m_clipList.at(i)->numReferences() == 0) m_clipList.at(i)->deleteProducers();
 487     }
 488 }
 489
 490 void ClipManager::resetProducersList(const QList <Mlt::Producer *> prods, bool displayRatioChanged, bool fpsChanged)
 491 {
 492     for (int i = 0; i < m_clipList.count(); ++i) {
 493         if (m_clipList.at(i)->numReferences() > 0 || displayRatioChanged || fpsChanged) {
 494             m_clipList.at(i)->deleteProducers();
 495         }
 496     }
 497     QString id;
 498     Mlt::Producer *prod;
 499     QStringList brokenClips;
 500     for (int i = 0; i < prods.count(); ++i) {
 501         prod = prods.at(i);
 502         id = prod->get("id");
 503         if (id.contains('_')) id = id.section('_', 0, 0);
 504         DocClipBase *clip = getClipById(id);
 505         QString markup = prod->get("markup");
 506         if (prod->is_blank() || !prod->is_valid() || !markup.isEmpty()) {
 507             // The clip is broken (missing proxy or source clip)
 508             kDebug()<<"// WARNING, CLIP "<<id<<" Cannot be loaded";
 509             brokenClips << id;
 510         }
 511         else if (clip) {
 512             clip->setProducer(prod, false, true);
 513         }
 514     }
 515     emit checkAllClips(displayRatioChanged, fpsChanged, brokenClips);
 516 }
 517
 518 void ClipManager::slotAddClip(KIO::Job *job, const KUrl &, const KUrl &dst)
 519 {
 520     KIO::MetaData meta = job->metaData();
 521     QMap <QString, QString> data;
 522     data.insert("group", meta.value("group"));
 523     data.insert("groupid", meta.value("groupid"));
 524     data.insert("comment", meta.value("comment"));
 525     kDebug()<<"Finished copying: "<<dst<<" / "<<meta.value("group")<<" / "<<meta.value("groupid");
 526     slotAddClipList(KUrl::List () << dst, data);
 527 }
 528
 529 void ClipManager::slotAddClipList(const KUrl::List &urls, const QMap <QString, QString> &data)
 530 {
 531     QUndoCommand *addClips = new QUndoCommand();
 532     // Update list of removable volumes
 533     //TODO: update only when new volume is plugged / unplugged
 534     listRemovableVolumes();
 535     foreach(const KUrl & file, urls) {
 536         if (QFile::exists(file.path())) {//KIO::NetAccess::exists(file, KIO::NetAccess::SourceSide, NULL)) {
 537             if (!data.contains("bypassDuplicate") && !getClipByResource(file.path()).empty()) {
 538                 if (KMessageBox::warningContinueCancel(kapp->activeWindow(), i18n("Clip <b>%1</b><br />already exists in project, what do you want to do?", file.path()), i18n("Clip already exists")) == KMessageBox::Cancel)
 539                     continue;
 540             }
 541             if (isOnRemovableDevice(file)) {
 542                 int answer = KMessageBox::warningYesNoCancel(kapp->activeWindow(), i18n("Clip <b>%1</b><br /> is on a removable device, will not be available when device is unplugged", file.path()), i18n("File on a Removable Device"), KGuiItem(i18n("Copy file to project folder")), KGuiItem(i18n("Continue")), KStandardGuiItem::cancel(), QString("copyFilesToProjectFolder"));
 543                 if (answer == KMessageBox::Cancel) continue;
 544                 else if (answer == KMessageBox::Yes) {
 545                     // Copy files to project folder
 546                     QString sourcesFolder = m_doc->projectFolder().path(KUrl::AddTrailingSlash) + "clips/";
 547                     KIO::NetAccess::mkdir(sourcesFolder, kapp->activeWindow());
 548                     //KIO::filesize_t m_requestedSize;
 549                     KIO::CopyJob *copyjob = KIO::copy (file, KUrl(sourcesFolder));
 550                     //TODO: for some reason, passing metadata does not work...
 551                     copyjob->addMetaData("group", data.value("group"));
 552                     copyjob->addMetaData("groupId", data.value("groupId"));
 553                     copyjob->addMetaData("comment", data.value("comment"));
 554                     copyjob->ui()->setWindow(kapp->activeWindow());
 555                     connect(copyjob, SIGNAL(copyingDone(KIO::Job*,KUrl,KUrl,time_t,bool,bool)), this, SLOT(slotAddClip(KIO::Job*,KUrl,KUrl)));
 556                     continue;
 557                 }
 558             }
 559             kDebug() << "Adding clip: " << file.path();
 560             QDomDocument doc;
 561             QDomElement prod = doc.createElement("producer");
 562             doc.appendChild(prod);
 563             prod.setAttribute("resource", file.path());
 564             uint id = m_clipIdCounter++;
 565             prod.setAttribute("id", QString::number(id));
 566             if (data.contains("comment")) prod.setAttribute("description", data.value("comment"));
 567             if (data.contains("group")) {
 568                 prod.setAttribute("groupname", data.value("group"));
 569                 prod.setAttribute("groupid", data.value("groupId"));
 570             }
 571             if (data.contains("video_index")) prod.setAttribute("video_index", data.value("video_index"));
 572             if (data.contains("audio_index")) prod.setAttribute("audio_index", data.value("audio_index"));
 573
 574             KMimeType::Ptr type = KMimeType::findByUrl(file);
 575             if (type->name().startsWith("image/")) {
 576                 prod.setAttribute("type", (int) IMAGE);
 577                 prod.setAttribute("in", 0);
 578                 prod.setAttribute("out", m_doc->getFramePos(KdenliveSettings::image_duration()) - 1);
 579                 if (KdenliveSettings::autoimagetransparency()) prod.setAttribute("transparency", 1);
 580                 // Read EXIF metadata for JPEG
 581                 if (type->is("image/jpeg")) {
 582                     KFileMetaInfo metaInfo(file.path(), QString("image/jpeg"), KFileMetaInfo::TechnicalInfo);
 583                     const QHash<QString, KFileMetaInfoItem> metaInfoItems = metaInfo.items();
 584                     foreach(const KFileMetaInfoItem & metaInfoItem, metaInfoItems) {
 585                         QDomElement meta = doc.createElement("metaproperty");
 586                         meta.setAttribute("name", "meta.attr." + metaInfoItem.name().section('#', 1));
 587                         QDomText value = doc.createTextNode(metaInfoItem.value().toString());
 588                         meta.setAttribute("tool", "KDE Metadata");
 589                         meta.appendChild(value);
 590                         prod.appendChild(meta);
 591                     }
 592                 }
 593             } else if (type->is("application/x-kdenlivetitle")) {
 594                 // opening a title file
 595                 QDomDocument txtdoc("titledocument");
 596                 QFile txtfile(file.path());
 597                 if (txtfile.open(QIODevice::ReadOnly) && txtdoc.setContent(&txtfile)) {
 598                     txtfile.close();
 599                     prod.setAttribute("type", (int) TEXT);
 600                     // extract embeded images
 601                     QDomNodeList items = txtdoc.elementsByTagName("content");
 602                     for (int i = 0; i < items.count() ; ++i) {
 603                         QDomElement content = items.item(i).toElement();
 604                         if (content.hasAttribute("base64")) {
 605                             QString titlesFolder = m_doc->projectFolder().path(KUrl::AddTrailingSlash) + "titles/";
 606                             QString path = TitleDocument::extractBase64Image(titlesFolder, content.attribute("base64"));
 607                             if (!path.isEmpty()) {
 608                                 content.setAttribute("url", path);
 609                                 content.removeAttribute("base64");
 610                             }
 611                         }
 612                     }
 613                     prod.setAttribute("transparency", 1);
 614                     prod.setAttribute("in", 0);
 615                     if (!txtdoc.documentElement().hasAttribute("out")) {
 616                         prod.setAttribute("out", m_doc->getFramePos(KdenliveSettings::title_duration()) - 1);
 617                         txtdoc.documentElement().setAttribute("out", m_doc->getFramePos(KdenliveSettings::title_duration()) - 1);
 618                     }
 619                     else {
 620                         int out = txtdoc.documentElement().attribute("out").toInt();
 621                         if (out >= 0)
 622                             prod.setAttribute("out", out);
 623                         else {
 624                             prod.setAttribute("out", m_doc->getFramePos(KdenliveSettings::title_duration()) - 1);
 625                             txtdoc.documentElement().setAttribute("out", m_doc->getFramePos(KdenliveSettings::title_duration()) - 1);
 626                         }
 627                     }
 628                     QString titleData = txtdoc.toString();
 629                     prod.setAttribute("xmldata", titleData);
 630                 } else
 631                     txtfile.close();
 632             }
 633             new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true, addClips);
 634         }
 635         else kDebug()<<"// CANNOT READ FILE: "<<file;
 636     }
 637     if (addClips->childCount() > 0) {
 638         addClips->setText(i18np("Add clip", "Add clips", addClips->childCount()));
 639         m_doc->commandStack()->push(addClips);
 640     }
 641 }
 642
 643 void ClipManager::slotAddClipFile(const KUrl &url, const QMap <QString, QString> &data)
 644 {
 645     slotAddClipList(KUrl::List(url), data);
 646 }
 647
 648 void ClipManager::slotAddXmlClipFile(const QString &name, const QDomElement &xml, const QString &group, const QString &groupId)
 649 {
 650     QDomDocument doc;
 651     doc.appendChild(doc.importNode(xml, true));
 652     QDomElement prod = doc.documentElement();
 653     prod.setAttribute("type", (int) PLAYLIST);
 654     uint id = m_clipIdCounter++;
 655     prod.setAttribute("id", QString::number(id));
 656     prod.setAttribute("name", name);
 657     if (!group.isEmpty()) {
 658         prod.setAttribute("groupname", group);
 659         prod.setAttribute("groupid", groupId);
 660     }
 661     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 662     m_doc->commandStack()->push(command);
 663 }
 664
 665 void ClipManager::slotAddColorClipFile(const QString &name, const QString &color, const QString &duration, const QString &group, const QString &groupId)
 666 {
 667     QDomDocument doc;
 668     QDomElement prod = doc.createElement("producer");
 669     doc.appendChild(prod);
 670     prod.setAttribute("mlt_service", "colour");
 671     prod.setAttribute("colour", color);
 672     prod.setAttribute("type", (int) COLOR);
 673     uint id = m_clipIdCounter++;
 674     prod.setAttribute("id", QString::number(id));
 675     prod.setAttribute("in", "0");
 676     prod.setAttribute("out", m_doc->getFramePos(duration) - 1);
 677     prod.setAttribute("name", name);
 678     if (!group.isEmpty()) {
 679         prod.setAttribute("groupname", group);
 680         prod.setAttribute("groupid", groupId);
 681     }
 682     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 683     m_doc->commandStack()->push(command);
 684 }
 685
 686 void ClipManager::slotAddSlideshowClipFile(QMap <QString, QString> properties, const QString &group, const QString &groupId)
 687 {
 688     QDomDocument doc;
 689     QDomElement prod = doc.createElement("producer");
 690     doc.appendChild(prod);
 691     QMap<QString, QString>::const_iterator i = properties.constBegin();
 692     while (i != properties.constEnd()) {
 693         prod.setAttribute(i.key(), i.value());
 694         ++i;
 695     }
 696     prod.setAttribute("type", (int) SLIDESHOW);
 697     uint id = m_clipIdCounter++;
 698     if (!group.isEmpty()) {
 699         prod.setAttribute("groupname", group);
 700         prod.setAttribute("groupid", groupId);
 701     }
 702     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 703     m_doc->commandStack()->push(command);
 704 }
 705
 706
 707
 708 void ClipManager::slotAddTextClipFile(const QString &titleName, int duration, const QString &xml, const QString &group, const QString &groupId)
 709 {
 710     QDomDocument doc;
 711     QDomElement prod = doc.createElement("producer");
 712     doc.appendChild(prod);
 713     //prod.setAttribute("resource", imagePath);
 714     prod.setAttribute("name", titleName);
 715     prod.setAttribute("xmldata", xml);
 716     uint id = m_clipIdCounter++;
 717     prod.setAttribute("id", QString::number(id));
 718     if (!group.isEmpty()) {
 719         prod.setAttribute("groupname", group);
 720         prod.setAttribute("groupid", groupId);
 721     }
 722     prod.setAttribute("type", (int) TEXT);
 723     prod.setAttribute("transparency", "1");
 724     prod.setAttribute("in", "0");
 725     prod.setAttribute("out", duration - 1);
 726     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 727     m_doc->commandStack()->push(command);
 728 }
 729
 730 void ClipManager::slotAddTextTemplateClip(QString titleName, const KUrl &path, const QString &group, const QString &groupId)
 731 {
 732     QDomDocument doc;
 733     QDomElement prod = doc.createElement("producer");
 734     doc.appendChild(prod);
 735     prod.setAttribute("name", titleName);
 736     prod.setAttribute("resource", path.path());
 737     uint id = m_clipIdCounter++;
 738     prod.setAttribute("id", QString::number(id));
 739     if (!group.isEmpty()) {
 740         prod.setAttribute("groupname", group);
 741         prod.setAttribute("groupid", groupId);
 742     }
 743     prod.setAttribute("type", (int) TEXT);
 744     prod.setAttribute("transparency", "1");
 745     prod.setAttribute("in", "0");
 746
 747     int duration = 0;
 748     QDomDocument titledoc;
 749     QFile txtfile(path.path());
 750     if (txtfile.open(QIODevice::ReadOnly) && titledoc.setContent(&txtfile)) {
 751         txtfile.close();
 752         if (titledoc.documentElement().hasAttribute("duration")) {
 753             duration = titledoc.documentElement().attribute("duration").toInt();
 754         }
 755         else {
 756             // keep some time for backwards compatibility - 26/12/12
 757             duration = titledoc.documentElement().attribute("out").toInt();
 758         }
 759     } else txtfile.close();
 760
 761     if (duration == 0) duration = m_doc->getFramePos(KdenliveSettings::title_duration());
 762     prod.setAttribute("out", duration - 1);
 763
 764     AddClipCommand *command = new AddClipCommand(m_doc, doc.documentElement(), QString::number(id), true);
 765     m_doc->commandStack()->push(command);
 766 }
 767
 768 int ClipManager::getFreeClipId()
 769 {
 770     return m_clipIdCounter++;
 771 }
 772
 773 int ClipManager::getFreeFolderId()
 774 {
 775     return m_folderIdCounter++;
 776 }
 777
 778 int ClipManager::lastClipId() const
 779 {
 780     return m_clipIdCounter - 1;
 781 }
 782
 783 QString ClipManager::projectFolder() const
 784 {
 785     return m_doc->projectFolder().path();
 786 }
 787
 788 void ClipManager::addFolder(const QString &id, const QString &name)
 789 {
 790     m_folderList.insert(id, name);
 791 }
 792
 793 void ClipManager::deleteFolder(const QString &id)
 794 {
 795     m_folderList.remove(id);
 796 }
 797
 798 AbstractGroupItem *ClipManager::createGroup()
 799 {
 800     AbstractGroupItem *group = new AbstractGroupItem(m_doc->fps());
 801     m_groupsList.append(group);
 802     return group;
 803 }
 804
 805 void ClipManager::removeGroup(AbstractGroupItem *group)
 806 {
 807     m_groupsList.removeAll(group);
 808 }
 809
 810 QDomElement ClipManager::groupsXml() const
 811 {
 812     QDomDocument doc;
 813     QDomElement groups = doc.createElement("groups");
 814     doc.appendChild(groups);
 815     for (int i = 0; i < m_groupsList.count(); ++i) {
 816         QDomElement group = doc.createElement("group");
 817         groups.appendChild(group);
 818         QList <QGraphicsItem *> children = m_groupsList.at(i)->childItems();
 819         for (int j = 0; j < children.count(); j++) {
 820             if (children.at(j)->type() == AVWIDGET || children.at(j)->type() == TRANSITIONWIDGET) {
 821                 AbstractClipItem *item = static_cast <AbstractClipItem *>(children.at(j));
 822                 ItemInfo info = item->info();
 823                 if (item->type() == AVWIDGET) {
 824                     QDomElement clip = doc.createElement("clipitem");
 825                     clip.setAttribute("track", info.track);
 826                     clip.setAttribute("position", info.startPos.frames(m_doc->fps()));
 827                     group.appendChild(clip);
 828                 } else if (item->type() == TRANSITIONWIDGET) {
 829                     QDomElement clip = doc.createElement("transitionitem");
 830                     clip.setAttribute("track", info.track);
 831                     clip.setAttribute("position", info.startPos.frames(m_doc->fps()));
 832                     group.appendChild(clip);
 833                 }
 834             }
 835         }
 836     }
 837     return doc.documentElement();
 838 }
 839
 840
 841 void ClipManager::slotClipModified(const QString &path)
 842 {
 843     //kDebug() << "// CLIP: " << path << " WAS MODIFIED";
 844     const QList <DocClipBase *> list = getClipByResource(path);
 845     for (int i = 0; i < list.count(); ++i) {
 846         DocClipBase *clip = list.at(i);
 847         if (clip != NULL) {
 848             QString id = clip->getId();
 849             if (!m_modifiedClips.contains(id))
 850                 emit modifiedClip(id);
 851             m_modifiedClips[id] = QTime::currentTime();
 852         }
 853     }
 854     if (!m_modifiedTimer.isActive()) m_modifiedTimer.start();
 855 }
 856
 857 void ClipManager::slotProcessModifiedClips()
 858 {
 859     if (!m_modifiedClips.isEmpty()) {
 860         QMapIterator<QString, QTime> i(m_modifiedClips);
 861         while (i.hasNext()) {
 862             i.next();
 863             if (QTime::currentTime().msecsTo(i.value()) <= -1500) {
 864                 emit reloadClip(i.key());
 865                 m_modifiedClips.remove(i.key());
 866                 break;
 867             }
 868         }
 869     }
 870     if (m_modifiedClips.isEmpty()) m_modifiedTimer.stop();
 871 }
 872
 873 void ClipManager::slotClipMissing(const QString &path)
 874 {
 875     // kDebug() << "// CLIP: " << path << " WAS MISSING";
 876     const QList <DocClipBase *> list = getClipByResource(path);
 877     for (int i = 0; i < list.count(); ++i) {
 878         DocClipBase *clip = list.at(i);
 879         if (clip != NULL) emit missingClip(clip->getId());
 880     }
 881 }
 882
 883 void ClipManager::slotClipAvailable(const QString &path)
 884 {
 885     // kDebug() << "// CLIP: " << path << " WAS ADDED";
 886     const QList <DocClipBase *> list = getClipByResource(path);
 887     for (int i = 0; i < list.count(); ++i) {
 888         DocClipBase *clip = list.at(i);
 889         if (clip != NULL) emit availableClip(clip->getId());
 890     }
 891 }
 892
 893 int ClipManager::clipsCount() const
 894 {
 895     return m_clipList.count();
 896 }
 897
 898
 899 void ClipManager::listRemovableVolumes()
 900 {
 901     QList<SolidVolumeInfo> volumes;
 902     m_removableVolumes.clear();
 903
 904     QList<Solid::Device> devices = Solid::Device::listFromType(Solid::DeviceInterface::StorageAccess);
 905
 906     foreach(const Solid::Device &accessDevice, devices)
 907     {
 908         // check for StorageAccess
 909         if (!accessDevice.is<Solid::StorageAccess>())
 910             continue;
 911
 912         const Solid::StorageAccess *access = accessDevice.as<Solid::StorageAccess>();
 913
 914         if (!access->isAccessible())
 915             continue;
 916
 917         // check for StorageDrive
 918         Solid::Device driveDevice;
 919         for (Solid::Device currentDevice = accessDevice; currentDevice.isValid(); currentDevice = currentDevice.parent())
 920         {
 921             if (currentDevice.is<Solid::StorageDrive>())
 922             {
 923                 driveDevice = currentDevice;
 924                 break;
 925             }
 926         }
 927         if (!driveDevice.isValid())
 928             continue;
 929
 930         Solid::StorageDrive *drive = driveDevice.as<Solid::StorageDrive>();
 931         if (!drive->isRemovable()) continue;
 932
 933         // check for StorageVolume
 934         Solid::Device volumeDevice;
 935         for (Solid::Device currentDevice = accessDevice; currentDevice.isValid(); currentDevice = currentDevice.parent())
 936         {
 937             if (currentDevice.is<Solid::StorageVolume>())
 938             {
 939                 volumeDevice = currentDevice;
 940                 break;
 941             }
 942         }
 943         if (!volumeDevice.isValid())
 944             continue;
 945
 946         Solid::StorageVolume *volume = volumeDevice.as<Solid::StorageVolume>();
 947
 948         SolidVolumeInfo info;
 949         info.path = access->filePath();
 950         info.isMounted = access->isAccessible();
 951         if (!info.path.isEmpty() && !info.path.endsWith('/'))
 952             info.path += '/';
 953         info.uuid = volume->uuid();
 954         info.label = volume->label();
 955         info.isRemovable = drive->isRemovable();
 956         m_removableVolumes << info;
 957     }
 958 }
 959
 960 bool ClipManager::isOnRemovableDevice(const KUrl &url)
 961 {
 962     //SolidVolumeInfo volume;
 963     QString path = url.path(KUrl::RemoveTrailingSlash);
 964     int volumeMatch = 0;
 965
 966     //FIXME: Network shares! Here we get only the volume of the mount path...
 967     // This is probably not really clean. But Solid does not help us.
 968     foreach (const SolidVolumeInfo &v, m_removableVolumes)
 969     {
 970         if (v.isMounted && !v.path.isEmpty() && path.startsWith(v.path))
 971         {
 972             int length = v.path.length();
 973             if (length > volumeMatch)
 974             {
 975                 volumeMatch = v.path.length();
 976                 //volume = v;
 977             }
 978         }
 979     }
 980
 981     return volumeMatch;
 982 }
 983
 984 void ClipManager::projectTreeThumbReady(const QString &id, int frame, const QImage &img, int type)
 985 {
 986     switch (type) {
 987     case 2:
 988         emit gotClipPropertyThumbnail(id, img);
 989         break;
 990     default:
 991         emit thumbReady(id, frame, img);
 992     }
 993 }
 994
 995
 996 #include "clipmanager.moc"