Keep book metadata in Sqlite. Display progress while loading and upgrading library.
[dorian] / model / book.cpp
1 #include <QDir>
2 #include <QString>
3 #include <QDebug>
4 #include <QtXml>
5 #include <qtextdocument.h>  // Qt::escape is currently defined here...
6 #include <QDirIterator>
7 #include <QFileInfo>
8 #include <QtAlgorithms>
9 #include <QVariantHash>
10
11 #include "book.h"
12 #include "opshandler.h"
13 #include "xmlerrorhandler.h"
14 #include "extractzip.h"
15 #include "library.h"
16 #include "containerhandler.h"
17 #include "ncxhandler.h"
18 #include "trace.h"
19 #include "bookdb.h"
20
21 const int COVER_WIDTH = 53;
22 const int COVER_HEIGHT = 59;
23
24 static QImage makeCover(const QString &path)
25 {
26     return QImage(path).scaled(COVER_WIDTH, COVER_HEIGHT,
27         Qt::KeepAspectRatioByExpanding, Qt::SmoothTransformation).
28         scaled(COVER_WIDTH, COVER_HEIGHT, Qt::KeepAspectRatio);
29 }
30
31 Book::Book(const QString &p, QObject *parent): QObject(parent)
32 {
33     mPath = "";
34     if (p.size()) {
35         QFileInfo info(p);
36         mPath = info.absoluteFilePath();
37         title = info.baseName();
38         cover = makeCover(":/icons/book.png");
39         mTempFile.open();
40     }
41 }
42
43 QString Book::path() const
44 {
45     return mPath;
46 }
47
48 bool Book::open()
49 {
50     Trace t("Book::open");
51     qDebug() << path();
52     close();
53     clear();
54     if (path().isEmpty()) {
55         title = "No book";
56         return false;
57     }
58     if (!extract(QStringList())) {
59         return false;
60     }
61     if (!parse()) {
62         return false;
63     }
64     save();
65     emit opened(path());
66     return true;
67 }
68
69 void Book::peek()
70 {
71     Trace t("Book::peek");
72     qDebug() << path();
73     close();
74     clear();
75     if (path().isEmpty()) {
76         title = "No book";
77         return;
78     }
79     if (!extractMetaData()) {
80         return;
81     }
82     if (!parse()) {
83         return;
84     }
85     save();
86     close();
87 }
88
89 void Book::close()
90 {
91     Trace t("Book::close");
92     content.clear();
93     parts.clear();
94     QDir::setCurrent(QDir::rootPath());
95     clearDir(tmpDir());
96 }
97
98 QString Book::tmpDir() const
99 {
100     QString tmpName = QFileInfo(mTempFile.fileName()).fileName();
101     return QDir(QDir::temp().absoluteFilePath("dorian")).
102             absoluteFilePath(tmpName);
103 }
104
105 bool Book::extract(const QStringList &excludedExtensions)
106 {
107     Trace t("Book::extract");
108     bool ret = false;
109     QString tmp = tmpDir();
110     qDebug() << "Extracting" << mPath << "to" << tmp;
111
112     QDir::setCurrent(QDir::rootPath());
113     if (!clearDir(tmp)) {
114         qCritical() << "Book::extract: Failed to remove" << tmp;
115         return false;
116     }
117     QDir d(tmp);
118     if (!d.exists()) {
119         if (!d.mkpath(tmp)) {
120             qCritical() << "Book::extract: Could not create" << tmp;
121             return false;
122         }
123     }
124
125     // If book comes from resource, copy it to the temporary directory first
126     QString bookPath = path();
127     if (bookPath.startsWith(":/books/")) {
128         QFile src(bookPath);
129         QString dst(QDir(tmp).absoluteFilePath("book.epub"));
130         if (!src.copy(dst)) {
131             qCritical() << "Book::extract: Failed to copy built-in book"
132                     << bookPath << "to" << dst;
133             return false;
134         }
135         bookPath = dst;
136     }
137
138     QString oldDir = QDir::currentPath();
139     if (!QDir::setCurrent(tmp)) {
140         qCritical() << "Book::extract: Could not change to" << tmp;
141         return false;
142     }
143     ret = extractZip(bookPath, excludedExtensions);
144     if (!ret) {
145         qCritical() << "Book::extract: Extracting ZIP failed";
146     }
147     QDir::setCurrent(oldDir);
148     return ret;
149 }
150
151 bool Book::parse()
152 {
153     Trace t("Book::parse");
154
155     // Parse OPS file
156     bool ret = false;
157     QString opsFileName = opsPath();
158     qDebug() << "Parsing OPS file" << opsFileName;
159     QFile opsFile(opsFileName);
160     QXmlSimpleReader reader;
161     QXmlInputSource *source = new QXmlInputSource(&opsFile);
162     OpsHandler *opsHandler = new OpsHandler(*this);
163     XmlErrorHandler *errorHandler = new XmlErrorHandler();
164     reader.setContentHandler(opsHandler);
165     reader.setErrorHandler(errorHandler);
166     ret = reader.parse(source);
167     delete errorHandler;
168     delete opsHandler;
169     delete source;
170
171     // Initially, put all content items in the chapter list.
172     // This will be refined by parsing the NCX file later
173     chapters = parts;
174
175     // Load cover image
176     QString coverPath;
177     QStringList coverKeys;
178     coverKeys << "cover-image" << "img-cover-jpeg" << "cover";
179     foreach (QString key, coverKeys) {
180         if (content.contains(key)) {
181             coverPath = QDir(rootPath()).absoluteFilePath(content[key].href);
182             break;
183         }
184     }
185     if (coverPath.isEmpty()) {
186         // Last resort
187         QString coverJpeg = QDir(rootPath()).absoluteFilePath("cover.jpg");
188         if (QFileInfo(coverJpeg).exists()) {
189             coverPath = coverJpeg;
190         }
191     }
192     if (!coverPath.isEmpty()) {
193         qDebug() << "Loading cover image from" << coverPath;
194         cover = makeCover(coverPath);
195     }
196
197     // If there is an "ncx" item in content, parse it: That's the real table of
198     // contents
199     QString ncxFileName;
200     if (content.contains("ncx")) {
201         ncxFileName = content["ncx"].href;
202     } else if (content.contains("ncxtoc")) {
203         ncxFileName = content["ncxtoc"].href;
204     } else if (content.contains("toc")) {
205         ncxFileName = content["toc"].href;
206     } else {
207         qDebug() << "No NCX table of contents";
208     }
209     if (!ncxFileName.isEmpty()) {
210         qDebug() << "Parsing NCX file" << ncxFileName;
211         QFile ncxFile(QDir(rootPath()).absoluteFilePath(ncxFileName));
212         source = new QXmlInputSource(&ncxFile);
213         NcxHandler *ncxHandler = new NcxHandler(*this);
214         errorHandler = new XmlErrorHandler();
215         reader.setContentHandler(ncxHandler);
216         reader.setErrorHandler(errorHandler);
217         ret = reader.parse(source);
218         delete errorHandler;
219         delete ncxHandler;
220         delete source;
221     }
222
223     // Calculate book part sizes
224     size = 0;
225     foreach (QString part, parts) {
226         QFileInfo info(QDir(rootPath()).absoluteFilePath(content[part].href));
227         content[part].size = info.size();
228         size += content[part].size;
229     }
230
231     return ret;
232 }
233
234 bool Book::clearDir(const QString &dir)
235 {
236     QDir d(dir);
237     if (!d.exists()) {
238         return true;
239     }
240     QDirIterator i(dir, QDirIterator::Subdirectories);
241     while (i.hasNext()) {
242         QString entry = i.next();
243         if (entry.endsWith("/.") || entry.endsWith("/..")) {
244             continue;
245         }
246         QFileInfo info(entry);
247         if (info.isDir()) {
248             if (!clearDir(entry)) {
249                 return false;
250             }
251         }
252         else {
253             if (!QFile::remove(entry)) {
254                 qCritical() << "Book::clearDir: Could not remove" << entry;
255                 // FIXME: To be investigated: This is happening too often
256                 // return false;
257             }
258         }
259     }
260     (void)d.rmpath(dir);
261     return true;
262 }
263
264 void Book::clear()
265 {
266     close();
267     title = "";
268     creators.clear();
269     date = "";
270     publisher = "";
271     datePublished = "";
272     subject = "";
273     source = "";
274     rights = "";
275 }
276
277 void Book::load()
278 {
279     Trace t("Book::load");
280     qDebug() << "path" << path();
281
282     QVariantHash data = BookDb::instance()->load(path());
283     title = data["title"].toString();
284     qDebug() << title;
285     creators = data["creators"].toStringList();
286     date = data["date"].toString();
287     publisher = data["publisher"].toString();
288     datePublished = data["datepublished"].toString();
289     subject = data["subject"].toString();
290     source = data["source"].toString();
291     rights = data["rights"].toString();
292     mLastBookmark.part = data["lastpart"].toInt();
293     mLastBookmark.pos = data["lastpos"].toReal();
294     cover = data["cover"].value<QImage>().scaled(COVER_WIDTH,
295         COVER_HEIGHT, Qt::IgnoreAspectRatio, Qt::SmoothTransformation);
296     if (cover.isNull()) {
297         cover = makeCover(":/icons/book.png");
298     }
299     int size = data["bookmarks"].toInt();
300     for (int i = 0; i < size; i++) {
301         int part = data[QString("bookmark%1part").arg(i)].toInt();
302         qreal pos = data[QString("bookmark%1pos").arg(i)].toReal();
303         mBookmarks.append(Bookmark(part, pos));
304     }
305 }
306
307 void Book::save()
308 {
309     Trace t("Book::save");
310
311     QVariantHash data;
312     data["title"] = title;
313     data["creators"] = creators;
314     data["date"] = date;
315     data["publisher"] = publisher;
316     data["datepublished"] = datePublished;
317     data["subject"] = subject;
318     data["source"] = source;
319     data["rights"] = rights;
320     data["lastpart"] = mLastBookmark.part;
321     data["lastpos"] = mLastBookmark.pos;
322     data["cover"] = cover;
323     data["bookmarks"] = mBookmarks.size();
324     for (int i = 0; i < mBookmarks.size(); i++) {
325         data[QString("bookmark%1part").arg(i)] = mBookmarks[i].part;
326         data[QString("bookmark%1pos").arg(i)] = mBookmarks[i].pos;
327     }
328     BookDb::instance()->save(path(), data);
329 }
330
331 void Book::setLastBookmark(int part, qreal position)
332 {
333     Trace t("Book:setLastBookmark");
334     qDebug() << "part" << part << "position" << position;
335     mLastBookmark.part = part;
336     mLastBookmark.pos = position;
337     save();
338 }
339
340 Book::Bookmark Book::lastBookmark() const
341 {
342     return Book::Bookmark(mLastBookmark);
343 }
344
345 void Book::addBookmark(int part, qreal position)
346 {
347     mBookmarks.append(Bookmark(part, position));
348     qSort(mBookmarks.begin(), mBookmarks.end());
349     save();
350 }
351
352 void Book::deleteBookmark(int index)
353 {
354     mBookmarks.removeAt(index);
355     save();
356 }
357
358 QList<Book::Bookmark> Book::bookmarks() const
359 {
360     return mBookmarks;
361 }
362
363 QString Book::opsPath()
364 {
365     Trace t("Book::opsPath");
366     QString ret;
367
368     QFile container(tmpDir() + "/META-INF/container.xml");
369     qDebug() << container.fileName();
370     QXmlSimpleReader reader;
371     QXmlInputSource *source = new QXmlInputSource(&container);
372     ContainerHandler *containerHandler = new ContainerHandler();
373     XmlErrorHandler *errorHandler = new XmlErrorHandler();
374     reader.setContentHandler(containerHandler);
375     reader.setErrorHandler(errorHandler);
376     if (reader.parse(source)) {
377         ret = tmpDir() + "/" + containerHandler->rootFile;
378         mRootPath = QFileInfo(ret).absoluteDir().absolutePath();
379         qDebug() << "OSP path" << ret << "\nRoot dir" << mRootPath;
380     }
381     delete errorHandler;
382     delete containerHandler;
383     delete source;
384     return ret;
385 }
386
387 QString Book::rootPath() const
388 {
389     return mRootPath;
390 }
391
392 QString Book::name() const
393 {
394     if (title.size()) {
395         QString ret = title;
396         if (creators.length()) {
397             ret += "\nBy " + creators[0];
398             for (int i = 1; i < creators.length(); i++) {
399                 ret += ", " + creators[i];
400             }
401         }
402         return ret;
403     } else {
404         return path();
405     }
406 }
407
408 QString Book::shortName() const
409 {
410     return (title.isEmpty())? QFileInfo(path()).baseName(): title;
411 }
412
413 int Book::chapterFromPart(int index)
414 {
415     int ret = -1;
416
417     QString partId = parts[index];
418     QString partHref = content[partId].href;
419
420     for (int i = 0; i < chapters.size(); i++) {
421         QString id = chapters[i];
422         QString href = content[id].href;
423         QString baseRef(href);
424         QUrl url(QString("file://") + href);
425         if (url.hasFragment()) {
426             QString fragment = url.fragment();
427             baseRef.chop(fragment.length() + 1);
428         }
429         if (baseRef == partHref) {
430             ret = i;
431             // Don't break, keep looking
432         }
433     }
434
435     return ret;
436 }
437
438 int Book::partFromChapter(int index)
439 {
440     Trace t("Book::partFromChapter");
441     QString id = chapters[index];
442     QString href = content[id].href;
443     int hashPos = href.indexOf("#");
444     if (hashPos != -1) {
445         href = href.left(hashPos);
446     }
447
448     qDebug() << "Chapter" << index;
449     qDebug() << " id" << id;
450     qDebug() << " href" << href;
451
452     for (int i = 0; i < parts.size(); i++) {
453         QString partId = parts[i];
454         if (content[partId].href == href) {
455             qDebug() << "Part index for" << href << "is" << i;
456             return i;
457         }
458     }
459
460     qWarning() << "Book::partFromChapter: Could not find part index for"
461             << href;
462     return -1;
463 }
464
465 qreal Book::getProgress(int part, qreal position)
466 {
467     Q_ASSERT(part < parts.size());
468     QString key;
469     qreal partSize = 0;
470     for (int i = 0; i < part; i++) {
471         key = parts[i];
472         partSize += content[key].size;
473     }
474     key = parts[part];
475     partSize += content[key].size * position;
476     return partSize / (qreal)size;
477 }
478
479 bool Book::extractMetaData()
480 {
481     QStringList excludedExtensions;
482     excludedExtensions << ".html" << ".xhtml" << ".xht" << ".htm";
483     return extract(excludedExtensions);
484 }
485
486 void Book::upgrade()
487 {
488     Trace t("Book::upgrade");
489
490     qDebug() << path();
491
492     // Load book from old database (QSettings)
493
494     QSettings settings;
495     QString key = "book/" + path() + "/";
496     title = settings.value(key + "title").toString();
497     qDebug() << title;
498     creators = settings.value(key + "creators").toStringList();
499     date = settings.value(key + "date").toString();
500     publisher = settings.value(key + "publisher").toString();
501     datePublished = settings.value(key + "datepublished").toString();
502     subject = settings.value(key + "subject").toString();
503     source = settings.value(key + "source").toString();
504     rights = settings.value(key + "rights").toString();
505     mLastBookmark.part = settings.value(key + "lastpart").toInt();
506     mLastBookmark.pos = settings.value(key + "lastpos").toReal();
507     cover = settings.value(key + "cover").value<QImage>().scaled(COVER_WIDTH,
508         COVER_HEIGHT, Qt::IgnoreAspectRatio, Qt::SmoothTransformation);
509     if (cover.isNull()) {
510         cover = makeCover(":/icons/book.png");
511     }
512     int size = settings.value(key + "bookmarks").toInt();
513     for (int i = 0; i < size; i++) {
514         int part = settings.value(key + "bookmark" + QString::number(i) +
515                                      "/part").toInt();
516         qreal pos = settings.value(key + "bookmark" + QString::number(i) +
517                                    "/pos").toReal();
518         qDebug() << QString("Bookmark %1 at part %2, %3").
519                 arg(i).arg(part).arg(pos);
520         mBookmarks.append(Bookmark(part, pos));
521     }
522
523     // Save book to new database
524
525     save();
526 }
527
528 void Book::remove()
529 {
530     Trace t("Book::remove");
531     BookDb::instance()->remove(path());
532 }