Removed most of the previous database changes.
[emufront] / src / utils / fileutil.cpp
1 // EmuFront
2 // Copyright 2010 Mikko Keinänen
3 //
4 // This file is part of EmuFront.
5 //
6 //
7 // EmuFront is free software: you can redistribute it and/or modify
8 // it under the terms of the GNU General Public License version 2 as published by
9 // the Free Software Foundation and appearing in the file gpl.txt included in the
10 // packaging of this file.
11 //
12 // EmuFront is distributed in the hope that it will be useful,
13 // but WITHOUT ANY WARRANTY; without even the implied warranty of
14 // MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
15 // GNU General Public License for more details.
16 //
17 // You should have received a copy of the GNU General Public License
18 // along with EmuFront.  If not, see <http://www.gnu.org/licenses/>.
19
20 #include <QDir>
21 #include <QDebug>
22 #include <QProcess>
23 #include "fileutil.h"
24 #include "zlib.h" /* crc32 */
25 //#include "OSDaB-Zip/unzip.h"
26 #include "../exceptions/emufrontexception.h"
27 #include "../dataobjects/setup.h"
28 #include "../dataobjects/mediaimage.h"
29 #include "../dataobjects/mediaimagecontainer.h"
30 #include "../dataobjects/mediatype.h"
31 #include "../dataobjects/platform.h"
32 #include "../db/dbmediaimagecontainer.h"
33 #include "unziphelper.h"
34
35 //int FileUtil::MIC_BUFFER_SIZE = 50;
36
37 FileUtil::FileUtil(QObject *parent) : QObject(parent)
38 {
39     buf = new char[READ_BUFFER];
40     unzipHelper = new UnzipHelper(this);
41 }
42
43 FileUtil::~FileUtil()
44 {
45     delete[] buf;
46 }
47
48 /* Throws EmuFrontException */
49 int FileUtil::scanFilePath(FilePathObject *fp, QStringList filters, DbMediaImageContainer *dbMic)
50 {
51     if (!fp->getSetup()){
52         throw EmuFrontException(tr("Setup not available with %1.").arg(fp->getName()));
53     }
54     else if(!fp->getSetup()->getPlatform()){
55         throw EmuFrontException(tr("No platform object available with %1.")
56             .arg(fp->getSetup()->getName()));
57     }
58     else if (!fp->getSetup()->getMediaType()){
59         throw new EmuFrontException(tr("No media type available with %1.")
60             .arg(fp->getSetup()->getName()));
61     }
62
63     // TODO: if this is a rescan of this filepath remove all the old entries first!
64
65     int count = 0;
66     qDebug() << QString("We have a platform %1, media type %2")
67         .arg(fp->getSetup()->getPlatform()->getName())
68         .arg(fp->getSetup()->getMediaType()->getName());
69     QDir dir(fp->getName());
70     if (!dir.exists() || !dir.isReadable())
71         throw EmuFrontException(tr("Directory %1 doesn't exists or isn't readable!").arg(fp->getName()));
72
73     qDebug() << QString("Scanning directory %1.").arg(fp->getName());
74     dir.setFilter(QDir::Files | QDir::NoSymLinks | QDir::NoDotAndDotDot | QDir::Readable);
75
76     if (filters.count() > 0) dir.setNameFilters(filters);
77
78     // we'll go through the filtered archive files...
79     QFileInfoList list = dir.entryInfoList();
80     // TODO: only a buffer of objects should be kept here,
81     // and write to database each time the buffer is filled.
82     QList<MediaImageContainer*> containers;
83     for (int i = 0; i < list.size(); ++i)
84     {
85         QFileInfo fileInfo = list.at(i);
86         qDebug() << QString("%1 %2").arg(fileInfo.size(), 10).arg(fileInfo.absoluteFilePath());
87
88         //... and collect the contents of each archive
89         QMap<QString, EmuFrontObject*> files = unzipHelper->listContents(fileInfo.absoluteFilePath(), fp);
90
91         if (files.count() > 0)
92         {
93             // read crc32 checksum for media image container
94             quint32 crc = readCrc32(fileInfo.absoluteFilePath());
95             FilePathObject *fpo = new FilePathObject(*fp);
96             MediaImageContainer *con = new MediaImageContainer (
97                     fileInfo.fileName(),
98                     QString("%1").arg(crc, 0, 16),
99                     fileInfo.size(),
100                     files,
101                     fpo // we need a copy since MediaImageContainers are deleted and the original filepath object would get deleted also.
102                 );
103             containers.append(con);
104             ++count;
105             qDebug() << "We have " << containers.count() << " containers.";
106
107             if (containers.count() >= MIC_BUFFER_SIZE)  {
108                 qDebug() << "We have " << containers.count()
109                     << " containers .. storing to db.";
110                 dbMic->storeContainers(containers, fp);
111                 qDeleteAll(containers);
112                 containers.clear();
113                 qDebug() << "containers now: " << containers.count();
114             }
115             qDebug() << "We have " << containers.size() << " containers.";
116         }
117     }
118     if (containers.count() > 0) {
119         qDebug() << "Storing the rest " << containers.count() << " containers.";
120         dbMic->storeContainers(containers, fp);
121         qDeleteAll(containers);
122         containers.clear();
123
124     }
125     qDebug() << "Done scanning files!";
126     return count;
127 }
128
129 /* Uses crc32 from zlib.h to count crc32 checksum value */
130 quint32 FileUtil::readCrc32(QString filePath)
131 {
132     // todo ... use some crc32 tool for this ... or maybe use md5 or something like that!!!
133     QFile file(filePath);
134     qDebug() << "readCrc32: " << filePath;
135     if (!file.open(QIODevice::ReadOnly)) {
136         throw new EmuFrontException(QString(tr("Failed opening file %1 for reading the checksum!")).arg(filePath));
137     }
138     quint32 crc = crc32(0L, Z_NULL, 0);
139     int read = 0;
140     while((read = file.read(buf, READ_BUFFER))) {
141         crc = crc32(crc, (const Bytef*) buf, read);
142     }
143     file.close();
144     if (crc <= 0)
145         throw new EmuFrontException(QString(tr("Failed reading crc checksum for file %1!")).arg(filePath));
146     qDebug() << QString("readCrc32, crc: %1").arg(crc, 0, 16);
147     return crc;
148 }
149
150 bool FileUtil::isSupportedFile(const QString filename, const QStringList supportedFileExtensions)
151 {
152     QString ext = filename.section('.', -1);
153     return supportedFileExtensions.contains(ext, Qt::CaseInsensitive);
154 }