Ejemplo n.º 1
0
 public MediaFileDescriptor buildMediaDescriptor(File f) {
   MediaFileDescriptor id = new MediaFileDescriptor();
   int[] data;
   String md5;
   try {
     id.setPath(f.getCanonicalPath());
     id.setMtime(f.lastModified());
     id.setSize(f.length());
     // generate thumbnails only for images, not video
     if (Utils.isValideImageName(f.getName())) {
       MetaDataFinder mdf = new MetaDataFinder(f);
       double[] latLon = mdf.getLatLong();
       if (latLon != null) {
         id.setLat(latLon[0]);
         id.setLon(latLon[1]);
       }
       // bufferize images in memory, read directly from file for others
       ByteArrayInputStream fbi = this.readFileToMemory(f);
       id.setHash(new ImageHash().generateSignature(fbi));
       fbi.reset();
       md5 = generateMD5(fbi);
       id.setMd5Digest(md5);
     } else {
       md5 = generateMD5(f);
       id.setMd5Digest(md5);
     }
   } catch (FileNotFoundException e) {
     e.printStackTrace();
   } catch (IOException e) {
     System.err.println("Error processing  file " + f.getName());
     e.printStackTrace();
   }
   return id;
 }
Ejemplo n.º 2
0
  public void generateAndSave(File f) {
    System.out.print(".");
    currentProgressSize += f.length() / 1024;
    try {
      MediaFileDescriptor mf = ts.getMediaFileDescriptor(f.getCanonicalPath());
      Logger.getLogger().err("MediaIndexer.generateAndSave " + f + " descriptor: " + mf);

      if ((mf != null) && (f.lastModified() == mf.getMtime())) {
        // Descriptor exists with same mtime
        Logger.getLogger()
            .err("MediaIndexer.generateImageDescriptor() Already in DB, ignoring with same mtime");
        Logger.getLogger().err("MediaIndexer.generateImageDescriptor() In   DB : " + mf.getMtime());
        Logger.getLogger()
            .err("MediaIndexer.generateImageDescriptor() On Disk : " + f.lastModified());
        boolean update = false;

        if (forceGPSUpdate) {
          //  MediaFileDescriptor mfd = ts.getMediaFileDescriptor(f.getCanonicalPath());
          MetaDataFinder mdf = new MetaDataFinder(f);
          double latLon[] = mdf.getLatLong();
          Logger.getLogger().err("MediaIndexer.generateAndSave working on " + f);
          if (latLon != null) {
            mf.setLat(latLon[0]);
            mf.setLon(latLon[1]);
            Logger.getLogger().err("MediaIndexer : forced update for GPS data for " + f);
            updateToDB(mf);
            update = true;
          }
        }
        if (forceHashUpdate || (mf.getHash() == null)) {
          if (Utils.isValideImageName(f.getName())) {
            mf.setHash(new ImageHash().generateSignature(f.getCanonicalPath()));
            updateToDB(mf);
            update = true;
          }
        }
        // if (update) {
        this.fileCreatedUpdated(false, update);
        // }
      } else {
        Logger.getLogger().err("MediaIndexer.generateAndSave building descriptor");
        MediaFileDescriptor id = this.buildMediaDescriptor(f);
        if (id != null) {
          if ((mf != null) && (f.lastModified() != mf.getMtime())) {
            // we need to update it
            updateToDB(id);
            this.fileCreatedUpdated(false, true);
          } else {
            saveToDB(id);
            this.fileCreatedUpdated(true, false);
          }
          if (log.isEnabled()) {
            log.log(
                f.getCanonicalPath()
                    + " ..... size  "
                    + (f.length() / 1024)
                    + " KiB OK "
                    + executorService.getActiveCount()
                    + " threads running");
          }
        } else {
          this.fileCreatedUpdated(false, false);
        }
      }
    } catch (IOException e) {
      System.err.println("Error processing  file " + f.getName());
      e.printStackTrace();
    }
  }
Ejemplo n.º 3
0
  //
  // обработка исходящего каталога АБС
  //
  public boolean processOutDirectory() {
    boolean result = true;
    try {

      //
      // читаем control.xml
      //
      File controlFile = new File(ABS_OUTPUT_DIR + "/control.xml");
      if (!controlFile.exists()) {
        logger.error("Нет файла " + controlFile.getName());
        if (new File(ABS_OUTPUT_DIR + "/control.zip").exists()) {
          logger.info("Обнаружен архив " + ABS_OUTPUT_DIR + "/control.zip");
          return true;
        }
        return false;
      }
      DocumentBuilderFactory factory = DocumentBuilderFactory.newInstance();
      DocumentBuilder builder = factory.newDocumentBuilder();
      Document controlDoc = builder.parse(controlFile);
      // готовимся изменять файл
      XPath searchPath = XPathFactory.newInstance().newXPath();

      // ищем каталоги с контейнерами
      File[] directoryList = (new File(ABS_OUTPUT_DIR)).listFiles(p -> p.isDirectory());

      //
      // просматриваем каталоги типа FILES/out/....
      //
      for (int i = 0; i < directoryList.length; i++) {
        //
        // в каталоге должен быть файл data.zip и файлы-вложения
        // файл data.zip нужно подписать и зазиповать
        //
        logger.info("Обрабатываем каталог " + directoryList[i].getAbsolutePath());
        //
        // просматриваем содержимое каталога с контейнером
        //
        File[] currentDir = (directoryList[i]).listFiles(p -> p.isFile());
        //
        // создаем zip-file
        //
        File zip = new File(directoryList[i].getAbsolutePath() + "/data_" + i + ".zip");
        logger.info("Создаем архив " + zip.getAbsolutePath());
        FileOutputStream zipStream = new FileOutputStream(zip);
        ZipOutputStream dataZip = new ZipOutputStream(zipStream);
        for (File curFile : currentDir) {
          if ("data.xml.sig".equals(curFile.getName())) continue;
          appendZipFile(dataZip, curFile);
          //
          // для файла data.zip создаем цифровую подпись и записываем файл с подписью в архив
          //
          if ("data.xml".equals(curFile.getName())) {
            fileSigner.cades(curFile.getAbsolutePath());
            String fName = curFile.getAbsolutePath();
            File signFile = new File(fName.substring(0, fName.length() - 3) + "sign");
            appendZipFile(dataZip, signFile);
            signFile.delete();
          }
          //
          // удаляем файл после включения в архив
          //
          curFile.delete();
        }
        //
        // закрываем архив и его поток
        //
        dataZip.close();
        zipStream.close();
        logger.info("Запись в архив " + zip.getAbsolutePath() + " завершена");
        //
        // вычисляем crc32
        //
        long crc32 = Utils.calculateCRC32(zip);
        long zipSize = zip.length();
        //
        // в файле control.xml ищем соответствующий узел контейнера и меняем его атрибуты
        //
        String xpathQuery = "//Containers[@ReqUID='" + directoryList[i].getName() + "']";
        Node containerNode =
            (Node) searchPath.evaluate(xpathQuery, controlDoc, XPathConstants.NODE);
        if (containerNode == null) {
          logger.error(
              "В файле control.xml  не найдено описание для контейнера "
                  + directoryList[i].getName());
          System.exit(1);
        }
        Element containerElement = (Element) containerNode;
        containerElement.setAttribute("name", zip.getName());
        containerElement.setAttribute("size", zipSize + "");
        containerElement.setAttribute("CRC", crc32 + "");
      }
      // сохраняем control.xml
      DOMSource domSource = new DOMSource(controlDoc);
      StreamResult streamResult = new StreamResult(controlFile);
      Transformer transformer = TransformerFactory.newInstance().newTransformer();
      transformer.transform(domSource, streamResult);
      transformer.reset();
      //
      // подписываем файл
      //
      fileSigner.cades(controlFile.getAbsolutePath());
      //
      // записываем файл control.xml и подпись в архив
      //
      File zip = new File(ABS_OUTPUT_DIR + "/control.zip");
      logger.info("Создаем архив " + zip.getAbsolutePath());
      FileOutputStream zipStream = new FileOutputStream(zip);
      ZipOutputStream dataZip = new ZipOutputStream(zipStream);
      //
      // дописываем управляющий файл
      //
      File cFile = new File(ABS_OUTPUT_DIR + "/control.xml");
      appendZipFile(dataZip, cFile);
      cFile.delete();
      //
      // дописываем подпись
      //
      cFile = new File(ABS_OUTPUT_DIR + "/control.sign");
      appendZipFile(dataZip, cFile);
      cFile.delete();
      logger.info("Запись в архив " + zip.getAbsolutePath() + " завершена");
      //
      // закрываем архив и его поток
      //
      dataZip.close();
      zipStream.close();
    } catch (Exception e) {
      logger.error(e.getMessage());
      e.printStackTrace();
    }

    return result;
  }