/[projects]/dao/FuldDaekningWorker/src/dk/daoas/fulddaekning/Lookup.java
ViewVC logotype

Diff of /dao/FuldDaekningWorker/src/dk/daoas/fulddaekning/Lookup.java

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 2227 by torben, Mon Sep 22 07:39:46 2014 UTC revision 2238 by torben, Tue Dec 9 20:39:45 2014 UTC
# Line 26  public class Lookup { Line 26  public class Lookup {
26          static SafeProperties conf;          static SafeProperties conf;
27          static Logger logger = Logger.getLogger( Lookup.class.toString() );          static Logger logger = Logger.getLogger( Lookup.class.toString() );
28                    
29          int postnr;          String postnr;
30          Database db;          Database db;
31                                    
32          Adresse daekkedeAdresser[];          Adresse daekkedeAdresser[];
# Line 40  public class Lookup { Line 40  public class Lookup {
40          static Statistik mestBrugteTid = new Statistik();          static Statistik mestBrugteTid = new Statistik();
41          static Statistik stoersteDataset = new Statistik();          static Statistik stoersteDataset = new Statistik();
42                    
43            static Adresse[] alleDaekkedeAdresser;
44            
45                    
46          static class Statistik {          static class Statistik {
47                  int postnr;                  String postnr;
48                  int antalDaekkede = 0;                  int antalDaekkede = 0;
49                  int antalIkkeDaekkede = 0;                  int antalIkkeDaekkede = 0;
50                  int totalDataset = 0;                            int totalDataset = 0;          
# Line 56  public class Lookup { Line 58  public class Lookup {
58          }          }
59                    
60                    
61          public Lookup(int postnr, Database db) {          public Lookup(String postnr, Database db) {
62                  this.postnr = postnr;                  this.postnr = postnr;
63                  this.db = db;                  this.db = db;
64          }          }
# Line 87  public class Lookup { Line 89  public class Lookup {
89                  long start2 = 0;                  long start2 = 0;
90                                    
91                  try {                  try {
92                            
93                            logger.info("Henter _ikke_ daekkede adresser i " + postnr);
94                            queue = db.hentIkkedaekkedeAdresser(postnr);
95                            if (queue.size() == 0) {
96                                    logger.info("Fandt ikke nogen _ikke_ daekkede adresser i " + postnr);
97                                    return;
98                            }
99                            
100                          BoundingBox bbox = db.getBoundingbox(postnr);                          BoundingBox bbox = db.getBoundingbox(postnr);
101                          bbox.validateBbox();                          bbox.validateBbox();
102                                                    
# Line 97  public class Lookup { Line 107  public class Lookup {
107                          logger.info("Henter daekkede adresser i " + postnr);                          logger.info("Henter daekkede adresser i " + postnr);
108                          daekkedeAdresser = db.hentDaekkedeAdresser(bbox);                          daekkedeAdresser = db.hentDaekkedeAdresser(bbox);
109                                                    
                         logger.info("Henter _ikke_ daekkede adresser i " + postnr);  
                         queue = db.hentIkkedaekkedeAdresser(postnr);  
                           
110                          stat.postnr = postnr;                          stat.postnr = postnr;
111                          stat.antalDaekkede = daekkedeAdresser.length;                          stat.antalDaekkede = daekkedeAdresser.length;
112                          stat.antalIkkeDaekkede = queue.size();                          stat.antalIkkeDaekkede = queue.size();
# Line 143  public class Lookup { Line 150  public class Lookup {
150          }          }
151                    
152          public void shutdownWorker(int workerid) {          public void shutdownWorker(int workerid) {
153                  logger.info("Shutting down worker: " + workerid);                  //logger.info("Shutting down worker: " + workerid);
154                  LookupWorker key = workers.remove(workerid);                  LookupWorker key = workers.remove(workerid);
155                                    
156                  if (key == null) {                  if (key == null) {
157                          System.out.println("Error removing worker from set");                          System.out.println("Error removing worker from set " + workerid);
158                          System.exit(0);                          System.exit(0);
159                  }                  }
160          }          }
# Line 211  public class Lookup { Line 218  public class Lookup {
218                                    
219                  distributor = conf.getSafeProperty("DISTRIBUTOR");                  distributor = conf.getSafeProperty("DISTRIBUTOR");
220                  distributor = distributor.toUpperCase();                  distributor = distributor.toUpperCase();
221                    logger.info("Starting for DISTRIBUTOR:" + distributor);
222                    
223                  Constants.init(distributor);                  Constants.init(distributor);
224                    Constants consts = Constants.getInstance();
225                                    
226                  Database db = new Database(conf);                  Database db = new Database(conf);
227                                    
228                                    
229    
230                                    
231                                    boolean testRun= false;
232                                    
233                                    
234                  long start = System.currentTimeMillis();                  long start = System.currentTimeMillis();
235                                    
236                  logger.info("Finder postnumre");                  if (testRun == false) {
                 List<Integer> postnumre = db.hentPostnumre();  
                   
                 // Først validerer vi BBox på alle postnummre, for at undgå fuldt stop midt i beregningen  
                 for(Integer postnr : postnumre) { //  
                         logger.info("Validerer BBox for " + postnr);  
                         BoundingBox bbox = db.getBoundingbox(postnr);  
                         bbox.validateBbox();  
                 }  
                   
237                                    
238                  //pre-check er ok - reset tmp tabel og start søgningen                          logger.info("Finder postnumre");
239                  db.resetResultTable();                          List<String> postnumre = db.hentPostnumre();
240                                            
241                  for(Integer postnr : postnumre) {                          // Først validerer vi BBox på alle postnummre, for at undgå fuldt stop midt i beregningen
242                          Lookup lookup = new Lookup(postnr, db);                          for(String postnr : postnumre) { //
243                          lookup.doLookup();                                                        logger.info("Validerer BBox for " + postnr);
244                  }                                  BoundingBox bbox = db.getBoundingbox(postnr);
245                                                    bbox.validateBbox();
246                  if (rename_tables) {                          }
247                          db.renameResultTables();                          
248                            if (consts.doExtendedLookup()) {
249                                    logger.info("Henter alle daekkede adresser");
250                                    alleDaekkedeAdresser = db.hentAlleDaekkedeAdresser();
251                                    logger.info( "AlleDaekkedeAdresser.length=" + alleDaekkedeAdresser.length);
252                            }
253                            
254                            
255                            //pre-check er ok - reset tmp tabel og start søgningen
256                            db.resetResultTable();
257                            
258                            for(String postnr : postnumre) {
259                                    Lookup lookup = new Lookup(postnr, db);
260                                    lookup.doLookup();                      
261                            }
262                            
263                            if (rename_tables) {
264                                    db.renameResultTables();
265                            } else {
266                                    logger.info( "Rename tables is disabled !!!" );
267                            }
268                            
269            
270    
271                  } else {                  } else {
272                          logger.info( "Rename tables is disabled !!!" );                          /// Test
273                            db.resetResultTable();
274                            
275                            if (consts.doExtendedLookup()) {
276                                    alleDaekkedeAdresser = db.hentAlleDaekkedeAdresser();
277                                    logger.info( "AlleDaekkedeAdresser.length=" + alleDaekkedeAdresser.length);
278                            }
279                            
280                            Lookup lookup = new Lookup("458x", db);
281                            lookup.doLookup();                                                              
282                  }                  }
283                                    
284                  long now = System.currentTimeMillis();                  long now = System.currentTimeMillis();
285                  long elapsed = now - start ;                  long elapsed = now - start ;
286                    
287                  logger.info("Mest brugte tid: " + mestBrugteTid);                  logger.info("Mest brugte tid: " + mestBrugteTid);
288                  logger.info("Flest Ikke-dækkede, " + flestIkkeDaekkede);                  logger.info("Flest Ikke-dækkede, " + flestIkkeDaekkede);
289                  logger.info("Flest Dækkede, " + flestDaekkede);                  logger.info("Flest Dækkede, " + flestDaekkede);
290                  logger.info("Største Dataset, " + stoersteDataset);                  logger.info("Største Dataset, " + stoersteDataset);            
291                  logger.info("Fuld load done : " + formatMilliSeconds(elapsed) );                  logger.info("Fuld load done : " + formatMilliSeconds(elapsed) );
   
                   
                 /*  
                 /// Test  
                 db.resetResultTable();  
                 Lookup lookup = new Lookup(2750, db);  
                 lookup.doLookup();                
                 long now = System.currentTimeMillis();  
                 long elapsed = now - start ;  
                 logger.info("Fuld load done : " + formatMilliSeconds(elapsed) );*/  
292          }          }
293                    
294            
295          static String formatMilliSeconds(long milliseconds) {          static String formatMilliSeconds(long milliseconds) {
296                  int mseconds = (int) milliseconds % 1000;                  int mseconds = (int) milliseconds % 1000;
297                  int seconds = (int) (milliseconds / 1000) % 60 ;                  int seconds = (int) (milliseconds / 1000) % 60 ;
Legend:
Removed from v.2227  
changed lines
  Added in v.2238
  ViewVC Help
Powered by ViewVC 1.1.20