/[projects]/dao/FuldDaekningWorker/src/dk/daoas/fulddaekning/Lookup.java
ViewVC logotype

Diff of /dao/FuldDaekningWorker/src/dk/daoas/fulddaekning/Lookup.java

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 2148 by torben, Wed Apr 30 13:34:24 2014 UTC revision 2153 by torben, Wed May 7 16:07:46 2014 UTC
# Line 2  package dk.daoas.fulddaekning; Line 2  package dk.daoas.fulddaekning;
2    
3  import java.io.File;  import java.io.File;
4  import java.io.FileReader;  import java.io.FileReader;
5    import java.util.ArrayList;
6    import java.util.List;
7  import java.util.Map;  import java.util.Map;
8  import java.util.Properties;  import java.util.Properties;
9    import java.util.Queue;
10  import java.util.concurrent.ConcurrentHashMap;  import java.util.concurrent.ConcurrentHashMap;
11  import java.util.logging.Level;  import java.util.logging.Level;
12  import java.util.logging.Logger;  import java.util.logging.Logger;
# Line 17  public class Lookup { Line 20  public class Lookup {
20          static Properties conf;          static Properties conf;
21          static Logger logger = Logger.getLogger( Lookup.class.toString() );          static Logger logger = Logger.getLogger( Lookup.class.toString() );
22                    
23            int postnr;
24          Database db;          Database db;
25          WorkSet workset;                  
26            ArrayList<Adresse> daekkedeAdresser;
27            Queue<Adresse> queue;
28                    
29          Map<Integer, LookupWorker> workers = new ConcurrentHashMap<Integer, LookupWorker>();          Map<Integer, LookupWorker> workers = new ConcurrentHashMap<Integer, LookupWorker>();
30    
31            static int flestDaekkedeAntal = 0;
32            static int flestDaekkedePostnr;
33            
34            static int flestIkkeDaekkedeAntal = 0;
35            static int flestIkkeDaekkedePostnr;
36                    
37                    
38          public Lookup(WorkSet workset, Database db) {          public Lookup(int postnr, Database db) {
39                    this.postnr = postnr;
40                  this.db = db;                  this.db = db;
                 this.workset = workset;  
41          }          }
42                    
43                    
44                    
45          public void doLookup() throws BoundingBoxException {          public void doLookup() throws BoundingBoxException {
46                  logger.info("Starting for postnr=" + workset.postnr);                            logger.info("Starting for postnr=" + postnr);
47                    
48                    int queueSize=-1;
49                                    
50                  long start1 = System.currentTimeMillis();                                long start1 = System.currentTimeMillis();              
51                  long start2 = 0;                  long start2 = 0;
52                                    
53                  try {                  try {
54                            BoundingBox bbox = db.getBoundingbox(postnr);
55                          logger.info("Starter beregning for " + workset.postnr);                          bbox.validateBbox();
56                            
57                            logger.info("Bbox=" + bbox);
58                            bbox.adjustToMargin();
59                            logger.info("Bbox Adjusted=" + bbox);
60                            
61                            logger.info("Henter daekkede adresser i " + postnr);
62                            daekkedeAdresser = db.hentDaekkedeAdresser(bbox);
63                            
64                            logger.info("Henter _ikke_ daekkede adresser i " + postnr);
65                            queue = db.hentIkkedaekkedeAdresser(postnr);
66                            queueSize = queue.size();
67                            
68                            if (daekkedeAdresser.size() > flestDaekkedeAntal) {
69                                    flestDaekkedeAntal = daekkedeAdresser.size();
70                                    flestDaekkedePostnr = postnr;
71                            }
72                            
73                            if (queueSize > flestIkkeDaekkedeAntal) {
74                                    flestIkkeDaekkedeAntal = queueSize;
75                                    flestIkkeDaekkedePostnr = postnr;
76                            }
77                            
78                            
79                            logger.info("Starter beregning for " + postnr);
80                          start2 = System.currentTimeMillis();                          start2 = System.currentTimeMillis();
81                                                                                                                                                                                                                                    
82                          for (int i =0; i<max_workers; i++) {                          for (int i =0; i<max_workers; i++) {
# Line 67  public class Lookup { Line 103  public class Lookup {
103                  }                  }
104                  long now = System.currentTimeMillis();                  long now = System.currentTimeMillis();
105                                    
106                    logger.info("Antal daekkede:" + daekkedeAdresser.size() + "  postnr=" + postnr);
107                  logger.info("Antal daekkede:" + workset.daekkedeAdresser.size() );                  logger.info("Antal ikke-daekkede:" + queueSize + "  postnr=" + postnr);
108                  logger.info("Antal ikke-daekkede:" + workset.queueSize );                  
109                  logger.info("Done! elapsed=" + (now-start1) + "/" +  (now-start2) );                  logger.info("Done! elapsed=" + (now-start1) + "/" +  (now-start2) + "  postnr=" + postnr);
110          }          }
111                    
112          public void shutdownWorker(int workerid) {          public void shutdownWorker(int workerid) {
# Line 84  public class Lookup { Line 120  public class Lookup {
120          public Database getDb() {          public Database getDb() {
121                  return db;                  return db;
122          }          }
123            
124          public WorkSet getWorkSet() {  
125                  return workset;  
126            public ArrayList<Adresse> getDaekkedeAdresser() {
127                    return daekkedeAdresser;
128          }          }
129    
130            public Queue<Adresse> getQueue() {
131                    return queue;
132            }
133    
134    
135            
136            
137            
138                    
139          /////////////////////////////          /////////////////////////////
140          // Static functions          // Static functions
# Line 114  public class Lookup { Line 160  public class Lookup {
160                  logger.info("Starting with VERBOSE:" + verbose);                  logger.info("Starting with VERBOSE:" + verbose);
161                                    
162                  Database db = new Database(conf);                  Database db = new Database(conf);
163                    
164                  db.resetResultTable();                  db.resetResultTable();
165    
166                                    
                 InputWorker inputWorker = new InputWorker(db);  
                 Thread inputThread = new Thread(inputWorker);  
                 inputThread.start();  
                   
167                                    
                 long start = System.currentTimeMillis();  
                 boolean doContinue = true;  
                   
                 while (inputWorker.queue.isEmpty() == true) {  
                         Thread.sleep(3); //Vent indtil at første arbejds sæt er på plads  
                 }  
168                                    
169                                    
170                  while ( doContinue == true ) {                  long start = System.currentTimeMillis();
                         WorkSet set = inputWorker.queue.poll();  
                           
                         if (set != null) {  
                                 Lookup lookup = new Lookup(set, db);  
                                 lookup.doLookup();                                
                         } else {  
                                 System.out.println("Buffer underrun");  
                                 Thread.sleep(100);  
                         }  
                           
                         if ( inputWorker.isDone == true && inputWorker.queue.isEmpty() == true)  
                                 doContinue = false;  
                 }  
171                                    
172                  /*logger.info("Finder postnumre");                  logger.info("Finder postnumre");
173                  List<Integer> postnumre = db.hentPostnumre();                  List<Integer> postnumre = db.hentPostnumre();
174                                    
175                  for(Integer postnr : postnumre) {                  for(Integer postnr : postnumre) {
176                          Lookup lookup = new Lookup(postnr, db);                          Lookup lookup = new Lookup(postnr, db);
177                          lookup.doLookup();                                                lookup.doLookup();                      
178                  }*/                  }
179                                    
180                  long now = System.currentTimeMillis();                  long now = System.currentTimeMillis();
181                                                    
182                  logger.info("Fuld load done : " + (now-start) );                  logger.info("Fuld load done : " + (now-start) );
183                    logger.info("Flest Ikke-dækkede, " + flestIkkeDaekkedePostnr + ": " + flestIkkeDaekkedeAntal);
184                    logger.info("Flest Dækkede, " + flestDaekkedePostnr + ": " + flestDaekkedeAntal);
185                                    
186                                    
187                  //Lookup lookup = new Lookup(7400, db);                  //Lookup lookup = new Lookup(7400, db);
188                  //lookup.doLookup();                              //lookup.doLookup();            
189          }          }
190                            
   
           
191  }  }
Legend:
Removed from v.2148  
changed lines
  Added in v.2153
  ViewVC Help
Powered by ViewVC 1.1.20