/[projects]/dao/FuldDaekningWorker/src/dk/daoas/fulddaekning/Lookup.java
ViewVC logotype

Diff of /dao/FuldDaekningWorker/src/dk/daoas/fulddaekning/Lookup.java

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 2241 by torben, Wed Dec 10 09:50:33 2014 UTC revision 2422 by torben, Tue Mar 3 08:14:09 2015 UTC
# Line 3  package dk.daoas.fulddaekning; Line 3  package dk.daoas.fulddaekning;
3  import java.util.Map;  import java.util.Map;
4  import java.util.Queue;  import java.util.Queue;
5  import java.util.concurrent.ConcurrentHashMap;  import java.util.concurrent.ConcurrentHashMap;
6    import java.util.concurrent.CyclicBarrier;
7    import java.util.concurrent.ThreadPoolExecutor;
8  import java.util.logging.Level;  import java.util.logging.Level;
9  import java.util.logging.Logger;  import java.util.logging.Logger;
10    
# Line 14  public class Lookup { Line 16  public class Lookup {
16                    
17          final static Logger logger = Logger.getLogger( Lookup.class.toString() );          final static Logger logger = Logger.getLogger( Lookup.class.toString() );
18                    
19          String postnr;          int postnr;
20          Database db;          Database db;
21                                    
22          Adresse daekkedeAdresser[];          Adresse daekkedeAdresser[];
23            Adresse udvidetDaekkedeAdresser[];
24          Queue<Adresse> queue;          Queue<Adresse> queue;
25                    
26          Map<Integer, LookupWorker> workers = new ConcurrentHashMap<Integer, LookupWorker>();          Map<Integer, LookupWorker> workers = new ConcurrentHashMap<Integer, LookupWorker>();
27    
28            ThreadPoolExecutor threadPool;  
29                    
30            CyclicBarrier barrier;
31    
32                                    
33                    
34          public Lookup(String postnr, Database db) {          public Lookup(int postnr, Database db, ThreadPoolExecutor threadPool) {
35                  this.postnr = postnr;                  this.postnr = postnr;
36                  this.db = db;                  this.db = db;
37                    this.threadPool = threadPool;
38          }          }
39                    
40    
# Line 37  public class Lookup { Line 43  public class Lookup {
43                  logger.info("Starting for postnr=" + postnr);                  logger.info("Starting for postnr=" + postnr);
44                                    
45                  Statistik stat = new Statistik();                  Statistik stat = new Statistik();
46                    
47                    Constants consts = Constants.getInstance();
48                                                                    
49                  long start1 = System.currentTimeMillis();                                long start1 = System.currentTimeMillis();              
50                  long start2 = 0;                  long start2 = 0;
51                                    
52                    barrier = new CyclicBarrier(LookupMain.max_workers + 1);
53                    
54                  try {                  try {
55                                                    
56                          logger.info("Henter _ikke_ daekkede adresser i " + postnr);                          logger.info("Henter _ikke_ daekkede adresser i " + postnr);
57                          queue = db.hentIkkedaekkedeAdresser(postnr);                          queue = db.hentIkkedaekkedeAdresserCache(postnr);
58                          if (queue.size() == 0) {                          if (queue.size() == 0) {
59                                  logger.info("Fandt ikke nogen _ikke_ daekkede adresser i " + postnr);                                  logger.info("Fandt ikke nogen _ikke_ daekkede adresser i " + postnr);
60                                  return;                                  return;
# Line 54  public class Lookup { Line 64  public class Lookup {
64                          bbox.validateBbox();                          bbox.validateBbox();
65                                                    
66                          logger.info("Bbox=" + bbox);                          logger.info("Bbox=" + bbox);
67                          bbox.adjustToMargin();                          bbox.adjustToMargin( consts.getKmMargin() );
68                          logger.info("Bbox Adjusted=" + bbox);                          logger.info("Bbox Adjusted=" + bbox);
69                                                    
70                          logger.info("Henter daekkede adresser i " + postnr);                          logger.info("Henter daekkede adresser i " + postnr);
71                          daekkedeAdresser = db.hentDaekkedeAdresser(bbox);                          daekkedeAdresser = db.hentDaekkedeAdresserCache(bbox);
72                            
73                            BoundingBox udvidetBbox = db.getBoundingbox(postnr);
74                            udvidetBbox.adjustToMargin( consts.getMaxDistance() );
75                            
76                            logger.info("Henter udvidet daekkede adresser i " + postnr);
77                            udvidetDaekkedeAdresser = db.hentDaekkedeAdresserCache(udvidetBbox);
78                            
79                            
80                                                    
81                          stat.postnr = postnr;                          stat.postnr = postnr;
82                          stat.antalDaekkede = daekkedeAdresser.length;                          stat.antalDaekkede = daekkedeAdresser.length;
# Line 70  public class Lookup { Line 88  public class Lookup {
88                          start2 = System.currentTimeMillis();                          start2 = System.currentTimeMillis();
89                                                                                                                                                                                                                                    
90                          for (int i =0; i < LookupMain.max_workers; i++) {                          for (int i =0; i < LookupMain.max_workers; i++) {
91                                  LookupWorker worker = new LookupWorker(i, this);                                  LookupWorker worker = new LookupWorker(i, this, barrier);
92                                  Thread t = new Thread(worker);                                  threadPool.submit(worker);
                                 t.start();  
                                   
                                 workers.put(i, worker);  
93                          }                          }
94                                                    
95                          while (workers.size() > 0) {                          barrier.await();
                                 Thread.sleep(10);//wait for worker threads  
                         }  
96                                                    
97                          db.saveBatch();//Save any unsaved rows                          db.saveBatch();//Save any unsaved rows
98                                                    
# Line 102  public class Lookup { Line 115  public class Lookup {
115                  logger.info("Done! elapsed=" + (now-start1) + "/" +  (now-start2) + "  postnr=" + postnr);                  logger.info("Done! elapsed=" + (now-start1) + "/" +  (now-start2) + "  postnr=" + postnr);
116          }          }
117                    
         public void shutdownWorker(int workerid) {  
                 //logger.info("Shutting down worker: " + workerid);  
                 LookupWorker key = workers.remove(workerid);  
                   
                 if (key == null) {  
                         System.out.println("Error removing worker from set " + workerid);  
                         System.exit(0);  
                 }  
         }  
118                    
119          // Getters and setters          // Getters and setters
120                                    
# Line 124  public class Lookup { Line 128  public class Lookup {
128          public Adresse[] getDaekkedeAdresser() {          public Adresse[] getDaekkedeAdresser() {
129                  return daekkedeAdresser;                  return daekkedeAdresser;
130          }          }
131            public Adresse[] getUdvidetDaekkedeAdresser() {
132                    return udvidetDaekkedeAdresser;
133            }
134            
135            
136    
137          public Queue<Adresse> getQueue() {          public Queue<Adresse> getQueue() {
138                  return queue;                  return queue;

Legend:
Removed from v.2241  
changed lines
  Added in v.2422

  ViewVC Help
Powered by ViewVC 1.1.20