/[projects]/dao/DaoAdresseVedligehold/src/main/java/dk/daoas/adressevedligehold/coveragefileupload/AddressManager.java
ViewVC logotype

Diff of /dao/DaoAdresseVedligehold/src/main/java/dk/daoas/adressevedligehold/coveragefileupload/AddressManager.java

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

dao/DaoAdresseVedligehold/src/main/java/dk/daoas/adressevedligehold/AddressManager.java revision 2904 by torben, Wed Feb 3 18:51:36 2016 UTC dao/DaoAdresseVedligehold/src/main/java/dk/daoas/adressevedligehold/coveragefileupload/AddressManager.java revision 3084 by torben, Fri Jul 29 09:16:03 2016 UTC
# Line 1  Line 1 
1  package dk.daoas.adressevedligehold;  package dk.daoas.adressevedligehold.coveragefileupload;
2    
3  import java.sql.SQLException;  import java.sql.SQLException;
4  import java.util.ArrayList;  import java.util.ArrayList;
# Line 11  import java.util.TreeMap; Line 11  import java.util.TreeMap;
11    
12  import org.apache.commons.lang3.StringUtils;  import org.apache.commons.lang3.StringUtils;
13    
 import dk.daoas.adressevedligehold.AddressSourceEntry.EntryType;  
14  import dk.daoas.adressevedligehold.beans.Address;  import dk.daoas.adressevedligehold.beans.Address;
15  import dk.daoas.adressevedligehold.beans.Address.AddressState;  import dk.daoas.adressevedligehold.beans.Address.AddressState;
16  import dk.daoas.adressevedligehold.db.DatabaseLayerImplementation;  import dk.daoas.adressevedligehold.coveragefileupload.AddressSourceEntry.EntryType;
17    import dk.daoas.adressevedligehold.db.DatabaseCoverageUpdate;
18  import dk.daoas.adressevedligehold.tasks.TaskLogger;  import dk.daoas.adressevedligehold.tasks.TaskLogger;
19  import dk.daoas.adressevedligehold.util.DeduplicateHelper;  import dk.daoas.adressevedligehold.util.DeduplicateHelper;
20  import dk.daoas.adressevedligehold.util.MiscUtils;  import dk.daoas.adressevedligehold.util.MiscUtils;
21  import dk.daoas.adressevedligehold.util.TimingHelper;  import dk.daoas.adressevedligehold.util.TimingHelper;
22    
23  /*  /*
24   * TODO: håndtering af entry dupletter ! (+ rapportering af dem)   *  
   
   
   
25   */   */
26    
27  public class AddressManager {  public class AddressManager {
28                    
29          private TaskLogger logger = TaskLogger.getInstance();          private TaskLogger logger = TaskLogger.getInstance();
30                    
31            private int duplicateCount;
32                    
33          List<Address> addressList;          List<Address> addressList;
34                    
# Line 43  public class AddressManager { Line 41  public class AddressManager {
41          Map<Short,Short> dbkBaneMap = new TreeMap<Short,Short>();          Map<Short,Short> dbkBaneMap = new TreeMap<Short,Short>();
42                    
43          public AddressManager() throws SQLException {          public AddressManager() throws SQLException {
44                  DatabaseLayerImplementation db = new DatabaseLayerImplementation();                  DatabaseCoverageUpdate db = new DatabaseCoverageUpdate();
45                                    
46                  searchStructure = new TreeMap<Integer, TreeMap<Short, ArrayList<Address>> >();                  searchStructure = new TreeMap<Integer, TreeMap<Short, ArrayList<Address>> >();
47                                    
# Line 91  public class AddressManager { Line 89  public class AddressManager {
89                                    
90                                    
91          }          }
92            
93          public void closeUnvisitedAddresses(String distributor, EntryUgedage ugedage) {          @SuppressWarnings("PMD.CollapsibleIfStatements")        
94            public int closeUnvisitedAddresses(String distributor, EntryUgedage ugedage) {
95                    
96                    int totalClosed = 0;
97                    
98                  for (Address addr : addressList) {                  for (Address addr : addressList) {
99                          if (addr.distributor == null)                          if (addr.distributor == null)
100                                  continue;                                  continue;
# Line 167  public class AddressManager { Line 169  public class AddressManager {
169                          if (addr.state == AddressState.NOT_CHANGED && closedCount>0) {                          if (addr.state == AddressState.NOT_CHANGED && closedCount>0) {
170                                  addr.state = AddressState.CLOSED;                                  addr.state = AddressState.CLOSED;
171                          }                          }
172                            
173                            if (closedCount>0) {
174                                    totalClosed++;
175                            }
176                                    
177                  }                  }
178                    
179                    return totalClosed;
180          }          }
181            
182            
183          public void dumpChanged() {          public void dumpChanged() {
184                  int count = 0;                  int count = 0;
185                  for (Address addr : addressList) {                  for (Address addr : addressList) {
# Line 192  public class AddressManager { Line 202  public class AddressManager {
202                  }                  }
203          }          }
204                    
205          public void writeBackChanges() {          public void writeBackChanges() throws Exception{
206                  logger.info("Writing back changes");                  logger.info("Writing back changes");
207                  TimingHelper timer = new TimingHelper();                  TimingHelper timer = new TimingHelper();
208                                    
# Line 208  public class AddressManager { Line 218  public class AddressManager {
218                          }                          }
219                  }                  }
220                                    
221                  DatabaseLayerImplementation db = new DatabaseLayerImplementation();                  DatabaseCoverageUpdate db = new DatabaseCoverageUpdate();
222                                    
223                  db.updateAddresses(updates);                  db.updateAddresses(updates);
224                  db.saveNewAddresses(inserts);                  db.saveNewAddresses(inserts);
# Line 230  public class AddressManager { Line 240  public class AddressManager {
240          private void visitSingle(AddressSourceEntry entry) {          private void visitSingle(AddressSourceEntry entry) {
241                  TreeMap<Short, ArrayList<Address>> gade = searchStructure.get( entry.gadeid );                  TreeMap<Short, ArrayList<Address>> gade = searchStructure.get( entry.gadeid );
242                  if (gade == null) {                  if (gade == null) {
243                            /* No need to register unknown streets, since we create all entries that we can
244                          if (! unknownStreets.containsKey(entry.gadeid)) {                          if (! unknownStreets.containsKey(entry.gadeid)) {
245                                  unknownStreets.put(entry.gadeid, entry.vejnavn);                                                                  unknownStreets.put(entry.gadeid, entry.vejnavn);                                
246                          }                          }*/
247                                                    
248                          createFromEntry(entry); // if we get here there was no match - so we need to create it                          createFromEntry(entry); // if we get here there was no match - so we need to create it
249                          return;                          return;
# Line 256  public class AddressManager { Line 267  public class AddressManager {
267                  }                  }
268          }          }
269                    
270            @SuppressWarnings("PMD.CollapsibleIfStatements")        
271          private void visitRange(AddressSourceEntry entry) {          private void visitRange(AddressSourceEntry entry) {
272                                    
273                  TreeMap<Short, ArrayList<Address>> gade = searchStructure.get( entry.gadeid );                  TreeMap<Short, ArrayList<Address>> gade = searchStructure.get( entry.gadeid );
# Line 326  public class AddressManager { Line 338  public class AddressManager {
338                                          }                                          }
339                                  }                                                                }                              
340                          } else {                          } else {
341                                    duplicateCount++;
342                                  logger.info( "Double visit monday " + addr);                                  logger.info( "Double visit monday " + addr);
343                                    return; // if the entry is duplicate on one day that it covers - then it will be as well on all the othters
344                          }                          }
345    
346                  }                  }
# Line 348  public class AddressManager { Line 362  public class AddressManager {
362                                          }                                          }
363                                  }                                  }
364                          } else {                          } else {
365                                    duplicateCount++;
366                                  logger.info( "Double visit tuesday " + addr);                                  logger.info( "Double visit tuesday " + addr);
367                                    return; // if the entry is duplicate on one day that it covers - then it will be as well on all the othters
368                          }                                                        }                              
369                  }                  }
370    
# Line 368  public class AddressManager { Line 384  public class AddressManager {
384                                          }                                          }
385                                  }                                  }
386                          } else {                          } else {
387                                    duplicateCount++;
388                                  logger.info( "Double visit wednesday " + addr);                                  logger.info( "Double visit wednesday " + addr);
389                                    return; // if the entry is duplicate on one day that it covers - then it will be as well on all the othters
390                          }                                        }              
391                  }                  }
392    
# Line 390  public class AddressManager { Line 408  public class AddressManager {
408                                          }                                          }
409                                  }                                  }
410                          } else {                          } else {
411                                    duplicateCount++;
412                                  logger.info( "Double visit thursday " + addr);                                  logger.info( "Double visit thursday " + addr);
413                                    return; // if the entry is duplicate on one day that it covers - then it will be as well on all the othters
414                          }                                                                }                                      
415                  }                  }
416    
# Line 411  public class AddressManager { Line 431  public class AddressManager {
431                                          }                                          }
432                                  }                                  }
433                          } else {                          } else {
434                                    duplicateCount++;
435                                  logger.info( "Double visit friday " + addr);                                  logger.info( "Double visit friday " + addr);
436                                    return; // if the entry is duplicate on one day that it covers - then it will be as well on all the othters
437                          }                                }      
438                  }                  }
439    
# Line 433  public class AddressManager { Line 455  public class AddressManager {
455                                          }                                          }
456                                  }                                  }
457                          } else {                          } else {
458                                    duplicateCount++;
459                                  logger.info( "Double visit saturday " + addr);                                  logger.info( "Double visit saturday " + addr);
460                                    return; // if the entry is duplicate on one day that it covers - then it will be as well on all the othters
461                          }                                                                }                                      
462                  }                  }
463    
# Line 454  public class AddressManager { Line 478  public class AddressManager {
478                                          }                                          }
479                                  }                                  }
480                          } else {                          } else {
481                                    duplicateCount++;
482                                  logger.info( "Double visit sunday " + addr);                                  logger.info( "Double visit sunday " + addr);
483                                    return; // if the entry is duplicate on one day that it covers - then it will be as well on all the othters
484                          }                                                                }                                      
485                  }                  }
486                                    
# Line 482  public class AddressManager { Line 508  public class AddressManager {
508                    
509                    
510          private void createFromEntry(AddressSourceEntry entry) {          private void createFromEntry(AddressSourceEntry entry) {
511                  if (entry.husnr == 999) {                  if (entry.husnr >= 1000) { //husnumre i DK må kun være på 3 cifre
512                            return;
513                    }
514                    
515                    if (entry.husnr == 999 || entry.husnr == 998) { //frasorter de to højest gyldige husnr - det er typisk special adresser
516                          return;                          return;
517                  }                  }
518                    
519                    if (entry.litra.length() > 1) { //litra må kun være på 1 tegn
520                            return;
521                    }
522                    if (entry.litra.length() == 1) {
523                            char litra = entry.litra.charAt(0);
524                            if ( Character.isLetter(litra) == false ) {
525                                    return;
526                            }
527                            
528                    }
529                    
530                  if (entry.kommunekode == 0 || entry.vejkode == 0) {                  if (entry.kommunekode == 0 || entry.vejkode == 0) {
531                          return;                          return;
532                  }                  }
# Line 492  public class AddressManager { Line 534  public class AddressManager {
534                          return;                          return;
535                  }                  }
536                                    
537                  if (entry.gadeid == 0) {                  if (entry.vejkode > 9999) {
538                          return;                          return;
539                  }                  }
540                                    
541                    if (entry.gadeid == 0) {
542                            return;
543                    }
544                                    
545                  String gadeidStr = Integer.toString(entry.gadeid);                  String gadeidStr = Integer.toString(entry.gadeid);
546                  if (gadeidStr.length() != 9) {                  if (gadeidStr.length() != 9) {
547                          return;                          return;
# Line 508  public class AddressManager { Line 554  public class AddressManager {
554                                    
555                  logger.info("Opretter adresse ud fra " + entry);                  logger.info("Opretter adresse ud fra " + entry);
556                                    
557                  Address a = new Address();                  Address addr = new Address();
558                  a.state = AddressState.CREATED;                  addr.state = AddressState.CREATED;
559                                    
560                  a.distributor = entry.distributor;                  addr.distributor = entry.distributor;
561                  a.gadeid = entry.gadeid;                  addr.gadeid = entry.gadeid;
562                  a.kommunekode = entry.kommunekode;                  addr.kommunekode = entry.kommunekode;
563                  a.vejkode = entry.vejkode;                  addr.vejkode = entry.vejkode;
564                  a.vejnavn = entry.vejnavn;                  addr.vejnavn = entry.vejnavn;
565                  a.husnr = entry.husnr;                  addr.husnr = entry.husnr;
566                  a.husnrbogstav = entry.litra;                  addr.husnrbogstav = entry.litra;
567                  a.postnr = entry.postnr;                  addr.postnr = entry.postnr;
                 //a.visited = true;  
568                                    
                 if (entry.ugedage.mandag) {  
                         a.ruteMandag = entry.rute;  
                         a.korelisteMandag = entry.koreliste;  
                 }  
                 if (entry.ugedage.tirsdag) {  
                         a.ruteTirsdag = entry.rute;  
                         a.korelisteTirsdag = entry.koreliste;  
                 }  
                 if (entry.ugedage.onsdag) {  
                         a.ruteOnsdag = entry.rute;  
                         a.korelisteOnsdag = entry.koreliste;  
                 }                
                 if (entry.ugedage.torsdag) {  
                         a.ruteTorsdag = entry.rute;  
                         a.korelisteTorsdag = entry.koreliste;  
                 }                
                 if (entry.ugedage.fredag) {  
                         a.ruteFredag = entry.rute;  
                         a.korelisteFredag = entry.koreliste;  
                 }                
                 if (entry.ugedage.lordag) {  
                         a.ruteLordag = entry.rute;  
                         a.korelisteLordag = entry.koreliste;  
                 }                
                 if (entry.ugedage.sondag) {  
                         a.ruteSondag = entry.rute;  
                         a.korelisteLordag = entry.koreliste;  
                 }                
                   
                 updateDbkBane(a);  
                   
                 // Nu er det nye adresse object oprettet - nu skal det gemmes i søge strukturen og totallisten  
569                                    
570                    updateAddress(addr, entry);
571    
572                  TreeMap<Short, ArrayList<Address>> gade = searchStructure.get( a.gadeid );                  
573                    // Nu er det nye adresse object oprettet - nu skal det gemmes i søge strukturen og totallisten        
574                    TreeMap<Short, ArrayList<Address>> gade = searchStructure.get( addr.gadeid );
575                                    
576                  if (gade == null) {                  if (gade == null) {
577                          gade = new TreeMap<Short,ArrayList<Address>>();                          gade = new TreeMap<Short,ArrayList<Address>>();
578                          searchStructure.put(a.gadeid, gade);                          searchStructure.put(addr.gadeid, gade);
579                  }                  }
580                                    
581                  ArrayList<Address> litraList = gade.get(a.husnr);                  ArrayList<Address> litraList = gade.get(addr.husnr);
582                  if (litraList == null) {                  if (litraList == null) {
583                          litraList = new ArrayList<Address>();                          litraList = new ArrayList<Address>();
584                          gade.put(a.husnr, litraList);                          gade.put(addr.husnr, litraList);
585                  }                  }
586                                    
587                  litraList.add(a);                  litraList.add(addr);
588                  addressList.add(a);                  addressList.add(addr);
589                                                                    
590          }          }
591                    
# Line 593  public class AddressManager { Line 609  public class AddressManager {
609                    
610          private void updateDbkBane(Address a) {          private void updateDbkBane(Address a) {
611                  List<Short> daoBane205 = Arrays.asList( new Short[] {7,10,11,12,12,14,15,16,18,19,20} );                  List<Short> daoBane205 = Arrays.asList( new Short[] {7,10,11,12,12,14,15,16,18,19,20} );
612                    
613                    
614                  Short bane = null;                  Short bane = null;
615                                    
616                  switch (a.distributor) {                  switch (a.distributor) {
# Line 603  public class AddressManager { Line 619  public class AddressManager {
619                          break;                          break;
620                  case "DAO":                  case "DAO":
621                          String koreliste = MiscUtils.firstNonNull(a.korelisteMandag,a.korelisteLordag, a.korelisteSondag); //DAO har kun 3 dækningstyper                          String koreliste = MiscUtils.firstNonNull(a.korelisteMandag,a.korelisteLordag, a.korelisteSondag); //DAO har kun 3 dækningstyper
622                          short first2 = Short.parseShort( koreliste.substring(0,2) );                          try {
623                          if ( daoBane205.contains(first2) ) {                                  short first2 = Short.parseShort( koreliste.substring(0,2) );
624                                  bane = 205;                                  if ( daoBane205.contains(first2) ) {
625                          } else if (first2 >= 24 && first2<=30) {                                          bane = 205;
626                                  bane = 201;                                  } else if (first2 >= 24 && first2<=30) {
627                          } else {                                          bane = 201;
628                                  bane = 202;                                  } else {
629                                            bane = 202;
630                                    }
631                            } catch (NumberFormatException e) {
632                                    throw new RuntimeException("Error parsing koreliste '" + koreliste + "' for " + a);
633                          }                          }
634                                                                    
635                          break;                                            break;                  
# Line 643  public class AddressManager { Line 663  public class AddressManager {
663                  return Collections.unmodifiableMap( unknownStreets );                  return Collections.unmodifiableMap( unknownStreets );
664          }          }
665                    
666                    public int getDuplicateCount() {
667                    return duplicateCount;
668            }
669                    
670          public int getRejectedCount() {          public int getRejectedCount() {
671                  return rejectedEntries.size();                  return rejectedEntries.size();
Legend:
Removed from v.2904  
changed lines
  Added in v.3084
  ViewVC Help
Powered by ViewVC 1.1.20