/[projects]/dao/DaoAdresseService/src/main/java/dk/daoas/daoadresseservice/AddressSearch.java
ViewVC logotype

Diff of /dao/DaoAdresseService/src/main/java/dk/daoas/daoadresseservice/AddressSearch.java

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 2557 by torben, Fri May 22 12:00:25 2015 UTC revision 2778 by torben, Fri Nov 20 16:31:01 2015 UTC
# Line 42  public class AddressSearch { Line 42  public class AddressSearch {
42                    
43          private DataStatisticsBean stats = new DataStatisticsBean();          private DataStatisticsBean stats = new DataStatisticsBean();
44                    
45          ServiceConfig config;          private DatabaseLayer db;
46            
47                    
48          StreetnameHelper levenshteinHelper;          StreetnameHelper levenshteinHelper;
49            StreetnameHelper metaphoneHelper;
50          StreetnameHelper googleHelper;          StreetnameHelper googleHelper;
51          StreetnameHelper osmHelper;          StreetnameHelper osmHelper;
52                    
53                    
54          public AddressSearch(ServiceConfig config) {          public AddressSearch(DatabaseLayer db, ServiceConfig config) {
55                  this.config = config;                  
56                    this.db = db;
57                                    
58                  levenshteinHelper = new LevenshteinStreetnameHelper( this );                  levenshteinHelper = new LevenshteinStreetnameHelper( this );
59                    metaphoneHelper = new DoubleMetaphoneStreetnameHelper(config);
60                  googleHelper = new GoogleStreetnameHelper( config );                  googleHelper = new GoogleStreetnameHelper( config );
61                  osmHelper = new OSMStreetnameHelper( config );                  osmHelper = new OSMStreetnameHelper( config );
62          }          }
63                    
64            public Address getAddressSafe(int gadeid, String husnr)  throws Exception {
65                    
66                    Map<String,Address> gade = searchGadeidentAdresser.get(gadeid);
67                    
68                    if (gade == null) {
69                            throw new Exception("GadeID ikke fundet");
70                    }
71                    
72                    Address addr = gade.get(husnr);
73                    
74                    if (addr == null) {
75                            throw new Exception("Adresse ikke ikke fundet");
76                    }
77                                    
78                    return addr;
79            }
80            
81                    
82          public SearchResult search(String postnrStr, String adresse)  {          public SearchResult search(String postnrStr, String adresse)  {
83                                    
# Line 67  public class AddressSearch { Line 88  public class AddressSearch {
88                  SearchRequest request = new SearchRequest();                  SearchRequest request = new SearchRequest();
89                  SearchResult result = new SearchResult();                  SearchResult result = new SearchResult();
90                                    
   
                 String helperSearchKey = "";  
91                                    
92                  try {                  try {
93                          request.postnr = Short.parseShort(postnrStr);                          request.postnr = Short.parseShort(postnrStr);
# Line 111  public class AddressSearch { Line 130  public class AddressSearch {
130                  }                  }
131                                    
132                  // LookupStreetname er en indkapsling af alm + levenstein + google + osm                  // LookupStreetname er en indkapsling af alm + levenstein + google + osm
133                  Integer gadeident = lookupStretname(request, result, helperSearchKey, true);                  Integer gadeident = lookupStretname(request, result, true);
134                                    
135                                    
136                  /*                  /*
# Line 129  public class AddressSearch { Line 148  public class AddressSearch {
148                                  request.vejnavn = subVejnavn;                                  request.vejnavn = subVejnavn;
149                                  result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );                                  result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );
150                                                                    
151                                  gadeident = lookupStretname(request, result, helperSearchKey, false);//prøv opslag MEN UDEN GOOGLE/OSM !!!                                  gadeident = lookupStretname(request, result, false);//prøv opslag MEN UDEN GOOGLE/OSM !!!
152                                                                    
153                                  //hvis vi fandt vejen ud fra substrengen                                  //hvis vi fandt vejen ud fra substrengen
154                                  if (gadeident != null) {                                  if (gadeident != null) {
# Line 191  public class AddressSearch { Line 210  public class AddressSearch {
210          }          }
211    
212    
213          private Integer lookupStretname(SearchRequest request, SearchResult result, String helperSearchKey, boolean useExternal) {          private Integer lookupStretname(SearchRequest request, SearchResult result, boolean useExternal) {
214                    String helperSearchKey = "";
215                    
216                  Integer gadeident =  request.streetNames.get(result.vasketVejnavn);                  Integer gadeident =  request.streetNames.get(result.vasketVejnavn);
217                                    
218                                    
# Line 207  public class AddressSearch { Line 228  public class AddressSearch {
228                          }                          }
229                  }                  }
230                                    
231                    if (gadeident == null) {
232                            String vej = levenshteinHelper.proposeStreetName(request, result);
233                            if (vej != null) {
234                                    gadeident =  request.streetNames.get(vej);
235                            }
236                    }
237                    
238                                    
239                  // Brug OpenStreetMap før vi prøver google                  // Brug OpenStreetMap før vi prøver google
240                  // For google har en request limit, det har OSM ikke!                  // For google har en request limit, det har OSM ikke!
# Line 250  public class AddressSearch { Line 278  public class AddressSearch {
278                  long start1 = System.currentTimeMillis();                  long start1 = System.currentTimeMillis();
279                  System.out.println("Build -- stage 1");                  System.out.println("Build -- stage 1");
280                                    
281                  alleAdresser = DatabaseLayer.getAllAdresses();                  alleAdresser = db.getAllAdresses();
282                                    
283                                    
284                  /* Mapper mellem db Row ID og adresse noden */                  /* Mapper mellem db Row ID og adresse noden */
# Line 301  public class AddressSearch { Line 329  public class AddressSearch {
329                  System.out.println("Build -- stage 2 alias tabel");                  System.out.println("Build -- stage 2 alias tabel");
330                                    
331                  int vaskCount = 0;                  int vaskCount = 0;
332                  List<AliasBean> aliasList = DatabaseLayer.getAliasList();                  List<AliasBean> aliasList = db.getAliasList();
333                  for (AliasBean alias : aliasList) {                  for (AliasBean alias : aliasList) {
334                          Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(alias.postnr);                          Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(alias.postnr);
335                                                    
# Line 338  public class AddressSearch { Line 366  public class AddressSearch {
366                  DeduplicateHelper<String> ruteHelper = new DeduplicateHelper<String>();                  DeduplicateHelper<String> ruteHelper = new DeduplicateHelper<String>();
367                  DeduplicateHelper<String> korelisteHelper = new DeduplicateHelper<String>();                  DeduplicateHelper<String> korelisteHelper = new DeduplicateHelper<String>();
368                                    
369                  List<ExtendedBean> extDao = DatabaseLayer.getExtendedAdresslist();                  List<ExtendedBean> extDao = db.getExtendedAdresslist();
370                  for (ExtendedBean eb : extDao) {                  for (ExtendedBean eb : extDao) {
371                                                    
372                          Address orgAddress = idAddressMap.get(eb.orgId);                                                  Address orgAddress = idAddressMap.get(eb.orgId);                        
# Line 412  public class AddressSearch { Line 440  public class AddressSearch {
440                  System.out.println("Build, stage3 elapsed: " + (start4-start3) );                  System.out.println("Build, stage3 elapsed: " + (start4-start3) );
441                  System.out.println("Build -- stage 4 - 100pct");                  System.out.println("Build -- stage 4 - 100pct");
442                                    
443                  Map<Short,HundredePctBean> hundredePct = DatabaseLayer.get100PctList();                  Map<Short,HundredePctBean> hundredePct = db.get100PctList();
444                  for (Address addr : alleAdresser) {                  for (Address addr : alleAdresser) {
445                          if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {                                                  if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {                        
446                                  continue;                                  continue;
# Line 437  public class AddressSearch { Line 465  public class AddressSearch {
465                                    
466                  ////////////////////////////////////////////////////////////////////////////////////                  ////////////////////////////////////////////////////////////////////////////////////
467                  long stop = System.currentTimeMillis();                  long stop = System.currentTimeMillis();
468                  System.out.println("Build, stage3 elapsed: " + (stop-start4) );                  System.out.println("Build, stage4 elapsed: " + (stop-start4) );
469                  System.out.println("Build -- Gathering statistics");                  System.out.println("Build -- Gathering statistics");
470                                                                    
471                  for (Address addr : alleAdresser) {                  for (Address addr : alleAdresser) {
# Line 455  public class AddressSearch { Line 483  public class AddressSearch {
483                                  stats.ikkeDaekketCount++;                                  stats.ikkeDaekketCount++;
484                          }                          }
485                  }                                }              
486                    stats.totalCount = alleAdresser.size();
487                                    
488                                    
489                  stats.elapsed = stop-start1;                              stats.elapsed = stop-start1;            
490                  stats.buildTime = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss").format( new Date() );                  stats.buildTime = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss").format( new Date() );
491                                    
492                    System.out.println("Build: totalCount: " + stats.totalCount);
493                  System.out.println("Build: direkteCount: " + stats.direkteCount);                  System.out.println("Build: direkteCount: " + stats.direkteCount);
494                  System.out.println("Build: extendedCount: " + stats.extendedCount);                  System.out.println("Build: extendedCount: " + stats.extendedCount);
495                  System.out.println("Build: hundredePctCount: " + stats.hundredePctCount);                  System.out.println("Build: hundredePctCount: " + stats.hundredePctCount);
# Line 474  public class AddressSearch { Line 504  public class AddressSearch {
504                  return stats;                  return stats;
505          }          }
506                    
507            public DatabaseLayer getDatabaseLayer() {
508                    return db;
509            }
510            
511          public void clear() {          public void clear() {
512                  searchPostnrVejnavnGadeid.clear();                  searchPostnrVejnavnGadeid.clear();
513                  searchGadeidentAdresser.clear();                  searchGadeidentAdresser.clear();
# Line 496  public class AddressSearch { Line 530  public class AddressSearch {
530                                  return ".." + targetAddress.rute;                                  return ".." + targetAddress.rute;
531                          } else if (eb.afstand < 0.701) {                          } else if (eb.afstand < 0.701) {
532                                  return "..." + targetAddress.rute;                                  return "..." + targetAddress.rute;
533                          } else if (eb.afstand < 0.501) {                          } else if (eb.afstand < 1.001) {
534                                  return "...." + targetAddress.rute;                                  return "...." + targetAddress.rute;
535                          }                          }
536                          break;                                            break;                  
# Line 522  public class AddressSearch { Line 556  public class AddressSearch {
556                                  return "...." + targetAddress.rute;                                  return "...." + targetAddress.rute;
557                          }                          }
558                          break;                          break;
559                    default:
560                            System.out.println("Ukendt transport type: " + eb );
561                  }                                }              
562                  return null;                  return null;
563          }          }
# Line 537  public class AddressSearch { Line 573  public class AddressSearch {
573                  return result;                  return result;
574          }          }
575                    
576            public List<Address> get100PctAddresses() {
577                    List<Address> result = new ArrayList<Address>(120000);
578                    for (Address a : alleAdresser) {
579                            if ( a.daekningsType == DaekningsType.DAEKNING_100PCT) {
580                                    result.add(a);
581                            }
582                    }
583                    Collections.sort(result );
584                    return result;
585            }
586            
587          ///////////////////////////////////////////////////////////          ///////////////////////////////////////////////////////////
588          private String calculateExtendedBkKoreliste(ExtendedBean eb, Address orgAddress, Address targetAddress) {          private String calculateExtendedBkKoreliste(ExtendedBean eb, Address orgAddress, Address targetAddress) {
589                  String inject;                  String inject;
# Line 575  public class AddressSearch { Line 622  public class AddressSearch {
622                  aliasSet.add(vejnavn.replace("gl", "gammel") );                  aliasSet.add(vejnavn.replace("gl", "gammel") );
623                  aliasSet.add(vejnavn.replace("gammel", "gl") );                  aliasSet.add(vejnavn.replace("gammel", "gl") );
624                                    
625                    aliasSet.add(vejnavn.replace("gl", "gamle") );
626                    aliasSet.add(vejnavn.replace("gamle", "gl") );
627                    
628                  aliasSet.add(vejnavn.replace("lille", "ll") );                  aliasSet.add(vejnavn.replace("lille", "ll") );
629                  aliasSet.add(vejnavn.replace("ll ", "lille") );                  aliasSet.add(vejnavn.replace("ll ", "lille") );
630                  aliasSet.add(vejnavn.replace("ll.", "lille") );                  aliasSet.add(vejnavn.replace("ll.", "lille") );
# Line 584  public class AddressSearch { Line 634  public class AddressSearch {
634                  aliasSet.add(vejnavn.replace("st.", "store") );                  aliasSet.add(vejnavn.replace("st.", "store") );
635                                    
636                  aliasSet.add(vejnavn.replace("søndre", "sdr") );                  aliasSet.add(vejnavn.replace("søndre", "sdr") );
637                  aliasSet.add(vejnavn.replace("sdr", "søndre") );                  aliasSet.add(vejnavn.replace("sdr", "søndre") );              
638                    aliasSet.add(vejnavn.replace("sønder", "sdr") );
639                    aliasSet.add(vejnavn.replace("sdr", "sønder") );
640    
641                                    
642                  aliasSet.add(vejnavn.replace("nørre", "nr") );                  aliasSet.add(vejnavn.replace("nørre", "nr") );
# Line 620  public class AddressSearch { Line 672  public class AddressSearch {
672                  aliasSet.add(vejnavn.replace("john", "j") );                  aliasSet.add(vejnavn.replace("john", "j") );
673                  aliasSet.add(vejnavn.replace("thomas", "th") );                  aliasSet.add(vejnavn.replace("thomas", "th") );
674                  aliasSet.add(vejnavn.replace("thorvald", "th") );                  aliasSet.add(vejnavn.replace("thorvald", "th") );
675                    aliasSet.add(vejnavn.replace("frederik", "fr") );
676                    aliasSet.add(vejnavn.replace("frederiks", "fr") );
677                                    
678                                    
679                  aliasSet.add(vejnavn.replace("christian", "chr") );                  aliasSet.add(vejnavn.replace("christian", "chr") );
680                    aliasSet.add(vejnavn.replace("christians", "chr") );
681                  aliasSet.add(vejnavn.replace("kristian", "kr") );                  aliasSet.add(vejnavn.replace("kristian", "kr") );
682                    aliasSet.add(vejnavn.replace("kristians", "kr") );
683    
684                    aliasSet.add(vejnavn.replace("mylius", "myl") );
685                    aliasSet.add(vejnavn.replace("myl", "mylius") );
686                    
687                    aliasSet.add(vejnavn.replace("ludvig", "ludv") );
688                    aliasSet.add(vejnavn.replace("ludv", "ludvig") );
689                                    
690                                    
691                  // alternative stavninger                  // alternative stavninger
# Line 683  public class AddressSearch { Line 745  public class AddressSearch {
745                                    
746                  aliasSet.add(vejnavn.replace("plads", "pl") );                  aliasSet.add(vejnavn.replace("plads", "pl") );
747                  aliasSet.add(vejnavn.replace("vænget", "vænge") );                  aliasSet.add(vejnavn.replace("vænget", "vænge") );
748                    
749                    aliasSet.add(vejnavn.replace("boulevard", "blvd") );
750                    aliasSet.add(vejnavn.replace("blvd", "boulevard") );
751    
752                    aliasSet.add(vejnavn.replace("boulevard", "boule") );
753                    aliasSet.add(vejnavn.replace("boule", "boulevard") );
754                                    
755                    aliasSet.add(vejnavn.replace("kronborg", "krbg") ); //Krbg ladegårdsvej, 3000
756                    aliasSet.add(vejnavn.replace("krbg", "kronborg") );
757                                    
758                  // Opbyg æøå varianter over alle fundne aliaser                  // Opbyg æøå varianter over alle fundne aliaser
759                                    
# Line 732  public class AddressSearch { Line 802  public class AddressSearch {
802                    
803          public Set<Entry<String,Integer>> getVejnavne(short postnr) {          public Set<Entry<String,Integer>> getVejnavne(short postnr) {
804                  Map<String,Integer> map = searchPostnrVejnavnGadeid.get(postnr);                  Map<String,Integer> map = searchPostnrVejnavnGadeid.get(postnr);
805                  TreeMap<String,Integer> newMap = new TreeMap<String,Integer>();                  
806                  for (Entry<String,Integer> entry : map.entrySet() ) {                  TreeMap<String,Integer> newMap = new TreeMap<String,Integer>( map );//Lav et nyt TreeMap for at sikre sortering
                         newMap.put(entry.getKey(), entry.getValue());  
                 }  
807                                    
808                  return newMap.entrySet();                  return newMap.entrySet();
809          }          }
Legend:
Removed from v.2557  
changed lines
  Added in v.2778
  ViewVC Help
Powered by ViewVC 1.1.20