/[projects]/dao/DaoAdresseService/src/main/java/dk/daoas/daoadresseservice/AddressSearch.java
ViewVC logotype

Diff of /dao/DaoAdresseService/src/main/java/dk/daoas/daoadresseservice/AddressSearch.java

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 2491 by torben, Tue Mar 24 17:19:16 2015 UTC revision 2565 by torben, Thu Jun 4 07:10:03 2015 UTC
# Line 27  import dk.daoas.daoadresseservice.beans. Line 27  import dk.daoas.daoadresseservice.beans.
27  import dk.daoas.daoadresseservice.beans.SearchResult;  import dk.daoas.daoadresseservice.beans.SearchResult;
28  import dk.daoas.daoadresseservice.beans.SearchResult.Status;  import dk.daoas.daoadresseservice.beans.SearchResult.Status;
29  import dk.daoas.daoadresseservice.db.DatabaseLayer;  import dk.daoas.daoadresseservice.db.DatabaseLayer;
30    import dk.daoas.daoadresseservice.util.DaoUtils;
31  import dk.daoas.daoadresseservice.util.DeduplicateHelper;  import dk.daoas.daoadresseservice.util.DeduplicateHelper;
32    import dk.daoas.daoadresseservice.util.NaturalOrderComparator;
33    
34  public class AddressSearch {  public class AddressSearch {
35    
# Line 57  public class AddressSearch { Line 59  public class AddressSearch {
59                    
60                    
61          public SearchResult search(String postnrStr, String adresse)  {          public SearchResult search(String postnrStr, String adresse)  {
62                    
63                    postnrStr = postnrStr.trim();
64                    adresse = adresse.trim();
65                    
66                    
67                  SearchRequest request = new SearchRequest();                  SearchRequest request = new SearchRequest();
68                  SearchResult result = new SearchResult();                  SearchResult result = new SearchResult();
69                                    
   
                 String helperSearchKey = "";  
70                                    
71                  try {                  try {
72                          request.postnr = Integer.parseInt(postnrStr);                          request.postnr = Short.parseShort(postnrStr);
73                  } catch (Exception E) {                  } catch (Exception E) {
74                          result.status = Status.ERROR_UNKNOWN_POSTAL;                          result.status = Status.ERROR_UNKNOWN_POSTAL;
75                          return result;                          return result;
# Line 89  public class AddressSearch { Line 94  public class AddressSearch {
94                          return result;                          return result;
95                  }                  }
96                                    
97                  request.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );                  result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );
98                                    
99    
100                  if (request.vasketVejnavn.indexOf("pakkebo") > -1                  if (result.vasketVejnavn.indexOf("pakkebo") > -1
101                                  || request.vasketVejnavn.indexOf("døgnpost") > -1                                  || result.vasketVejnavn.indexOf("pakkepost") > -1
102                                  || request.vasketVejnavn.indexOf("døgnbo") > -1                                  || result.vasketVejnavn.indexOf("postbo") > -1   // postbox/postboks
103                                  || request.vasketVejnavn.equals("id")                                  || result.vasketVejnavn.indexOf("døgnpost") > -1
104                                    || result.vasketVejnavn.indexOf("døgnbo") > -1 // døgnbox // døgnboks
105                                    || result.vasketVejnavn.equals("id")
106                                  ) {                                  ) {
107                          result.status = Status.ERROR_POSTBOX;                          result.status = Status.ERROR_POSTBOX;
108                          return result;                                            return result;                  
109                  }                  }
110                                    
111                  Integer gadeident =  request.streetNames.get(request.vasketVejnavn);                  // LookupStreetname er en indkapsling af alm + levenstein + google + osm
112                                    Integer gadeident = lookupStretname(request, result, true);
113                                    
                 if ( gadeident == null) {  
                         helperSearchKey = "" + request.postnr + "/" + request.vasketVejnavn;  
                         gadeident = helperCache.get(helperSearchKey);  
                 }  
114                                    
115                    /*
116                     * Hvis der ikke er direkte hits, prøver vi at skære ord af vejnavn
117                     *
118                     * <strike>Denne sektion er MEGET experimental da den øger antallet af kald til google/OSM væsentligt</strike>*/
119                  if (gadeident == null) {                  if (gadeident == null) {
120                          String vej = levenshteinHelper.proposeStreetName(request, result);                          final int MAX_TRIES = 4;
121                          if (vej != null) {                          
122                                  gadeident =  request.streetNames.get(vej);                          String vejnavnParts[] = request.vejnavn.split(" ");
123                          }                          
124                  }                          for (int i=1; i<=MAX_TRIES && i<vejnavnParts.length; i++) {
125                                                    String subVejnavn = DaoUtils.joinHelper(vejnavnParts, i);
126                                                    
127                  // Brug OpenStreetMap før vi prøver google                                  request.vejnavn = subVejnavn;
128                  // For google har en request limit, det har OSM ikke!                                  result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );
129                  if ( gadeident == null) {                                  
130                          String vej = osmHelper.proposeStreetName(request, result);                                                gadeident = lookupStretname(request, result, false);//prøv opslag MEN UDEN GOOGLE/OSM !!!
131                          gadeident = helperWrapper(vej, request.streetNames, helperSearchKey);                                  
132                  }                                  //hvis vi fandt vejen ud fra substrengen
133                                                    if (gadeident != null) {
134                  if ( gadeident == null) {                                          break;
135                          String vej = googleHelper.proposeStreetName(request, result);                                            }                      
136                          gadeident = helperWrapper(vej, request.streetNames, helperSearchKey);                                  
137                                    //hvis vi ikke fandt kopierer vi vejnavn fra split igen
138                                    request.vejnavn = result.splitResult.vej;
139                                    result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );
140                            }                      
141                  }                  }
142                                    
143    
# Line 176  public class AddressSearch { Line 187  public class AddressSearch {
187    
188                  return result;                  return result;
189          }          }
190    
191    
192            private Integer lookupStretname(SearchRequest request, SearchResult result, boolean useExternal) {
193                    String helperSearchKey = "";
194                    
195                    Integer gadeident =  request.streetNames.get(result.vasketVejnavn);
196                    
197                    
198                    if ( gadeident == null) {
199                            helperSearchKey = "" + request.postnr + "/" + result.vasketVejnavn;
200                            gadeident = helperCache.get(helperSearchKey);
201                    }
202                    
203                    if (gadeident == null) {
204                            String vej = levenshteinHelper.proposeStreetName(request, result);
205                            if (vej != null) {
206                                    gadeident =  request.streetNames.get(vej);
207                            }
208                    }
209                    
210                    
211                    // Brug OpenStreetMap før vi prøver google
212                    // For google har en request limit, det har OSM ikke!
213                    if ( gadeident == null && useExternal) {
214                            String vej = osmHelper.proposeStreetName(request, result);              
215                            gadeident = helperWrapper(vej, request.streetNames, helperSearchKey);
216                    }
217                    
218                    if ( gadeident == null && useExternal) {
219                            String vej = googleHelper.proposeStreetName(request, result);          
220                            gadeident = helperWrapper(vej, request.streetNames, helperSearchKey);
221                    }
222                    return gadeident;
223            }
224                    
225          private Integer helperWrapper(String vej, Map<String,Integer> postnrVeje, String helperSearchKey) {          private Integer helperWrapper(String vej, Map<String,Integer> postnrVeje, String helperSearchKey) {
226                  if (vej == null)                  if (vej == null)
# Line 191  public class AddressSearch { Line 236  public class AddressSearch {
236                                    
237          }          }
238                    
239          public Map<String,Integer> getStretsByPostal(int zip) {          public Map<String,Integer> getStretsByPostal(short zip) {
240                  return searchPostnrVejnavnGadeid.get(zip);                  return searchPostnrVejnavnGadeid.get(zip);
241          }          }
242    
# Line 300  public class AddressSearch { Line 345  public class AddressSearch {
345                          if (orgAddress == null)                          if (orgAddress == null)
346                                  continue;                                  continue;
347                                                    
348                            if (orgAddress.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {
349                                    //kan være at adressen er blevet markeret dækket og - find-nærmeste data ikke er opdateret i mellemtiden
350                                    continue;
351                            }
352                            
353                          Address targetAddress = idAddressMap.get(eb.targetId);                          Address targetAddress = idAddressMap.get(eb.targetId);
354                          if (targetAddress == null)                          if (targetAddress == null) {
355                                  continue;                                  continue;
356                            }
357                            
358                                                    
359                          if (orgAddress.distributor != null && orgAddress.distributor.equals("LUKKET")) {                          if ( StringUtils.equals(orgAddress.distributor, "LUKKET") ) {
360                                  continue;                                  continue;
361                          }                                                }                      
362                                                    
363                          if (targetAddress.distributor.equals("LUKKET")) {                          
364                            
365                            if ( StringUtils.equals(targetAddress.distributor, "LUKKET") ) {
366                                  continue;                                  continue;
367                          }                          }
368                                                    
# Line 341  public class AddressSearch { Line 395  public class AddressSearch {
395                                  orgAddress.dbkBane = targetAddress.dbkBane;                                  orgAddress.dbkBane = targetAddress.dbkBane;
396                                                                    
397                                  /* Sådan gør den gamle service */                                  /* Sådan gør den gamle service */
398                                  orgAddress.kommunekode = targetAddress.kommunekode;                                  /* 20150520 THN- hvis vi bibeholder de originale kommune+vejkoder kan vi bruge DAVID til join i databasen*/
399                                  orgAddress.vejkode = targetAddress.vejkode;                                  //orgAddress.kommunekode = targetAddress.kommunekode;
400                                    //orgAddress.vejkode = targetAddress.vejkode;
401                                    
402                                                                    
403                                  orgAddress.distributor = targetAddress.distributor;                                  orgAddress.distributor = targetAddress.distributor;
404                          }                          }
# Line 356  public class AddressSearch { Line 412  public class AddressSearch {
412                  System.out.println("Build, stage3 elapsed: " + (start4-start3) );                  System.out.println("Build, stage3 elapsed: " + (start4-start3) );
413                  System.out.println("Build -- stage 4 - 100pct");                  System.out.println("Build -- stage 4 - 100pct");
414                                    
415                  Map<Integer,HundredePctBean> hundredePct = DatabaseLayer.get100PctList();                  Map<Short,HundredePctBean> hundredePct = DatabaseLayer.get100PctList();
416                  for (Address addr : alleAdresser) {                  for (Address addr : alleAdresser) {
417                          if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {                                                  if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {                        
418                                  continue;                                  continue;
# Line 496  public class AddressSearch { Line 552  public class AddressSearch {
552                  vejnavn = vejnavn.toLowerCase();                  vejnavn = vejnavn.toLowerCase();
553                  HashSet<String> aliasSet = new HashSet<String>();                  HashSet<String> aliasSet = new HashSet<String>();
554                  aliasSet.add(vejnavn);                  aliasSet.add(vejnavn);
555                                                    
                 aliasSet.add(vejnavn.replace("u", "ü") );  
                 aliasSet.add(vejnavn.replace("ü", "u") );  
                   
556                  aliasSet.add(vejnavn.replace("alle", "allé") );                  aliasSet.add(vejnavn.replace("alle", "allé") );
557                  aliasSet.add(vejnavn.replace("allé", "alle") );                                  aliasSet.add(vejnavn.replace("allé", "alle") );                
558                                    
559                    
560                    // forkortelser
561                  aliasSet.add(vejnavn.replace("dronningens", "dr") );                  aliasSet.add(vejnavn.replace("dronningens", "dr") );
562                  aliasSet.add(vejnavn.replace("dr.", "dronningens") );                  aliasSet.add(vejnavn.replace("dr.", "dronningens") );
563                  aliasSet.add(vejnavn.replace("dr ", "dronningens") );                  aliasSet.add(vejnavn.replace("dr ", "dronningens") );
# Line 529  public class AddressSearch { Line 584  public class AddressSearch {
584                  aliasSet.add(vejnavn.replace("st.", "store") );                  aliasSet.add(vejnavn.replace("st.", "store") );
585                                    
586                  aliasSet.add(vejnavn.replace("søndre", "sdr") );                  aliasSet.add(vejnavn.replace("søndre", "sdr") );
587                  aliasSet.add(vejnavn.replace("sdr", "søndre") );                  aliasSet.add(vejnavn.replace("sdr", "søndre") );              
588                    aliasSet.add(vejnavn.replace("sønder", "sdr") );
589                    aliasSet.add(vejnavn.replace("sdr", "sønder") );
590    
591                                    
592                  aliasSet.add(vejnavn.replace("nørre", "nr") );                  aliasSet.add(vejnavn.replace("nørre", "nr") );
# Line 537  public class AddressSearch { Line 594  public class AddressSearch {
594                                    
595                  aliasSet.add(vejnavn.replace("nordre", "ndr") );                  aliasSet.add(vejnavn.replace("nordre", "ndr") );
596                  aliasSet.add(vejnavn.replace("ndr", "nordre") );                  aliasSet.add(vejnavn.replace("ndr", "nordre") );
597                    
598                    
599                    aliasSet.add(vejnavn.replace("vestre", "vester") );
600                    aliasSet.add(vejnavn.replace("vester", "vestre") );
601                    
602                    aliasSet.add(vejnavn.replace("søndre", "sønder") );
603                    aliasSet.add(vejnavn.replace("sønder", "søndre") );
604                    
605                    aliasSet.add(vejnavn.replace("østre", "øster") );
606                    aliasSet.add(vejnavn.replace("øster", "østre") );
607                    
608                    aliasSet.add(vejnavn.replace("borgmester", "borgm") );
609                    aliasSet.add(vejnavn.replace("borgm", "borgmester") );
610                    
611                                                                    
612                  aliasSet.add(vejnavn.replace("sankt", "skt") );                  aliasSet.add(vejnavn.replace("sankt", "skt") );
613                  aliasSet.add(vejnavn.replace("sankt", "sct") );                  aliasSet.add(vejnavn.replace("sankt", "sct") );
614                  aliasSet.add(vejnavn.replace("skt", "sankt") );                  aliasSet.add(vejnavn.replace("skt", "sankt") );
615                                    
616                  aliasSet.add(vejnavn.replace("skt", "sct") );                  aliasSet.add(vejnavn.replace("skt", "sct") );
617                  aliasSet.add(vejnavn.replace("sct", "skt") );                  aliasSet.add(vejnavn.replace("sct", "skt") );          
618                    
619                                    
620                                    
621                  // fornavn forkortelser                  // fornavn forkortelser
622                  aliasSet.add(vejnavn.replace("john", "j") );                  aliasSet.add(vejnavn.replace("john", "j") );
623                  aliasSet.add(vejnavn.replace("thomas", "th") );                  aliasSet.add(vejnavn.replace("thomas", "th") );
624                  aliasSet.add(vejnavn.replace("thorvald", "th") );                  aliasSet.add(vejnavn.replace("thorvald", "th") );
625                    aliasSet.add(vejnavn.replace("frederik", "fr") );
626                    aliasSet.add(vejnavn.replace("frederiks", "fr") );
627                    
628                    
629                    aliasSet.add(vejnavn.replace("christian", "chr") );
630                    aliasSet.add(vejnavn.replace("christians", "chr") );
631                    aliasSet.add(vejnavn.replace("kristian", "kr") );
632                    aliasSet.add(vejnavn.replace("kristians", "kr") );
633                    
634                    
635                    // alternative stavninger
636                    aliasSet.add(vejnavn.replace("peder", "peter") );
637                    aliasSet.add(vejnavn.replace("peter", "peder") );
638                    
639    
640                                    
641                  // Romertal                  // Romertal
# Line 591  public class AddressSearch { Line 677  public class AddressSearch {
677                  aliasSet.add(vejnavn.replace("vej", "vejen") );                  aliasSet.add(vejnavn.replace("vej", "vejen") );
678                  aliasSet.add(vejnavn.replace("vejen", "vej") );                  aliasSet.add(vejnavn.replace("vejen", "vej") );
679                                    
680                    aliasSet.add(vejnavn.replace("v", "vej") );//Vi kan have vejnavne i DB der bare slutter på v istedet for vej
681                    
682                  aliasSet.add(vejnavn.replace("alle", "all") );                  aliasSet.add(vejnavn.replace("alle", "all") );
683                  aliasSet.add(vejnavn.replace("allé", "all") );                  aliasSet.add(vejnavn.replace("allé", "all") );
684                  aliasSet.add(vejnavn.replace("alle", "allú") ); //Fundet i logs.hentruteinfo                  aliasSet.add(vejnavn.replace("alle", "allú") ); //Fundet i logs.hentruteinfo
# Line 601  public class AddressSearch { Line 689  public class AddressSearch {
689                                    
690                  aliasSet.add(vejnavn.replace("plads", "pl") );                  aliasSet.add(vejnavn.replace("plads", "pl") );
691                  aliasSet.add(vejnavn.replace("vænget", "vænge") );                  aliasSet.add(vejnavn.replace("vænget", "vænge") );
692                    
693                    aliasSet.add(vejnavn.replace("boulevard", "blvd") );
694                    aliasSet.add(vejnavn.replace("blvd", "boulevard") );
695    
696                    aliasSet.add(vejnavn.replace("boulevard", "boule") );
697                    aliasSet.add(vejnavn.replace("boule", "boulevard") );
698                                    
699                  // Opbyg æøå varianter over alle fundne aliaser                  // Opbyg æøå varianter over alle fundne aliaser
700                                    
# Line 628  public class AddressSearch { Line 721  public class AddressSearch {
721                          //danske tegn 3                          //danske tegn 3
722                          aliasSet.add( vejnavn.replace("æ", "ae").replace("ø", "oe").replace("å", "aa") );                          aliasSet.add( vejnavn.replace("æ", "ae").replace("ø", "oe").replace("å", "aa") );
723                          aliasSet.add( vejnavn.replace("ae", "æ").replace("oe", "ø").replace("aa", "å") );                          aliasSet.add( vejnavn.replace("ae", "æ").replace("oe", "ø").replace("aa", "å") );
724                            
725                            
726                            //udenlandsketegn
727                            aliasSet.add(vejnavn.replace("u", "ü") );
728                            aliasSet.add(vejnavn.replace("ü", "u") );
729                            
730                            aliasSet.add(vejnavn.replace("ä", "æ") );
731                            aliasSet.add(vejnavn.replace("æ", "ä") );
732                            
733                            aliasSet.add(vejnavn.replace("ö", "ø") );
734                            aliasSet.add(vejnavn.replace("ø", "ö") );
735                  }                  }
736                                    
737                  return aliasSet;                  return aliasSet;
# Line 637  public class AddressSearch { Line 741  public class AddressSearch {
741                  return new TreeSet<Short>( searchPostnrVejnavnGadeid.keySet() );                  return new TreeSet<Short>( searchPostnrVejnavnGadeid.keySet() );
742          }          }
743                    
744          public Set<Entry<String,Integer>> getVejnavne(int postnr) {          public Set<Entry<String,Integer>> getVejnavne(short postnr) {
745                  Map<String,Integer> map = searchPostnrVejnavnGadeid.get(postnr);                  Map<String,Integer> map = searchPostnrVejnavnGadeid.get(postnr);
746                  TreeMap<String,Integer> newMap = new TreeMap<String,Integer>();                  TreeMap<String,Integer> newMap = new TreeMap<String,Integer>();
747                  for (Entry<String,Integer> entry : map.entrySet() ) {                  for (Entry<String,Integer> entry : map.entrySet() ) {
# Line 647  public class AddressSearch { Line 751  public class AddressSearch {
751                  return newMap.entrySet();                  return newMap.entrySet();
752          }          }
753                    
754          public Set<String> getHusnumre(long gadeid) {          public Set<String> getHusnumre(int gadeid) {
755                                                                    
756                  Map<String, Address> gade = searchGadeidentAdresser.get(gadeid);                  Map<String, Address> gade = searchGadeidentAdresser.get(gadeid);
757                  return new TreeSet<String>( gade.keySet() );                              
758                    Set<String> set = new TreeSet<String>( new NaturalOrderComparator<String>() );
759                    set.addAll( gade.keySet() );
760                    
761                    return set;
762          }          }
763                    
764          public Address getAdresse(long gadeid, String husnr) {          public Address getAdresse(int gadeid, String husnr) {
765                                    
766                  Map<String, Address> gade = searchGadeidentAdresser.get(gadeid);                  Map<String, Address> gade = searchGadeidentAdresser.get(gadeid);
767                  return gade.get(husnr);                  return gade.get(husnr);
Legend:
Removed from v.2491  
changed lines
  Added in v.2565
  ViewVC Help
Powered by ViewVC 1.1.20