/[projects]/dao/DaoAdresseService/src/main/java/dk/daoas/daoadresseservice/AddressSearch.java
ViewVC logotype

Diff of /dao/DaoAdresseService/src/main/java/dk/daoas/daoadresseservice/AddressSearch.java

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 2785 by torben, Thu Nov 26 14:25:41 2015 UTC revision 2817 by torben, Fri Jan 15 08:11:58 2016 UTC
# Line 6  import java.util.ArrayList; Line 6  import java.util.ArrayList;
6  import java.util.Collections;  import java.util.Collections;
7  import java.util.Date;  import java.util.Date;
8  import java.util.HashMap;  import java.util.HashMap;
 import java.util.HashSet;  
9  import java.util.List;  import java.util.List;
10  import java.util.Map;  import java.util.Map;
11  import java.util.Map.Entry;  import java.util.Map.Entry;
# Line 216  public class AddressSearch { Line 215  public class AddressSearch {
215                  Address addr = litraList.get( result.splitResult.litra );                  Address addr = litraList.get( result.splitResult.litra );
216                                    
217                  if (addr == null) { //litra ikke fundet                  if (addr == null) { //litra ikke fundet
218                          if (config.nearestLitra == true) {                          if (config.nearestLitra == true || naermesteHusnr == true) {
219                                  result.nearestLitra = true;                                  result.nearestLitra = true;
220                                  addr = litraList.values().iterator().next();                                                              addr = litraList.values().iterator().next();                            
221                          } else {                          } else {
# Line 265  public class AddressSearch { Line 264  public class AddressSearch {
264                  }                  }
265                                    
266                  if (gadeident == null) {                  if (gadeident == null) {
267                          String vej = levenshteinHelper.proposeStreetName(request, result);                          String vej = metaphoneHelper.proposeStreetName(request, result);
268                          if (vej != null) {                          if (vej != null) {
269                                  gadeident =  request.streetNames.get(vej);                                  gadeident =  request.streetNames.get(vej);
270                          }                          }
# Line 311  public class AddressSearch { Line 310  public class AddressSearch {
310                  searchGadeidentAdresser = new HashMap<Integer,  Map<Short, Map<String,Address>>>();                  searchGadeidentAdresser = new HashMap<Integer,  Map<Short, Map<String,Address>>>();
311                  helperCache = new ConcurrentHashMap<String,Integer>();                  helperCache = new ConcurrentHashMap<String,Integer>();
312                                    
313                    // //////////////////////
314                    // Start stage1
315                    
316                  long start1 = System.currentTimeMillis();                  long start1 = System.currentTimeMillis();
317                  System.out.println("Build -- stage 1");                  System.out.println("Build -- stage 1");
318                                    
319                  alleAdresser = db.getAllAdresses();                  alleAdresser = db.getAllAdresses();
320                                    
321                                    
322                  /* Mapper mellem db Row ID og adresse noden */                  /* Mapper mellem db Row ID og adresse noden - skal bruges i stage3*/
323                  Map<Integer,Address> idAddressMap = new HashMap<Integer,Address>( alleAdresser.size() );                  Map<Integer,Address> idAddressMap = new HashMap<Integer,Address>( alleAdresser.size() );
324                  DeduplicateHelper<String> aliasHelper = new DeduplicateHelper<String>();                  
325                    
326                    DeduplicateHelper<Short> shortHelper = new DeduplicateHelper<Short>();
327                    DeduplicateHelper<Integer> intHelper = new DeduplicateHelper<Integer>();
328                    
329                    AliasGenerator aliasGenerator = new AliasGenerator();
330                    
331                                    
332                  for (Address a : alleAdresser) {                  for (Address a : alleAdresser) {
333                          idAddressMap.put(a.id, a);                          idAddressMap.put(a.id, a);
334                                                    
335                          Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(a.postnr);                                        Short postnr = shortHelper.getInstance(a.postnr);
336                            
337                            Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(postnr);        
338                                                    
339                          if (postnrVeje == null) {                          if (postnrVeje == null) {
340                                  postnrVeje = new ConcurrentHashMap<String,Integer>();                                  postnrVeje = new HashMap<String,Integer>(10240); //lige nu indeholder den største 9500 entries
341                                  searchPostnrVejnavnGadeid.put(a.postnr, postnrVeje);                                  searchPostnrVejnavnGadeid.put(postnr, postnrVeje);
342                          }                          }
343                                                                    
344                                                    
# Line 337  public class AddressSearch { Line 347  public class AddressSearch {
347                          if (gadeident == null) {                                                          if (gadeident == null) {                                
348                                  //postnrVeje.put(vasketVejnavn, a.gadeid);                                  //postnrVeje.put(vasketVejnavn, a.gadeid);
349                                                                    
350                                  gadeident = a.gadeid;                                  gadeident = intHelper.getInstance( a.gadeid );
351                                    
352                                    Set<String> aliaser = aliasGenerator.findVejAliaser(a.vejnavn);
353                                    for(String alias : aliaser) {                                  
354                                            postnrVeje.put(alias, gadeident);      
355                                    }
356                                                                    
                                 Set<String> aliaser = findVejAliaser(a.vejnavn);  
                                 for(String alias : aliaser) {  
                                         String vasketAlias = AddressUtils.vaskVejnavn(alias);  
                                         vasketAlias = aliasHelper.getInstance(vasketAlias);  
                                           
                                         postnrVeje.put(vasketAlias, gadeident);  
                                 }                                
357                          }                          }
358                                                    
359                            
360                          Map<Short, Map<String,Address>> gade =  searchGadeidentAdresser.get(gadeident);                          Map<Short, Map<String,Address>> gade =  searchGadeidentAdresser.get(gadeident);
361                          if (gade == null) {                          if (gade == null) {
362                                  gade = new TreeMap<Short, Map<String,Address>>();                                  gade = new TreeMap<Short, Map<String,Address>>();
# Line 363  public class AddressSearch { Line 372  public class AddressSearch {
372                          litraList.put(a.husnrbogstav, a);                                                litraList.put(a.husnrbogstav, a);                      
373                  }                  }
374                                    
375                    
376                    aliasGenerator.clear();  //frigiv hukommelse inden stage2
377                    aliasGenerator = null;
378                    shortHelper.clear();
379                    shortHelper = null;
380                    intHelper.clear();
381                    intHelper = null;
382                                    
383    
384                  ////////////////////////////////////////////////////////////////////////////////////////                  ////////////////////////////////////////////////////////////////////////////////////////
385                  long start2 = System.currentTimeMillis();                  long start2 = System.currentTimeMillis();
386                  System.out.println("Build, stage1 elapsed: " + (start2-start1) );                  System.out.println("Build, stage1 elapsed: " + (start2-start1) );
# Line 635  public class AddressSearch { Line 653  public class AddressSearch {
653                  return AddressUtils.injectIntoBk(targetAddress.koreliste, inject);                  return AddressUtils.injectIntoBk(targetAddress.koreliste, inject);
654          }          }
655                    
         private Set<String> findVejAliaser(String vejnavn) {  
                 vejnavn = vejnavn.toLowerCase();  
                 HashSet<String> aliasSet = new HashSet<String>();  
                 aliasSet.add(vejnavn);  
                                   
                 aliasSet.add(vejnavn.replace("alle", "allé") );  
                 aliasSet.add(vejnavn.replace("allé", "alle") );                  
                   
                   
                 // forkortelser  
                 aliasSet.add(vejnavn.replace("dronningens", "dr") );  
                 aliasSet.add(vejnavn.replace("dr.", "dronningens") );  
                 aliasSet.add(vejnavn.replace("dr ", "dronningens") );  
                   
                 aliasSet.add(vejnavn.replace("dronning", "dr") );  
                 aliasSet.add(vejnavn.replace("dr.", "dronning") );  
                 aliasSet.add(vejnavn.replace("dr ", "dronning") );  
                   
                 aliasSet.add(vejnavn.replace("kng", "kongen") );  
                 aliasSet.add(vejnavn.replace("kongen", "kng") );  
                   
                 aliasSet.add(vejnavn.replace("kvt", "kvarter") );  
                 aliasSet.add(vejnavn.replace("kvarter", "kvt") );  
                   
                 aliasSet.add(vejnavn.replace("gl", "gammel") );  
                 aliasSet.add(vejnavn.replace("gammel", "gl") );  
                   
                 aliasSet.add(vejnavn.replace("gl", "gamle") );  
                 aliasSet.add(vejnavn.replace("gamle", "gl") );  
                   
                 aliasSet.add(vejnavn.replace("lille", "ll") );  
                 aliasSet.add(vejnavn.replace("ll ", "lille") );  
                 aliasSet.add(vejnavn.replace("ll.", "lille") );  
                   
                 aliasSet.add(vejnavn.replace("store", "st") );  
                 aliasSet.add(vejnavn.replace("st ", "store") );  
                 aliasSet.add(vejnavn.replace("st.", "store") );  
                   
                 aliasSet.add(vejnavn.replace("søndre", "sdr") );  
                 aliasSet.add(vejnavn.replace("sdr", "søndre") );                
                 aliasSet.add(vejnavn.replace("sønder", "sdr") );  
                 aliasSet.add(vejnavn.replace("sdr", "sønder") );  
   
                   
                 aliasSet.add(vejnavn.replace("nørre", "nr") );  
                 aliasSet.add(vejnavn.replace("nr", "nørre") );  
                   
                 aliasSet.add(vejnavn.replace("nordre", "ndr") );  
                 aliasSet.add(vejnavn.replace("ndr", "nordre") );  
                   
                   
                 aliasSet.add(vejnavn.replace("vestre", "vester") );  
                 aliasSet.add(vejnavn.replace("vester", "vestre") );  
                   
                 aliasSet.add(vejnavn.replace("søndre", "sønder") );  
                 aliasSet.add(vejnavn.replace("sønder", "søndre") );  
                   
                 aliasSet.add(vejnavn.replace("østre", "øster") );  
                 aliasSet.add(vejnavn.replace("øster", "østre") );  
                   
                 aliasSet.add(vejnavn.replace("borgmester", "borgm") );  
                 aliasSet.add(vejnavn.replace("borgm", "borgmester") );  
                   
                                   
                 aliasSet.add(vejnavn.replace("sankt", "skt") );  
                 aliasSet.add(vejnavn.replace("sankt", "sct") );  
                 aliasSet.add(vejnavn.replace("skt", "sankt") );  
                   
                 aliasSet.add(vejnavn.replace("skt", "sct") );  
                 aliasSet.add(vejnavn.replace("sct", "skt") );            
                   
                   
                   
                 // fornavn forkortelser  
                 aliasSet.add(vejnavn.replace("john", "j") );  
                 aliasSet.add(vejnavn.replace("thomas", "th") );  
                 aliasSet.add(vejnavn.replace("thorvald", "th") );  
                 aliasSet.add(vejnavn.replace("frederik", "fr") );  
                 aliasSet.add(vejnavn.replace("frederiks", "fr") );  
                   
                   
                 aliasSet.add(vejnavn.replace("christian", "chr") );  
                 aliasSet.add(vejnavn.replace("christians", "chr") );  
                 aliasSet.add(vejnavn.replace("kristian", "kr") );  
                 aliasSet.add(vejnavn.replace("kristians", "kr") );  
   
                 aliasSet.add(vejnavn.replace("mylius", "myl") );  
                 aliasSet.add(vejnavn.replace("myl", "mylius") );  
                   
                 aliasSet.add(vejnavn.replace("ludvig", "ludv") );  
                 aliasSet.add(vejnavn.replace("ludv", "ludvig") );  
                   
                   
                 // alternative stavninger  
                 aliasSet.add(vejnavn.replace("peder", "peter") );  
                 aliasSet.add(vejnavn.replace("peter", "peder") );  
                   
   
                   
                 // Romertal  
                 aliasSet.add(vejnavn.replace("1", "i") );  
                 aliasSet.add(vejnavn.replace("i", "1") );  
                   
                 aliasSet.add(vejnavn.replace("2", "ii") );  
                 aliasSet.add(vejnavn.replace("ii", "2") );  
                   
                 aliasSet.add(vejnavn.replace("3", "iii") );  
                 aliasSet.add(vejnavn.replace("iii", "3") );  
                   
                 aliasSet.add(vejnavn.replace("4", "iv") );  
                 aliasSet.add(vejnavn.replace("iv", "4") );  
                   
                 aliasSet.add(vejnavn.replace("5", "v") );  
                 aliasSet.add(vejnavn.replace("v", "5") );  
                   
                 aliasSet.add(vejnavn.replace("6", "vi") );  
                 aliasSet.add(vejnavn.replace("vi", "6") );  
                   
                 aliasSet.add(vejnavn.replace("7", "vii") );  
                 aliasSet.add(vejnavn.replace("vii", "7") );  
                   
                 aliasSet.add(vejnavn.replace("8", "viii") );  
                 aliasSet.add(vejnavn.replace("viii", "8") );  
                   
                 aliasSet.add(vejnavn.replace("9", "ix") );  
                 aliasSet.add(vejnavn.replace("ix", "9") );  
                   
                 aliasSet.add(vejnavn.replace("10", "x") );  
                 aliasSet.add(vejnavn.replace("x", "10") );                
   
                   
                 //alternative måder at stave vej/gade/alle  
                 aliasSet.add(vejnavn.replace("vej", "ve") );  
                 aliasSet.add(vejnavn.replace("vej", "vj") );  
                 aliasSet.add(vejnavn.replace("vej", "v") );  
                 aliasSet.add(vejnavn.replace("vej", "vejen") );  
                 aliasSet.add(vejnavn.replace("vejen", "vej") );  
                   
                 aliasSet.add(vejnavn.replace("v", "vej") );//Vi kan have vejnavne i DB der bare slutter på v istedet for vej  
                   
                 aliasSet.add(vejnavn.replace("alle", "all") );  
                 aliasSet.add(vejnavn.replace("allé", "all") );  
                 aliasSet.add(vejnavn.replace("alle", "allú") ); //Fundet i logs.hentruteinfo  
                 aliasSet.add(vejnavn.replace("allé", "allú") );  
                   
                 aliasSet.add(vejnavn.replace("gade", "gaed") ); //Fundet i logs.hentruteinfo  
                 aliasSet.add(vejnavn.replace("gade", "gde") );  
                   
                 aliasSet.add(vejnavn.replace("plads", "pl") );  
                 aliasSet.add(vejnavn.replace("vænget", "vænge") );  
   
                 aliasSet.add(vejnavn.replace("boulevard", "blvd") );  
                 aliasSet.add(vejnavn.replace("blvd", "boulevard") );  
   
                 aliasSet.add(vejnavn.replace("boulevard", "boule") );  
                 aliasSet.add(vejnavn.replace("boule", "boulevard") );  
                                   
                 aliasSet.add(vejnavn.replace("kronborg", "krbg") ); //Krbg ladegårdsvej, 3000  
                 aliasSet.add(vejnavn.replace("krbg", "kronborg") );  
                   
                 // Opbyg æøå varianter over alle fundne aliaser  
                   
                 @SuppressWarnings("unchecked")  
                 HashSet<String> variants = (HashSet<String>) aliasSet.clone();  
                   
                 for (String vVejnavn : variants) {                                        
                         // danske tegn 1  
                         aliasSet.add( vVejnavn.replace("æ", "ae") );  
                         aliasSet.add( vVejnavn.replace("ø", "oe") );  
                         aliasSet.add( vVejnavn.replace("å", "aa") );  
                         aliasSet.add( vVejnavn.replace("ae", "æ") );  
                         aliasSet.add( vVejnavn.replace("oe", "ø") );  
                         aliasSet.add( vVejnavn.replace("aa", "å") );  
                           
                         //danske tegn 2  
                         aliasSet.add( vVejnavn.replace("æ", "ae").replace("ø", "oe") );  
                         aliasSet.add( vVejnavn.replace("æ", "ae").replace("å", "aa") );  
                         aliasSet.add( vVejnavn.replace("ø", "oe").replace("å", "aa") );  
                         aliasSet.add( vVejnavn.replace("ae", "æ").replace("oe","ø") );  
                         aliasSet.add( vVejnavn.replace("ae", "æ").replace("aa","å") );  
                         aliasSet.add( vVejnavn.replace("oe", "ø").replace("aa", "å") );  
                           
                         //danske tegn 3  
                         aliasSet.add( vejnavn.replace("æ", "ae").replace("ø", "oe").replace("å", "aa") );  
                         aliasSet.add( vejnavn.replace("ae", "æ").replace("oe", "ø").replace("aa", "å") );  
                           
                           
                         //udenlandsketegn  
                         aliasSet.add(vejnavn.replace("u", "ü") );  
                         aliasSet.add(vejnavn.replace("ü", "u") );  
                           
                         aliasSet.add(vejnavn.replace("ä", "æ") );  
                         aliasSet.add(vejnavn.replace("æ", "ä") );  
                           
                         aliasSet.add(vejnavn.replace("ö", "ø") );  
                         aliasSet.add(vejnavn.replace("ø", "ö") );  
                 }  
                   
                 return aliasSet;  
         }  
656                    
657          public Set<Short> getPostnumre() {          public Set<Short> getPostnumre() {
658                  return new TreeSet<Short>( searchPostnrVejnavnGadeid.keySet() );                  return new TreeSet<Short>( searchPostnrVejnavnGadeid.keySet() );
# Line 863  public class AddressSearch { Line 681  public class AddressSearch {
681          }          }
682                    
683          public Address getAdresse(int gadeid, String husnrStr) {          public Address getAdresse(int gadeid, String husnrStr) {
684                                    short husnr = Short.parseShort( husnrStr.replaceAll("[^\\d]","") );
685                  short husnr = Short.parseShort( husnrStr.replaceAll("\\d","") );                  String litra =  husnrStr.replaceAll("\\d", "");        
                 String litra =  husnrStr.replaceAll("^\\d", "");  
686                                    
687                  Map<Short,Map<String, Address>> gade = searchGadeidentAdresser.get(gadeid);                  Map<Short,Map<String, Address>> gade = searchGadeidentAdresser.get(gadeid);
688                  Map<String, Address> litraList = gade.get(husnr);                  Map<String, Address> litraList = gade.get(husnr);
Legend:
Removed from v.2785  
changed lines
  Added in v.2817
  ViewVC Help
Powered by ViewVC 1.1.20