/[projects]/dao/DaoAdresseService/src/main/java/dk/daoas/daoadresseservice/AddressSearch.java
ViewVC logotype

Diff of /dao/DaoAdresseService/src/main/java/dk/daoas/daoadresseservice/AddressSearch.java

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

dao/DaoAdresseService/src/dk/daoas/daoadresseservice/AddressSearch.java revision 2411 by torben, Sat Feb 28 17:08:59 2015 UTC dao/DaoAdresseService/src/main/java/dk/daoas/daoadresseservice/AddressSearch.java revision 2504 by torben, Wed Mar 25 12:58:13 2015 UTC
# Line 9  import java.util.HashMap; Line 9  import java.util.HashMap;
9  import java.util.HashSet;  import java.util.HashSet;
10  import java.util.List;  import java.util.List;
11  import java.util.Map;  import java.util.Map;
12    import java.util.Map.Entry;
13  import java.util.Set;  import java.util.Set;
14    import java.util.TreeMap;
15    import java.util.TreeSet;
16  import java.util.concurrent.ConcurrentHashMap;  import java.util.concurrent.ConcurrentHashMap;
17    
18  import org.apache.commons.lang3.StringUtils;  import org.apache.commons.lang3.StringUtils;
# Line 24  import dk.daoas.daoadresseservice.beans. Line 27  import dk.daoas.daoadresseservice.beans.
27  import dk.daoas.daoadresseservice.beans.SearchResult;  import dk.daoas.daoadresseservice.beans.SearchResult;
28  import dk.daoas.daoadresseservice.beans.SearchResult.Status;  import dk.daoas.daoadresseservice.beans.SearchResult.Status;
29  import dk.daoas.daoadresseservice.db.DatabaseLayer;  import dk.daoas.daoadresseservice.db.DatabaseLayer;
30    import dk.daoas.daoadresseservice.util.DeduplicateHelper;
31    import dk.daoas.daoadresseservice.util.NaturalOrderComparator;
32    
33  public class AddressSearch {  public class AddressSearch {
34    
35          private Map<Integer, Map<String,Long>> searchPostnrVejnavnGadeid;                private Map<Short, Map<String,Integer>> searchPostnrVejnavnGadeid;      
36          private Map<Long,  Map<String,Address>> searchGadeidentAdresser;          private Map<Integer,  Map<String,Address>> searchGadeidentAdresser;
37    
38          private List<Address> alleAdresser;          private List<Address> alleAdresser;
39                    
40          private Map<String,Long> helperCache;          private Map<String,Integer> helperCache;
41                    
42          private DataStatisticsBean stats = new DataStatisticsBean();          private DataStatisticsBean stats = new DataStatisticsBean();
43                    
# Line 53  public class AddressSearch { Line 58  public class AddressSearch {
58                    
59                    
60          public SearchResult search(String postnrStr, String adresse)  {          public SearchResult search(String postnrStr, String adresse)  {
61                    
62                    postnrStr = postnrStr.trim();
63                    adresse = adresse.trim();
64                    
65                    
66                  SearchRequest request = new SearchRequest();                  SearchRequest request = new SearchRequest();
67                  SearchResult result = new SearchResult();                  SearchResult result = new SearchResult();
68                                    
# Line 60  public class AddressSearch { Line 70  public class AddressSearch {
70                  String helperSearchKey = "";                  String helperSearchKey = "";
71                                    
72                  try {                  try {
73                          request.postnr = Integer.parseInt(postnrStr);                          request.postnr = Short.parseShort(postnrStr);
74                  } catch (Exception E) {                  } catch (Exception E) {
75                          result.status = Status.ERROR_UNKNOWN_POSTAL;                          result.status = Status.ERROR_UNKNOWN_POSTAL;
76                          return result;                          return result;
77                  }                                }              
78                                    
                 ;  
79                                    
80                  request.streetNames = searchPostnrVejnavnGadeid.get(request.postnr);                                      request.streetNames = searchPostnrVejnavnGadeid.get(request.postnr);                    
81                                    
# Line 86  public class AddressSearch { Line 95  public class AddressSearch {
95                          return result;                          return result;
96                  }                  }
97                                    
98                  request.vasketVejnavn = AddressUtils.vaskVejnavn( result.splitResult.vej );                  request.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );
99                                    
100                  Long gadeident =  request.streetNames.get(request.vasketVejnavn);  
101                    if (request.vasketVejnavn.indexOf("pakkebo") > -1
102                                    || request.vasketVejnavn.indexOf("døgnpost") > -1
103                                    || request.vasketVejnavn.indexOf("døgnbo") > -1
104                                    || request.vasketVejnavn.equals("id")
105                                    ) {
106                            result.status = Status.ERROR_POSTBOX;
107                            return result;                  
108                    }
109                    
110                    Integer gadeident =  request.streetNames.get(request.vasketVejnavn);
111                                    
112                                    
113                  if ( gadeident == null) {                  if ( gadeident == null) {
# Line 164  public class AddressSearch { Line 183  public class AddressSearch {
183                  return result;                  return result;
184          }          }
185                    
186          private Long helperWrapper(String vej, Map<String,Long> postnrVeje, String helperSearchKey) {          private Integer helperWrapper(String vej, Map<String,Integer> postnrVeje, String helperSearchKey) {
187                  if (vej == null)                  if (vej == null)
188                          return null;                          return null;
189                                    
190                  String vejVasket = AddressUtils.vaskVejnavn( vej );                  String vejVasket = AddressUtils.vaskVejnavn( vej );
191                  Long gadeident =  postnrVeje.get(vejVasket);                  Integer gadeident =  postnrVeje.get(vejVasket);
192                                    
193                  if (gadeident != null) {                  if (gadeident != null) {
194                          helperCache.put(helperSearchKey, gadeident);                          helperCache.put(helperSearchKey, gadeident);
# Line 178  public class AddressSearch { Line 197  public class AddressSearch {
197                                    
198          }          }
199                    
200          public Map<String,Long> getStretsByPostal(int zip) {          public Map<String,Integer> getStretsByPostal(int zip) {
201                  return searchPostnrVejnavnGadeid.get(zip);                  return searchPostnrVejnavnGadeid.get(zip);
202          }          }
203    
204                    
205                    
206          public void buildSearchStructures() throws SQLException{          public void buildSearchStructures() throws SQLException{
207                  searchPostnrVejnavnGadeid = new HashMap<Integer, Map<String,Long>>();                  searchPostnrVejnavnGadeid = new HashMap<Short, Map<String,Integer>>();
208                  searchGadeidentAdresser = new HashMap<Long,  Map<String,Address>>();                  searchGadeidentAdresser = new HashMap<Integer,  Map<String,Address>>();
209                  helperCache = new ConcurrentHashMap<String,Long>();                  helperCache = new ConcurrentHashMap<String,Integer>();
210                                    
211                  long start1 = System.currentTimeMillis();                  long start1 = System.currentTimeMillis();
212                  System.out.println("Build -- stage 1");                  System.out.println("Build -- stage 1");
# Line 197  public class AddressSearch { Line 216  public class AddressSearch {
216                                    
217                  /* Mapper mellem db Row ID og adresse noden */                  /* Mapper mellem db Row ID og adresse noden */
218                  Map<Integer,Address> idAddressMap = new HashMap<Integer,Address>( alleAdresser.size() );                  Map<Integer,Address> idAddressMap = new HashMap<Integer,Address>( alleAdresser.size() );
219                    DeduplicateHelper<String> aliasHelper = new DeduplicateHelper<String>();
220                    DeduplicateHelper<String> husnrHelper = new DeduplicateHelper<String>();
221                                    
222                  for (Address a : alleAdresser) {                  for (Address a : alleAdresser) {
223                          idAddressMap.put(a.id, a);                          idAddressMap.put(a.id, a);
224                                                    
225                          Map<String,Long> postnrVeje = searchPostnrVejnavnGadeid.get(a.postnr);                                    Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(a.postnr);              
226                                                    
227                          if (postnrVeje == null) {                          if (postnrVeje == null) {
228                                  postnrVeje = new ConcurrentHashMap<String,Long>();                                  postnrVeje = new ConcurrentHashMap<String,Integer>();
229                                  searchPostnrVejnavnGadeid.put(a.postnr, postnrVeje);                                  searchPostnrVejnavnGadeid.put(a.postnr, postnrVeje);
230                          }                          }
231                                    
232                                                    
233                          String vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn);                          String vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn);
234                          Long gadeident = postnrVeje.get(vasketVejnavn);                          Integer gadeident = postnrVeje.get(vasketVejnavn);
235                          if (gadeident == null) {                                                          if (gadeident == null) {                                
236                                  //postnrVeje.put(vasketVejnavn, a.gadeid);                                  //postnrVeje.put(vasketVejnavn, a.gadeid);
237                                                                    
# Line 218  public class AddressSearch { Line 240  public class AddressSearch {
240                                  Set<String> aliaser = findVejAliaser(a.vejnavn);                                  Set<String> aliaser = findVejAliaser(a.vejnavn);
241                                  for(String alias : aliaser) {                                  for(String alias : aliaser) {
242                                          String vasketAlias = AddressUtils.vaskVejnavn(alias);                                          String vasketAlias = AddressUtils.vaskVejnavn(alias);
243                                            vasketAlias = aliasHelper.getInstance(vasketAlias);
244                                            
245                                          postnrVeje.put(vasketAlias, gadeident);                                          postnrVeje.put(vasketAlias, gadeident);
246                                  }                                                                }                              
247                          }                          }
# Line 228  public class AddressSearch { Line 252  public class AddressSearch {
252                                  searchGadeidentAdresser.put(gadeident, gade);                                  searchGadeidentAdresser.put(gadeident, gade);
253                          }                          }
254                          String husnrSearch = "" + a.husnr + a.husnrbogstav;                          String husnrSearch = "" + a.husnr + a.husnrbogstav;
255                            husnrSearch = husnrHelper.getInstance(husnrSearch);
256                          gade.put(husnrSearch, a);                                                gade.put(husnrSearch, a);                      
257                  }                  }
258                                    
# Line 239  public class AddressSearch { Line 264  public class AddressSearch {
264                  int vaskCount = 0;                  int vaskCount = 0;
265                  List<AliasBean> aliasList = DatabaseLayer.getAliasList();                  List<AliasBean> aliasList = DatabaseLayer.getAliasList();
266                  for (AliasBean alias : aliasList) {                  for (AliasBean alias : aliasList) {
267                          Map<String,Long> postnrVeje = searchPostnrVejnavnGadeid.get(alias.postnr);                          Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(alias.postnr);
268                                                    
269                          if (postnrVeje == null) {                          if (postnrVeje == null) {
270                                  //Burde ikke kunne ske - men better safe than sorry                                  //Burde ikke kunne ske - men better safe than sorry
# Line 249  public class AddressSearch { Line 274  public class AddressSearch {
274                          String vasketVej = AddressUtils.vaskVejnavn(alias.vejnavn);                          String vasketVej = AddressUtils.vaskVejnavn(alias.vejnavn);
275                          String vasketAlias = AddressUtils.vaskVejnavn(alias.aliasVejnavn);                          String vasketAlias = AddressUtils.vaskVejnavn(alias.aliasVejnavn);
276                                                    
277                          Long gadeident = postnrVeje.get(vasketVej);                          Integer gadeident = postnrVeje.get(vasketVej);
278                          if (gadeident == null) {                          if (gadeident == null) {
279                                  //Kender ikke den oprindelige vej                                  //Kender ikke den oprindelige vej
280                                  continue;                                  continue;
281                          }                          }
282                                                    
283                          Long aliasIdent = postnrVeje.get(vasketAlias);                          Integer aliasIdent = postnrVeje.get(vasketAlias);
284                                                    
285                          if (aliasIdent == null) { //Vi kender ikke denne variant af vejnavnet                          if (aliasIdent == null) { //Vi kender ikke denne variant af vejnavnet
286                                  postnrVeje.put(vasketAlias, gadeident);                                  postnrVeje.put(vasketAlias, gadeident);
# Line 271  public class AddressSearch { Line 296  public class AddressSearch {
296                  System.out.println("Build, stage2 elapsed: " + (start3-start2) );                  System.out.println("Build, stage2 elapsed: " + (start3-start2) );
297                  System.out.println("Build -- stage 3 udvidet dækning");                  System.out.println("Build -- stage 3 udvidet dækning");
298                                    
299                    DeduplicateHelper<String> ruteHelper = new DeduplicateHelper<String>();
300                    DeduplicateHelper<String> korelisteHelper = new DeduplicateHelper<String>();
301                    
302                  List<ExtendedBean> extDao = DatabaseLayer.getExtendedAdresslist();                  List<ExtendedBean> extDao = DatabaseLayer.getExtendedAdresslist();
303                  for (ExtendedBean eb : extDao) {                  for (ExtendedBean eb : extDao) {
304                                                    
# Line 278  public class AddressSearch { Line 306  public class AddressSearch {
306                          if (orgAddress == null)                          if (orgAddress == null)
307                                  continue;                                  continue;
308                                                    
309                            if (orgAddress.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {
310                                    //kan være at adressen er blevet markeret dækket og - find-nærmeste data ikke er opdateret i mellemtiden
311                                    continue;
312                            }
313                            
314                          Address targetAddress = idAddressMap.get(eb.targetId);                          Address targetAddress = idAddressMap.get(eb.targetId);
315                          if (targetAddress == null)                          if (targetAddress == null) {
316                                  continue;                                  continue;
317                            }
318                            
319                                                    
320                          if (orgAddress.distributor != null && orgAddress.distributor.equals("LUKKET")) {                          if ( StringUtils.equals(orgAddress.distributor, "LUKKET") ) {
321                                  continue;                                  continue;
322                          }                                                }                      
323                                                    
324                          if (targetAddress.distributor.equals("LUKKET")) {                          
325                            
326                            if ( StringUtils.equals(targetAddress.distributor, "LUKKET") ) {
327                                  continue;                                  continue;
328                          }                          }
329                                                    
# Line 295  public class AddressSearch { Line 332  public class AddressSearch {
332    
333                          boolean covered = false;                          boolean covered = false;
334                          if (targetAddress.distributor.equals("DAO")) {                          if (targetAddress.distributor.equals("DAO")) {
335                                  orgAddress.rute = calculateExtendedDaoRoute(eb,orgAddress,targetAddress);                                                                orgAddress.rute = calculateExtendedDaoRoute(eb,orgAddress,targetAddress);      
336                                    orgAddress.rute = ruteHelper.getInstance(orgAddress.rute);
337                                    
338                                  if (orgAddress.rute != null) {                                  if (orgAddress.rute != null) {
339                                          orgAddress.koreliste = targetAddress.koreliste;                                          orgAddress.koreliste = targetAddress.koreliste;
340                                          covered = true;                                          covered = true;
# Line 303  public class AddressSearch { Line 342  public class AddressSearch {
342                          }                          }
343                                                    
344                          if (targetAddress.distributor.equals("BK")) {                          if (targetAddress.distributor.equals("BK")) {
345                                  orgAddress.koreliste = calculateExtendedBkKoreliste(eb,orgAddress,targetAddress);                                                                orgAddress.koreliste = calculateExtendedBkKoreliste(eb,orgAddress,targetAddress);
346                                    orgAddress.koreliste = korelisteHelper.getInstance(orgAddress.koreliste);
347                                    
348                                  if (orgAddress.koreliste != null) {                                  if (orgAddress.koreliste != null) {
349                                          orgAddress.rute = targetAddress.rute;                                          orgAddress.rute = targetAddress.rute;
350                                          covered = true;                                          covered = true;
# Line 330  public class AddressSearch { Line 371  public class AddressSearch {
371                  System.out.println("Build, stage3 elapsed: " + (start4-start3) );                  System.out.println("Build, stage3 elapsed: " + (start4-start3) );
372                  System.out.println("Build -- stage 4 - 100pct");                  System.out.println("Build -- stage 4 - 100pct");
373                                    
374                  Map<Integer,HundredePctBean> hundredePct = DatabaseLayer.get100PctList();                  Map<Short,HundredePctBean> hundredePct = DatabaseLayer.get100PctList();
375                  for (Address addr : alleAdresser) {                  for (Address addr : alleAdresser) {
376                          if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {                                                  if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {                        
377                                  continue;                                  continue;
# Line 401  public class AddressSearch { Line 442  public class AddressSearch {
442                    
443                    
444          private String calculateExtendedDaoRoute(ExtendedBean eb, Address orgAddress, Address targetAddress) {          private String calculateExtendedDaoRoute(ExtendedBean eb, Address orgAddress, Address targetAddress) {
445                    if (targetAddress.rute == null) { //hvis targetAdress.rute er null så er adressen ikke dækket alligevel
446                            return null;
447                    }
448    
449                  // ///////////////////////////////////////////////////////////////////                  // ///////////////////////////////////////////////////////////////////
450                  switch( eb.transport) {                  switch( eb.transport) {
# Line 568  public class AddressSearch { Line 612  public class AddressSearch {
612                  aliasSet.add(vejnavn.replace("allé", "allú") );                  aliasSet.add(vejnavn.replace("allé", "allú") );
613                                    
614                  aliasSet.add(vejnavn.replace("gade", "gaed") ); //Fundet i logs.hentruteinfo                  aliasSet.add(vejnavn.replace("gade", "gaed") ); //Fundet i logs.hentruteinfo
615                    aliasSet.add(vejnavn.replace("gade", "gde") );
616                                    
617                  aliasSet.add(vejnavn.replace("plads", "pl") );                  aliasSet.add(vejnavn.replace("plads", "pl") );
618                  aliasSet.add(vejnavn.replace("vænget", "vænge") );                  aliasSet.add(vejnavn.replace("vænget", "vænge") );
# Line 590  public class AddressSearch { Line 635  public class AddressSearch {
635                          //danske tegn 2                          //danske tegn 2
636                          aliasSet.add( vVejnavn.replace("æ", "ae").replace("ø", "oe") );                          aliasSet.add( vVejnavn.replace("æ", "ae").replace("ø", "oe") );
637                          aliasSet.add( vVejnavn.replace("æ", "ae").replace("å", "aa") );                          aliasSet.add( vVejnavn.replace("æ", "ae").replace("å", "aa") );
638                          aliasSet.add( vVejnavn.replace("ø", "ae").replace("å", "aa") );                          aliasSet.add( vVejnavn.replace("ø", "oe").replace("å", "aa") );
639                          aliasSet.add( vVejnavn.replace("ae", "æ").replace("oe","ø") );                          aliasSet.add( vVejnavn.replace("ae", "æ").replace("oe","ø") );
640                          aliasSet.add( vVejnavn.replace("ae", "æ").replace("aa","å") );                          aliasSet.add( vVejnavn.replace("ae", "æ").replace("aa","å") );
641                          aliasSet.add( vVejnavn.replace("oe", "ø").replace("aa", "å") );                          aliasSet.add( vVejnavn.replace("oe", "ø").replace("aa", "å") );
# Line 603  public class AddressSearch { Line 648  public class AddressSearch {
648                  return aliasSet;                  return aliasSet;
649          }          }
650                    
651            public Set<Short> getPostnumre() {
652                    return new TreeSet<Short>( searchPostnrVejnavnGadeid.keySet() );
653            }
654            
655            public Set<Entry<String,Integer>> getVejnavne(short postnr) {
656                    Map<String,Integer> map = searchPostnrVejnavnGadeid.get(postnr);
657                    TreeMap<String,Integer> newMap = new TreeMap<String,Integer>();
658                    for (Entry<String,Integer> entry : map.entrySet() ) {
659                            newMap.put(entry.getKey(), entry.getValue());
660                    }
661                    
662                    return newMap.entrySet();
663            }
664            
665            public Set<String> getHusnumre(int gadeid) {
666                                    
667                    Map<String, Address> gade = searchGadeidentAdresser.get(gadeid);
668                    
669                    Set<String> set = new TreeSet<String>( new NaturalOrderComparator<String>() );
670                    set.addAll( gade.keySet() );
671                    
672                    return set;
673            }
674                    
675            public Address getAdresse(int gadeid, String husnr) {
676                    
677                    Map<String, Address> gade = searchGadeidentAdresser.get(gadeid);
678                    return gade.get(husnr);
679                    
680            }
681                    
682  }  }
Legend:
Removed from v.2411  
changed lines
  Added in v.2504
  ViewVC Help
Powered by ViewVC 1.1.20