27 |
import dk.daoas.daoadresseservice.beans.SearchResult; |
import dk.daoas.daoadresseservice.beans.SearchResult; |
28 |
import dk.daoas.daoadresseservice.beans.SearchResult.Status; |
import dk.daoas.daoadresseservice.beans.SearchResult.Status; |
29 |
import dk.daoas.daoadresseservice.db.DatabaseLayer; |
import dk.daoas.daoadresseservice.db.DatabaseLayer; |
30 |
|
import dk.daoas.daoadresseservice.util.DeduplicateHelper; |
31 |
|
import dk.daoas.daoadresseservice.util.NaturalOrderComparator; |
32 |
|
|
33 |
public class AddressSearch { |
public class AddressSearch { |
34 |
|
|
35 |
private Map<Integer, Map<String,Long>> searchPostnrVejnavnGadeid; |
private Map<Short, Map<String,Integer>> searchPostnrVejnavnGadeid; |
36 |
private Map<Long, Map<String,Address>> searchGadeidentAdresser; |
private Map<Integer, Map<String,Address>> searchGadeidentAdresser; |
37 |
|
|
38 |
private List<Address> alleAdresser; |
private List<Address> alleAdresser; |
39 |
|
|
40 |
private Map<String,Long> helperCache; |
private Map<String,Integer> helperCache; |
41 |
|
|
42 |
private DataStatisticsBean stats = new DataStatisticsBean(); |
private DataStatisticsBean stats = new DataStatisticsBean(); |
43 |
|
|
58 |
|
|
59 |
|
|
60 |
public SearchResult search(String postnrStr, String adresse) { |
public SearchResult search(String postnrStr, String adresse) { |
61 |
|
|
62 |
|
postnrStr = postnrStr.trim(); |
63 |
|
adresse = adresse.trim(); |
64 |
|
|
65 |
|
|
66 |
SearchRequest request = new SearchRequest(); |
SearchRequest request = new SearchRequest(); |
67 |
SearchResult result = new SearchResult(); |
SearchResult result = new SearchResult(); |
68 |
|
|
70 |
String helperSearchKey = ""; |
String helperSearchKey = ""; |
71 |
|
|
72 |
try { |
try { |
73 |
request.postnr = Integer.parseInt(postnrStr); |
request.postnr = Short.parseShort(postnrStr); |
74 |
} catch (Exception E) { |
} catch (Exception E) { |
75 |
result.status = Status.ERROR_UNKNOWN_POSTAL; |
result.status = Status.ERROR_UNKNOWN_POSTAL; |
76 |
return result; |
return result; |
95 |
return result; |
return result; |
96 |
} |
} |
97 |
|
|
98 |
request.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn ); |
result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn ); |
99 |
|
|
100 |
|
|
101 |
if (request.vasketVejnavn.indexOf("pakkebo") > -1 |
if (result.vasketVejnavn.indexOf("pakkebo") > -1 |
102 |
|| request.vasketVejnavn.indexOf("døgnpost") > -1 |
|| result.vasketVejnavn.indexOf("pakkepost") > -1 |
103 |
|| request.vasketVejnavn.indexOf("døgnbo") > -1 |
|| result.vasketVejnavn.indexOf("postbo") > -1 // postbox/postboks |
104 |
|| request.vasketVejnavn.equals("id") |
|| result.vasketVejnavn.indexOf("døgnpost") > -1 |
105 |
|
|| result.vasketVejnavn.indexOf("døgnbo") > -1 // døgnbox // døgnboks |
106 |
|
|| result.vasketVejnavn.equals("id") |
107 |
) { |
) { |
108 |
result.status = Status.ERROR_POSTBOX; |
result.status = Status.ERROR_POSTBOX; |
109 |
return result; |
return result; |
110 |
} |
} |
111 |
|
|
112 |
Long gadeident = request.streetNames.get(request.vasketVejnavn); |
Integer gadeident = request.streetNames.get(result.vasketVejnavn); |
113 |
|
|
114 |
|
|
115 |
if ( gadeident == null) { |
if ( gadeident == null) { |
116 |
helperSearchKey = "" + request.postnr + "/" + request.vasketVejnavn; |
helperSearchKey = "" + request.postnr + "/" + result.vasketVejnavn; |
117 |
gadeident = helperCache.get(helperSearchKey); |
gadeident = helperCache.get(helperSearchKey); |
118 |
} |
} |
119 |
|
|
185 |
return result; |
return result; |
186 |
} |
} |
187 |
|
|
188 |
private Long helperWrapper(String vej, Map<String,Long> postnrVeje, String helperSearchKey) { |
private Integer helperWrapper(String vej, Map<String,Integer> postnrVeje, String helperSearchKey) { |
189 |
if (vej == null) |
if (vej == null) |
190 |
return null; |
return null; |
191 |
|
|
192 |
String vejVasket = AddressUtils.vaskVejnavn( vej ); |
String vejVasket = AddressUtils.vaskVejnavn( vej ); |
193 |
Long gadeident = postnrVeje.get(vejVasket); |
Integer gadeident = postnrVeje.get(vejVasket); |
194 |
|
|
195 |
if (gadeident != null) { |
if (gadeident != null) { |
196 |
helperCache.put(helperSearchKey, gadeident); |
helperCache.put(helperSearchKey, gadeident); |
199 |
|
|
200 |
} |
} |
201 |
|
|
202 |
public Map<String,Long> getStretsByPostal(int zip) { |
public Map<String,Integer> getStretsByPostal(short zip) { |
203 |
return searchPostnrVejnavnGadeid.get(zip); |
return searchPostnrVejnavnGadeid.get(zip); |
204 |
} |
} |
205 |
|
|
206 |
|
|
207 |
|
|
208 |
public void buildSearchStructures() throws SQLException{ |
public void buildSearchStructures() throws SQLException{ |
209 |
searchPostnrVejnavnGadeid = new HashMap<Integer, Map<String,Long>>(); |
searchPostnrVejnavnGadeid = new HashMap<Short, Map<String,Integer>>(); |
210 |
searchGadeidentAdresser = new HashMap<Long, Map<String,Address>>(); |
searchGadeidentAdresser = new HashMap<Integer, Map<String,Address>>(); |
211 |
helperCache = new ConcurrentHashMap<String,Long>(); |
helperCache = new ConcurrentHashMap<String,Integer>(); |
212 |
|
|
213 |
long start1 = System.currentTimeMillis(); |
long start1 = System.currentTimeMillis(); |
214 |
System.out.println("Build -- stage 1"); |
System.out.println("Build -- stage 1"); |
218 |
|
|
219 |
/* Mapper mellem db Row ID og adresse noden */ |
/* Mapper mellem db Row ID og adresse noden */ |
220 |
Map<Integer,Address> idAddressMap = new HashMap<Integer,Address>( alleAdresser.size() ); |
Map<Integer,Address> idAddressMap = new HashMap<Integer,Address>( alleAdresser.size() ); |
221 |
|
DeduplicateHelper<String> aliasHelper = new DeduplicateHelper<String>(); |
222 |
|
DeduplicateHelper<String> husnrHelper = new DeduplicateHelper<String>(); |
223 |
|
|
224 |
for (Address a : alleAdresser) { |
for (Address a : alleAdresser) { |
225 |
idAddressMap.put(a.id, a); |
idAddressMap.put(a.id, a); |
226 |
|
|
227 |
Map<String,Long> postnrVeje = searchPostnrVejnavnGadeid.get(a.postnr); |
Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(a.postnr); |
228 |
|
|
229 |
if (postnrVeje == null) { |
if (postnrVeje == null) { |
230 |
postnrVeje = new ConcurrentHashMap<String,Long>(); |
postnrVeje = new ConcurrentHashMap<String,Integer>(); |
231 |
searchPostnrVejnavnGadeid.put(a.postnr, postnrVeje); |
searchPostnrVejnavnGadeid.put(a.postnr, postnrVeje); |
232 |
} |
} |
233 |
|
|
234 |
|
|
235 |
String vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn); |
String vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn); |
236 |
Long gadeident = postnrVeje.get(vasketVejnavn); |
Integer gadeident = postnrVeje.get(vasketVejnavn); |
237 |
if (gadeident == null) { |
if (gadeident == null) { |
238 |
//postnrVeje.put(vasketVejnavn, a.gadeid); |
//postnrVeje.put(vasketVejnavn, a.gadeid); |
239 |
|
|
242 |
Set<String> aliaser = findVejAliaser(a.vejnavn); |
Set<String> aliaser = findVejAliaser(a.vejnavn); |
243 |
for(String alias : aliaser) { |
for(String alias : aliaser) { |
244 |
String vasketAlias = AddressUtils.vaskVejnavn(alias); |
String vasketAlias = AddressUtils.vaskVejnavn(alias); |
245 |
|
vasketAlias = aliasHelper.getInstance(vasketAlias); |
246 |
|
|
247 |
postnrVeje.put(vasketAlias, gadeident); |
postnrVeje.put(vasketAlias, gadeident); |
248 |
} |
} |
249 |
} |
} |
254 |
searchGadeidentAdresser.put(gadeident, gade); |
searchGadeidentAdresser.put(gadeident, gade); |
255 |
} |
} |
256 |
String husnrSearch = "" + a.husnr + a.husnrbogstav; |
String husnrSearch = "" + a.husnr + a.husnrbogstav; |
257 |
|
husnrSearch = husnrHelper.getInstance(husnrSearch); |
258 |
gade.put(husnrSearch, a); |
gade.put(husnrSearch, a); |
259 |
} |
} |
260 |
|
|
266 |
int vaskCount = 0; |
int vaskCount = 0; |
267 |
List<AliasBean> aliasList = DatabaseLayer.getAliasList(); |
List<AliasBean> aliasList = DatabaseLayer.getAliasList(); |
268 |
for (AliasBean alias : aliasList) { |
for (AliasBean alias : aliasList) { |
269 |
Map<String,Long> postnrVeje = searchPostnrVejnavnGadeid.get(alias.postnr); |
Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(alias.postnr); |
270 |
|
|
271 |
if (postnrVeje == null) { |
if (postnrVeje == null) { |
272 |
//Burde ikke kunne ske - men better safe than sorry |
//Burde ikke kunne ske - men better safe than sorry |
276 |
String vasketVej = AddressUtils.vaskVejnavn(alias.vejnavn); |
String vasketVej = AddressUtils.vaskVejnavn(alias.vejnavn); |
277 |
String vasketAlias = AddressUtils.vaskVejnavn(alias.aliasVejnavn); |
String vasketAlias = AddressUtils.vaskVejnavn(alias.aliasVejnavn); |
278 |
|
|
279 |
Long gadeident = postnrVeje.get(vasketVej); |
Integer gadeident = postnrVeje.get(vasketVej); |
280 |
if (gadeident == null) { |
if (gadeident == null) { |
281 |
//Kender ikke den oprindelige vej |
//Kender ikke den oprindelige vej |
282 |
continue; |
continue; |
283 |
} |
} |
284 |
|
|
285 |
Long aliasIdent = postnrVeje.get(vasketAlias); |
Integer aliasIdent = postnrVeje.get(vasketAlias); |
286 |
|
|
287 |
if (aliasIdent == null) { //Vi kender ikke denne variant af vejnavnet |
if (aliasIdent == null) { //Vi kender ikke denne variant af vejnavnet |
288 |
postnrVeje.put(vasketAlias, gadeident); |
postnrVeje.put(vasketAlias, gadeident); |
298 |
System.out.println("Build, stage2 elapsed: " + (start3-start2) ); |
System.out.println("Build, stage2 elapsed: " + (start3-start2) ); |
299 |
System.out.println("Build -- stage 3 udvidet dækning"); |
System.out.println("Build -- stage 3 udvidet dækning"); |
300 |
|
|
301 |
|
DeduplicateHelper<String> ruteHelper = new DeduplicateHelper<String>(); |
302 |
|
DeduplicateHelper<String> korelisteHelper = new DeduplicateHelper<String>(); |
303 |
|
|
304 |
List<ExtendedBean> extDao = DatabaseLayer.getExtendedAdresslist(); |
List<ExtendedBean> extDao = DatabaseLayer.getExtendedAdresslist(); |
305 |
for (ExtendedBean eb : extDao) { |
for (ExtendedBean eb : extDao) { |
306 |
|
|
308 |
if (orgAddress == null) |
if (orgAddress == null) |
309 |
continue; |
continue; |
310 |
|
|
311 |
|
if (orgAddress.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) { |
312 |
|
//kan være at adressen er blevet markeret dækket og - find-nærmeste data ikke er opdateret i mellemtiden |
313 |
|
continue; |
314 |
|
} |
315 |
|
|
316 |
Address targetAddress = idAddressMap.get(eb.targetId); |
Address targetAddress = idAddressMap.get(eb.targetId); |
317 |
if (targetAddress == null) |
if (targetAddress == null) { |
318 |
continue; |
continue; |
319 |
|
} |
320 |
|
|
321 |
|
|
322 |
if (orgAddress.distributor != null && orgAddress.distributor.equals("LUKKET")) { |
if ( StringUtils.equals(orgAddress.distributor, "LUKKET") ) { |
323 |
continue; |
continue; |
324 |
} |
} |
325 |
|
|
326 |
if (targetAddress.distributor.equals("LUKKET")) { |
|
327 |
|
|
328 |
|
if ( StringUtils.equals(targetAddress.distributor, "LUKKET") ) { |
329 |
continue; |
continue; |
330 |
} |
} |
331 |
|
|
334 |
|
|
335 |
boolean covered = false; |
boolean covered = false; |
336 |
if (targetAddress.distributor.equals("DAO")) { |
if (targetAddress.distributor.equals("DAO")) { |
337 |
orgAddress.rute = calculateExtendedDaoRoute(eb,orgAddress,targetAddress); |
orgAddress.rute = calculateExtendedDaoRoute(eb,orgAddress,targetAddress); |
338 |
|
orgAddress.rute = ruteHelper.getInstance(orgAddress.rute); |
339 |
|
|
340 |
if (orgAddress.rute != null) { |
if (orgAddress.rute != null) { |
341 |
orgAddress.koreliste = targetAddress.koreliste; |
orgAddress.koreliste = targetAddress.koreliste; |
342 |
covered = true; |
covered = true; |
344 |
} |
} |
345 |
|
|
346 |
if (targetAddress.distributor.equals("BK")) { |
if (targetAddress.distributor.equals("BK")) { |
347 |
orgAddress.koreliste = calculateExtendedBkKoreliste(eb,orgAddress,targetAddress); |
orgAddress.koreliste = calculateExtendedBkKoreliste(eb,orgAddress,targetAddress); |
348 |
|
orgAddress.koreliste = korelisteHelper.getInstance(orgAddress.koreliste); |
349 |
|
|
350 |
if (orgAddress.koreliste != null) { |
if (orgAddress.koreliste != null) { |
351 |
orgAddress.rute = targetAddress.rute; |
orgAddress.rute = targetAddress.rute; |
352 |
covered = true; |
covered = true; |
358 |
orgAddress.dbkBane = targetAddress.dbkBane; |
orgAddress.dbkBane = targetAddress.dbkBane; |
359 |
|
|
360 |
/* Sådan gør den gamle service */ |
/* Sådan gør den gamle service */ |
361 |
orgAddress.kommunekode = targetAddress.kommunekode; |
/* 20150520 THN- hvis vi bibeholder de originale kommune+vejkoder kan vi bruge DAVID til join i databasen*/ |
362 |
orgAddress.vejkode = targetAddress.vejkode; |
//orgAddress.kommunekode = targetAddress.kommunekode; |
363 |
|
//orgAddress.vejkode = targetAddress.vejkode; |
364 |
|
|
365 |
|
|
366 |
orgAddress.distributor = targetAddress.distributor; |
orgAddress.distributor = targetAddress.distributor; |
367 |
} |
} |
375 |
System.out.println("Build, stage3 elapsed: " + (start4-start3) ); |
System.out.println("Build, stage3 elapsed: " + (start4-start3) ); |
376 |
System.out.println("Build -- stage 4 - 100pct"); |
System.out.println("Build -- stage 4 - 100pct"); |
377 |
|
|
378 |
Map<Integer,HundredePctBean> hundredePct = DatabaseLayer.get100PctList(); |
Map<Short,HundredePctBean> hundredePct = DatabaseLayer.get100PctList(); |
379 |
for (Address addr : alleAdresser) { |
for (Address addr : alleAdresser) { |
380 |
if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) { |
if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) { |
381 |
continue; |
continue; |
522 |
aliasSet.add(vejnavn.replace("alle", "allé") ); |
aliasSet.add(vejnavn.replace("alle", "allé") ); |
523 |
aliasSet.add(vejnavn.replace("allé", "alle") ); |
aliasSet.add(vejnavn.replace("allé", "alle") ); |
524 |
|
|
525 |
|
|
526 |
|
// forkortelser |
527 |
aliasSet.add(vejnavn.replace("dronningens", "dr") ); |
aliasSet.add(vejnavn.replace("dronningens", "dr") ); |
528 |
aliasSet.add(vejnavn.replace("dr.", "dronningens") ); |
aliasSet.add(vejnavn.replace("dr.", "dronningens") ); |
529 |
aliasSet.add(vejnavn.replace("dr ", "dronningens") ); |
aliasSet.add(vejnavn.replace("dr ", "dronningens") ); |
558 |
|
|
559 |
aliasSet.add(vejnavn.replace("nordre", "ndr") ); |
aliasSet.add(vejnavn.replace("nordre", "ndr") ); |
560 |
aliasSet.add(vejnavn.replace("ndr", "nordre") ); |
aliasSet.add(vejnavn.replace("ndr", "nordre") ); |
561 |
|
|
562 |
|
aliasSet.add(vejnavn.replace("borgmester", "borgm") ); |
563 |
|
aliasSet.add(vejnavn.replace("borgm", "borgmester") ); |
564 |
|
|
565 |
|
|
566 |
aliasSet.add(vejnavn.replace("sankt", "skt") ); |
aliasSet.add(vejnavn.replace("sankt", "skt") ); |
567 |
aliasSet.add(vejnavn.replace("sankt", "sct") ); |
aliasSet.add(vejnavn.replace("sankt", "sct") ); |
568 |
aliasSet.add(vejnavn.replace("skt", "sankt") ); |
aliasSet.add(vejnavn.replace("skt", "sankt") ); |
569 |
|
|
570 |
aliasSet.add(vejnavn.replace("skt", "sct") ); |
aliasSet.add(vejnavn.replace("skt", "sct") ); |
571 |
aliasSet.add(vejnavn.replace("sct", "skt") ); |
aliasSet.add(vejnavn.replace("sct", "skt") ); |
572 |
|
|
573 |
|
|
574 |
|
|
575 |
// fornavn forkortelser |
// fornavn forkortelser |
576 |
aliasSet.add(vejnavn.replace("john", "j") ); |
aliasSet.add(vejnavn.replace("john", "j") ); |
577 |
aliasSet.add(vejnavn.replace("thomas", "th") ); |
aliasSet.add(vejnavn.replace("thomas", "th") ); |
578 |
aliasSet.add(vejnavn.replace("thorvald", "th") ); |
aliasSet.add(vejnavn.replace("thorvald", "th") ); |
579 |
|
|
580 |
|
|
581 |
|
aliasSet.add(vejnavn.replace("christian", "chr") ); |
582 |
|
aliasSet.add(vejnavn.replace("kristian", "kr") ); |
583 |
|
|
584 |
|
|
585 |
|
// alternative stavninger |
586 |
|
aliasSet.add(vejnavn.replace("peder", "peter") ); |
587 |
|
aliasSet.add(vejnavn.replace("peter", "peder") ); |
588 |
|
|
589 |
|
|
590 |
|
|
591 |
// Romertal |
// Romertal |
627 |
aliasSet.add(vejnavn.replace("vej", "vejen") ); |
aliasSet.add(vejnavn.replace("vej", "vejen") ); |
628 |
aliasSet.add(vejnavn.replace("vejen", "vej") ); |
aliasSet.add(vejnavn.replace("vejen", "vej") ); |
629 |
|
|
630 |
|
aliasSet.add(vejnavn.replace("v", "vej") );//Vi kan have vejnavne i DB der bare slutter på v istedet for vej |
631 |
|
|
632 |
aliasSet.add(vejnavn.replace("alle", "all") ); |
aliasSet.add(vejnavn.replace("alle", "all") ); |
633 |
aliasSet.add(vejnavn.replace("allé", "all") ); |
aliasSet.add(vejnavn.replace("allé", "all") ); |
634 |
aliasSet.add(vejnavn.replace("alle", "allú") ); //Fundet i logs.hentruteinfo |
aliasSet.add(vejnavn.replace("alle", "allú") ); //Fundet i logs.hentruteinfo |
658 |
//danske tegn 2 |
//danske tegn 2 |
659 |
aliasSet.add( vVejnavn.replace("æ", "ae").replace("ø", "oe") ); |
aliasSet.add( vVejnavn.replace("æ", "ae").replace("ø", "oe") ); |
660 |
aliasSet.add( vVejnavn.replace("æ", "ae").replace("å", "aa") ); |
aliasSet.add( vVejnavn.replace("æ", "ae").replace("å", "aa") ); |
661 |
aliasSet.add( vVejnavn.replace("ø", "ae").replace("å", "aa") ); |
aliasSet.add( vVejnavn.replace("ø", "oe").replace("å", "aa") ); |
662 |
aliasSet.add( vVejnavn.replace("ae", "æ").replace("oe","ø") ); |
aliasSet.add( vVejnavn.replace("ae", "æ").replace("oe","ø") ); |
663 |
aliasSet.add( vVejnavn.replace("ae", "æ").replace("aa","å") ); |
aliasSet.add( vVejnavn.replace("ae", "æ").replace("aa","å") ); |
664 |
aliasSet.add( vVejnavn.replace("oe", "ø").replace("aa", "å") ); |
aliasSet.add( vVejnavn.replace("oe", "ø").replace("aa", "å") ); |
671 |
return aliasSet; |
return aliasSet; |
672 |
} |
} |
673 |
|
|
674 |
public Set<Integer> getPostnumre() { |
public Set<Short> getPostnumre() { |
675 |
return new TreeSet<Integer>( searchPostnrVejnavnGadeid.keySet() ); |
return new TreeSet<Short>( searchPostnrVejnavnGadeid.keySet() ); |
676 |
} |
} |
677 |
|
|
678 |
public Set<Entry<String,Long>> getVejnavne(int postnr) { |
public Set<Entry<String,Integer>> getVejnavne(short postnr) { |
679 |
Map<String,Long> map = searchPostnrVejnavnGadeid.get(postnr); |
Map<String,Integer> map = searchPostnrVejnavnGadeid.get(postnr); |
680 |
TreeMap<String,Long> newMap = new TreeMap<String,Long>(); |
TreeMap<String,Integer> newMap = new TreeMap<String,Integer>(); |
681 |
for (Entry<String,Long> entry : map.entrySet() ) { |
for (Entry<String,Integer> entry : map.entrySet() ) { |
682 |
newMap.put(entry.getKey(), entry.getValue()); |
newMap.put(entry.getKey(), entry.getValue()); |
683 |
} |
} |
684 |
|
|
685 |
return newMap.entrySet(); |
return newMap.entrySet(); |
686 |
} |
} |
687 |
|
|
688 |
public Set<String> getHusnumre(long gadeid) { |
public Set<String> getHusnumre(int gadeid) { |
689 |
|
|
690 |
Map<String, Address> gade = searchGadeidentAdresser.get(gadeid); |
Map<String, Address> gade = searchGadeidentAdresser.get(gadeid); |
691 |
return new TreeSet<String>( gade.keySet() ); |
|
692 |
|
Set<String> set = new TreeSet<String>( new NaturalOrderComparator<String>() ); |
693 |
|
set.addAll( gade.keySet() ); |
694 |
|
|
695 |
|
return set; |
696 |
} |
} |
697 |
|
|
698 |
public Address getAdresse(long gadeid, String husnr) { |
public Address getAdresse(int gadeid, String husnr) { |
699 |
|
|
700 |
Map<String, Address> gade = searchGadeidentAdresser.get(gadeid); |
Map<String, Address> gade = searchGadeidentAdresser.get(gadeid); |
701 |
return gade.get(husnr); |
return gade.get(husnr); |