1 |
package dk.daoas.daoadresseservice; |
package dk.daoas.daoadresseservice; |
2 |
|
|
3 |
import java.sql.SQLException; |
import java.sql.SQLException; |
4 |
|
import java.text.SimpleDateFormat; |
5 |
|
import java.util.ArrayList; |
6 |
|
import java.util.Collections; |
7 |
|
import java.util.Date; |
8 |
import java.util.HashMap; |
import java.util.HashMap; |
9 |
import java.util.HashSet; |
import java.util.HashSet; |
10 |
import java.util.List; |
import java.util.List; |
13 |
import java.util.concurrent.ConcurrentHashMap; |
import java.util.concurrent.ConcurrentHashMap; |
14 |
|
|
15 |
import dk.daoas.daoadresseservice.AddressUtils.SplitResult; |
import dk.daoas.daoadresseservice.AddressUtils.SplitResult; |
16 |
|
import dk.daoas.daoadresseservice.admin.ServiceConfig; |
17 |
import dk.daoas.daoadresseservice.beans.Address; |
import dk.daoas.daoadresseservice.beans.Address; |
18 |
|
import dk.daoas.daoadresseservice.beans.DataStatisticsBean; |
19 |
import dk.daoas.daoadresseservice.beans.ExtendedBean; |
import dk.daoas.daoadresseservice.beans.ExtendedBean; |
20 |
import dk.daoas.daoadresseservice.beans.HundredePctBean; |
import dk.daoas.daoadresseservice.beans.HundredePctBean; |
21 |
import dk.daoas.daoadresseservice.beans.SearchResult; |
import dk.daoas.daoadresseservice.beans.SearchResult; |
24 |
|
|
25 |
public class AdressSearch { |
public class AdressSearch { |
26 |
|
|
27 |
Map<Integer, Map<String,Long>> searchPostnrVejnavnGadeid; |
private Map<Integer, Map<String,Long>> searchPostnrVejnavnGadeid; |
28 |
Map<Long, Map<String,Address>> searchGadeidentAdresser; |
private Map<Long, Map<String,Address>> searchGadeidentAdresser; |
29 |
|
|
30 |
List<Address> alleAdresser; |
private List<Address> alleAdresser; |
31 |
|
|
32 |
|
private Map<String,Long> helperCache; |
33 |
|
|
34 |
Map<Integer,HundredePctBean> hundredePct; |
private DataStatisticsBean stats = new DataStatisticsBean(); |
35 |
|
|
36 |
|
ServiceConfig config; |
37 |
|
|
38 |
|
public AdressSearch(ServiceConfig config) { |
39 |
|
this.config = config; |
40 |
|
} |
41 |
|
|
42 |
|
|
43 |
public SearchResult search(String postnrStr, String adresse) { |
public SearchResult search(String postnrStr, String adresse) { |
|
//long start1 = System.currentTimeMillis(); |
|
44 |
|
|
45 |
int postnr=0; |
int postnr=0; |
46 |
|
boolean google = false; |
47 |
|
boolean osm = false; |
48 |
|
String helperSearchKey = ""; |
49 |
|
|
50 |
try { |
try { |
51 |
postnr = Integer.parseInt(postnrStr); |
postnr = Integer.parseInt(postnrStr); |
52 |
} catch (Exception E) { |
} catch (Exception E) { |
53 |
return new SearchResult(Status.ERROR_UNKNOWN_POSTAL); |
return new SearchResult(Status.ERROR_UNKNOWN_POSTAL); |
54 |
} |
} |
|
//long start2 = System.currentTimeMillis(); |
|
55 |
|
|
56 |
Map<String,Long> postnrVeje = searchPostnrVejnavnGadeid.get(postnr); |
Map<String,Long> postnrVeje = searchPostnrVejnavnGadeid.get(postnr); |
57 |
|
|
59 |
return new SearchResult(Status.ERROR_UNKNOWN_POSTAL); |
return new SearchResult(Status.ERROR_UNKNOWN_POSTAL); |
60 |
} |
} |
61 |
|
|
|
//long start3 = System.currentTimeMillis(); |
|
62 |
|
|
63 |
SplitResult split = AddressUtils.splitAdresse(adresse); |
SplitResult split = AddressUtils.splitAdresse(adresse); |
64 |
String vasketVejnavn = AddressUtils.vaskVejnavn( split.vej ); |
|
65 |
|
|
66 |
if (split.husnr.length() == 0) { |
if (split.husnr.length() == 0) { |
67 |
return new SearchResult(Status.ERROR_MISSING_HOUSENUMBER); |
return new SearchResult(Status.ERROR_MISSING_HOUSENUMBER); |
68 |
} |
} |
69 |
//long start4 = System.currentTimeMillis(); |
|
70 |
|
String vasketVejnavn = AddressUtils.vaskVejnavn( split.vej ); |
71 |
|
|
72 |
Long gadeident = postnrVeje.get(vasketVejnavn); |
Long gadeident = postnrVeje.get(vasketVejnavn); |
73 |
|
|
74 |
|
|
75 |
|
if ( gadeident == null) { |
76 |
|
helperSearchKey = "" + postnr + "/" + vasketVejnavn; |
77 |
|
gadeident = helperCache.get(helperSearchKey); |
78 |
|
} |
79 |
|
|
80 |
|
|
81 |
|
if ( gadeident == null) { |
82 |
|
if (config.useGoogle) { |
83 |
|
String googleVej = GeocodeHelper.googleHelper(config, postnr, split.vej ); |
84 |
|
google = true; |
85 |
|
|
86 |
|
if (googleVej != null) { |
87 |
|
String googleVasket = AddressUtils.vaskVejnavn( googleVej ); |
88 |
|
gadeident = postnrVeje.get(googleVasket); |
89 |
|
|
90 |
|
if (gadeident != null) { |
91 |
|
helperCache.put(helperSearchKey, gadeident); |
92 |
|
} |
93 |
|
} |
94 |
|
} |
95 |
|
} |
96 |
|
|
97 |
|
if ( gadeident == null) { |
98 |
|
if (config.useOpenStreetMaps) { |
99 |
|
String osmVej = GeocodeHelper.openstreetmapHelper(postnr, split.vej ); |
100 |
|
osm = true; |
101 |
|
|
102 |
|
if (osmVej != null) { |
103 |
|
String osmVasket = AddressUtils.vaskVejnavn( osmVej ); |
104 |
|
gadeident = postnrVeje.get(osmVasket); |
105 |
|
|
106 |
|
if (gadeident != null) { |
107 |
|
helperCache.put(helperSearchKey, gadeident); |
108 |
|
} |
109 |
|
} |
110 |
|
} |
111 |
|
} |
112 |
|
|
113 |
if (gadeident == null) { |
if (gadeident == null) { |
114 |
return new SearchResult(Status.ERROR_UNKNOWN_STREETNAME); |
return new SearchResult(Status.ERROR_UNKNOWN_STREETNAME); |
115 |
} |
} |
|
//long start5 = System.currentTimeMillis(); |
|
116 |
|
|
117 |
Map<String, Address> gade = searchGadeidentAdresser.get(gadeident); //Denne søgning må ikke fejle |
Map<String, Address> gade = searchGadeidentAdresser.get(gadeident); //Denne søgning må ikke fejle |
118 |
|
|
|
//long start6 = System.currentTimeMillis(); |
|
119 |
|
|
120 |
String husnrSearch = "" + split.husnr + split.litra; |
String husnrSearch = "" + split.husnr + split.litra; |
121 |
Address addr = gade.get(husnrSearch); |
Address addr = gade.get(husnrSearch); |
122 |
//long start7 = System.currentTimeMillis(); |
|
123 |
if (addr == null) { |
if (addr == null) { |
124 |
return new SearchResult(Status.ERROR_UNKNOWN_ADDRESSPOINT); |
return new SearchResult(Status.ERROR_UNKNOWN_ADDRESSPOINT); |
125 |
} |
} |
130 |
|
|
131 |
if (addr.distributor.equals("LUKKET")) { |
if (addr.distributor.equals("LUKKET")) { |
132 |
return new SearchResult(Status.STATUS_NOT_COVERED); //Skal vi have en special status til Lukkede adresser ? |
return new SearchResult(Status.STATUS_NOT_COVERED); //Skal vi have en special status til Lukkede adresser ? |
133 |
} |
} |
|
|
|
|
/* |
|
|
System.out.println("Search2: " + (start2-start1) ); |
|
|
System.out.println("Search3: " + (start3-start1) ); |
|
|
System.out.println("Search4: " + (start4-start1) ); |
|
|
System.out.println("Search5: " + (start5-start1) ); |
|
|
System.out.println("Search6: " + (start6-start1) ); |
|
|
System.out.println("Search7: " + (start7-start1) ); |
|
|
*/ |
|
|
|
|
|
|
|
134 |
|
|
135 |
return new SearchResult(addr); |
SearchResult res = new SearchResult(addr); |
136 |
|
res.google = google; |
137 |
|
res.osm = osm; |
138 |
|
return res; |
139 |
} |
} |
140 |
|
|
141 |
|
|
142 |
public void buildSearchStructures() throws SQLException{ |
public void buildSearchStructures() throws SQLException{ |
143 |
searchPostnrVejnavnGadeid = new HashMap<Integer, Map<String,Long>>(); |
searchPostnrVejnavnGadeid = new HashMap<Integer, Map<String,Long>>(); |
144 |
searchGadeidentAdresser = new HashMap<Long, Map<String,Address>>(); |
searchGadeidentAdresser = new HashMap<Long, Map<String,Address>>(); |
145 |
|
helperCache = new ConcurrentHashMap<String,Long>(); |
146 |
|
|
147 |
|
long start1 = System.currentTimeMillis(); |
148 |
System.out.println("Build -- stage 1"); |
System.out.println("Build -- stage 1"); |
149 |
|
|
150 |
alleAdresser = DatabaseLayer.getAllAdresses(); |
alleAdresser = DatabaseLayer.getAllAdresses(); |
187 |
|
|
188 |
|
|
189 |
//////////////////////////////////////////////////////////////////////////////////////// |
//////////////////////////////////////////////////////////////////////////////////////// |
190 |
|
long start2 = System.currentTimeMillis(); |
191 |
|
System.out.println("Build, stage1 elapsed: " + (start2-start1) ); |
192 |
System.out.println("Build -- stage 2 udvidet dækning"); |
System.out.println("Build -- stage 2 udvidet dækning"); |
193 |
|
|
194 |
List<ExtendedBean> extDao = DatabaseLayer.getExtendedAdresslist(); |
List<ExtendedBean> extDao = DatabaseLayer.getExtendedAdresslist(); |
246 |
idAddressMap = null; |
idAddressMap = null; |
247 |
|
|
248 |
////////////////////////////////////////////////////////////////////////////////////// |
////////////////////////////////////////////////////////////////////////////////////// |
249 |
|
long start3 = System.currentTimeMillis(); |
250 |
|
System.out.println("Build, stage2 elapsed: " + (start3-start2) ); |
251 |
System.out.println("Build -- stage 3 - 100pct"); |
System.out.println("Build -- stage 3 - 100pct"); |
252 |
|
|
253 |
hundredePct = DatabaseLayer.get100PctList(); |
Map<Integer,HundredePctBean> hundredePct = DatabaseLayer.get100PctList(); |
254 |
for (Address addr : alleAdresser) { |
for (Address addr : alleAdresser) { |
255 |
if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) { |
if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) { |
256 |
continue; |
continue; |
274 |
} |
} |
275 |
|
|
276 |
//////////////////////////////////////////////////////////////////////////////////// |
//////////////////////////////////////////////////////////////////////////////////// |
277 |
|
long stop = System.currentTimeMillis(); |
278 |
|
System.out.println("Build, stage3 elapsed: " + (stop-start3) ); |
279 |
System.out.println("Build -- Gathering statistics"); |
System.out.println("Build -- Gathering statistics"); |
280 |
|
|
|
int direkteCount = 0; |
|
|
int extendedCount = 0; |
|
|
int hundredePctCount = 0; |
|
|
int ikkeDaekketCount = 0; |
|
|
|
|
281 |
for (Address addr : alleAdresser) { |
for (Address addr : alleAdresser) { |
282 |
switch (addr.daekningsType) { |
switch (addr.daekningsType) { |
283 |
case DAEKNING_DIREKTE: |
case DAEKNING_DIREKTE: |
284 |
direkteCount++; |
stats.direkteCount++; |
285 |
break; |
break; |
286 |
case DAEKNING_UDVIDET: |
case DAEKNING_UDVIDET: |
287 |
extendedCount++; |
stats.extendedCount++; |
288 |
break; |
break; |
289 |
case DAEKNING_100PCT: |
case DAEKNING_100PCT: |
290 |
hundredePctCount++; |
stats.hundredePctCount++; |
291 |
break; |
break; |
292 |
default: |
default: |
293 |
ikkeDaekketCount++; |
stats.ikkeDaekketCount++; |
294 |
} |
} |
295 |
} |
} |
296 |
|
|
297 |
|
|
298 |
System.out.println("Build: direkteCount: " + direkteCount); |
stats.elapsed = stop-start1; |
299 |
System.out.println("Build: extendedCount: " + extendedCount); |
stats.buildTime = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss").format( new Date() ); |
|
System.out.println("Build: hundredePctCount: " + hundredePctCount); |
|
|
System.out.println("Build: ikkeDaekketCount: " + ikkeDaekketCount); |
|
300 |
|
|
301 |
|
System.out.println("Build: direkteCount: " + stats.direkteCount); |
302 |
|
System.out.println("Build: extendedCount: " + stats.extendedCount); |
303 |
|
System.out.println("Build: hundredePctCount: " + stats.hundredePctCount); |
304 |
|
System.out.println("Build: ikkeDaekketCount: " + stats.ikkeDaekketCount); |
305 |
|
|
306 |
|
System.out.println("Build: Total Elapsed: " + (stop-start1) ); |
307 |
System.out.println("Build Completed"); |
System.out.println("Build Completed"); |
308 |
|
|
309 |
} |
} |
310 |
|
|
311 |
|
public DataStatisticsBean getStatistics() { |
312 |
|
return stats; |
313 |
|
} |
314 |
|
|
315 |
|
public void clear() { |
316 |
|
searchPostnrVejnavnGadeid.clear(); |
317 |
|
searchGadeidentAdresser.clear(); |
318 |
|
alleAdresser.clear(); |
319 |
|
helperCache.clear(); |
320 |
|
} |
321 |
|
|
322 |
|
|
323 |
private String calculateExtendedDaoRoute(ExtendedBean eb, Address orgAddress, Address targetAddress) { |
private String calculateExtendedDaoRoute(ExtendedBean eb, Address orgAddress, Address targetAddress) { |
324 |
|
|
359 |
break; |
break; |
360 |
} |
} |
361 |
return null; |
return null; |
362 |
} |
} |
363 |
|
|
364 |
|
public List<Address> getNonCoveredAddresses() { |
365 |
|
List<Address> result = new ArrayList<Address>(60000); |
366 |
|
for (Address a : alleAdresser) { |
367 |
|
if ( a.daekningsType == DaekningsType.DAEKNING_IKKEDAEKKET) { |
368 |
|
result.add(a); |
369 |
|
} |
370 |
|
} |
371 |
|
Collections.sort(result ); |
372 |
|
return result; |
373 |
|
} |
374 |
|
|
375 |
/////////////////////////////////////////////////////////// |
/////////////////////////////////////////////////////////// |
376 |
private String calculateExtendedBkKoreliste(ExtendedBean eb, Address orgAddress, Address targetAddress) { |
private String calculateExtendedBkKoreliste(ExtendedBean eb, Address orgAddress, Address targetAddress) { |
385 |
|
|
386 |
private Set<String> findVejAliaser(String vejnavn) { |
private Set<String> findVejAliaser(String vejnavn) { |
387 |
vejnavn = vejnavn.toLowerCase(); |
vejnavn = vejnavn.toLowerCase(); |
388 |
Set<String> aliasSet = new HashSet<String>(); |
HashSet<String> aliasSet = new HashSet<String>(); |
389 |
aliasSet.add(vejnavn); |
aliasSet.add(vejnavn); |
390 |
|
|
391 |
aliasSet.add(vejnavn.replace("alle", "allé") ); |
aliasSet.add(vejnavn.replace("u", "ü") ); |
392 |
aliasSet.add(vejnavn.replace("allé", "alle") ); |
aliasSet.add(vejnavn.replace("ü", "u") ); |
|
|
|
|
// danske tegn 1 |
|
|
aliasSet.add(vejnavn.replace("æ", "ae") ); |
|
|
aliasSet.add(vejnavn.replace("ø", "oe") ); |
|
|
aliasSet.add(vejnavn.replace("å", "aa") ); |
|
|
aliasSet.add(vejnavn.replace("ae", "æ") ); |
|
|
aliasSet.add(vejnavn.replace("oe", "ø") ); |
|
|
aliasSet.add(vejnavn.replace("aa", "å") ); |
|
|
|
|
|
//danske tegn 2 |
|
|
aliasSet.add( vejnavn.replace("æ", "ae").replace("ø", "oe") ); |
|
|
aliasSet.add( vejnavn.replace("æ", "ae").replace("å", "aa") ); |
|
|
aliasSet.add( vejnavn.replace("ø", "ae").replace("å", "aa") ); |
|
|
aliasSet.add( vejnavn.replace("ae", "æ").replace("oe","ø") ); |
|
|
aliasSet.add( vejnavn.replace("ae", "æ").replace("aa","å") ); |
|
|
aliasSet.add( vejnavn.replace("oe", "ø").replace("aa", "å") ); |
|
|
|
|
|
//danske tegn 3 |
|
|
aliasSet.add( vejnavn.replace("æ", "ae").replace("ø", "oe").replace("å", "aa") ); |
|
|
aliasSet.add( vejnavn.replace("ae", "æ").replace("oe", "ø").replace("aa", "å") ); |
|
393 |
|
|
394 |
|
aliasSet.add(vejnavn.replace("alle", "allé") ); |
395 |
|
aliasSet.add(vejnavn.replace("allé", "alle") ); |
396 |
|
|
397 |
aliasSet.add(vejnavn.replace("dronningens", "dr") ); |
aliasSet.add(vejnavn.replace("dronningens", "dr") ); |
398 |
aliasSet.add(vejnavn.replace("dr.", "dronningens") ); |
aliasSet.add(vejnavn.replace("dr.", "dronningens") ); |
423 |
aliasSet.add(vejnavn.replace("ndr", "nordre") ); |
aliasSet.add(vejnavn.replace("ndr", "nordre") ); |
424 |
|
|
425 |
aliasSet.add(vejnavn.replace("sankt", "skt") ); |
aliasSet.add(vejnavn.replace("sankt", "skt") ); |
426 |
|
aliasSet.add(vejnavn.replace("sankt", "sct") ); |
427 |
aliasSet.add(vejnavn.replace("skt", "sankt") ); |
aliasSet.add(vejnavn.replace("skt", "sankt") ); |
428 |
|
|
429 |
aliasSet.add(vejnavn.replace("skt", "sct") ); |
aliasSet.add(vejnavn.replace("skt", "sct") ); |
430 |
aliasSet.add(vejnavn.replace("sct", "skt") ); |
aliasSet.add(vejnavn.replace("sct", "skt") ); |
431 |
|
|
432 |
|
// Opbyg æøå varianter over alle fundne aliaser |
433 |
|
|
434 |
|
@SuppressWarnings("unchecked") |
435 |
|
HashSet<String> variants = (HashSet<String>) aliasSet.clone(); |
436 |
|
|
437 |
|
for (String vVejnavn : variants) { |
438 |
|
// danske tegn 1 |
439 |
|
aliasSet.add( vVejnavn.replace("æ", "ae") ); |
440 |
|
aliasSet.add( vVejnavn.replace("ø", "oe") ); |
441 |
|
aliasSet.add( vVejnavn.replace("å", "aa") ); |
442 |
|
aliasSet.add( vVejnavn.replace("ae", "æ") ); |
443 |
|
aliasSet.add( vVejnavn.replace("oe", "ø") ); |
444 |
|
aliasSet.add( vVejnavn.replace("aa", "å") ); |
445 |
|
|
446 |
|
//danske tegn 2 |
447 |
|
aliasSet.add( vVejnavn.replace("æ", "ae").replace("ø", "oe") ); |
448 |
|
aliasSet.add( vVejnavn.replace("æ", "ae").replace("å", "aa") ); |
449 |
|
aliasSet.add( vVejnavn.replace("ø", "ae").replace("å", "aa") ); |
450 |
|
aliasSet.add( vVejnavn.replace("ae", "æ").replace("oe","ø") ); |
451 |
|
aliasSet.add( vVejnavn.replace("ae", "æ").replace("aa","å") ); |
452 |
|
aliasSet.add( vVejnavn.replace("oe", "ø").replace("aa", "å") ); |
453 |
|
|
454 |
|
//danske tegn 3 |
455 |
|
aliasSet.add( vejnavn.replace("æ", "ae").replace("ø", "oe").replace("å", "aa") ); |
456 |
|
aliasSet.add( vejnavn.replace("ae", "æ").replace("oe", "ø").replace("aa", "å") ); |
457 |
|
} |
458 |
|
|
459 |
return aliasSet; |
return aliasSet; |
460 |
} |
} |