9 |
import java.util.HashSet; |
import java.util.HashSet; |
10 |
import java.util.List; |
import java.util.List; |
11 |
import java.util.Map; |
import java.util.Map; |
12 |
|
import java.util.Map.Entry; |
13 |
import java.util.Set; |
import java.util.Set; |
14 |
|
import java.util.TreeMap; |
15 |
|
import java.util.TreeSet; |
16 |
import java.util.concurrent.ConcurrentHashMap; |
import java.util.concurrent.ConcurrentHashMap; |
17 |
|
|
18 |
import dk.daoas.daoadresseservice.AddressUtils.SplitResult; |
import org.apache.commons.lang3.StringUtils; |
19 |
|
|
20 |
import dk.daoas.daoadresseservice.admin.ServiceConfig; |
import dk.daoas.daoadresseservice.admin.ServiceConfig; |
21 |
import dk.daoas.daoadresseservice.beans.Address; |
import dk.daoas.daoadresseservice.beans.Address; |
22 |
|
import dk.daoas.daoadresseservice.beans.AliasBean; |
23 |
import dk.daoas.daoadresseservice.beans.DataStatisticsBean; |
import dk.daoas.daoadresseservice.beans.DataStatisticsBean; |
24 |
import dk.daoas.daoadresseservice.beans.ExtendedBean; |
import dk.daoas.daoadresseservice.beans.ExtendedBean; |
25 |
import dk.daoas.daoadresseservice.beans.HundredePctBean; |
import dk.daoas.daoadresseservice.beans.HundredePctBean; |
26 |
|
import dk.daoas.daoadresseservice.beans.SearchRequest; |
27 |
import dk.daoas.daoadresseservice.beans.SearchResult; |
import dk.daoas.daoadresseservice.beans.SearchResult; |
28 |
import dk.daoas.daoadresseservice.beans.SearchResult.Status; |
import dk.daoas.daoadresseservice.beans.SearchResult.Status; |
29 |
import dk.daoas.daoadresseservice.db.DatabaseLayer; |
import dk.daoas.daoadresseservice.db.DatabaseLayer; |
30 |
|
import dk.daoas.daoadresseservice.util.DaoUtils; |
31 |
|
import dk.daoas.daoadresseservice.util.DeduplicateHelper; |
32 |
|
import dk.daoas.daoadresseservice.util.NaturalOrderComparator; |
33 |
|
|
34 |
public class AdressSearch { |
public class AddressSearch { |
35 |
|
|
36 |
private Map<Integer, Map<String,Long>> searchPostnrVejnavnGadeid; |
private Map<Short, Map<String,Integer>> searchPostnrVejnavnGadeid; |
37 |
private Map<Long, Map<String,Address>> searchGadeidentAdresser; |
private Map<Integer, Map<String,Address>> searchGadeidentAdresser; |
38 |
|
|
39 |
private List<Address> alleAdresser; |
private List<Address> alleAdresser; |
40 |
|
|
41 |
private Map<String,Long> helperCache; |
private Map<String,Integer> helperCache; |
42 |
|
|
43 |
|
private DataStatisticsBean stats = new DataStatisticsBean(); |
44 |
|
|
45 |
|
ServiceConfig config; |
46 |
|
|
47 |
private DataStatisticsBean stats = new DataStatisticsBean(); |
StreetnameHelper levenshteinHelper; |
48 |
|
StreetnameHelper googleHelper; |
49 |
|
StreetnameHelper osmHelper; |
50 |
|
|
51 |
|
|
52 |
public SearchResult search(ServiceConfig config, String postnrStr, String adresse) { |
public AddressSearch(ServiceConfig config) { |
53 |
|
this.config = config; |
54 |
|
|
55 |
|
levenshteinHelper = new LevenshteinStreetnameHelper( this ); |
56 |
|
googleHelper = new GoogleStreetnameHelper( config ); |
57 |
|
osmHelper = new OSMStreetnameHelper( config ); |
58 |
|
} |
59 |
|
|
60 |
|
|
61 |
|
public SearchResult search(String postnrStr, String adresse) { |
62 |
|
|
63 |
|
postnrStr = postnrStr.trim(); |
64 |
|
adresse = adresse.trim(); |
65 |
|
|
66 |
|
|
67 |
|
SearchRequest request = new SearchRequest(); |
68 |
|
SearchResult result = new SearchResult(); |
69 |
|
|
|
int postnr=0; |
|
|
boolean google = false; |
|
|
boolean osm = false; |
|
|
String helperSearchKey = ""; |
|
70 |
|
|
71 |
try { |
try { |
72 |
postnr = Integer.parseInt(postnrStr); |
request.postnr = Short.parseShort(postnrStr); |
73 |
} catch (Exception E) { |
} catch (Exception E) { |
74 |
return new SearchResult(Status.ERROR_UNKNOWN_POSTAL); |
result.status = Status.ERROR_UNKNOWN_POSTAL; |
75 |
|
return result; |
76 |
} |
} |
77 |
|
|
|
Map<String,Long> postnrVeje = searchPostnrVejnavnGadeid.get(postnr); |
|
78 |
|
|
79 |
if (postnrVeje == null) { |
request.streetNames = searchPostnrVejnavnGadeid.get(request.postnr); |
80 |
return new SearchResult(Status.ERROR_UNKNOWN_POSTAL); |
|
81 |
|
if (request.streetNames == null) { |
82 |
|
result.status = Status.ERROR_UNKNOWN_POSTAL; |
83 |
|
return result; |
84 |
} |
} |
85 |
|
|
86 |
|
|
87 |
SplitResult split = AddressUtils.splitAdresse(adresse); |
result.splitResult = AddressUtils.splitAdresse(adresse); |
88 |
String vasketVejnavn = AddressUtils.vaskVejnavn( split.vej ); |
request.vejnavn = result.splitResult.vej; |
89 |
|
|
90 |
if (split.husnr.length() == 0) { |
|
|
return new SearchResult(Status.ERROR_MISSING_HOUSENUMBER); |
|
|
} |
|
91 |
|
|
92 |
Long gadeident = postnrVeje.get(vasketVejnavn); |
if (result.splitResult.husnr.length() == 0) { |
93 |
|
result.status = Status.ERROR_MISSING_HOUSENUMBER; |
94 |
|
return result; |
95 |
|
} |
96 |
|
|
97 |
|
result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn ); |
98 |
|
|
99 |
if ( gadeident == null) { |
|
100 |
helperSearchKey = "" + postnr + "/" + vasketVejnavn; |
if (result.vasketVejnavn.indexOf("pakkebo") > -1 |
101 |
gadeident = helperCache.get(helperSearchKey); |
|| result.vasketVejnavn.indexOf("pakkepost") > -1 |
102 |
|
|| result.vasketVejnavn.indexOf("postbo") > -1 // postbox/postboks |
103 |
|
|| result.vasketVejnavn.indexOf("døgnpost") > -1 |
104 |
|
|| result.vasketVejnavn.indexOf("døgnbo") > -1 // døgnbox // døgnboks |
105 |
|
|| result.vasketVejnavn.equals("id") |
106 |
|
) { |
107 |
|
result.status = Status.ERROR_POSTBOX; |
108 |
|
return result; |
109 |
|
} |
110 |
|
|
111 |
|
// LookupStreetname er en indkapsling af alm + levenstein + google + osm |
112 |
|
Integer gadeident = lookupStretname(request, result, true); |
113 |
|
|
114 |
|
|
115 |
|
/* |
116 |
|
* Hvis der ikke er direkte hits, prøver vi at skære ord af vejnavn |
117 |
|
* |
118 |
|
* <strike>Denne sektion er MEGET experimental da den øger antallet af kald til google/OSM væsentligt</strike>*/ |
119 |
|
if (gadeident == null) { |
120 |
|
final int MAX_TRIES = 4; |
121 |
|
|
122 |
|
String vejnavnParts[] = request.vejnavn.split(" "); |
123 |
|
|
124 |
|
for (int i=1; i<=MAX_TRIES && i<vejnavnParts.length; i++) { |
125 |
|
String subVejnavn = DaoUtils.joinHelper(vejnavnParts, i); |
126 |
|
|
127 |
|
request.vejnavn = subVejnavn; |
128 |
|
result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn ); |
129 |
|
|
130 |
|
gadeident = lookupStretname(request, result, false);//prøv opslag MEN UDEN GOOGLE/OSM !!! |
131 |
|
|
132 |
|
//hvis vi fandt vejen ud fra substrengen |
133 |
|
if (gadeident != null) { |
134 |
|
break; |
135 |
|
} |
136 |
|
|
137 |
|
//hvis vi ikke fandt kopierer vi vejnavn fra split igen |
138 |
|
request.vejnavn = result.splitResult.vej; |
139 |
|
result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn ); |
140 |
|
} |
141 |
} |
} |
142 |
|
|
143 |
|
|
144 |
|
|
145 |
if ( gadeident == null) { |
if (gadeident == null) { |
146 |
if (config.useGoogle) { |
result.status = Status.ERROR_UNKNOWN_STREETNAME; |
147 |
String googleVej = GeocodeHelper.googleHelper(config, postnr, split.vej ); |
return result; |
|
google = true; |
|
|
|
|
|
if (googleVej != null) { |
|
|
String googleVasket = AddressUtils.vaskVejnavn( googleVej ); |
|
|
gadeident = postnrVeje.get(googleVasket); |
|
|
|
|
|
if (gadeident != null) { |
|
|
helperCache.put(helperSearchKey, gadeident); |
|
|
} |
|
|
} |
|
|
} |
|
148 |
} |
} |
149 |
|
|
150 |
if ( gadeident == null) { |
result.gadeident = gadeident; |
|
if (config.useOpenStreetMaps) { |
|
|
String osmVej = GeocodeHelper.openstreetmapHelper(postnr, split.vej ); |
|
|
osm = true; |
|
|
|
|
|
if (osmVej != null) { |
|
|
String osmVasket = AddressUtils.vaskVejnavn( osmVej ); |
|
|
gadeident = postnrVeje.get(osmVasket); |
|
|
|
|
|
if (gadeident != null) { |
|
|
helperCache.put(helperSearchKey, gadeident); |
|
|
} |
|
|
} |
|
|
} |
|
|
} |
|
151 |
|
|
152 |
if (gadeident == null) { |
|
153 |
return new SearchResult(Status.ERROR_UNKNOWN_STREETNAME); |
Map<String, Address> gade = searchGadeidentAdresser.get(gadeident); |
154 |
|
if (gade == null) { //Denne søgning må ikke fejle |
155 |
|
result.status = Status.ERROR_INTERNAL; |
156 |
|
return result; |
157 |
} |
} |
158 |
|
|
|
Map<String, Address> gade = searchGadeidentAdresser.get(gadeident); //Denne søgning må ikke fejle |
|
159 |
|
|
160 |
|
//Kunne evt klares med Iterables.get fra Guava/Collections |
161 |
|
Address firstAddress = gade.values().iterator().next(); |
162 |
|
result.vej = firstAddress.vejnavn; |
163 |
|
|
164 |
String husnrSearch = "" + split.husnr + split.litra; |
String husnrSearch = "" + result.splitResult.husnr + result.splitResult.litra; |
165 |
Address addr = gade.get(husnrSearch); |
Address addr = gade.get(husnrSearch); |
166 |
|
|
167 |
if (addr == null) { |
if (addr == null) { |
168 |
return new SearchResult(Status.ERROR_UNKNOWN_ADDRESSPOINT); |
result.status = Status.ERROR_UNKNOWN_ADDRESSPOINT; |
169 |
|
return result; |
170 |
} |
} |
171 |
|
|
172 |
|
result.address = addr; |
173 |
|
|
174 |
|
|
175 |
|
if ( StringUtils.equals(addr.distributor, "LUKKET") ) { |
176 |
|
result.status = Status.STATUS_NOT_COVERED; //Skal vi have en special status til Lukkede adresser ? |
177 |
|
return result; |
178 |
|
} |
179 |
|
|
180 |
if (addr.daekningsType == DaekningsType.DAEKNING_IKKEDAEKKET) { |
if (addr.daekningsType == DaekningsType.DAEKNING_IKKEDAEKKET) { |
181 |
return new SearchResult(Status.STATUS_NOT_COVERED); |
result.status = Status.STATUS_NOT_COVERED; |
182 |
|
return result; |
183 |
} |
} |
184 |
|
|
185 |
|
|
186 |
if (addr.distributor.equals("LUKKET")) { |
result.status = Status.STATUS_OK; |
187 |
return new SearchResult(Status.STATUS_NOT_COVERED); //Skal vi have en special status til Lukkede adresser ? |
|
188 |
} |
return result; |
189 |
|
} |
190 |
|
|
191 |
|
|
192 |
|
private Integer lookupStretname(SearchRequest request, SearchResult result, boolean useExternal) { |
193 |
|
String helperSearchKey = ""; |
194 |
|
|
195 |
SearchResult res = new SearchResult(addr); |
Integer gadeident = request.streetNames.get(result.vasketVejnavn); |
196 |
res.google = google; |
|
197 |
res.osm = osm; |
|
198 |
return res; |
if ( gadeident == null) { |
199 |
|
helperSearchKey = "" + request.postnr + "/" + result.vasketVejnavn; |
200 |
|
gadeident = helperCache.get(helperSearchKey); |
201 |
|
} |
202 |
|
|
203 |
|
if (gadeident == null) { |
204 |
|
String vej = levenshteinHelper.proposeStreetName(request, result); |
205 |
|
if (vej != null) { |
206 |
|
gadeident = request.streetNames.get(vej); |
207 |
|
} |
208 |
|
} |
209 |
|
|
210 |
|
|
211 |
|
// Brug OpenStreetMap før vi prøver google |
212 |
|
// For google har en request limit, det har OSM ikke! |
213 |
|
if ( gadeident == null && useExternal) { |
214 |
|
String vej = osmHelper.proposeStreetName(request, result); |
215 |
|
gadeident = helperWrapper(vej, request.streetNames, helperSearchKey); |
216 |
|
} |
217 |
|
|
218 |
|
if ( gadeident == null && useExternal) { |
219 |
|
String vej = googleHelper.proposeStreetName(request, result); |
220 |
|
gadeident = helperWrapper(vej, request.streetNames, helperSearchKey); |
221 |
|
} |
222 |
|
return gadeident; |
223 |
} |
} |
224 |
|
|
225 |
|
private Integer helperWrapper(String vej, Map<String,Integer> postnrVeje, String helperSearchKey) { |
226 |
|
if (vej == null) |
227 |
|
return null; |
228 |
|
|
229 |
|
String vejVasket = AddressUtils.vaskVejnavn( vej ); |
230 |
|
Integer gadeident = postnrVeje.get(vejVasket); |
231 |
|
|
232 |
|
if (gadeident != null) { |
233 |
|
helperCache.put(helperSearchKey, gadeident); |
234 |
|
} |
235 |
|
return gadeident; |
236 |
|
|
237 |
|
} |
238 |
|
|
239 |
|
public Map<String,Integer> getStretsByPostal(short zip) { |
240 |
|
return searchPostnrVejnavnGadeid.get(zip); |
241 |
|
} |
242 |
|
|
243 |
|
|
244 |
|
|
245 |
public void buildSearchStructures() throws SQLException{ |
public void buildSearchStructures() throws SQLException{ |
246 |
searchPostnrVejnavnGadeid = new HashMap<Integer, Map<String,Long>>(); |
searchPostnrVejnavnGadeid = new HashMap<Short, Map<String,Integer>>(); |
247 |
searchGadeidentAdresser = new HashMap<Long, Map<String,Address>>(); |
searchGadeidentAdresser = new HashMap<Integer, Map<String,Address>>(); |
248 |
helperCache = new ConcurrentHashMap<String,Long>(); |
helperCache = new ConcurrentHashMap<String,Integer>(); |
249 |
|
|
250 |
long start1 = System.currentTimeMillis(); |
long start1 = System.currentTimeMillis(); |
251 |
System.out.println("Build -- stage 1"); |
System.out.println("Build -- stage 1"); |
255 |
|
|
256 |
/* Mapper mellem db Row ID og adresse noden */ |
/* Mapper mellem db Row ID og adresse noden */ |
257 |
Map<Integer,Address> idAddressMap = new HashMap<Integer,Address>( alleAdresser.size() ); |
Map<Integer,Address> idAddressMap = new HashMap<Integer,Address>( alleAdresser.size() ); |
258 |
|
DeduplicateHelper<String> aliasHelper = new DeduplicateHelper<String>(); |
259 |
|
DeduplicateHelper<String> husnrHelper = new DeduplicateHelper<String>(); |
260 |
|
|
261 |
for (Address a : alleAdresser) { |
for (Address a : alleAdresser) { |
262 |
idAddressMap.put(a.id, a); |
idAddressMap.put(a.id, a); |
263 |
|
|
264 |
Map<String,Long> postnrVeje = searchPostnrVejnavnGadeid.get(a.postnr); |
Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(a.postnr); |
265 |
|
|
266 |
if (postnrVeje == null) { |
if (postnrVeje == null) { |
267 |
postnrVeje = new ConcurrentHashMap<String,Long>(); |
postnrVeje = new ConcurrentHashMap<String,Integer>(); |
268 |
searchPostnrVejnavnGadeid.put(a.postnr, postnrVeje); |
searchPostnrVejnavnGadeid.put(a.postnr, postnrVeje); |
269 |
} |
} |
270 |
|
|
271 |
|
|
272 |
String vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn); |
String vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn); |
273 |
Long gadeident = postnrVeje.get(vasketVejnavn); |
Integer gadeident = postnrVeje.get(vasketVejnavn); |
274 |
if (gadeident == null) { |
if (gadeident == null) { |
275 |
//postnrVeje.put(vasketVejnavn, a.gadeid); |
//postnrVeje.put(vasketVejnavn, a.gadeid); |
276 |
|
|
277 |
|
gadeident = a.gadeid; |
278 |
|
|
279 |
Set<String> aliaser = findVejAliaser(a.vejnavn); |
Set<String> aliaser = findVejAliaser(a.vejnavn); |
280 |
for(String alias : aliaser) { |
for(String alias : aliaser) { |
281 |
String vasketAlias = AddressUtils.vaskVejnavn(alias); |
String vasketAlias = AddressUtils.vaskVejnavn(alias); |
282 |
postnrVeje.put(vasketAlias, a.gadeid); |
vasketAlias = aliasHelper.getInstance(vasketAlias); |
283 |
} |
|
284 |
|
postnrVeje.put(vasketAlias, gadeident); |
285 |
|
} |
286 |
} |
} |
287 |
|
|
288 |
Map<String, Address> gade = searchGadeidentAdresser.get(a.gadeid); |
Map<String, Address> gade = searchGadeidentAdresser.get(gadeident); |
289 |
if (gade == null) { |
if (gade == null) { |
290 |
gade = new HashMap<String, Address>(); |
gade = new HashMap<String, Address>(); |
291 |
searchGadeidentAdresser.put(a.gadeid, gade); |
searchGadeidentAdresser.put(gadeident, gade); |
292 |
} |
} |
293 |
String husnrSearch = "" + a.husnr + a.husnrbogstav; |
String husnrSearch = "" + a.husnr + a.husnrbogstav; |
294 |
|
husnrSearch = husnrHelper.getInstance(husnrSearch); |
295 |
gade.put(husnrSearch, a); |
gade.put(husnrSearch, a); |
296 |
} |
} |
297 |
|
|
|
|
|
298 |
//////////////////////////////////////////////////////////////////////////////////////// |
//////////////////////////////////////////////////////////////////////////////////////// |
299 |
long start2 = System.currentTimeMillis(); |
long start2 = System.currentTimeMillis(); |
300 |
System.out.println("Build, stage1 elapsed: " + (start2-start1) ); |
System.out.println("Build, stage1 elapsed: " + (start2-start1) ); |
301 |
System.out.println("Build -- stage 2 udvidet dækning"); |
System.out.println("Build -- stage 2 alias tabel"); |
302 |
|
|
303 |
|
int vaskCount = 0; |
304 |
|
List<AliasBean> aliasList = DatabaseLayer.getAliasList(); |
305 |
|
for (AliasBean alias : aliasList) { |
306 |
|
Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(alias.postnr); |
307 |
|
|
308 |
|
if (postnrVeje == null) { |
309 |
|
//Burde ikke kunne ske - men better safe than sorry |
310 |
|
continue; |
311 |
|
} |
312 |
|
|
313 |
|
String vasketVej = AddressUtils.vaskVejnavn(alias.vejnavn); |
314 |
|
String vasketAlias = AddressUtils.vaskVejnavn(alias.aliasVejnavn); |
315 |
|
|
316 |
|
Integer gadeident = postnrVeje.get(vasketVej); |
317 |
|
if (gadeident == null) { |
318 |
|
//Kender ikke den oprindelige vej |
319 |
|
continue; |
320 |
|
} |
321 |
|
|
322 |
|
Integer aliasIdent = postnrVeje.get(vasketAlias); |
323 |
|
|
324 |
|
if (aliasIdent == null) { //Vi kender ikke denne variant af vejnavnet |
325 |
|
postnrVeje.put(vasketAlias, gadeident); |
326 |
|
vaskCount++; |
327 |
|
} |
328 |
|
|
329 |
|
} |
330 |
|
System.out.println("Anvendte " + vaskCount + " aliaser fra databasen"); |
331 |
|
|
332 |
|
|
333 |
|
//////////////////////////////////////////////////////////////////////////////////////// |
334 |
|
long start3 = System.currentTimeMillis(); |
335 |
|
System.out.println("Build, stage2 elapsed: " + (start3-start2) ); |
336 |
|
System.out.println("Build -- stage 3 udvidet dækning"); |
337 |
|
|
338 |
|
DeduplicateHelper<String> ruteHelper = new DeduplicateHelper<String>(); |
339 |
|
DeduplicateHelper<String> korelisteHelper = new DeduplicateHelper<String>(); |
340 |
|
|
341 |
List<ExtendedBean> extDao = DatabaseLayer.getExtendedAdresslist(); |
List<ExtendedBean> extDao = DatabaseLayer.getExtendedAdresslist(); |
342 |
for (ExtendedBean eb : extDao) { |
for (ExtendedBean eb : extDao) { |
345 |
if (orgAddress == null) |
if (orgAddress == null) |
346 |
continue; |
continue; |
347 |
|
|
348 |
|
if (orgAddress.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) { |
349 |
|
//kan være at adressen er blevet markeret dækket og - find-nærmeste data ikke er opdateret i mellemtiden |
350 |
|
continue; |
351 |
|
} |
352 |
|
|
353 |
Address targetAddress = idAddressMap.get(eb.targetId); |
Address targetAddress = idAddressMap.get(eb.targetId); |
354 |
if (targetAddress == null) |
if (targetAddress == null) { |
355 |
continue; |
continue; |
356 |
|
} |
357 |
|
|
358 |
if (orgAddress.distributor != null && orgAddress.distributor.equals("LUKKET")) { |
|
359 |
|
if ( StringUtils.equals(orgAddress.distributor, "LUKKET") ) { |
360 |
continue; |
continue; |
361 |
} |
} |
362 |
|
|
363 |
if (targetAddress.distributor.equals("LUKKET")) { |
|
364 |
|
|
365 |
|
if ( StringUtils.equals(targetAddress.distributor, "LUKKET") ) { |
366 |
continue; |
continue; |
367 |
} |
} |
368 |
|
|
371 |
|
|
372 |
boolean covered = false; |
boolean covered = false; |
373 |
if (targetAddress.distributor.equals("DAO")) { |
if (targetAddress.distributor.equals("DAO")) { |
374 |
orgAddress.rute = calculateExtendedDaoRoute(eb,orgAddress,targetAddress); |
orgAddress.rute = calculateExtendedDaoRoute(eb,orgAddress,targetAddress); |
375 |
|
orgAddress.rute = ruteHelper.getInstance(orgAddress.rute); |
376 |
|
|
377 |
if (orgAddress.rute != null) { |
if (orgAddress.rute != null) { |
378 |
orgAddress.koreliste = targetAddress.koreliste; |
orgAddress.koreliste = targetAddress.koreliste; |
379 |
covered = true; |
covered = true; |
381 |
} |
} |
382 |
|
|
383 |
if (targetAddress.distributor.equals("BK")) { |
if (targetAddress.distributor.equals("BK")) { |
384 |
orgAddress.koreliste = calculateExtendedBkKoreliste(eb,orgAddress,targetAddress); |
orgAddress.koreliste = calculateExtendedBkKoreliste(eb,orgAddress,targetAddress); |
385 |
|
orgAddress.koreliste = korelisteHelper.getInstance(orgAddress.koreliste); |
386 |
|
|
387 |
if (orgAddress.koreliste != null) { |
if (orgAddress.koreliste != null) { |
388 |
orgAddress.rute = targetAddress.rute; |
orgAddress.rute = targetAddress.rute; |
389 |
covered = true; |
covered = true; |
395 |
orgAddress.dbkBane = targetAddress.dbkBane; |
orgAddress.dbkBane = targetAddress.dbkBane; |
396 |
|
|
397 |
/* Sådan gør den gamle service */ |
/* Sådan gør den gamle service */ |
398 |
orgAddress.kommunekode = targetAddress.kommunekode; |
/* 20150520 THN- hvis vi bibeholder de originale kommune+vejkoder kan vi bruge DAVID til join i databasen*/ |
399 |
orgAddress.vejkode = targetAddress.vejkode; |
//orgAddress.kommunekode = targetAddress.kommunekode; |
400 |
|
//orgAddress.vejkode = targetAddress.vejkode; |
401 |
|
|
402 |
|
|
403 |
orgAddress.distributor = targetAddress.distributor; |
orgAddress.distributor = targetAddress.distributor; |
404 |
} |
} |
408 |
idAddressMap = null; |
idAddressMap = null; |
409 |
|
|
410 |
////////////////////////////////////////////////////////////////////////////////////// |
////////////////////////////////////////////////////////////////////////////////////// |
411 |
long start3 = System.currentTimeMillis(); |
long start4 = System.currentTimeMillis(); |
412 |
System.out.println("Build, stage2 elapsed: " + (start3-start2) ); |
System.out.println("Build, stage3 elapsed: " + (start4-start3) ); |
413 |
System.out.println("Build -- stage 3 - 100pct"); |
System.out.println("Build -- stage 4 - 100pct"); |
414 |
|
|
415 |
Map<Integer,HundredePctBean> hundredePct = DatabaseLayer.get100PctList(); |
Map<Short,HundredePctBean> hundredePct = DatabaseLayer.get100PctList(); |
416 |
for (Address addr : alleAdresser) { |
for (Address addr : alleAdresser) { |
417 |
if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) { |
if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) { |
418 |
continue; |
continue; |
437 |
|
|
438 |
//////////////////////////////////////////////////////////////////////////////////// |
//////////////////////////////////////////////////////////////////////////////////// |
439 |
long stop = System.currentTimeMillis(); |
long stop = System.currentTimeMillis(); |
440 |
System.out.println("Build, stage3 elapsed: " + (stop-start3) ); |
System.out.println("Build, stage3 elapsed: " + (stop-start4) ); |
441 |
System.out.println("Build -- Gathering statistics"); |
System.out.println("Build -- Gathering statistics"); |
442 |
|
|
443 |
for (Address addr : alleAdresser) { |
for (Address addr : alleAdresser) { |
455 |
stats.ikkeDaekketCount++; |
stats.ikkeDaekketCount++; |
456 |
} |
} |
457 |
} |
} |
458 |
|
stats.totalCount = alleAdresser.size(); |
459 |
|
|
460 |
|
|
461 |
stats.elapsed = stop-start1; |
stats.elapsed = stop-start1; |
462 |
stats.buildTime = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss").format( new Date() ); |
stats.buildTime = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss").format( new Date() ); |
463 |
|
|
464 |
|
System.out.println("Build: totalCount: " + stats.totalCount); |
465 |
System.out.println("Build: direkteCount: " + stats.direkteCount); |
System.out.println("Build: direkteCount: " + stats.direkteCount); |
466 |
System.out.println("Build: extendedCount: " + stats.extendedCount); |
System.out.println("Build: extendedCount: " + stats.extendedCount); |
467 |
System.out.println("Build: hundredePctCount: " + stats.hundredePctCount); |
System.out.println("Build: hundredePctCount: " + stats.hundredePctCount); |
485 |
|
|
486 |
|
|
487 |
private String calculateExtendedDaoRoute(ExtendedBean eb, Address orgAddress, Address targetAddress) { |
private String calculateExtendedDaoRoute(ExtendedBean eb, Address orgAddress, Address targetAddress) { |
488 |
|
if (targetAddress.rute == null) { //hvis targetAdress.rute er null så er adressen ikke dækket alligevel |
489 |
|
return null; |
490 |
|
} |
491 |
|
|
492 |
// /////////////////////////////////////////////////////////////////// |
// /////////////////////////////////////////////////////////////////// |
493 |
switch( eb.transport) { |
switch( eb.transport) { |
554 |
vejnavn = vejnavn.toLowerCase(); |
vejnavn = vejnavn.toLowerCase(); |
555 |
HashSet<String> aliasSet = new HashSet<String>(); |
HashSet<String> aliasSet = new HashSet<String>(); |
556 |
aliasSet.add(vejnavn); |
aliasSet.add(vejnavn); |
557 |
|
|
|
aliasSet.add(vejnavn.replace("u", "ü") ); |
|
|
aliasSet.add(vejnavn.replace("ü", "u") ); |
|
|
|
|
558 |
aliasSet.add(vejnavn.replace("alle", "allé") ); |
aliasSet.add(vejnavn.replace("alle", "allé") ); |
559 |
aliasSet.add(vejnavn.replace("allé", "alle") ); |
aliasSet.add(vejnavn.replace("allé", "alle") ); |
560 |
|
|
561 |
|
|
562 |
|
// forkortelser |
563 |
aliasSet.add(vejnavn.replace("dronningens", "dr") ); |
aliasSet.add(vejnavn.replace("dronningens", "dr") ); |
564 |
aliasSet.add(vejnavn.replace("dr.", "dronningens") ); |
aliasSet.add(vejnavn.replace("dr.", "dronningens") ); |
565 |
aliasSet.add(vejnavn.replace("dr ", "dronningens") ); |
aliasSet.add(vejnavn.replace("dr ", "dronningens") ); |
566 |
|
|
567 |
|
aliasSet.add(vejnavn.replace("dronning", "dr") ); |
568 |
|
aliasSet.add(vejnavn.replace("dr.", "dronning") ); |
569 |
|
aliasSet.add(vejnavn.replace("dr ", "dronning") ); |
570 |
|
|
571 |
|
aliasSet.add(vejnavn.replace("kng", "kongen") ); |
572 |
|
aliasSet.add(vejnavn.replace("kongen", "kng") ); |
573 |
|
|
574 |
aliasSet.add(vejnavn.replace("kvt", "kvarter") ); |
aliasSet.add(vejnavn.replace("kvt", "kvarter") ); |
575 |
aliasSet.add(vejnavn.replace("kvarter", "kvt") ); |
aliasSet.add(vejnavn.replace("kvarter", "kvt") ); |
576 |
|
|
586 |
aliasSet.add(vejnavn.replace("st.", "store") ); |
aliasSet.add(vejnavn.replace("st.", "store") ); |
587 |
|
|
588 |
aliasSet.add(vejnavn.replace("søndre", "sdr") ); |
aliasSet.add(vejnavn.replace("søndre", "sdr") ); |
589 |
aliasSet.add(vejnavn.replace("sdr", "søndre") ); |
aliasSet.add(vejnavn.replace("sdr", "søndre") ); |
590 |
|
aliasSet.add(vejnavn.replace("sønder", "sdr") ); |
591 |
|
aliasSet.add(vejnavn.replace("sdr", "sønder") ); |
592 |
|
|
593 |
|
|
594 |
aliasSet.add(vejnavn.replace("nørre", "nr") ); |
aliasSet.add(vejnavn.replace("nørre", "nr") ); |
596 |
|
|
597 |
aliasSet.add(vejnavn.replace("nordre", "ndr") ); |
aliasSet.add(vejnavn.replace("nordre", "ndr") ); |
598 |
aliasSet.add(vejnavn.replace("ndr", "nordre") ); |
aliasSet.add(vejnavn.replace("ndr", "nordre") ); |
599 |
|
|
600 |
|
|
601 |
|
aliasSet.add(vejnavn.replace("vestre", "vester") ); |
602 |
|
aliasSet.add(vejnavn.replace("vester", "vestre") ); |
603 |
|
|
604 |
|
aliasSet.add(vejnavn.replace("søndre", "sønder") ); |
605 |
|
aliasSet.add(vejnavn.replace("sønder", "søndre") ); |
606 |
|
|
607 |
|
aliasSet.add(vejnavn.replace("østre", "øster") ); |
608 |
|
aliasSet.add(vejnavn.replace("øster", "østre") ); |
609 |
|
|
610 |
|
aliasSet.add(vejnavn.replace("borgmester", "borgm") ); |
611 |
|
aliasSet.add(vejnavn.replace("borgm", "borgmester") ); |
612 |
|
|
613 |
|
|
614 |
aliasSet.add(vejnavn.replace("sankt", "skt") ); |
aliasSet.add(vejnavn.replace("sankt", "skt") ); |
615 |
aliasSet.add(vejnavn.replace("sankt", "sct") ); |
aliasSet.add(vejnavn.replace("sankt", "sct") ); |
616 |
aliasSet.add(vejnavn.replace("skt", "sankt") ); |
aliasSet.add(vejnavn.replace("skt", "sankt") ); |
617 |
|
|
618 |
aliasSet.add(vejnavn.replace("skt", "sct") ); |
aliasSet.add(vejnavn.replace("skt", "sct") ); |
619 |
aliasSet.add(vejnavn.replace("sct", "skt") ); |
aliasSet.add(vejnavn.replace("sct", "skt") ); |
620 |
|
|
621 |
|
|
622 |
|
|
623 |
|
// fornavn forkortelser |
624 |
|
aliasSet.add(vejnavn.replace("john", "j") ); |
625 |
|
aliasSet.add(vejnavn.replace("thomas", "th") ); |
626 |
|
aliasSet.add(vejnavn.replace("thorvald", "th") ); |
627 |
|
aliasSet.add(vejnavn.replace("frederik", "fr") ); |
628 |
|
aliasSet.add(vejnavn.replace("frederiks", "fr") ); |
629 |
|
|
630 |
|
|
631 |
|
aliasSet.add(vejnavn.replace("christian", "chr") ); |
632 |
|
aliasSet.add(vejnavn.replace("christians", "chr") ); |
633 |
|
aliasSet.add(vejnavn.replace("kristian", "kr") ); |
634 |
|
aliasSet.add(vejnavn.replace("kristians", "kr") ); |
635 |
|
|
636 |
|
|
637 |
|
// alternative stavninger |
638 |
|
aliasSet.add(vejnavn.replace("peder", "peter") ); |
639 |
|
aliasSet.add(vejnavn.replace("peter", "peder") ); |
640 |
|
|
641 |
|
|
642 |
|
|
643 |
|
// Romertal |
644 |
|
aliasSet.add(vejnavn.replace("1", "i") ); |
645 |
|
aliasSet.add(vejnavn.replace("i", "1") ); |
646 |
|
|
647 |
|
aliasSet.add(vejnavn.replace("2", "ii") ); |
648 |
|
aliasSet.add(vejnavn.replace("ii", "2") ); |
649 |
|
|
650 |
|
aliasSet.add(vejnavn.replace("3", "iii") ); |
651 |
|
aliasSet.add(vejnavn.replace("iii", "3") ); |
652 |
|
|
653 |
|
aliasSet.add(vejnavn.replace("4", "iv") ); |
654 |
|
aliasSet.add(vejnavn.replace("iv", "4") ); |
655 |
|
|
656 |
|
aliasSet.add(vejnavn.replace("5", "v") ); |
657 |
|
aliasSet.add(vejnavn.replace("v", "5") ); |
658 |
|
|
659 |
|
aliasSet.add(vejnavn.replace("6", "vi") ); |
660 |
|
aliasSet.add(vejnavn.replace("vi", "6") ); |
661 |
|
|
662 |
|
aliasSet.add(vejnavn.replace("7", "vii") ); |
663 |
|
aliasSet.add(vejnavn.replace("vii", "7") ); |
664 |
|
|
665 |
|
aliasSet.add(vejnavn.replace("8", "viii") ); |
666 |
|
aliasSet.add(vejnavn.replace("viii", "8") ); |
667 |
|
|
668 |
|
aliasSet.add(vejnavn.replace("9", "ix") ); |
669 |
|
aliasSet.add(vejnavn.replace("ix", "9") ); |
670 |
|
|
671 |
|
aliasSet.add(vejnavn.replace("10", "x") ); |
672 |
|
aliasSet.add(vejnavn.replace("x", "10") ); |
673 |
|
|
674 |
|
|
675 |
|
//alternative måder at stave vej/gade/alle |
676 |
|
aliasSet.add(vejnavn.replace("vej", "ve") ); |
677 |
|
aliasSet.add(vejnavn.replace("vej", "vj") ); |
678 |
|
aliasSet.add(vejnavn.replace("vej", "v") ); |
679 |
|
aliasSet.add(vejnavn.replace("vej", "vejen") ); |
680 |
|
aliasSet.add(vejnavn.replace("vejen", "vej") ); |
681 |
|
|
682 |
|
aliasSet.add(vejnavn.replace("v", "vej") );//Vi kan have vejnavne i DB der bare slutter på v istedet for vej |
683 |
|
|
684 |
|
aliasSet.add(vejnavn.replace("alle", "all") ); |
685 |
|
aliasSet.add(vejnavn.replace("allé", "all") ); |
686 |
|
aliasSet.add(vejnavn.replace("alle", "allú") ); //Fundet i logs.hentruteinfo |
687 |
|
aliasSet.add(vejnavn.replace("allé", "allú") ); |
688 |
|
|
689 |
|
aliasSet.add(vejnavn.replace("gade", "gaed") ); //Fundet i logs.hentruteinfo |
690 |
|
aliasSet.add(vejnavn.replace("gade", "gde") ); |
691 |
|
|
692 |
|
aliasSet.add(vejnavn.replace("plads", "pl") ); |
693 |
|
aliasSet.add(vejnavn.replace("vænget", "vænge") ); |
694 |
|
|
695 |
|
aliasSet.add(vejnavn.replace("boulevard", "blvd") ); |
696 |
|
aliasSet.add(vejnavn.replace("blvd", "boulevard") ); |
697 |
|
|
698 |
|
aliasSet.add(vejnavn.replace("boulevard", "boule") ); |
699 |
|
aliasSet.add(vejnavn.replace("boule", "boulevard") ); |
700 |
|
|
701 |
// Opbyg æøå varianter over alle fundne aliaser |
// Opbyg æøå varianter over alle fundne aliaser |
702 |
|
|
715 |
//danske tegn 2 |
//danske tegn 2 |
716 |
aliasSet.add( vVejnavn.replace("æ", "ae").replace("ø", "oe") ); |
aliasSet.add( vVejnavn.replace("æ", "ae").replace("ø", "oe") ); |
717 |
aliasSet.add( vVejnavn.replace("æ", "ae").replace("å", "aa") ); |
aliasSet.add( vVejnavn.replace("æ", "ae").replace("å", "aa") ); |
718 |
aliasSet.add( vVejnavn.replace("ø", "ae").replace("å", "aa") ); |
aliasSet.add( vVejnavn.replace("ø", "oe").replace("å", "aa") ); |
719 |
aliasSet.add( vVejnavn.replace("ae", "æ").replace("oe","ø") ); |
aliasSet.add( vVejnavn.replace("ae", "æ").replace("oe","ø") ); |
720 |
aliasSet.add( vVejnavn.replace("ae", "æ").replace("aa","å") ); |
aliasSet.add( vVejnavn.replace("ae", "æ").replace("aa","å") ); |
721 |
aliasSet.add( vVejnavn.replace("oe", "ø").replace("aa", "å") ); |
aliasSet.add( vVejnavn.replace("oe", "ø").replace("aa", "å") ); |
723 |
//danske tegn 3 |
//danske tegn 3 |
724 |
aliasSet.add( vejnavn.replace("æ", "ae").replace("ø", "oe").replace("å", "aa") ); |
aliasSet.add( vejnavn.replace("æ", "ae").replace("ø", "oe").replace("å", "aa") ); |
725 |
aliasSet.add( vejnavn.replace("ae", "æ").replace("oe", "ø").replace("aa", "å") ); |
aliasSet.add( vejnavn.replace("ae", "æ").replace("oe", "ø").replace("aa", "å") ); |
726 |
|
|
727 |
|
|
728 |
|
//udenlandsketegn |
729 |
|
aliasSet.add(vejnavn.replace("u", "ü") ); |
730 |
|
aliasSet.add(vejnavn.replace("ü", "u") ); |
731 |
|
|
732 |
|
aliasSet.add(vejnavn.replace("ä", "æ") ); |
733 |
|
aliasSet.add(vejnavn.replace("æ", "ä") ); |
734 |
|
|
735 |
|
aliasSet.add(vejnavn.replace("ö", "ø") ); |
736 |
|
aliasSet.add(vejnavn.replace("ø", "ö") ); |
737 |
} |
} |
738 |
|
|
739 |
return aliasSet; |
return aliasSet; |
740 |
} |
} |
741 |
|
|
742 |
|
public Set<Short> getPostnumre() { |
743 |
|
return new TreeSet<Short>( searchPostnrVejnavnGadeid.keySet() ); |
744 |
|
} |
745 |
|
|
746 |
|
public Set<Entry<String,Integer>> getVejnavne(short postnr) { |
747 |
|
Map<String,Integer> map = searchPostnrVejnavnGadeid.get(postnr); |
748 |
|
TreeMap<String,Integer> newMap = new TreeMap<String,Integer>(); |
749 |
|
for (Entry<String,Integer> entry : map.entrySet() ) { |
750 |
|
newMap.put(entry.getKey(), entry.getValue()); |
751 |
|
} |
752 |
|
|
753 |
|
return newMap.entrySet(); |
754 |
|
} |
755 |
|
|
756 |
|
public Set<String> getHusnumre(int gadeid) { |
757 |
|
|
758 |
|
Map<String, Address> gade = searchGadeidentAdresser.get(gadeid); |
759 |
|
|
760 |
|
Set<String> set = new TreeSet<String>( new NaturalOrderComparator<String>() ); |
761 |
|
set.addAll( gade.keySet() ); |
762 |
|
|
763 |
|
return set; |
764 |
|
} |
765 |
|
|
766 |
|
public Address getAdresse(int gadeid, String husnr) { |
767 |
|
|
768 |
|
Map<String, Address> gade = searchGadeidentAdresser.get(gadeid); |
769 |
|
return gade.get(husnr); |
770 |
|
|
771 |
|
} |
772 |
|
|
773 |
} |
} |