1 |
torben |
2267 |
package dk.daoas.daoadresseservice;
|
2 |
|
|
|
3 |
torben |
2274 |
import java.sql.SQLException;
|
4 |
torben |
2339 |
import java.text.SimpleDateFormat;
|
5 |
torben |
2332 |
import java.util.ArrayList;
|
6 |
torben |
2333 |
import java.util.Collections;
|
7 |
torben |
2338 |
import java.util.Date;
|
8 |
torben |
2267 |
import java.util.HashMap;
|
9 |
torben |
2292 |
import java.util.HashSet;
|
10 |
torben |
2274 |
import java.util.List;
|
11 |
|
|
import java.util.Map;
|
12 |
torben |
2484 |
import java.util.Map.Entry;
|
13 |
torben |
2292 |
import java.util.Set;
|
14 |
torben |
2484 |
import java.util.TreeMap;
|
15 |
|
|
import java.util.TreeSet;
|
16 |
torben |
2274 |
import java.util.concurrent.ConcurrentHashMap;
|
17 |
torben |
2267 |
|
18 |
torben |
2381 |
import org.apache.commons.lang3.StringUtils;
|
19 |
|
|
|
20 |
torben |
2346 |
import dk.daoas.daoadresseservice.admin.ServiceConfig;
|
21 |
torben |
2282 |
import dk.daoas.daoadresseservice.beans.Address;
|
22 |
torben |
2395 |
import dk.daoas.daoadresseservice.beans.AliasBean;
|
23 |
torben |
2337 |
import dk.daoas.daoadresseservice.beans.DataStatisticsBean;
|
24 |
torben |
2282 |
import dk.daoas.daoadresseservice.beans.ExtendedBean;
|
25 |
|
|
import dk.daoas.daoadresseservice.beans.HundredePctBean;
|
26 |
torben |
2411 |
import dk.daoas.daoadresseservice.beans.SearchRequest;
|
27 |
torben |
2282 |
import dk.daoas.daoadresseservice.beans.SearchResult;
|
28 |
|
|
import dk.daoas.daoadresseservice.beans.SearchResult.Status;
|
29 |
torben |
2274 |
import dk.daoas.daoadresseservice.db.DatabaseLayer;
|
30 |
torben |
2557 |
import dk.daoas.daoadresseservice.util.DaoUtils;
|
31 |
torben |
2491 |
import dk.daoas.daoadresseservice.util.DeduplicateHelper;
|
32 |
torben |
2495 |
import dk.daoas.daoadresseservice.util.NaturalOrderComparator;
|
33 |
torben |
2274 |
|
34 |
torben |
2410 |
public class AddressSearch {
|
35 |
torben |
2267 |
|
36 |
torben |
2490 |
private Map<Short, Map<String,Integer>> searchPostnrVejnavnGadeid;
|
37 |
|
|
private Map<Integer, Map<String,Address>> searchGadeidentAdresser;
|
38 |
torben |
2274 |
|
39 |
torben |
2332 |
private List<Address> alleAdresser;
|
40 |
torben |
2267 |
|
41 |
torben |
2490 |
private Map<String,Integer> helperCache;
|
42 |
torben |
2267 |
|
43 |
torben |
2350 |
private DataStatisticsBean stats = new DataStatisticsBean();
|
44 |
torben |
2303 |
|
45 |
torben |
2350 |
ServiceConfig config;
|
46 |
torben |
2280 |
|
47 |
torben |
2411 |
StreetnameHelper levenshteinHelper;
|
48 |
torben |
2409 |
StreetnameHelper googleHelper;
|
49 |
|
|
StreetnameHelper osmHelper;
|
50 |
|
|
|
51 |
torben |
2411 |
|
52 |
torben |
2410 |
public AddressSearch(ServiceConfig config) {
|
53 |
torben |
2350 |
this.config = config;
|
54 |
torben |
2409 |
|
55 |
torben |
2411 |
levenshteinHelper = new LevenshteinStreetnameHelper( this );
|
56 |
torben |
2409 |
googleHelper = new GoogleStreetnameHelper( config );
|
57 |
|
|
osmHelper = new OSMStreetnameHelper( config );
|
58 |
torben |
2350 |
}
|
59 |
|
|
|
60 |
|
|
|
61 |
|
|
public SearchResult search(String postnrStr, String adresse) {
|
62 |
torben |
2504 |
|
63 |
|
|
postnrStr = postnrStr.trim();
|
64 |
|
|
adresse = adresse.trim();
|
65 |
|
|
|
66 |
|
|
|
67 |
torben |
2411 |
SearchRequest request = new SearchRequest();
|
68 |
torben |
2359 |
SearchResult result = new SearchResult();
|
69 |
|
|
|
70 |
torben |
2267 |
|
71 |
torben |
2274 |
try {
|
72 |
torben |
2494 |
request.postnr = Short.parseShort(postnrStr);
|
73 |
torben |
2274 |
} catch (Exception E) {
|
74 |
torben |
2359 |
result.status = Status.ERROR_UNKNOWN_POSTAL;
|
75 |
|
|
return result;
|
76 |
torben |
2274 |
}
|
77 |
|
|
|
78 |
|
|
|
79 |
torben |
2411 |
request.streetNames = searchPostnrVejnavnGadeid.get(request.postnr);
|
80 |
|
|
|
81 |
|
|
if (request.streetNames == null) {
|
82 |
torben |
2359 |
result.status = Status.ERROR_UNKNOWN_POSTAL;
|
83 |
|
|
return result;
|
84 |
torben |
2267 |
}
|
85 |
|
|
|
86 |
torben |
2288 |
|
87 |
torben |
2372 |
result.splitResult = AddressUtils.splitAdresse(adresse);
|
88 |
torben |
2411 |
request.vejnavn = result.splitResult.vej;
|
89 |
|
|
|
90 |
torben |
2358 |
|
91 |
torben |
2267 |
|
92 |
torben |
2372 |
if (result.splitResult.husnr.length() == 0) {
|
93 |
torben |
2359 |
result.status = Status.ERROR_MISSING_HOUSENUMBER;
|
94 |
|
|
return result;
|
95 |
torben |
2274 |
}
|
96 |
torben |
2267 |
|
97 |
torben |
2550 |
result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );
|
98 |
torben |
2358 |
|
99 |
torben |
2415 |
|
100 |
torben |
2550 |
if (result.vasketVejnavn.indexOf("pakkebo") > -1
|
101 |
|
|
|| result.vasketVejnavn.indexOf("pakkepost") > -1
|
102 |
|
|
|| result.vasketVejnavn.indexOf("postbo") > -1 // postbox/postboks
|
103 |
|
|
|| result.vasketVejnavn.indexOf("døgnpost") > -1
|
104 |
|
|
|| result.vasketVejnavn.indexOf("døgnbo") > -1 // døgnbox // døgnboks
|
105 |
|
|
|| result.vasketVejnavn.equals("id")
|
106 |
torben |
2416 |
) {
|
107 |
torben |
2414 |
result.status = Status.ERROR_POSTBOX;
|
108 |
|
|
return result;
|
109 |
|
|
}
|
110 |
|
|
|
111 |
torben |
2556 |
// LookupStreetname er en indkapsling af alm + levenstein + google + osm
|
112 |
torben |
2558 |
Integer gadeident = lookupStretname(request, result, true);
|
113 |
torben |
2301 |
|
114 |
torben |
2305 |
|
115 |
torben |
2556 |
/*
|
116 |
torben |
2557 |
* Hvis der ikke er direkte hits, prøver vi at skære ord af vejnavn
|
117 |
torben |
2556 |
*
|
118 |
torben |
2557 |
* <strike>Denne sektion er MEGET experimental da den øger antallet af kald til google/OSM væsentligt</strike>*/
|
119 |
torben |
2388 |
if (gadeident == null) {
|
120 |
torben |
2557 |
final int MAX_TRIES = 4;
|
121 |
|
|
|
122 |
torben |
2556 |
String vejnavnParts[] = request.vejnavn.split(" ");
|
123 |
|
|
|
124 |
torben |
2557 |
for (int i=1; i<=MAX_TRIES && i<vejnavnParts.length; i++) {
|
125 |
torben |
2556 |
String subVejnavn = DaoUtils.joinHelper(vejnavnParts, i);
|
126 |
|
|
|
127 |
|
|
request.vejnavn = subVejnavn;
|
128 |
|
|
result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );
|
129 |
|
|
|
130 |
torben |
2558 |
gadeident = lookupStretname(request, result, false);//prøv opslag MEN UDEN GOOGLE/OSM !!!
|
131 |
torben |
2556 |
|
132 |
|
|
//hvis vi fandt vejen ud fra substrengen
|
133 |
|
|
if (gadeident != null) {
|
134 |
|
|
break;
|
135 |
|
|
}
|
136 |
|
|
|
137 |
|
|
//hvis vi ikke fandt kopierer vi vejnavn fra split igen
|
138 |
|
|
request.vejnavn = result.splitResult.vej;
|
139 |
|
|
result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );
|
140 |
|
|
}
|
141 |
torben |
2557 |
}
|
142 |
torben |
2303 |
|
143 |
torben |
2383 |
|
144 |
|
|
|
145 |
torben |
2359 |
if (gadeident == null) {
|
146 |
|
|
result.status = Status.ERROR_UNKNOWN_STREETNAME;
|
147 |
|
|
return result;
|
148 |
torben |
2288 |
}
|
149 |
torben |
2274 |
|
150 |
torben |
2397 |
result.gadeident = gadeident;
|
151 |
torben |
2395 |
|
152 |
torben |
2397 |
|
153 |
torben |
2359 |
Map<String, Address> gade = searchGadeidentAdresser.get(gadeident);
|
154 |
|
|
if (gade == null) { //Denne søgning må ikke fejle
|
155 |
|
|
result.status = Status.ERROR_INTERNAL;
|
156 |
|
|
return result;
|
157 |
|
|
}
|
158 |
torben |
2274 |
|
159 |
|
|
|
160 |
torben |
2405 |
//Kunne evt klares med Iterables.get fra Guava/Collections
|
161 |
|
|
Address firstAddress = gade.values().iterator().next();
|
162 |
|
|
result.vej = firstAddress.vejnavn;
|
163 |
|
|
|
164 |
torben |
2372 |
String husnrSearch = "" + result.splitResult.husnr + result.splitResult.litra;
|
165 |
torben |
2274 |
Address addr = gade.get(husnrSearch);
|
166 |
torben |
2298 |
|
167 |
torben |
2274 |
if (addr == null) {
|
168 |
torben |
2359 |
result.status = Status.ERROR_UNKNOWN_ADDRESSPOINT;
|
169 |
|
|
return result;
|
170 |
torben |
2274 |
}
|
171 |
torben |
2276 |
|
172 |
torben |
2359 |
result.address = addr;
|
173 |
|
|
|
174 |
torben |
2381 |
|
175 |
|
|
if ( StringUtils.equals(addr.distributor, "LUKKET") ) {
|
176 |
torben |
2359 |
result.status = Status.STATUS_NOT_COVERED; //Skal vi have en special status til Lukkede adresser ?
|
177 |
|
|
return result;
|
178 |
|
|
}
|
179 |
|
|
|
180 |
torben |
2276 |
if (addr.daekningsType == DaekningsType.DAEKNING_IKKEDAEKKET) {
|
181 |
torben |
2359 |
result.status = Status.STATUS_NOT_COVERED;
|
182 |
|
|
return result;
|
183 |
torben |
2276 |
}
|
184 |
torben |
2359 |
|
185 |
torben |
2277 |
|
186 |
torben |
2359 |
result.status = Status.STATUS_OK;
|
187 |
|
|
|
188 |
|
|
return result;
|
189 |
torben |
2267 |
}
|
190 |
torben |
2556 |
|
191 |
|
|
|
192 |
torben |
2558 |
private Integer lookupStretname(SearchRequest request, SearchResult result, boolean useExternal) {
|
193 |
|
|
String helperSearchKey = "";
|
194 |
|
|
|
195 |
torben |
2556 |
Integer gadeident = request.streetNames.get(result.vasketVejnavn);
|
196 |
|
|
|
197 |
|
|
|
198 |
|
|
if ( gadeident == null) {
|
199 |
|
|
helperSearchKey = "" + request.postnr + "/" + result.vasketVejnavn;
|
200 |
|
|
gadeident = helperCache.get(helperSearchKey);
|
201 |
|
|
}
|
202 |
|
|
|
203 |
|
|
if (gadeident == null) {
|
204 |
|
|
String vej = levenshteinHelper.proposeStreetName(request, result);
|
205 |
|
|
if (vej != null) {
|
206 |
|
|
gadeident = request.streetNames.get(vej);
|
207 |
|
|
}
|
208 |
|
|
}
|
209 |
|
|
|
210 |
|
|
|
211 |
|
|
// Brug OpenStreetMap før vi prøver google
|
212 |
|
|
// For google har en request limit, det har OSM ikke!
|
213 |
torben |
2557 |
if ( gadeident == null && useExternal) {
|
214 |
torben |
2556 |
String vej = osmHelper.proposeStreetName(request, result);
|
215 |
|
|
gadeident = helperWrapper(vej, request.streetNames, helperSearchKey);
|
216 |
|
|
}
|
217 |
|
|
|
218 |
torben |
2557 |
if ( gadeident == null && useExternal) {
|
219 |
torben |
2556 |
String vej = googleHelper.proposeStreetName(request, result);
|
220 |
|
|
gadeident = helperWrapper(vej, request.streetNames, helperSearchKey);
|
221 |
|
|
}
|
222 |
|
|
return gadeident;
|
223 |
|
|
}
|
224 |
torben |
2267 |
|
225 |
torben |
2490 |
private Integer helperWrapper(String vej, Map<String,Integer> postnrVeje, String helperSearchKey) {
|
226 |
torben |
2395 |
if (vej == null)
|
227 |
|
|
return null;
|
228 |
|
|
|
229 |
|
|
String vejVasket = AddressUtils.vaskVejnavn( vej );
|
230 |
torben |
2490 |
Integer gadeident = postnrVeje.get(vejVasket);
|
231 |
torben |
2395 |
|
232 |
|
|
if (gadeident != null) {
|
233 |
|
|
helperCache.put(helperSearchKey, gadeident);
|
234 |
|
|
}
|
235 |
|
|
return gadeident;
|
236 |
|
|
|
237 |
|
|
}
|
238 |
torben |
2274 |
|
239 |
torben |
2540 |
public Map<String,Integer> getStretsByPostal(short zip) {
|
240 |
torben |
2411 |
return searchPostnrVejnavnGadeid.get(zip);
|
241 |
|
|
}
|
242 |
torben |
2395 |
|
243 |
|
|
|
244 |
|
|
|
245 |
torben |
2274 |
public void buildSearchStructures() throws SQLException{
|
246 |
torben |
2490 |
searchPostnrVejnavnGadeid = new HashMap<Short, Map<String,Integer>>();
|
247 |
|
|
searchGadeidentAdresser = new HashMap<Integer, Map<String,Address>>();
|
248 |
|
|
helperCache = new ConcurrentHashMap<String,Integer>();
|
249 |
torben |
2303 |
|
250 |
torben |
2309 |
long start1 = System.currentTimeMillis();
|
251 |
torben |
2276 |
System.out.println("Build -- stage 1");
|
252 |
|
|
|
253 |
torben |
2274 |
alleAdresser = DatabaseLayer.getAllAdresses();
|
254 |
torben |
2276 |
|
255 |
torben |
2286 |
|
256 |
torben |
2285 |
/* Mapper mellem db Row ID og adresse noden */
|
257 |
|
|
Map<Integer,Address> idAddressMap = new HashMap<Integer,Address>( alleAdresser.size() );
|
258 |
torben |
2491 |
DeduplicateHelper<String> aliasHelper = new DeduplicateHelper<String>();
|
259 |
|
|
DeduplicateHelper<String> husnrHelper = new DeduplicateHelper<String>();
|
260 |
torben |
2285 |
|
261 |
torben |
2274 |
for (Address a : alleAdresser) {
|
262 |
|
|
idAddressMap.put(a.id, a);
|
263 |
|
|
|
264 |
torben |
2490 |
Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(a.postnr);
|
265 |
torben |
2274 |
|
266 |
|
|
if (postnrVeje == null) {
|
267 |
torben |
2490 |
postnrVeje = new ConcurrentHashMap<String,Integer>();
|
268 |
torben |
2274 |
searchPostnrVejnavnGadeid.put(a.postnr, postnrVeje);
|
269 |
|
|
}
|
270 |
torben |
2491 |
|
271 |
torben |
2274 |
|
272 |
torben |
2281 |
String vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn);
|
273 |
torben |
2490 |
Integer gadeident = postnrVeje.get(vasketVejnavn);
|
274 |
torben |
2396 |
if (gadeident == null) {
|
275 |
torben |
2292 |
//postnrVeje.put(vasketVejnavn, a.gadeid);
|
276 |
|
|
|
277 |
torben |
2396 |
gadeident = a.gadeid;
|
278 |
|
|
|
279 |
torben |
2292 |
Set<String> aliaser = findVejAliaser(a.vejnavn);
|
280 |
|
|
for(String alias : aliaser) {
|
281 |
|
|
String vasketAlias = AddressUtils.vaskVejnavn(alias);
|
282 |
torben |
2491 |
vasketAlias = aliasHelper.getInstance(vasketAlias);
|
283 |
|
|
|
284 |
torben |
2396 |
postnrVeje.put(vasketAlias, gadeident);
|
285 |
|
|
}
|
286 |
torben |
2274 |
}
|
287 |
|
|
|
288 |
torben |
2396 |
Map<String, Address> gade = searchGadeidentAdresser.get(gadeident);
|
289 |
torben |
2274 |
if (gade == null) {
|
290 |
|
|
gade = new HashMap<String, Address>();
|
291 |
torben |
2396 |
searchGadeidentAdresser.put(gadeident, gade);
|
292 |
torben |
2274 |
}
|
293 |
|
|
String husnrSearch = "" + a.husnr + a.husnrbogstav;
|
294 |
torben |
2491 |
husnrSearch = husnrHelper.getInstance(husnrSearch);
|
295 |
torben |
2286 |
gade.put(husnrSearch, a);
|
296 |
torben |
2276 |
}
|
297 |
|
|
|
298 |
torben |
2279 |
////////////////////////////////////////////////////////////////////////////////////////
|
299 |
torben |
2309 |
long start2 = System.currentTimeMillis();
|
300 |
|
|
System.out.println("Build, stage1 elapsed: " + (start2-start1) );
|
301 |
torben |
2395 |
System.out.println("Build -- stage 2 alias tabel");
|
302 |
torben |
2279 |
|
303 |
torben |
2395 |
int vaskCount = 0;
|
304 |
|
|
List<AliasBean> aliasList = DatabaseLayer.getAliasList();
|
305 |
|
|
for (AliasBean alias : aliasList) {
|
306 |
torben |
2490 |
Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(alias.postnr);
|
307 |
torben |
2395 |
|
308 |
|
|
if (postnrVeje == null) {
|
309 |
|
|
//Burde ikke kunne ske - men better safe than sorry
|
310 |
|
|
continue;
|
311 |
|
|
}
|
312 |
|
|
|
313 |
|
|
String vasketVej = AddressUtils.vaskVejnavn(alias.vejnavn);
|
314 |
|
|
String vasketAlias = AddressUtils.vaskVejnavn(alias.aliasVejnavn);
|
315 |
|
|
|
316 |
torben |
2490 |
Integer gadeident = postnrVeje.get(vasketVej);
|
317 |
torben |
2395 |
if (gadeident == null) {
|
318 |
|
|
//Kender ikke den oprindelige vej
|
319 |
|
|
continue;
|
320 |
|
|
}
|
321 |
|
|
|
322 |
torben |
2490 |
Integer aliasIdent = postnrVeje.get(vasketAlias);
|
323 |
torben |
2395 |
|
324 |
|
|
if (aliasIdent == null) { //Vi kender ikke denne variant af vejnavnet
|
325 |
|
|
postnrVeje.put(vasketAlias, gadeident);
|
326 |
|
|
vaskCount++;
|
327 |
|
|
}
|
328 |
|
|
|
329 |
|
|
}
|
330 |
|
|
System.out.println("Anvendte " + vaskCount + " aliaser fra databasen");
|
331 |
|
|
|
332 |
|
|
|
333 |
|
|
////////////////////////////////////////////////////////////////////////////////////////
|
334 |
|
|
long start3 = System.currentTimeMillis();
|
335 |
|
|
System.out.println("Build, stage2 elapsed: " + (start3-start2) );
|
336 |
|
|
System.out.println("Build -- stage 3 udvidet dækning");
|
337 |
|
|
|
338 |
torben |
2491 |
DeduplicateHelper<String> ruteHelper = new DeduplicateHelper<String>();
|
339 |
|
|
DeduplicateHelper<String> korelisteHelper = new DeduplicateHelper<String>();
|
340 |
|
|
|
341 |
torben |
2279 |
List<ExtendedBean> extDao = DatabaseLayer.getExtendedAdresslist();
|
342 |
torben |
2276 |
for (ExtendedBean eb : extDao) {
|
343 |
torben |
2274 |
|
344 |
torben |
2276 |
Address orgAddress = idAddressMap.get(eb.orgId);
|
345 |
|
|
if (orgAddress == null)
|
346 |
|
|
continue;
|
347 |
|
|
|
348 |
torben |
2498 |
if (orgAddress.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {
|
349 |
|
|
//kan være at adressen er blevet markeret dækket og - find-nærmeste data ikke er opdateret i mellemtiden
|
350 |
|
|
continue;
|
351 |
|
|
}
|
352 |
|
|
|
353 |
torben |
2276 |
Address targetAddress = idAddressMap.get(eb.targetId);
|
354 |
torben |
2498 |
if (targetAddress == null) {
|
355 |
torben |
2276 |
continue;
|
356 |
torben |
2498 |
}
|
357 |
torben |
2276 |
|
358 |
torben |
2498 |
|
359 |
|
|
if ( StringUtils.equals(orgAddress.distributor, "LUKKET") ) {
|
360 |
torben |
2277 |
continue;
|
361 |
|
|
}
|
362 |
|
|
|
363 |
torben |
2498 |
|
364 |
|
|
|
365 |
|
|
if ( StringUtils.equals(targetAddress.distributor, "LUKKET") ) {
|
366 |
torben |
2277 |
continue;
|
367 |
|
|
}
|
368 |
|
|
|
369 |
torben |
2276 |
orgAddress.extTarget = targetAddress;
|
370 |
|
|
orgAddress.extAfstand = eb.afstand;
|
371 |
|
|
|
372 |
torben |
2283 |
boolean covered = false;
|
373 |
|
|
if (targetAddress.distributor.equals("DAO")) {
|
374 |
torben |
2491 |
orgAddress.rute = calculateExtendedDaoRoute(eb,orgAddress,targetAddress);
|
375 |
|
|
orgAddress.rute = ruteHelper.getInstance(orgAddress.rute);
|
376 |
|
|
|
377 |
torben |
2283 |
if (orgAddress.rute != null) {
|
378 |
|
|
orgAddress.koreliste = targetAddress.koreliste;
|
379 |
|
|
covered = true;
|
380 |
|
|
}
|
381 |
|
|
}
|
382 |
torben |
2276 |
|
383 |
torben |
2283 |
if (targetAddress.distributor.equals("BK")) {
|
384 |
torben |
2491 |
orgAddress.koreliste = calculateExtendedBkKoreliste(eb,orgAddress,targetAddress);
|
385 |
|
|
orgAddress.koreliste = korelisteHelper.getInstance(orgAddress.koreliste);
|
386 |
|
|
|
387 |
torben |
2283 |
if (orgAddress.koreliste != null) {
|
388 |
|
|
orgAddress.rute = targetAddress.rute;
|
389 |
|
|
covered = true;
|
390 |
|
|
}
|
391 |
|
|
}
|
392 |
|
|
|
393 |
|
|
if (covered) { //Kopier resten af felterne
|
394 |
torben |
2276 |
orgAddress.daekningsType = DaekningsType.DAEKNING_UDVIDET;
|
395 |
|
|
orgAddress.dbkBane = targetAddress.dbkBane;
|
396 |
|
|
|
397 |
|
|
/* Sådan gør den gamle service */
|
398 |
torben |
2549 |
/* 20150520 THN- hvis vi bibeholder de originale kommune+vejkoder kan vi bruge DAVID til join i databasen*/
|
399 |
|
|
//orgAddress.kommunekode = targetAddress.kommunekode;
|
400 |
|
|
//orgAddress.vejkode = targetAddress.vejkode;
|
401 |
torben |
2276 |
|
402 |
torben |
2549 |
|
403 |
torben |
2276 |
orgAddress.distributor = targetAddress.distributor;
|
404 |
|
|
}
|
405 |
torben |
2274 |
}
|
406 |
torben |
2286 |
|
407 |
|
|
// nu skal vi ikke bruge idAddressMap længere
|
408 |
|
|
idAddressMap = null;
|
409 |
|
|
|
410 |
torben |
2279 |
//////////////////////////////////////////////////////////////////////////////////////
|
411 |
torben |
2395 |
long start4 = System.currentTimeMillis();
|
412 |
|
|
System.out.println("Build, stage3 elapsed: " + (start4-start3) );
|
413 |
|
|
System.out.println("Build -- stage 4 - 100pct");
|
414 |
torben |
2274 |
|
415 |
torben |
2492 |
Map<Short,HundredePctBean> hundredePct = DatabaseLayer.get100PctList();
|
416 |
torben |
2279 |
for (Address addr : alleAdresser) {
|
417 |
torben |
2286 |
if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {
|
418 |
torben |
2279 |
continue;
|
419 |
|
|
}
|
420 |
|
|
|
421 |
|
|
if (addr.distributor != null && addr.distributor.equals("LUKKET")) {
|
422 |
|
|
continue;
|
423 |
|
|
}
|
424 |
|
|
|
425 |
|
|
|
426 |
|
|
HundredePctBean bean = hundredePct.get(addr.postnr);
|
427 |
|
|
if (bean == null) {
|
428 |
|
|
continue;
|
429 |
|
|
}
|
430 |
|
|
|
431 |
|
|
addr.daekningsType = DaekningsType.DAEKNING_100PCT;
|
432 |
|
|
addr.rute = bean.rute;
|
433 |
|
|
addr.koreliste = bean.koreliste;
|
434 |
|
|
addr.dbkBane = bean.dbkBane;
|
435 |
|
|
addr.distributor = bean.distributor;
|
436 |
|
|
}
|
437 |
torben |
2276 |
|
438 |
torben |
2286 |
////////////////////////////////////////////////////////////////////////////////////
|
439 |
torben |
2309 |
long stop = System.currentTimeMillis();
|
440 |
torben |
2395 |
System.out.println("Build, stage3 elapsed: " + (stop-start4) );
|
441 |
torben |
2286 |
System.out.println("Build -- Gathering statistics");
|
442 |
torben |
2337 |
|
443 |
torben |
2286 |
for (Address addr : alleAdresser) {
|
444 |
|
|
switch (addr.daekningsType) {
|
445 |
|
|
case DAEKNING_DIREKTE:
|
446 |
torben |
2337 |
stats.direkteCount++;
|
447 |
torben |
2286 |
break;
|
448 |
|
|
case DAEKNING_UDVIDET:
|
449 |
torben |
2337 |
stats.extendedCount++;
|
450 |
torben |
2286 |
break;
|
451 |
|
|
case DAEKNING_100PCT:
|
452 |
torben |
2337 |
stats.hundredePctCount++;
|
453 |
torben |
2286 |
break;
|
454 |
|
|
default:
|
455 |
torben |
2337 |
stats.ikkeDaekketCount++;
|
456 |
torben |
2286 |
}
|
457 |
torben |
2339 |
}
|
458 |
torben |
2286 |
|
459 |
torben |
2338 |
|
460 |
torben |
2339 |
stats.elapsed = stop-start1;
|
461 |
|
|
stats.buildTime = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss").format( new Date() );
|
462 |
|
|
|
463 |
torben |
2337 |
System.out.println("Build: direkteCount: " + stats.direkteCount);
|
464 |
|
|
System.out.println("Build: extendedCount: " + stats.extendedCount);
|
465 |
|
|
System.out.println("Build: hundredePctCount: " + stats.hundredePctCount);
|
466 |
|
|
System.out.println("Build: ikkeDaekketCount: " + stats.ikkeDaekketCount);
|
467 |
torben |
2286 |
|
468 |
torben |
2309 |
System.out.println("Build: Total Elapsed: " + (stop-start1) );
|
469 |
torben |
2281 |
System.out.println("Build Completed");
|
470 |
|
|
|
471 |
torben |
2274 |
}
|
472 |
|
|
|
473 |
torben |
2337 |
public DataStatisticsBean getStatistics() {
|
474 |
|
|
return stats;
|
475 |
|
|
}
|
476 |
torben |
2276 |
|
477 |
torben |
2337 |
public void clear() {
|
478 |
|
|
searchPostnrVejnavnGadeid.clear();
|
479 |
|
|
searchGadeidentAdresser.clear();
|
480 |
|
|
alleAdresser.clear();
|
481 |
|
|
helperCache.clear();
|
482 |
|
|
}
|
483 |
|
|
|
484 |
|
|
|
485 |
torben |
2283 |
private String calculateExtendedDaoRoute(ExtendedBean eb, Address orgAddress, Address targetAddress) {
|
486 |
torben |
2443 |
if (targetAddress.rute == null) { //hvis targetAdress.rute er null så er adressen ikke dækket alligevel
|
487 |
|
|
return null;
|
488 |
|
|
}
|
489 |
torben |
2283 |
|
490 |
|
|
// ///////////////////////////////////////////////////////////////////
|
491 |
|
|
switch( eb.transport) {
|
492 |
|
|
case "cykel":
|
493 |
|
|
if (eb.afstand < 0.151) {
|
494 |
|
|
return "." + targetAddress.rute;
|
495 |
|
|
} else if (eb.afstand < 0.501) {
|
496 |
|
|
return ".." + targetAddress.rute;
|
497 |
|
|
} else if (eb.afstand < 0.701) {
|
498 |
|
|
return "..." + targetAddress.rute;
|
499 |
|
|
} else if (eb.afstand < 0.501) {
|
500 |
|
|
return "...." + targetAddress.rute;
|
501 |
torben |
2276 |
}
|
502 |
torben |
2283 |
break;
|
503 |
|
|
case "scooter":
|
504 |
|
|
if (eb.afstand < 0.151) {
|
505 |
|
|
return "." + targetAddress.rute;
|
506 |
|
|
} else if (eb.afstand < 0.801) {
|
507 |
|
|
return ".." + targetAddress.rute;
|
508 |
|
|
} else if (eb.afstand < 1.201) {
|
509 |
|
|
return "..." + targetAddress.rute;
|
510 |
|
|
} else if (eb.afstand < 2.101) {
|
511 |
|
|
return "...." + targetAddress.rute;
|
512 |
|
|
}
|
513 |
|
|
break;
|
514 |
|
|
case "bil":
|
515 |
|
|
if (eb.afstand < 0.151) {
|
516 |
|
|
return "." + targetAddress.rute;
|
517 |
|
|
} else if (eb.afstand < 1.001) {
|
518 |
|
|
return ".." + targetAddress.rute;
|
519 |
|
|
} else if (eb.afstand < 1.601) {
|
520 |
|
|
return "..." + targetAddress.rute;
|
521 |
|
|
} else if (eb.afstand < 2.601) {
|
522 |
|
|
return "...." + targetAddress.rute;
|
523 |
|
|
}
|
524 |
torben |
2276 |
break;
|
525 |
torben |
2283 |
}
|
526 |
torben |
2276 |
return null;
|
527 |
torben |
2332 |
}
|
528 |
torben |
2276 |
|
529 |
torben |
2332 |
public List<Address> getNonCoveredAddresses() {
|
530 |
|
|
List<Address> result = new ArrayList<Address>(60000);
|
531 |
|
|
for (Address a : alleAdresser) {
|
532 |
|
|
if ( a.daekningsType == DaekningsType.DAEKNING_IKKEDAEKKET) {
|
533 |
|
|
result.add(a);
|
534 |
|
|
}
|
535 |
|
|
}
|
536 |
torben |
2333 |
Collections.sort(result );
|
537 |
torben |
2332 |
return result;
|
538 |
|
|
}
|
539 |
|
|
|
540 |
torben |
2283 |
///////////////////////////////////////////////////////////
|
541 |
|
|
private String calculateExtendedBkKoreliste(ExtendedBean eb, Address orgAddress, Address targetAddress) {
|
542 |
|
|
String inject;
|
543 |
|
|
if (eb.afstand <= 0.500) {
|
544 |
|
|
inject = ".";
|
545 |
|
|
} else {
|
546 |
|
|
inject = "..";
|
547 |
|
|
}
|
548 |
|
|
return AddressUtils.injectIntoBk(targetAddress.koreliste, inject);
|
549 |
|
|
}
|
550 |
torben |
2276 |
|
551 |
torben |
2292 |
private Set<String> findVejAliaser(String vejnavn) {
|
552 |
torben |
2293 |
vejnavn = vejnavn.toLowerCase();
|
553 |
torben |
2310 |
HashSet<String> aliasSet = new HashSet<String>();
|
554 |
torben |
2292 |
aliasSet.add(vejnavn);
|
555 |
torben |
2554 |
|
556 |
torben |
2292 |
aliasSet.add(vejnavn.replace("alle", "allé") );
|
557 |
torben |
2310 |
aliasSet.add(vejnavn.replace("allé", "alle") );
|
558 |
torben |
2292 |
|
559 |
torben |
2534 |
|
560 |
|
|
// forkortelser
|
561 |
torben |
2295 |
aliasSet.add(vejnavn.replace("dronningens", "dr") );
|
562 |
|
|
aliasSet.add(vejnavn.replace("dr.", "dronningens") );
|
563 |
|
|
aliasSet.add(vejnavn.replace("dr ", "dronningens") );
|
564 |
|
|
|
565 |
torben |
2391 |
aliasSet.add(vejnavn.replace("dronning", "dr") );
|
566 |
|
|
aliasSet.add(vejnavn.replace("dr.", "dronning") );
|
567 |
|
|
aliasSet.add(vejnavn.replace("dr ", "dronning") );
|
568 |
|
|
|
569 |
|
|
aliasSet.add(vejnavn.replace("kng", "kongen") );
|
570 |
|
|
aliasSet.add(vejnavn.replace("kongen", "kng") );
|
571 |
|
|
|
572 |
torben |
2295 |
aliasSet.add(vejnavn.replace("kvt", "kvarter") );
|
573 |
|
|
aliasSet.add(vejnavn.replace("kvarter", "kvt") );
|
574 |
|
|
|
575 |
torben |
2292 |
aliasSet.add(vejnavn.replace("gl", "gammel") );
|
576 |
|
|
aliasSet.add(vejnavn.replace("gammel", "gl") );
|
577 |
|
|
|
578 |
|
|
aliasSet.add(vejnavn.replace("lille", "ll") );
|
579 |
|
|
aliasSet.add(vejnavn.replace("ll ", "lille") );
|
580 |
|
|
aliasSet.add(vejnavn.replace("ll.", "lille") );
|
581 |
|
|
|
582 |
|
|
aliasSet.add(vejnavn.replace("store", "st") );
|
583 |
|
|
aliasSet.add(vejnavn.replace("st ", "store") );
|
584 |
|
|
aliasSet.add(vejnavn.replace("st.", "store") );
|
585 |
|
|
|
586 |
|
|
aliasSet.add(vejnavn.replace("søndre", "sdr") );
|
587 |
|
|
aliasSet.add(vejnavn.replace("sdr", "søndre") );
|
588 |
|
|
|
589 |
|
|
|
590 |
|
|
aliasSet.add(vejnavn.replace("nørre", "nr") );
|
591 |
|
|
aliasSet.add(vejnavn.replace("nr", "nørre") );
|
592 |
|
|
|
593 |
|
|
aliasSet.add(vejnavn.replace("nordre", "ndr") );
|
594 |
|
|
aliasSet.add(vejnavn.replace("ndr", "nordre") );
|
595 |
torben |
2534 |
|
596 |
torben |
2551 |
|
597 |
|
|
aliasSet.add(vejnavn.replace("vestre", "vester") );
|
598 |
|
|
aliasSet.add(vejnavn.replace("vester", "vestre") );
|
599 |
|
|
|
600 |
|
|
aliasSet.add(vejnavn.replace("søndre", "sønder") );
|
601 |
|
|
aliasSet.add(vejnavn.replace("sønder", "søndre") );
|
602 |
|
|
|
603 |
|
|
aliasSet.add(vejnavn.replace("østre", "øster") );
|
604 |
|
|
aliasSet.add(vejnavn.replace("øster", "østre") );
|
605 |
|
|
|
606 |
torben |
2534 |
aliasSet.add(vejnavn.replace("borgmester", "borgm") );
|
607 |
|
|
aliasSet.add(vejnavn.replace("borgm", "borgmester") );
|
608 |
|
|
|
609 |
torben |
2292 |
|
610 |
|
|
aliasSet.add(vejnavn.replace("sankt", "skt") );
|
611 |
torben |
2310 |
aliasSet.add(vejnavn.replace("sankt", "sct") );
|
612 |
torben |
2292 |
aliasSet.add(vejnavn.replace("skt", "sankt") );
|
613 |
|
|
|
614 |
|
|
aliasSet.add(vejnavn.replace("skt", "sct") );
|
615 |
torben |
2534 |
aliasSet.add(vejnavn.replace("sct", "skt") );
|
616 |
torben |
2292 |
|
617 |
torben |
2398 |
|
618 |
torben |
2534 |
|
619 |
torben |
2407 |
// fornavn forkortelser
|
620 |
|
|
aliasSet.add(vejnavn.replace("john", "j") );
|
621 |
|
|
aliasSet.add(vejnavn.replace("thomas", "th") );
|
622 |
|
|
aliasSet.add(vejnavn.replace("thorvald", "th") );
|
623 |
torben |
2564 |
aliasSet.add(vejnavn.replace("frederik", "fr") );
|
624 |
|
|
aliasSet.add(vejnavn.replace("frederiks", "fr") );
|
625 |
torben |
2505 |
|
626 |
|
|
|
627 |
|
|
aliasSet.add(vejnavn.replace("christian", "chr") );
|
628 |
torben |
2564 |
aliasSet.add(vejnavn.replace("christians", "chr") );
|
629 |
torben |
2505 |
aliasSet.add(vejnavn.replace("kristian", "kr") );
|
630 |
torben |
2564 |
aliasSet.add(vejnavn.replace("kristians", "kr") );
|
631 |
torben |
2505 |
|
632 |
torben |
2534 |
|
633 |
|
|
// alternative stavninger
|
634 |
|
|
aliasSet.add(vejnavn.replace("peder", "peter") );
|
635 |
|
|
aliasSet.add(vejnavn.replace("peter", "peder") );
|
636 |
|
|
|
637 |
torben |
2407 |
|
638 |
|
|
|
639 |
torben |
2404 |
// Romertal
|
640 |
|
|
aliasSet.add(vejnavn.replace("1", "i") );
|
641 |
|
|
aliasSet.add(vejnavn.replace("i", "1") );
|
642 |
torben |
2398 |
|
643 |
torben |
2404 |
aliasSet.add(vejnavn.replace("2", "ii") );
|
644 |
|
|
aliasSet.add(vejnavn.replace("ii", "2") );
|
645 |
|
|
|
646 |
|
|
aliasSet.add(vejnavn.replace("3", "iii") );
|
647 |
|
|
aliasSet.add(vejnavn.replace("iii", "3") );
|
648 |
|
|
|
649 |
|
|
aliasSet.add(vejnavn.replace("4", "iv") );
|
650 |
|
|
aliasSet.add(vejnavn.replace("iv", "4") );
|
651 |
|
|
|
652 |
|
|
aliasSet.add(vejnavn.replace("5", "v") );
|
653 |
|
|
aliasSet.add(vejnavn.replace("v", "5") );
|
654 |
|
|
|
655 |
|
|
aliasSet.add(vejnavn.replace("6", "vi") );
|
656 |
|
|
aliasSet.add(vejnavn.replace("vi", "6") );
|
657 |
|
|
|
658 |
|
|
aliasSet.add(vejnavn.replace("7", "vii") );
|
659 |
|
|
aliasSet.add(vejnavn.replace("vii", "7") );
|
660 |
|
|
|
661 |
|
|
aliasSet.add(vejnavn.replace("8", "viii") );
|
662 |
|
|
aliasSet.add(vejnavn.replace("viii", "8") );
|
663 |
|
|
|
664 |
|
|
aliasSet.add(vejnavn.replace("9", "ix") );
|
665 |
|
|
aliasSet.add(vejnavn.replace("ix", "9") );
|
666 |
|
|
|
667 |
|
|
aliasSet.add(vejnavn.replace("10", "x") );
|
668 |
|
|
aliasSet.add(vejnavn.replace("x", "10") );
|
669 |
|
|
|
670 |
|
|
|
671 |
torben |
2379 |
//alternative måder at stave vej/gade/alle
|
672 |
torben |
2362 |
aliasSet.add(vejnavn.replace("vej", "ve") );
|
673 |
|
|
aliasSet.add(vejnavn.replace("vej", "vj") );
|
674 |
torben |
2386 |
aliasSet.add(vejnavn.replace("vej", "v") );
|
675 |
torben |
2397 |
aliasSet.add(vejnavn.replace("vej", "vejen") );
|
676 |
|
|
aliasSet.add(vejnavn.replace("vejen", "vej") );
|
677 |
torben |
2362 |
|
678 |
torben |
2535 |
aliasSet.add(vejnavn.replace("v", "vej") );//Vi kan have vejnavne i DB der bare slutter på v istedet for vej
|
679 |
|
|
|
680 |
torben |
2362 |
aliasSet.add(vejnavn.replace("alle", "all") );
|
681 |
|
|
aliasSet.add(vejnavn.replace("allé", "all") );
|
682 |
torben |
2382 |
aliasSet.add(vejnavn.replace("alle", "allú") ); //Fundet i logs.hentruteinfo
|
683 |
|
|
aliasSet.add(vejnavn.replace("allé", "allú") );
|
684 |
torben |
2362 |
|
685 |
torben |
2382 |
aliasSet.add(vejnavn.replace("gade", "gaed") ); //Fundet i logs.hentruteinfo
|
686 |
torben |
2419 |
aliasSet.add(vejnavn.replace("gade", "gde") );
|
687 |
torben |
2379 |
|
688 |
torben |
2403 |
aliasSet.add(vejnavn.replace("plads", "pl") );
|
689 |
|
|
aliasSet.add(vejnavn.replace("vænget", "vænge") );
|
690 |
torben |
2560 |
|
691 |
|
|
aliasSet.add(vejnavn.replace("boulevard", "blvd") );
|
692 |
|
|
aliasSet.add(vejnavn.replace("blvd", "boulevard") );
|
693 |
|
|
|
694 |
|
|
aliasSet.add(vejnavn.replace("boulevard", "boule") );
|
695 |
|
|
aliasSet.add(vejnavn.replace("boule", "boulevard") );
|
696 |
torben |
2379 |
|
697 |
torben |
2310 |
// Opbyg æøå varianter over alle fundne aliaser
|
698 |
|
|
|
699 |
|
|
@SuppressWarnings("unchecked")
|
700 |
|
|
HashSet<String> variants = (HashSet<String>) aliasSet.clone();
|
701 |
|
|
|
702 |
torben |
2313 |
for (String vVejnavn : variants) {
|
703 |
torben |
2310 |
// danske tegn 1
|
704 |
|
|
aliasSet.add( vVejnavn.replace("æ", "ae") );
|
705 |
|
|
aliasSet.add( vVejnavn.replace("ø", "oe") );
|
706 |
|
|
aliasSet.add( vVejnavn.replace("å", "aa") );
|
707 |
|
|
aliasSet.add( vVejnavn.replace("ae", "æ") );
|
708 |
|
|
aliasSet.add( vVejnavn.replace("oe", "ø") );
|
709 |
|
|
aliasSet.add( vVejnavn.replace("aa", "å") );
|
710 |
|
|
|
711 |
|
|
//danske tegn 2
|
712 |
|
|
aliasSet.add( vVejnavn.replace("æ", "ae").replace("ø", "oe") );
|
713 |
|
|
aliasSet.add( vVejnavn.replace("æ", "ae").replace("å", "aa") );
|
714 |
torben |
2486 |
aliasSet.add( vVejnavn.replace("ø", "oe").replace("å", "aa") );
|
715 |
torben |
2310 |
aliasSet.add( vVejnavn.replace("ae", "æ").replace("oe","ø") );
|
716 |
|
|
aliasSet.add( vVejnavn.replace("ae", "æ").replace("aa","å") );
|
717 |
|
|
aliasSet.add( vVejnavn.replace("oe", "ø").replace("aa", "å") );
|
718 |
|
|
|
719 |
|
|
//danske tegn 3
|
720 |
|
|
aliasSet.add( vejnavn.replace("æ", "ae").replace("ø", "oe").replace("å", "aa") );
|
721 |
|
|
aliasSet.add( vejnavn.replace("ae", "æ").replace("oe", "ø").replace("aa", "å") );
|
722 |
torben |
2554 |
|
723 |
|
|
|
724 |
|
|
//udenlandsketegn
|
725 |
|
|
aliasSet.add(vejnavn.replace("u", "ü") );
|
726 |
|
|
aliasSet.add(vejnavn.replace("ü", "u") );
|
727 |
|
|
|
728 |
|
|
aliasSet.add(vejnavn.replace("ä", "æ") );
|
729 |
|
|
aliasSet.add(vejnavn.replace("æ", "ä") );
|
730 |
|
|
|
731 |
|
|
aliasSet.add(vejnavn.replace("ö", "ø") );
|
732 |
|
|
aliasSet.add(vejnavn.replace("ø", "ö") );
|
733 |
torben |
2310 |
}
|
734 |
|
|
|
735 |
torben |
2292 |
return aliasSet;
|
736 |
|
|
}
|
737 |
torben |
2283 |
|
738 |
torben |
2489 |
public Set<Short> getPostnumre() {
|
739 |
|
|
return new TreeSet<Short>( searchPostnrVejnavnGadeid.keySet() );
|
740 |
torben |
2484 |
}
|
741 |
torben |
2292 |
|
742 |
torben |
2493 |
public Set<Entry<String,Integer>> getVejnavne(short postnr) {
|
743 |
torben |
2490 |
Map<String,Integer> map = searchPostnrVejnavnGadeid.get(postnr);
|
744 |
|
|
TreeMap<String,Integer> newMap = new TreeMap<String,Integer>();
|
745 |
|
|
for (Entry<String,Integer> entry : map.entrySet() ) {
|
746 |
torben |
2484 |
newMap.put(entry.getKey(), entry.getValue());
|
747 |
|
|
}
|
748 |
|
|
|
749 |
|
|
return newMap.entrySet();
|
750 |
|
|
}
|
751 |
|
|
|
752 |
torben |
2493 |
public Set<String> getHusnumre(int gadeid) {
|
753 |
torben |
2484 |
|
754 |
|
|
Map<String, Address> gade = searchGadeidentAdresser.get(gadeid);
|
755 |
torben |
2495 |
|
756 |
|
|
Set<String> set = new TreeSet<String>( new NaturalOrderComparator<String>() );
|
757 |
|
|
set.addAll( gade.keySet() );
|
758 |
|
|
|
759 |
|
|
return set;
|
760 |
torben |
2484 |
}
|
761 |
|
|
|
762 |
torben |
2493 |
public Address getAdresse(int gadeid, String husnr) {
|
763 |
torben |
2484 |
|
764 |
|
|
Map<String, Address> gade = searchGadeidentAdresser.get(gadeid);
|
765 |
|
|
return gade.get(husnr);
|
766 |
|
|
|
767 |
|
|
}
|
768 |
|
|
|
769 |
torben |
2267 |
}
|