/[projects]/dao/DaoAdresseService/src/dk/daoas/daoadresseservice/AddressSearch.java
ViewVC logotype

Annotation of /dao/DaoAdresseService/src/dk/daoas/daoadresseservice/AddressSearch.java

Parent Directory Parent Directory | Revision Log Revision Log


Revision 2346 - (hide annotations) (download)
Mon Feb 23 14:39:49 2015 UTC (9 years, 3 months ago) by torben
Original Path: dao/DaoAdresseService/src/dk/daoas/daoadresseservice/AdressSearch.java
File size: 14346 byte(s)
Add configuration
1 torben 2267 package dk.daoas.daoadresseservice;
2    
3 torben 2274 import java.sql.SQLException;
4 torben 2339 import java.text.SimpleDateFormat;
5 torben 2332 import java.util.ArrayList;
6 torben 2333 import java.util.Collections;
7 torben 2338 import java.util.Date;
8 torben 2267 import java.util.HashMap;
9 torben 2292 import java.util.HashSet;
10 torben 2274 import java.util.List;
11     import java.util.Map;
12 torben 2292 import java.util.Set;
13 torben 2274 import java.util.concurrent.ConcurrentHashMap;
14 torben 2267
15 torben 2274 import dk.daoas.daoadresseservice.AddressUtils.SplitResult;
16 torben 2346 import dk.daoas.daoadresseservice.admin.ServiceConfig;
17 torben 2282 import dk.daoas.daoadresseservice.beans.Address;
18 torben 2337 import dk.daoas.daoadresseservice.beans.DataStatisticsBean;
19 torben 2282 import dk.daoas.daoadresseservice.beans.ExtendedBean;
20     import dk.daoas.daoadresseservice.beans.HundredePctBean;
21     import dk.daoas.daoadresseservice.beans.SearchResult;
22     import dk.daoas.daoadresseservice.beans.SearchResult.Status;
23 torben 2274 import dk.daoas.daoadresseservice.db.DatabaseLayer;
24    
25 torben 2267 public class AdressSearch {
26    
27 torben 2332 private Map<Integer, Map<String,Long>> searchPostnrVejnavnGadeid;
28     private Map<Long, Map<String,Address>> searchGadeidentAdresser;
29 torben 2274
30 torben 2332 private List<Address> alleAdresser;
31 torben 2267
32 torben 2332 private Map<String,Long> helperCache;
33 torben 2267
34 torben 2337 private DataStatisticsBean stats = new DataStatisticsBean();
35 torben 2303
36 torben 2280
37 torben 2346 public SearchResult search(ServiceConfig config, String postnrStr, String adresse) {
38 torben 2288
39 torben 2274 int postnr=0;
40 torben 2298 boolean google = false;
41 torben 2301 boolean osm = false;
42 torben 2305 String helperSearchKey = "";
43 torben 2267
44 torben 2274 try {
45     postnr = Integer.parseInt(postnrStr);
46     } catch (Exception E) {
47     return new SearchResult(Status.ERROR_UNKNOWN_POSTAL);
48     }
49    
50     Map<String,Long> postnrVeje = searchPostnrVejnavnGadeid.get(postnr);
51    
52 torben 2267 if (postnrVeje == null) {
53 torben 2274 return new SearchResult(Status.ERROR_UNKNOWN_POSTAL);
54 torben 2267 }
55    
56 torben 2288
57 torben 2274 SplitResult split = AddressUtils.splitAdresse(adresse);
58 torben 2288 String vasketVejnavn = AddressUtils.vaskVejnavn( split.vej );
59 torben 2267
60 torben 2274 if (split.husnr.length() == 0) {
61     return new SearchResult(Status.ERROR_MISSING_HOUSENUMBER);
62     }
63 torben 2267
64 torben 2274 Long gadeident = postnrVeje.get(vasketVejnavn);
65 torben 2301
66 torben 2305
67 torben 2298 if ( gadeident == null) {
68 torben 2305 helperSearchKey = "" + postnr + "/" + vasketVejnavn;
69     gadeident = helperCache.get(helperSearchKey);
70 torben 2301 }
71    
72 torben 2303
73 torben 2301 if ( gadeident == null) {
74 torben 2346 if (config.useGoogle) {
75     String googleVej = GeocodeHelper.googleHelper(postnr, split.vej );
76     google = true;
77 torben 2304
78 torben 2346 if (googleVej != null) {
79     String googleVasket = AddressUtils.vaskVejnavn( googleVej );
80     gadeident = postnrVeje.get(googleVasket);
81    
82     if (gadeident != null) {
83     helperCache.put(helperSearchKey, gadeident);
84     }
85 torben 2303 }
86 torben 2300 }
87 torben 2298 }
88    
89 torben 2303 if ( gadeident == null) {
90 torben 2346 if (config.useOpenStreetMaps) {
91     String osmVej = GeocodeHelper.openstreetmapHelper(postnr, split.vej );
92     osm = true;
93 torben 2304
94 torben 2346 if (osmVej != null) {
95     String osmVasket = AddressUtils.vaskVejnavn( osmVej );
96     gadeident = postnrVeje.get(osmVasket);
97    
98     if (gadeident != null) {
99     helperCache.put(helperSearchKey, gadeident);
100     }
101 torben 2303 }
102     }
103     }
104    
105 torben 2274 if (gadeident == null) {
106     return new SearchResult(Status.ERROR_UNKNOWN_STREETNAME);
107 torben 2288 }
108 torben 2274
109     Map<String, Address> gade = searchGadeidentAdresser.get(gadeident); //Denne søgning må ikke fejle
110    
111    
112     String husnrSearch = "" + split.husnr + split.litra;
113     Address addr = gade.get(husnrSearch);
114 torben 2298
115 torben 2274 if (addr == null) {
116     return new SearchResult(Status.ERROR_UNKNOWN_ADDRESSPOINT);
117     }
118 torben 2276
119     if (addr.daekningsType == DaekningsType.DAEKNING_IKKEDAEKKET) {
120     return new SearchResult(Status.STATUS_NOT_COVERED);
121     }
122 torben 2277
123     if (addr.distributor.equals("LUKKET")) {
124     return new SearchResult(Status.STATUS_NOT_COVERED); //Skal vi have en special status til Lukkede adresser ?
125 torben 2298 }
126 torben 2288
127 torben 2298 SearchResult res = new SearchResult(addr);
128     res.google = google;
129 torben 2301 res.osm = osm;
130 torben 2298 return res;
131 torben 2267 }
132    
133 torben 2274
134     public void buildSearchStructures() throws SQLException{
135     searchPostnrVejnavnGadeid = new HashMap<Integer, Map<String,Long>>();
136     searchGadeidentAdresser = new HashMap<Long, Map<String,Address>>();
137 torben 2303 helperCache = new ConcurrentHashMap<String,Long>();
138    
139 torben 2309 long start1 = System.currentTimeMillis();
140 torben 2276 System.out.println("Build -- stage 1");
141    
142 torben 2274 alleAdresser = DatabaseLayer.getAllAdresses();
143 torben 2276
144 torben 2286
145 torben 2285 /* Mapper mellem db Row ID og adresse noden */
146     Map<Integer,Address> idAddressMap = new HashMap<Integer,Address>( alleAdresser.size() );
147    
148 torben 2274 for (Address a : alleAdresser) {
149     idAddressMap.put(a.id, a);
150    
151     Map<String,Long> postnrVeje = searchPostnrVejnavnGadeid.get(a.postnr);
152    
153     if (postnrVeje == null) {
154     postnrVeje = new ConcurrentHashMap<String,Long>();
155     searchPostnrVejnavnGadeid.put(a.postnr, postnrVeje);
156     }
157    
158 torben 2281 String vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn);
159     Long gadeident = postnrVeje.get(vasketVejnavn);
160 torben 2274 if (gadeident == null) {
161 torben 2292 //postnrVeje.put(vasketVejnavn, a.gadeid);
162    
163     Set<String> aliaser = findVejAliaser(a.vejnavn);
164     for(String alias : aliaser) {
165     String vasketAlias = AddressUtils.vaskVejnavn(alias);
166     postnrVeje.put(vasketAlias, a.gadeid);
167     }
168    
169 torben 2274 }
170    
171     Map<String, Address> gade = searchGadeidentAdresser.get(a.gadeid);
172     if (gade == null) {
173     gade = new HashMap<String, Address>();
174     searchGadeidentAdresser.put(a.gadeid, gade);
175     }
176     String husnrSearch = "" + a.husnr + a.husnrbogstav;
177 torben 2286 gade.put(husnrSearch, a);
178 torben 2276 }
179    
180    
181 torben 2279 ////////////////////////////////////////////////////////////////////////////////////////
182 torben 2309 long start2 = System.currentTimeMillis();
183     System.out.println("Build, stage1 elapsed: " + (start2-start1) );
184 torben 2279 System.out.println("Build -- stage 2 udvidet dækning");
185    
186     List<ExtendedBean> extDao = DatabaseLayer.getExtendedAdresslist();
187 torben 2276 for (ExtendedBean eb : extDao) {
188 torben 2274
189 torben 2276 Address orgAddress = idAddressMap.get(eb.orgId);
190     if (orgAddress == null)
191     continue;
192    
193     Address targetAddress = idAddressMap.get(eb.targetId);
194     if (targetAddress == null)
195     continue;
196    
197 torben 2277 if (orgAddress.distributor != null && orgAddress.distributor.equals("LUKKET")) {
198     continue;
199     }
200    
201     if (targetAddress.distributor.equals("LUKKET")) {
202     continue;
203     }
204    
205 torben 2276 orgAddress.extTarget = targetAddress;
206     orgAddress.extAfstand = eb.afstand;
207    
208 torben 2283 boolean covered = false;
209     if (targetAddress.distributor.equals("DAO")) {
210     orgAddress.rute = calculateExtendedDaoRoute(eb,orgAddress,targetAddress);
211     if (orgAddress.rute != null) {
212     orgAddress.koreliste = targetAddress.koreliste;
213     covered = true;
214     }
215     }
216 torben 2276
217 torben 2283 if (targetAddress.distributor.equals("BK")) {
218     orgAddress.koreliste = calculateExtendedBkKoreliste(eb,orgAddress,targetAddress);
219     if (orgAddress.koreliste != null) {
220     orgAddress.rute = targetAddress.rute;
221     covered = true;
222     }
223     }
224    
225     if (covered) { //Kopier resten af felterne
226 torben 2276 orgAddress.daekningsType = DaekningsType.DAEKNING_UDVIDET;
227     orgAddress.dbkBane = targetAddress.dbkBane;
228    
229     /* Sådan gør den gamle service */
230     orgAddress.kommunekode = targetAddress.kommunekode;
231     orgAddress.vejkode = targetAddress.vejkode;
232    
233     orgAddress.distributor = targetAddress.distributor;
234     }
235 torben 2274 }
236 torben 2286
237     // nu skal vi ikke bruge idAddressMap længere
238     idAddressMap = null;
239    
240 torben 2279 //////////////////////////////////////////////////////////////////////////////////////
241 torben 2309 long start3 = System.currentTimeMillis();
242     System.out.println("Build, stage2 elapsed: " + (start3-start2) );
243 torben 2279 System.out.println("Build -- stage 3 - 100pct");
244 torben 2274
245 torben 2332 Map<Integer,HundredePctBean> hundredePct = DatabaseLayer.get100PctList();
246 torben 2279 for (Address addr : alleAdresser) {
247 torben 2286 if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {
248 torben 2279 continue;
249     }
250    
251     if (addr.distributor != null && addr.distributor.equals("LUKKET")) {
252     continue;
253     }
254    
255    
256     HundredePctBean bean = hundredePct.get(addr.postnr);
257     if (bean == null) {
258     continue;
259     }
260    
261     addr.daekningsType = DaekningsType.DAEKNING_100PCT;
262     addr.rute = bean.rute;
263     addr.koreliste = bean.koreliste;
264     addr.dbkBane = bean.dbkBane;
265     addr.distributor = bean.distributor;
266     }
267 torben 2276
268 torben 2286 ////////////////////////////////////////////////////////////////////////////////////
269 torben 2309 long stop = System.currentTimeMillis();
270     System.out.println("Build, stage3 elapsed: " + (stop-start3) );
271 torben 2286 System.out.println("Build -- Gathering statistics");
272 torben 2337
273 torben 2286 for (Address addr : alleAdresser) {
274     switch (addr.daekningsType) {
275     case DAEKNING_DIREKTE:
276 torben 2337 stats.direkteCount++;
277 torben 2286 break;
278     case DAEKNING_UDVIDET:
279 torben 2337 stats.extendedCount++;
280 torben 2286 break;
281     case DAEKNING_100PCT:
282 torben 2337 stats.hundredePctCount++;
283 torben 2286 break;
284     default:
285 torben 2337 stats.ikkeDaekketCount++;
286 torben 2286 }
287 torben 2339 }
288 torben 2286
289 torben 2338
290 torben 2339 stats.elapsed = stop-start1;
291     stats.buildTime = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss").format( new Date() );
292    
293 torben 2337 System.out.println("Build: direkteCount: " + stats.direkteCount);
294     System.out.println("Build: extendedCount: " + stats.extendedCount);
295     System.out.println("Build: hundredePctCount: " + stats.hundredePctCount);
296     System.out.println("Build: ikkeDaekketCount: " + stats.ikkeDaekketCount);
297 torben 2286
298 torben 2309 System.out.println("Build: Total Elapsed: " + (stop-start1) );
299 torben 2281 System.out.println("Build Completed");
300    
301 torben 2274 }
302    
303 torben 2337 public DataStatisticsBean getStatistics() {
304     return stats;
305     }
306 torben 2276
307 torben 2337 public void clear() {
308     searchPostnrVejnavnGadeid.clear();
309     searchGadeidentAdresser.clear();
310     alleAdresser.clear();
311     helperCache.clear();
312     }
313    
314    
315 torben 2283 private String calculateExtendedDaoRoute(ExtendedBean eb, Address orgAddress, Address targetAddress) {
316    
317     // ///////////////////////////////////////////////////////////////////
318     switch( eb.transport) {
319     case "cykel":
320     if (eb.afstand < 0.151) {
321     return "." + targetAddress.rute;
322     } else if (eb.afstand < 0.501) {
323     return ".." + targetAddress.rute;
324     } else if (eb.afstand < 0.701) {
325     return "..." + targetAddress.rute;
326     } else if (eb.afstand < 0.501) {
327     return "...." + targetAddress.rute;
328 torben 2276 }
329 torben 2283 break;
330     case "scooter":
331     if (eb.afstand < 0.151) {
332     return "." + targetAddress.rute;
333     } else if (eb.afstand < 0.801) {
334     return ".." + targetAddress.rute;
335     } else if (eb.afstand < 1.201) {
336     return "..." + targetAddress.rute;
337     } else if (eb.afstand < 2.101) {
338     return "...." + targetAddress.rute;
339     }
340     break;
341     case "bil":
342     if (eb.afstand < 0.151) {
343     return "." + targetAddress.rute;
344     } else if (eb.afstand < 1.001) {
345     return ".." + targetAddress.rute;
346     } else if (eb.afstand < 1.601) {
347     return "..." + targetAddress.rute;
348     } else if (eb.afstand < 2.601) {
349     return "...." + targetAddress.rute;
350     }
351 torben 2276 break;
352 torben 2283 }
353 torben 2276 return null;
354 torben 2332 }
355 torben 2276
356 torben 2332 public List<Address> getNonCoveredAddresses() {
357     List<Address> result = new ArrayList<Address>(60000);
358     for (Address a : alleAdresser) {
359     if ( a.daekningsType == DaekningsType.DAEKNING_IKKEDAEKKET) {
360     result.add(a);
361     }
362     }
363 torben 2333 Collections.sort(result );
364 torben 2332 return result;
365     }
366    
367 torben 2283 ///////////////////////////////////////////////////////////
368     private String calculateExtendedBkKoreliste(ExtendedBean eb, Address orgAddress, Address targetAddress) {
369     String inject;
370     if (eb.afstand <= 0.500) {
371     inject = ".";
372     } else {
373     inject = "..";
374     }
375     return AddressUtils.injectIntoBk(targetAddress.koreliste, inject);
376     }
377 torben 2276
378 torben 2292 private Set<String> findVejAliaser(String vejnavn) {
379 torben 2293 vejnavn = vejnavn.toLowerCase();
380 torben 2310 HashSet<String> aliasSet = new HashSet<String>();
381 torben 2292 aliasSet.add(vejnavn);
382    
383 torben 2312 aliasSet.add(vejnavn.replace("u", "ü") );
384     aliasSet.add(vejnavn.replace("ü", "u") );
385    
386 torben 2292 aliasSet.add(vejnavn.replace("alle", "allé") );
387 torben 2310 aliasSet.add(vejnavn.replace("allé", "alle") );
388 torben 2292
389 torben 2295 aliasSet.add(vejnavn.replace("dronningens", "dr") );
390     aliasSet.add(vejnavn.replace("dr.", "dronningens") );
391     aliasSet.add(vejnavn.replace("dr ", "dronningens") );
392    
393     aliasSet.add(vejnavn.replace("kvt", "kvarter") );
394     aliasSet.add(vejnavn.replace("kvarter", "kvt") );
395    
396 torben 2292 aliasSet.add(vejnavn.replace("gl", "gammel") );
397     aliasSet.add(vejnavn.replace("gammel", "gl") );
398    
399     aliasSet.add(vejnavn.replace("lille", "ll") );
400     aliasSet.add(vejnavn.replace("ll ", "lille") );
401     aliasSet.add(vejnavn.replace("ll.", "lille") );
402    
403     aliasSet.add(vejnavn.replace("store", "st") );
404     aliasSet.add(vejnavn.replace("st ", "store") );
405     aliasSet.add(vejnavn.replace("st.", "store") );
406    
407     aliasSet.add(vejnavn.replace("søndre", "sdr") );
408     aliasSet.add(vejnavn.replace("sdr", "søndre") );
409    
410    
411     aliasSet.add(vejnavn.replace("nørre", "nr") );
412     aliasSet.add(vejnavn.replace("nr", "nørre") );
413    
414     aliasSet.add(vejnavn.replace("nordre", "ndr") );
415     aliasSet.add(vejnavn.replace("ndr", "nordre") );
416    
417     aliasSet.add(vejnavn.replace("sankt", "skt") );
418 torben 2310 aliasSet.add(vejnavn.replace("sankt", "sct") );
419 torben 2292 aliasSet.add(vejnavn.replace("skt", "sankt") );
420    
421     aliasSet.add(vejnavn.replace("skt", "sct") );
422 torben 2310 aliasSet.add(vejnavn.replace("sct", "skt") );
423 torben 2292
424 torben 2310 // Opbyg æøå varianter over alle fundne aliaser
425    
426     @SuppressWarnings("unchecked")
427     HashSet<String> variants = (HashSet<String>) aliasSet.clone();
428    
429 torben 2313 for (String vVejnavn : variants) {
430 torben 2310 // danske tegn 1
431     aliasSet.add( vVejnavn.replace("æ", "ae") );
432     aliasSet.add( vVejnavn.replace("ø", "oe") );
433     aliasSet.add( vVejnavn.replace("å", "aa") );
434     aliasSet.add( vVejnavn.replace("ae", "æ") );
435     aliasSet.add( vVejnavn.replace("oe", "ø") );
436     aliasSet.add( vVejnavn.replace("aa", "å") );
437    
438     //danske tegn 2
439     aliasSet.add( vVejnavn.replace("æ", "ae").replace("ø", "oe") );
440     aliasSet.add( vVejnavn.replace("æ", "ae").replace("å", "aa") );
441     aliasSet.add( vVejnavn.replace("ø", "ae").replace("å", "aa") );
442     aliasSet.add( vVejnavn.replace("ae", "æ").replace("oe","ø") );
443     aliasSet.add( vVejnavn.replace("ae", "æ").replace("aa","å") );
444     aliasSet.add( vVejnavn.replace("oe", "ø").replace("aa", "å") );
445    
446     //danske tegn 3
447     aliasSet.add( vejnavn.replace("æ", "ae").replace("ø", "oe").replace("å", "aa") );
448     aliasSet.add( vejnavn.replace("ae", "æ").replace("oe", "ø").replace("aa", "å") );
449     }
450    
451 torben 2292 return aliasSet;
452     }
453 torben 2283
454 torben 2292
455 torben 2267 }

  ViewVC Help
Powered by ViewVC 1.1.20