/[projects]/dao/DaoAdresseService/src/main/java/dk/daoas/daoadresseservice/AddressSearch.java
ViewVC logotype

Annotation of /dao/DaoAdresseService/src/main/java/dk/daoas/daoadresseservice/AddressSearch.java

Parent Directory Parent Directory | Revision Log Revision Log


Revision 2337 - (hide annotations) (download)
Mon Feb 23 12:30:41 2015 UTC (9 years, 3 months ago) by torben
Original Path: dao/DaoAdresseService/src/dk/daoas/daoadresseservice/AdressSearch.java
File size: 13979 byte(s)
First version of admin page and data reload
1 torben 2267 package dk.daoas.daoadresseservice;
2    
3 torben 2274 import java.sql.SQLException;
4 torben 2332 import java.util.ArrayList;
5 torben 2333 import java.util.Collections;
6 torben 2267 import java.util.HashMap;
7 torben 2292 import java.util.HashSet;
8 torben 2274 import java.util.List;
9     import java.util.Map;
10 torben 2292 import java.util.Set;
11 torben 2274 import java.util.concurrent.ConcurrentHashMap;
12 torben 2267
13 torben 2274 import dk.daoas.daoadresseservice.AddressUtils.SplitResult;
14 torben 2282 import dk.daoas.daoadresseservice.beans.Address;
15 torben 2337 import dk.daoas.daoadresseservice.beans.DataStatisticsBean;
16 torben 2282 import dk.daoas.daoadresseservice.beans.ExtendedBean;
17     import dk.daoas.daoadresseservice.beans.HundredePctBean;
18     import dk.daoas.daoadresseservice.beans.SearchResult;
19     import dk.daoas.daoadresseservice.beans.SearchResult.Status;
20 torben 2274 import dk.daoas.daoadresseservice.db.DatabaseLayer;
21    
22 torben 2267 public class AdressSearch {
23    
24 torben 2332 private Map<Integer, Map<String,Long>> searchPostnrVejnavnGadeid;
25     private Map<Long, Map<String,Address>> searchGadeidentAdresser;
26 torben 2274
27 torben 2332 private List<Address> alleAdresser;
28 torben 2267
29 torben 2332 private Map<String,Long> helperCache;
30 torben 2267
31 torben 2337 private DataStatisticsBean stats = new DataStatisticsBean();
32 torben 2303
33 torben 2280
34 torben 2274 public SearchResult search(String postnrStr, String adresse) {
35 torben 2288
36 torben 2274 int postnr=0;
37 torben 2298 boolean google = false;
38 torben 2301 boolean osm = false;
39 torben 2305 String helperSearchKey = "";
40 torben 2267
41 torben 2274 try {
42     postnr = Integer.parseInt(postnrStr);
43     } catch (Exception E) {
44     return new SearchResult(Status.ERROR_UNKNOWN_POSTAL);
45     }
46    
47     Map<String,Long> postnrVeje = searchPostnrVejnavnGadeid.get(postnr);
48    
49 torben 2267 if (postnrVeje == null) {
50 torben 2274 return new SearchResult(Status.ERROR_UNKNOWN_POSTAL);
51 torben 2267 }
52    
53 torben 2288
54 torben 2274 SplitResult split = AddressUtils.splitAdresse(adresse);
55 torben 2288 String vasketVejnavn = AddressUtils.vaskVejnavn( split.vej );
56 torben 2267
57 torben 2274 if (split.husnr.length() == 0) {
58     return new SearchResult(Status.ERROR_MISSING_HOUSENUMBER);
59     }
60 torben 2267
61 torben 2274 Long gadeident = postnrVeje.get(vasketVejnavn);
62 torben 2301
63 torben 2305
64 torben 2298 if ( gadeident == null) {
65 torben 2305 helperSearchKey = "" + postnr + "/" + vasketVejnavn;
66     gadeident = helperCache.get(helperSearchKey);
67 torben 2301 }
68    
69 torben 2303
70 torben 2301 if ( gadeident == null) {
71 torben 2298 String googleVej = GeocodeHelper.googleHelper(postnr, split.vej );
72 torben 2304 google = true;
73    
74 torben 2300 if (googleVej != null) {
75     String googleVasket = AddressUtils.vaskVejnavn( googleVej );
76     gadeident = postnrVeje.get(googleVasket);
77 torben 2304
78 torben 2303 if (gadeident != null) {
79 torben 2305 helperCache.put(helperSearchKey, gadeident);
80 torben 2303 }
81 torben 2300 }
82 torben 2298 }
83    
84 torben 2303 if ( gadeident == null) {
85     String osmVej = GeocodeHelper.openstreetmapHelper(postnr, split.vej );
86 torben 2304 osm = true;
87    
88 torben 2303 if (osmVej != null) {
89     String osmVasket = AddressUtils.vaskVejnavn( osmVej );
90     gadeident = postnrVeje.get(osmVasket);
91 torben 2304
92 torben 2303 if (gadeident != null) {
93 torben 2305 helperCache.put(helperSearchKey, gadeident);
94 torben 2303 }
95     }
96     }
97    
98 torben 2274 if (gadeident == null) {
99     return new SearchResult(Status.ERROR_UNKNOWN_STREETNAME);
100 torben 2288 }
101 torben 2274
102     Map<String, Address> gade = searchGadeidentAdresser.get(gadeident); //Denne søgning må ikke fejle
103    
104    
105     String husnrSearch = "" + split.husnr + split.litra;
106     Address addr = gade.get(husnrSearch);
107 torben 2298
108 torben 2274 if (addr == null) {
109     return new SearchResult(Status.ERROR_UNKNOWN_ADDRESSPOINT);
110     }
111 torben 2276
112     if (addr.daekningsType == DaekningsType.DAEKNING_IKKEDAEKKET) {
113     return new SearchResult(Status.STATUS_NOT_COVERED);
114     }
115 torben 2277
116     if (addr.distributor.equals("LUKKET")) {
117     return new SearchResult(Status.STATUS_NOT_COVERED); //Skal vi have en special status til Lukkede adresser ?
118 torben 2298 }
119 torben 2288
120 torben 2298 SearchResult res = new SearchResult(addr);
121     res.google = google;
122 torben 2301 res.osm = osm;
123 torben 2298 return res;
124 torben 2267 }
125    
126 torben 2274
127     public void buildSearchStructures() throws SQLException{
128     searchPostnrVejnavnGadeid = new HashMap<Integer, Map<String,Long>>();
129     searchGadeidentAdresser = new HashMap<Long, Map<String,Address>>();
130 torben 2303 helperCache = new ConcurrentHashMap<String,Long>();
131    
132 torben 2309 long start1 = System.currentTimeMillis();
133 torben 2276 System.out.println("Build -- stage 1");
134    
135 torben 2274 alleAdresser = DatabaseLayer.getAllAdresses();
136 torben 2276
137 torben 2286
138 torben 2285 /* Mapper mellem db Row ID og adresse noden */
139     Map<Integer,Address> idAddressMap = new HashMap<Integer,Address>( alleAdresser.size() );
140    
141 torben 2274 for (Address a : alleAdresser) {
142     idAddressMap.put(a.id, a);
143    
144     Map<String,Long> postnrVeje = searchPostnrVejnavnGadeid.get(a.postnr);
145    
146     if (postnrVeje == null) {
147     postnrVeje = new ConcurrentHashMap<String,Long>();
148     searchPostnrVejnavnGadeid.put(a.postnr, postnrVeje);
149     }
150    
151 torben 2281 String vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn);
152     Long gadeident = postnrVeje.get(vasketVejnavn);
153 torben 2274 if (gadeident == null) {
154 torben 2292 //postnrVeje.put(vasketVejnavn, a.gadeid);
155    
156     Set<String> aliaser = findVejAliaser(a.vejnavn);
157     for(String alias : aliaser) {
158     String vasketAlias = AddressUtils.vaskVejnavn(alias);
159     postnrVeje.put(vasketAlias, a.gadeid);
160     }
161    
162 torben 2274 }
163    
164     Map<String, Address> gade = searchGadeidentAdresser.get(a.gadeid);
165     if (gade == null) {
166     gade = new HashMap<String, Address>();
167     searchGadeidentAdresser.put(a.gadeid, gade);
168     }
169     String husnrSearch = "" + a.husnr + a.husnrbogstav;
170 torben 2286 gade.put(husnrSearch, a);
171 torben 2276 }
172    
173    
174 torben 2279 ////////////////////////////////////////////////////////////////////////////////////////
175 torben 2309 long start2 = System.currentTimeMillis();
176     System.out.println("Build, stage1 elapsed: " + (start2-start1) );
177 torben 2279 System.out.println("Build -- stage 2 udvidet dækning");
178    
179     List<ExtendedBean> extDao = DatabaseLayer.getExtendedAdresslist();
180 torben 2276 for (ExtendedBean eb : extDao) {
181 torben 2274
182 torben 2276 Address orgAddress = idAddressMap.get(eb.orgId);
183     if (orgAddress == null)
184     continue;
185    
186     Address targetAddress = idAddressMap.get(eb.targetId);
187     if (targetAddress == null)
188     continue;
189    
190 torben 2277 if (orgAddress.distributor != null && orgAddress.distributor.equals("LUKKET")) {
191     continue;
192     }
193    
194     if (targetAddress.distributor.equals("LUKKET")) {
195     continue;
196     }
197    
198 torben 2276 orgAddress.extTarget = targetAddress;
199     orgAddress.extAfstand = eb.afstand;
200    
201 torben 2283 boolean covered = false;
202     if (targetAddress.distributor.equals("DAO")) {
203     orgAddress.rute = calculateExtendedDaoRoute(eb,orgAddress,targetAddress);
204     if (orgAddress.rute != null) {
205     orgAddress.koreliste = targetAddress.koreliste;
206     covered = true;
207     }
208     }
209 torben 2276
210 torben 2283 if (targetAddress.distributor.equals("BK")) {
211     orgAddress.koreliste = calculateExtendedBkKoreliste(eb,orgAddress,targetAddress);
212     if (orgAddress.koreliste != null) {
213     orgAddress.rute = targetAddress.rute;
214     covered = true;
215     }
216     }
217    
218     if (covered) { //Kopier resten af felterne
219 torben 2276 orgAddress.daekningsType = DaekningsType.DAEKNING_UDVIDET;
220     orgAddress.dbkBane = targetAddress.dbkBane;
221    
222     /* Sådan gør den gamle service */
223     orgAddress.kommunekode = targetAddress.kommunekode;
224     orgAddress.vejkode = targetAddress.vejkode;
225    
226     orgAddress.distributor = targetAddress.distributor;
227     }
228 torben 2274 }
229 torben 2286
230     // nu skal vi ikke bruge idAddressMap længere
231     idAddressMap = null;
232    
233 torben 2279 //////////////////////////////////////////////////////////////////////////////////////
234 torben 2309 long start3 = System.currentTimeMillis();
235     System.out.println("Build, stage2 elapsed: " + (start3-start2) );
236 torben 2279 System.out.println("Build -- stage 3 - 100pct");
237 torben 2274
238 torben 2332 Map<Integer,HundredePctBean> hundredePct = DatabaseLayer.get100PctList();
239 torben 2279 for (Address addr : alleAdresser) {
240 torben 2286 if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {
241 torben 2279 continue;
242     }
243    
244     if (addr.distributor != null && addr.distributor.equals("LUKKET")) {
245     continue;
246     }
247    
248    
249     HundredePctBean bean = hundredePct.get(addr.postnr);
250     if (bean == null) {
251     continue;
252     }
253    
254     addr.daekningsType = DaekningsType.DAEKNING_100PCT;
255     addr.rute = bean.rute;
256     addr.koreliste = bean.koreliste;
257     addr.dbkBane = bean.dbkBane;
258     addr.distributor = bean.distributor;
259     }
260 torben 2276
261 torben 2286 ////////////////////////////////////////////////////////////////////////////////////
262 torben 2309 long stop = System.currentTimeMillis();
263     System.out.println("Build, stage3 elapsed: " + (stop-start3) );
264 torben 2286 System.out.println("Build -- Gathering statistics");
265 torben 2337
266 torben 2286 for (Address addr : alleAdresser) {
267     switch (addr.daekningsType) {
268     case DAEKNING_DIREKTE:
269 torben 2337 stats.direkteCount++;
270 torben 2286 break;
271     case DAEKNING_UDVIDET:
272 torben 2337 stats.extendedCount++;
273 torben 2286 break;
274     case DAEKNING_100PCT:
275 torben 2337 stats.hundredePctCount++;
276 torben 2286 break;
277     default:
278 torben 2337 stats.ikkeDaekketCount++;
279 torben 2286 }
280     }
281    
282 torben 2337 System.out.println("Build: direkteCount: " + stats.direkteCount);
283     System.out.println("Build: extendedCount: " + stats.extendedCount);
284     System.out.println("Build: hundredePctCount: " + stats.hundredePctCount);
285     System.out.println("Build: ikkeDaekketCount: " + stats.ikkeDaekketCount);
286 torben 2286
287 torben 2309 System.out.println("Build: Total Elapsed: " + (stop-start1) );
288 torben 2281 System.out.println("Build Completed");
289    
290 torben 2274 }
291    
292 torben 2337 public DataStatisticsBean getStatistics() {
293     return stats;
294     }
295 torben 2276
296 torben 2337 public void clear() {
297     searchPostnrVejnavnGadeid.clear();
298     searchGadeidentAdresser.clear();
299     alleAdresser.clear();
300     helperCache.clear();
301     }
302    
303    
304 torben 2283 private String calculateExtendedDaoRoute(ExtendedBean eb, Address orgAddress, Address targetAddress) {
305    
306     // ///////////////////////////////////////////////////////////////////
307     switch( eb.transport) {
308     case "cykel":
309     if (eb.afstand < 0.151) {
310     return "." + targetAddress.rute;
311     } else if (eb.afstand < 0.501) {
312     return ".." + targetAddress.rute;
313     } else if (eb.afstand < 0.701) {
314     return "..." + targetAddress.rute;
315     } else if (eb.afstand < 0.501) {
316     return "...." + targetAddress.rute;
317 torben 2276 }
318 torben 2283 break;
319     case "scooter":
320     if (eb.afstand < 0.151) {
321     return "." + targetAddress.rute;
322     } else if (eb.afstand < 0.801) {
323     return ".." + targetAddress.rute;
324     } else if (eb.afstand < 1.201) {
325     return "..." + targetAddress.rute;
326     } else if (eb.afstand < 2.101) {
327     return "...." + targetAddress.rute;
328     }
329     break;
330     case "bil":
331     if (eb.afstand < 0.151) {
332     return "." + targetAddress.rute;
333     } else if (eb.afstand < 1.001) {
334     return ".." + targetAddress.rute;
335     } else if (eb.afstand < 1.601) {
336     return "..." + targetAddress.rute;
337     } else if (eb.afstand < 2.601) {
338     return "...." + targetAddress.rute;
339     }
340 torben 2276 break;
341 torben 2283 }
342 torben 2276 return null;
343 torben 2332 }
344 torben 2276
345 torben 2332 public List<Address> getNonCoveredAddresses() {
346     List<Address> result = new ArrayList<Address>(60000);
347     for (Address a : alleAdresser) {
348     if ( a.daekningsType == DaekningsType.DAEKNING_IKKEDAEKKET) {
349     result.add(a);
350     }
351     }
352 torben 2333 Collections.sort(result );
353 torben 2332 return result;
354     }
355    
356 torben 2283 ///////////////////////////////////////////////////////////
357     private String calculateExtendedBkKoreliste(ExtendedBean eb, Address orgAddress, Address targetAddress) {
358     String inject;
359     if (eb.afstand <= 0.500) {
360     inject = ".";
361     } else {
362     inject = "..";
363     }
364     return AddressUtils.injectIntoBk(targetAddress.koreliste, inject);
365     }
366 torben 2276
367 torben 2292 private Set<String> findVejAliaser(String vejnavn) {
368 torben 2293 vejnavn = vejnavn.toLowerCase();
369 torben 2310 HashSet<String> aliasSet = new HashSet<String>();
370 torben 2292 aliasSet.add(vejnavn);
371    
372 torben 2312 aliasSet.add(vejnavn.replace("u", "ü") );
373     aliasSet.add(vejnavn.replace("ü", "u") );
374    
375 torben 2292 aliasSet.add(vejnavn.replace("alle", "allé") );
376 torben 2310 aliasSet.add(vejnavn.replace("allé", "alle") );
377 torben 2292
378 torben 2295 aliasSet.add(vejnavn.replace("dronningens", "dr") );
379     aliasSet.add(vejnavn.replace("dr.", "dronningens") );
380     aliasSet.add(vejnavn.replace("dr ", "dronningens") );
381    
382     aliasSet.add(vejnavn.replace("kvt", "kvarter") );
383     aliasSet.add(vejnavn.replace("kvarter", "kvt") );
384    
385 torben 2292 aliasSet.add(vejnavn.replace("gl", "gammel") );
386     aliasSet.add(vejnavn.replace("gammel", "gl") );
387    
388     aliasSet.add(vejnavn.replace("lille", "ll") );
389     aliasSet.add(vejnavn.replace("ll ", "lille") );
390     aliasSet.add(vejnavn.replace("ll.", "lille") );
391    
392     aliasSet.add(vejnavn.replace("store", "st") );
393     aliasSet.add(vejnavn.replace("st ", "store") );
394     aliasSet.add(vejnavn.replace("st.", "store") );
395    
396     aliasSet.add(vejnavn.replace("søndre", "sdr") );
397     aliasSet.add(vejnavn.replace("sdr", "søndre") );
398    
399    
400     aliasSet.add(vejnavn.replace("nørre", "nr") );
401     aliasSet.add(vejnavn.replace("nr", "nørre") );
402    
403     aliasSet.add(vejnavn.replace("nordre", "ndr") );
404     aliasSet.add(vejnavn.replace("ndr", "nordre") );
405    
406     aliasSet.add(vejnavn.replace("sankt", "skt") );
407 torben 2310 aliasSet.add(vejnavn.replace("sankt", "sct") );
408 torben 2292 aliasSet.add(vejnavn.replace("skt", "sankt") );
409    
410     aliasSet.add(vejnavn.replace("skt", "sct") );
411 torben 2310 aliasSet.add(vejnavn.replace("sct", "skt") );
412 torben 2292
413 torben 2310 // Opbyg æøå varianter over alle fundne aliaser
414    
415     @SuppressWarnings("unchecked")
416     HashSet<String> variants = (HashSet<String>) aliasSet.clone();
417    
418 torben 2313 for (String vVejnavn : variants) {
419 torben 2310 // danske tegn 1
420     aliasSet.add( vVejnavn.replace("æ", "ae") );
421     aliasSet.add( vVejnavn.replace("ø", "oe") );
422     aliasSet.add( vVejnavn.replace("å", "aa") );
423     aliasSet.add( vVejnavn.replace("ae", "æ") );
424     aliasSet.add( vVejnavn.replace("oe", "ø") );
425     aliasSet.add( vVejnavn.replace("aa", "å") );
426    
427     //danske tegn 2
428     aliasSet.add( vVejnavn.replace("æ", "ae").replace("ø", "oe") );
429     aliasSet.add( vVejnavn.replace("æ", "ae").replace("å", "aa") );
430     aliasSet.add( vVejnavn.replace("ø", "ae").replace("å", "aa") );
431     aliasSet.add( vVejnavn.replace("ae", "æ").replace("oe","ø") );
432     aliasSet.add( vVejnavn.replace("ae", "æ").replace("aa","å") );
433     aliasSet.add( vVejnavn.replace("oe", "ø").replace("aa", "å") );
434    
435     //danske tegn 3
436     aliasSet.add( vejnavn.replace("æ", "ae").replace("ø", "oe").replace("å", "aa") );
437     aliasSet.add( vejnavn.replace("ae", "æ").replace("oe", "ø").replace("aa", "å") );
438     }
439    
440 torben 2292 return aliasSet;
441     }
442 torben 2283
443 torben 2292
444 torben 2267 }

  ViewVC Help
Powered by ViewVC 1.1.20