| 1 |
package dk.daoas.daoadresseservice;
|
| 2 |
|
| 3 |
import java.sql.SQLException;
|
| 4 |
import java.text.SimpleDateFormat;
|
| 5 |
import java.util.ArrayList;
|
| 6 |
import java.util.Collections;
|
| 7 |
import java.util.Date;
|
| 8 |
import java.util.HashMap;
|
| 9 |
import java.util.HashSet;
|
| 10 |
import java.util.List;
|
| 11 |
import java.util.Map;
|
| 12 |
import java.util.Map.Entry;
|
| 13 |
import java.util.Set;
|
| 14 |
import java.util.TreeMap;
|
| 15 |
import java.util.TreeSet;
|
| 16 |
import java.util.concurrent.ConcurrentHashMap;
|
| 17 |
|
| 18 |
import org.apache.commons.lang3.StringUtils;
|
| 19 |
|
| 20 |
import dk.daoas.daoadresseservice.admin.ServiceConfig;
|
| 21 |
import dk.daoas.daoadresseservice.beans.Address;
|
| 22 |
import dk.daoas.daoadresseservice.beans.AliasBean;
|
| 23 |
import dk.daoas.daoadresseservice.beans.DataStatisticsBean;
|
| 24 |
import dk.daoas.daoadresseservice.beans.ExtendedBean;
|
| 25 |
import dk.daoas.daoadresseservice.beans.HundredePctBean;
|
| 26 |
import dk.daoas.daoadresseservice.beans.SearchRequest;
|
| 27 |
import dk.daoas.daoadresseservice.beans.SearchResult;
|
| 28 |
import dk.daoas.daoadresseservice.beans.SearchResult.Status;
|
| 29 |
import dk.daoas.daoadresseservice.db.DatabaseLayer;
|
| 30 |
import dk.daoas.daoadresseservice.util.DaoUtils;
|
| 31 |
import dk.daoas.daoadresseservice.util.DeduplicateHelper;
|
| 32 |
import dk.daoas.daoadresseservice.util.NaturalOrderComparator;
|
| 33 |
import dk.daoas.daoadresseservice.util.NearestShortTreeMap;
|
| 34 |
|
| 35 |
public class AddressSearch {
|
| 36 |
|
| 37 |
private Map<Short, Map<String,Integer>> searchPostnrVejnavnGadeid;
|
| 38 |
private Map<Integer, Map<Short, Map<String,Address>>> searchGadeidentAdresser; // Gadeident -> husnrumre -> litra
|
| 39 |
|
| 40 |
|
| 41 |
private List<Address> alleAdresser;
|
| 42 |
|
| 43 |
private Map<String,Integer> helperCache;
|
| 44 |
|
| 45 |
private DataStatisticsBean stats = new DataStatisticsBean();
|
| 46 |
|
| 47 |
private DatabaseLayer db;
|
| 48 |
private ServiceConfig config;
|
| 49 |
|
| 50 |
|
| 51 |
StreetnameHelper levenshteinHelper;
|
| 52 |
StreetnameHelper metaphoneHelper;
|
| 53 |
StreetnameHelper googleHelper;
|
| 54 |
StreetnameHelper osmHelper;
|
| 55 |
|
| 56 |
|
| 57 |
public AddressSearch(DatabaseLayer db, ServiceConfig config) {
|
| 58 |
|
| 59 |
this.db = db;
|
| 60 |
this.config = config;
|
| 61 |
|
| 62 |
levenshteinHelper = new LevenshteinStreetnameHelper( this );
|
| 63 |
metaphoneHelper = new DoubleMetaphoneStreetnameHelper(config);
|
| 64 |
googleHelper = new GoogleStreetnameHelper( config );
|
| 65 |
osmHelper = new OSMStreetnameHelper( config );
|
| 66 |
}
|
| 67 |
|
| 68 |
public Address getAddressSafe(int gadeid, short husnr, String litra) throws Exception {
|
| 69 |
|
| 70 |
Map<Short, Map<String,Address>> gade = searchGadeidentAdresser.get(gadeid);
|
| 71 |
|
| 72 |
if (gade == null) {
|
| 73 |
throw new Exception("GadeID ikke fundet");
|
| 74 |
}
|
| 75 |
|
| 76 |
Map<String,Address> litraList = gade.get(husnr);
|
| 77 |
|
| 78 |
Address addr = litraList.get(litra);
|
| 79 |
|
| 80 |
if (addr == null) {
|
| 81 |
throw new Exception("Adresse ikke ikke fundet");
|
| 82 |
}
|
| 83 |
|
| 84 |
return addr;
|
| 85 |
}
|
| 86 |
|
| 87 |
|
| 88 |
public SearchResult search(String postnrStr, String adresse) {
|
| 89 |
return search(postnrStr, adresse, false);
|
| 90 |
}
|
| 91 |
|
| 92 |
|
| 93 |
public SearchResult search(String postnrStr, String adresse, boolean naermesteHusnr) {
|
| 94 |
|
| 95 |
postnrStr = postnrStr.trim();
|
| 96 |
adresse = adresse.trim();
|
| 97 |
|
| 98 |
|
| 99 |
SearchRequest request = new SearchRequest();
|
| 100 |
SearchResult result = new SearchResult();
|
| 101 |
|
| 102 |
|
| 103 |
try {
|
| 104 |
request.postnr = Short.parseShort(postnrStr);
|
| 105 |
} catch (Exception E) {
|
| 106 |
result.status = Status.ERROR_UNKNOWN_POSTAL;
|
| 107 |
return result;
|
| 108 |
}
|
| 109 |
|
| 110 |
|
| 111 |
request.streetNames = searchPostnrVejnavnGadeid.get(request.postnr);
|
| 112 |
|
| 113 |
if (request.streetNames == null) {
|
| 114 |
result.status = Status.ERROR_UNKNOWN_POSTAL;
|
| 115 |
return result;
|
| 116 |
}
|
| 117 |
|
| 118 |
|
| 119 |
result.splitResult = AddressUtils.splitAdresse(adresse);
|
| 120 |
request.vejnavn = result.splitResult.vej;
|
| 121 |
|
| 122 |
|
| 123 |
|
| 124 |
if (result.splitResult.husnr.length() == 0) {
|
| 125 |
result.status = Status.ERROR_MISSING_HOUSENUMBER;
|
| 126 |
return result;
|
| 127 |
}
|
| 128 |
|
| 129 |
result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );
|
| 130 |
|
| 131 |
|
| 132 |
if (result.vasketVejnavn.indexOf("pakkebo") > -1
|
| 133 |
|| result.vasketVejnavn.indexOf("pakkepost") > -1
|
| 134 |
|| result.vasketVejnavn.indexOf("postbo") > -1 // postbox/postboks
|
| 135 |
|| result.vasketVejnavn.indexOf("døgnpost") > -1
|
| 136 |
|| result.vasketVejnavn.indexOf("døgnbo") > -1 // døgnbox // døgnboks
|
| 137 |
|| result.vasketVejnavn.equals("id")
|
| 138 |
) {
|
| 139 |
result.status = Status.ERROR_POSTBOX;
|
| 140 |
return result;
|
| 141 |
}
|
| 142 |
|
| 143 |
// LookupStreetname er en indkapsling af alm + levenstein + google + osm
|
| 144 |
Integer gadeident = lookupStretname(request, result, true);
|
| 145 |
|
| 146 |
|
| 147 |
/*
|
| 148 |
* Hvis der ikke er direkte hits, prøver vi at skære ord af vejnavn
|
| 149 |
*
|
| 150 |
* <strike>Denne sektion er MEGET experimental da den øger antallet af kald til google/OSM væsentligt</strike>*/
|
| 151 |
if (gadeident == null) {
|
| 152 |
final int MAX_TRIES = 4;
|
| 153 |
|
| 154 |
String vejnavnParts[] = request.vejnavn.split(" ");
|
| 155 |
|
| 156 |
for (int i=1; i<=MAX_TRIES && i<vejnavnParts.length; i++) {
|
| 157 |
String subVejnavn = DaoUtils.joinHelper(vejnavnParts, i);
|
| 158 |
|
| 159 |
request.vejnavn = subVejnavn;
|
| 160 |
result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );
|
| 161 |
|
| 162 |
gadeident = lookupStretname(request, result, false);//prøv opslag MEN UDEN GOOGLE/OSM !!!
|
| 163 |
|
| 164 |
//hvis vi fandt vejen ud fra substrengen
|
| 165 |
if (gadeident != null) {
|
| 166 |
break;
|
| 167 |
}
|
| 168 |
|
| 169 |
//hvis vi ikke fandt kopierer vi vejnavn fra split igen
|
| 170 |
request.vejnavn = result.splitResult.vej;
|
| 171 |
result.vasketVejnavn = AddressUtils.vaskVejnavn( request.vejnavn );
|
| 172 |
}
|
| 173 |
}
|
| 174 |
|
| 175 |
|
| 176 |
|
| 177 |
if (gadeident == null) {
|
| 178 |
result.status = Status.ERROR_UNKNOWN_STREETNAME;
|
| 179 |
return result;
|
| 180 |
}
|
| 181 |
|
| 182 |
result.gadeident = gadeident;
|
| 183 |
|
| 184 |
|
| 185 |
Map<Short, Map<String,Address>> gade = searchGadeidentAdresser.get(gadeident);
|
| 186 |
if (gade == null) { //Denne søgning må ikke fejle
|
| 187 |
result.status = Status.ERROR_INTERNAL;
|
| 188 |
return result;
|
| 189 |
}
|
| 190 |
|
| 191 |
|
| 192 |
//Kunne evt klares med Iterables.get fra Guava/Collections
|
| 193 |
Address firstAddress = gade.values().iterator().next().values().iterator().next(); //Første husnr -> første litra
|
| 194 |
result.vej = firstAddress.vejnavn;
|
| 195 |
|
| 196 |
short husnrSearch = Short.parseShort(result.splitResult.husnr );
|
| 197 |
Map<String,Address> litraList = gade.get(husnrSearch);
|
| 198 |
|
| 199 |
|
| 200 |
if (litraList == null) { //Husnr ikke fundet
|
| 201 |
|
| 202 |
if (naermesteHusnr) {
|
| 203 |
TreeMap<Short, Map<String,Address>> gadeTreeMap = (TreeMap<Short, Map<String,Address>>) gade;
|
| 204 |
result.anvendtHusnr = NearestShortTreeMap.getNearestKey(husnrSearch, gadeTreeMap);
|
| 205 |
|
| 206 |
result.nearestHusnr = true;
|
| 207 |
litraList = gade.get(result.anvendtHusnr);
|
| 208 |
|
| 209 |
|
| 210 |
} else {
|
| 211 |
result.status = Status.ERROR_UNKNOWN_ADDRESSPOINT;
|
| 212 |
return result;
|
| 213 |
}
|
| 214 |
}
|
| 215 |
|
| 216 |
Address addr = litraList.get( result.splitResult.litra );
|
| 217 |
|
| 218 |
if (addr == null) { //litra ikke fundet
|
| 219 |
if (config.nearestLitra == true) {
|
| 220 |
result.nearestLitra = true;
|
| 221 |
addr = litraList.values().iterator().next();
|
| 222 |
} else {
|
| 223 |
//husnr fundet men litra blev ikke fundet
|
| 224 |
result.status = Status.ERROR_UNKNOWN_ADDRESSPOINT;
|
| 225 |
return result;
|
| 226 |
}
|
| 227 |
}
|
| 228 |
|
| 229 |
result.address = addr;
|
| 230 |
|
| 231 |
|
| 232 |
if ( StringUtils.equals(addr.distributor, "LUKKET") ) {
|
| 233 |
result.status = Status.STATUS_NOT_COVERED; //Skal vi have en special status til Lukkede adresser ?
|
| 234 |
return result;
|
| 235 |
}
|
| 236 |
|
| 237 |
if (addr.daekningsType == DaekningsType.DAEKNING_IKKEDAEKKET) {
|
| 238 |
result.status = Status.STATUS_NOT_COVERED;
|
| 239 |
return result;
|
| 240 |
}
|
| 241 |
|
| 242 |
|
| 243 |
result.status = Status.STATUS_OK;
|
| 244 |
|
| 245 |
return result;
|
| 246 |
}
|
| 247 |
|
| 248 |
|
| 249 |
private Integer lookupStretname(SearchRequest request, SearchResult result, boolean useExternal) {
|
| 250 |
String helperSearchKey = "";
|
| 251 |
|
| 252 |
Integer gadeident = request.streetNames.get(result.vasketVejnavn);
|
| 253 |
|
| 254 |
|
| 255 |
if ( gadeident == null) {
|
| 256 |
helperSearchKey = "" + request.postnr + "/" + result.vasketVejnavn;
|
| 257 |
gadeident = helperCache.get(helperSearchKey);
|
| 258 |
}
|
| 259 |
|
| 260 |
if (gadeident == null) {
|
| 261 |
String vej = levenshteinHelper.proposeStreetName(request, result);
|
| 262 |
if (vej != null) {
|
| 263 |
gadeident = request.streetNames.get(vej);
|
| 264 |
}
|
| 265 |
}
|
| 266 |
|
| 267 |
if (gadeident == null) {
|
| 268 |
String vej = metaphoneHelper.proposeStreetName(request, result);
|
| 269 |
if (vej != null) {
|
| 270 |
gadeident = request.streetNames.get(vej);
|
| 271 |
}
|
| 272 |
}
|
| 273 |
|
| 274 |
|
| 275 |
// Brug OpenStreetMap før vi prøver google
|
| 276 |
// For google har en request limit, det har OSM ikke!
|
| 277 |
if ( gadeident == null && useExternal) {
|
| 278 |
String vej = osmHelper.proposeStreetName(request, result);
|
| 279 |
gadeident = helperWrapper(vej, request.streetNames, helperSearchKey);
|
| 280 |
}
|
| 281 |
|
| 282 |
if ( gadeident == null && useExternal) {
|
| 283 |
String vej = googleHelper.proposeStreetName(request, result);
|
| 284 |
gadeident = helperWrapper(vej, request.streetNames, helperSearchKey);
|
| 285 |
}
|
| 286 |
return gadeident;
|
| 287 |
}
|
| 288 |
|
| 289 |
private Integer helperWrapper(String vej, Map<String,Integer> postnrVeje, String helperSearchKey) {
|
| 290 |
if (vej == null)
|
| 291 |
return null;
|
| 292 |
|
| 293 |
String vejVasket = AddressUtils.vaskVejnavn( vej );
|
| 294 |
Integer gadeident = postnrVeje.get(vejVasket);
|
| 295 |
|
| 296 |
if (gadeident != null) {
|
| 297 |
helperCache.put(helperSearchKey, gadeident);
|
| 298 |
}
|
| 299 |
return gadeident;
|
| 300 |
|
| 301 |
}
|
| 302 |
|
| 303 |
public Map<String,Integer> getStretsByPostal(short zip) {
|
| 304 |
return searchPostnrVejnavnGadeid.get(zip);
|
| 305 |
}
|
| 306 |
|
| 307 |
|
| 308 |
|
| 309 |
public void buildSearchStructures() throws SQLException{
|
| 310 |
searchPostnrVejnavnGadeid = new HashMap<Short, Map<String,Integer>>();
|
| 311 |
searchGadeidentAdresser = new HashMap<Integer, Map<Short, Map<String,Address>>>();
|
| 312 |
helperCache = new ConcurrentHashMap<String,Integer>();
|
| 313 |
|
| 314 |
long start1 = System.currentTimeMillis();
|
| 315 |
System.out.println("Build -- stage 1");
|
| 316 |
|
| 317 |
alleAdresser = db.getAllAdresses();
|
| 318 |
|
| 319 |
|
| 320 |
/* Mapper mellem db Row ID og adresse noden */
|
| 321 |
Map<Integer,Address> idAddressMap = new HashMap<Integer,Address>( alleAdresser.size() );
|
| 322 |
DeduplicateHelper<String> aliasHelper = new DeduplicateHelper<String>();
|
| 323 |
|
| 324 |
DeduplicateHelper<Short> shortHelper = new DeduplicateHelper<Short>();
|
| 325 |
DeduplicateHelper<Integer> intHelper = new DeduplicateHelper<Integer>();
|
| 326 |
|
| 327 |
|
| 328 |
for (Address a : alleAdresser) {
|
| 329 |
idAddressMap.put(a.id, a);
|
| 330 |
|
| 331 |
Short postnr = shortHelper.getInstance(a.postnr);
|
| 332 |
|
| 333 |
Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(postnr);
|
| 334 |
|
| 335 |
if (postnrVeje == null) {
|
| 336 |
postnrVeje = new HashMap<String,Integer>(10240); //lige nu indeholder den største 9500 entries
|
| 337 |
searchPostnrVejnavnGadeid.put(postnr, postnrVeje);
|
| 338 |
}
|
| 339 |
|
| 340 |
|
| 341 |
String vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn);
|
| 342 |
Integer gadeident = postnrVeje.get(vasketVejnavn);
|
| 343 |
if (gadeident == null) {
|
| 344 |
//postnrVeje.put(vasketVejnavn, a.gadeid);
|
| 345 |
|
| 346 |
gadeident = intHelper.getInstance( a.gadeid );
|
| 347 |
|
| 348 |
Set<String> aliaser = findVejAliaser(a.vejnavn);
|
| 349 |
for(String alias : aliaser) {
|
| 350 |
String vasketAlias = AddressUtils.vaskVejnavn(alias);
|
| 351 |
vasketAlias = aliasHelper.getInstance(vasketAlias);
|
| 352 |
|
| 353 |
postnrVeje.put(vasketAlias, gadeident);
|
| 354 |
}
|
| 355 |
|
| 356 |
}
|
| 357 |
|
| 358 |
|
| 359 |
Map<Short, Map<String,Address>> gade = searchGadeidentAdresser.get(gadeident);
|
| 360 |
if (gade == null) {
|
| 361 |
gade = new TreeMap<Short, Map<String,Address>>();
|
| 362 |
searchGadeidentAdresser.put(gadeident, gade);
|
| 363 |
}
|
| 364 |
|
| 365 |
Map<String,Address> litraList = gade.get(a.husnr);
|
| 366 |
if (litraList == null) {
|
| 367 |
litraList = new HashMap<String,Address>();
|
| 368 |
gade.put(a.husnr, litraList);
|
| 369 |
}
|
| 370 |
|
| 371 |
litraList.put(a.husnrbogstav, a);
|
| 372 |
}
|
| 373 |
|
| 374 |
////////////////////////////////////////////////////////////////////////////////////////
|
| 375 |
long start2 = System.currentTimeMillis();
|
| 376 |
System.out.println("Build, stage1 elapsed: " + (start2-start1) );
|
| 377 |
System.out.println("Build -- stage 2 alias tabel");
|
| 378 |
|
| 379 |
int vaskCount = 0;
|
| 380 |
List<AliasBean> aliasList = db.getAliasList();
|
| 381 |
for (AliasBean alias : aliasList) {
|
| 382 |
Map<String,Integer> postnrVeje = searchPostnrVejnavnGadeid.get(alias.postnr);
|
| 383 |
|
| 384 |
if (postnrVeje == null) {
|
| 385 |
//Burde ikke kunne ske - men better safe than sorry
|
| 386 |
continue;
|
| 387 |
}
|
| 388 |
|
| 389 |
String vasketVej = AddressUtils.vaskVejnavn(alias.vejnavn);
|
| 390 |
String vasketAlias = AddressUtils.vaskVejnavn(alias.aliasVejnavn);
|
| 391 |
|
| 392 |
Integer gadeident = postnrVeje.get(vasketVej);
|
| 393 |
if (gadeident == null) {
|
| 394 |
//Kender ikke den oprindelige vej
|
| 395 |
continue;
|
| 396 |
}
|
| 397 |
|
| 398 |
Integer aliasIdent = postnrVeje.get(vasketAlias);
|
| 399 |
|
| 400 |
if (aliasIdent == null) { //Vi kender ikke denne variant af vejnavnet
|
| 401 |
postnrVeje.put(vasketAlias, gadeident);
|
| 402 |
vaskCount++;
|
| 403 |
}
|
| 404 |
|
| 405 |
}
|
| 406 |
System.out.println("Anvendte " + vaskCount + " aliaser fra databasen");
|
| 407 |
|
| 408 |
|
| 409 |
////////////////////////////////////////////////////////////////////////////////////////
|
| 410 |
long start3 = System.currentTimeMillis();
|
| 411 |
System.out.println("Build, stage2 elapsed: " + (start3-start2) );
|
| 412 |
System.out.println("Build -- stage 3 udvidet dækning");
|
| 413 |
|
| 414 |
DeduplicateHelper<String> ruteHelper = new DeduplicateHelper<String>();
|
| 415 |
DeduplicateHelper<String> korelisteHelper = new DeduplicateHelper<String>();
|
| 416 |
|
| 417 |
List<ExtendedBean> extDao = db.getExtendedAdresslist();
|
| 418 |
for (ExtendedBean eb : extDao) {
|
| 419 |
|
| 420 |
Address orgAddress = idAddressMap.get(eb.orgId);
|
| 421 |
if (orgAddress == null)
|
| 422 |
continue;
|
| 423 |
|
| 424 |
if (orgAddress.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {
|
| 425 |
//kan være at adressen er blevet markeret dækket og - find-nærmeste data ikke er opdateret i mellemtiden
|
| 426 |
continue;
|
| 427 |
}
|
| 428 |
|
| 429 |
Address targetAddress = idAddressMap.get(eb.targetId);
|
| 430 |
if (targetAddress == null) {
|
| 431 |
continue;
|
| 432 |
}
|
| 433 |
|
| 434 |
|
| 435 |
if ( StringUtils.equals(orgAddress.distributor, "LUKKET") ) {
|
| 436 |
continue;
|
| 437 |
}
|
| 438 |
|
| 439 |
|
| 440 |
|
| 441 |
if ( StringUtils.equals(targetAddress.distributor, "LUKKET") ) {
|
| 442 |
continue;
|
| 443 |
}
|
| 444 |
|
| 445 |
orgAddress.extTarget = targetAddress;
|
| 446 |
orgAddress.extAfstand = eb.afstand;
|
| 447 |
|
| 448 |
boolean covered = false;
|
| 449 |
if (targetAddress.distributor.equals("DAO")) {
|
| 450 |
orgAddress.rute = calculateExtendedDaoRoute(eb,orgAddress,targetAddress);
|
| 451 |
orgAddress.rute = ruteHelper.getInstance(orgAddress.rute);
|
| 452 |
|
| 453 |
if (orgAddress.rute != null) {
|
| 454 |
orgAddress.koreliste = targetAddress.koreliste;
|
| 455 |
covered = true;
|
| 456 |
}
|
| 457 |
}
|
| 458 |
|
| 459 |
if (targetAddress.distributor.equals("BK")) {
|
| 460 |
orgAddress.koreliste = calculateExtendedBkKoreliste(eb,orgAddress,targetAddress);
|
| 461 |
orgAddress.koreliste = korelisteHelper.getInstance(orgAddress.koreliste);
|
| 462 |
|
| 463 |
if (orgAddress.koreliste != null) {
|
| 464 |
orgAddress.rute = targetAddress.rute;
|
| 465 |
covered = true;
|
| 466 |
}
|
| 467 |
}
|
| 468 |
|
| 469 |
if (covered) { //Kopier resten af felterne
|
| 470 |
orgAddress.daekningsType = DaekningsType.DAEKNING_UDVIDET;
|
| 471 |
orgAddress.dbkBane = targetAddress.dbkBane;
|
| 472 |
|
| 473 |
/* Sådan gør den gamle service */
|
| 474 |
/* 20150520 THN- hvis vi bibeholder de originale kommune+vejkoder kan vi bruge DAVID til join i databasen*/
|
| 475 |
//orgAddress.kommunekode = targetAddress.kommunekode;
|
| 476 |
//orgAddress.vejkode = targetAddress.vejkode;
|
| 477 |
|
| 478 |
|
| 479 |
orgAddress.distributor = targetAddress.distributor;
|
| 480 |
}
|
| 481 |
}
|
| 482 |
|
| 483 |
// nu skal vi ikke bruge idAddressMap længere
|
| 484 |
idAddressMap = null;
|
| 485 |
|
| 486 |
//////////////////////////////////////////////////////////////////////////////////////
|
| 487 |
long start4 = System.currentTimeMillis();
|
| 488 |
System.out.println("Build, stage3 elapsed: " + (start4-start3) );
|
| 489 |
System.out.println("Build -- stage 4 - 100pct");
|
| 490 |
|
| 491 |
Map<Short,HundredePctBean> hundredePct = db.get100PctList();
|
| 492 |
for (Address addr : alleAdresser) {
|
| 493 |
if (addr.daekningsType != DaekningsType.DAEKNING_IKKEDAEKKET) {
|
| 494 |
continue;
|
| 495 |
}
|
| 496 |
|
| 497 |
if (addr.distributor != null && addr.distributor.equals("LUKKET")) {
|
| 498 |
continue;
|
| 499 |
}
|
| 500 |
|
| 501 |
|
| 502 |
HundredePctBean bean = hundredePct.get(addr.postnr);
|
| 503 |
if (bean == null) {
|
| 504 |
continue;
|
| 505 |
}
|
| 506 |
|
| 507 |
addr.daekningsType = DaekningsType.DAEKNING_100PCT;
|
| 508 |
addr.rute = bean.rute;
|
| 509 |
addr.koreliste = bean.koreliste;
|
| 510 |
addr.dbkBane = bean.dbkBane;
|
| 511 |
addr.distributor = bean.distributor;
|
| 512 |
}
|
| 513 |
|
| 514 |
////////////////////////////////////////////////////////////////////////////////////
|
| 515 |
long stop = System.currentTimeMillis();
|
| 516 |
System.out.println("Build, stage4 elapsed: " + (stop-start4) );
|
| 517 |
System.out.println("Build -- Gathering statistics");
|
| 518 |
|
| 519 |
for (Address addr : alleAdresser) {
|
| 520 |
switch (addr.daekningsType) {
|
| 521 |
case DAEKNING_DIREKTE:
|
| 522 |
stats.direkteCount++;
|
| 523 |
break;
|
| 524 |
case DAEKNING_UDVIDET:
|
| 525 |
stats.extendedCount++;
|
| 526 |
break;
|
| 527 |
case DAEKNING_100PCT:
|
| 528 |
stats.hundredePctCount++;
|
| 529 |
break;
|
| 530 |
default:
|
| 531 |
stats.ikkeDaekketCount++;
|
| 532 |
}
|
| 533 |
}
|
| 534 |
stats.totalCount = alleAdresser.size();
|
| 535 |
|
| 536 |
|
| 537 |
stats.elapsed = stop-start1;
|
| 538 |
stats.buildTime = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss").format( new Date() );
|
| 539 |
|
| 540 |
System.out.println("Build: totalCount: " + stats.totalCount);
|
| 541 |
System.out.println("Build: direkteCount: " + stats.direkteCount);
|
| 542 |
System.out.println("Build: extendedCount: " + stats.extendedCount);
|
| 543 |
System.out.println("Build: hundredePctCount: " + stats.hundredePctCount);
|
| 544 |
System.out.println("Build: ikkeDaekketCount: " + stats.ikkeDaekketCount);
|
| 545 |
|
| 546 |
System.out.println("Build: Total Elapsed: " + (stop-start1) );
|
| 547 |
System.out.println("Build Completed");
|
| 548 |
|
| 549 |
}
|
| 550 |
|
| 551 |
public DataStatisticsBean getStatistics() {
|
| 552 |
return stats;
|
| 553 |
}
|
| 554 |
|
| 555 |
public DatabaseLayer getDatabaseLayer() {
|
| 556 |
return db;
|
| 557 |
}
|
| 558 |
|
| 559 |
public void clear() {
|
| 560 |
searchPostnrVejnavnGadeid.clear();
|
| 561 |
searchGadeidentAdresser.clear();
|
| 562 |
alleAdresser.clear();
|
| 563 |
helperCache.clear();
|
| 564 |
}
|
| 565 |
|
| 566 |
|
| 567 |
private String calculateExtendedDaoRoute(ExtendedBean eb, Address orgAddress, Address targetAddress) {
|
| 568 |
if (targetAddress.rute == null) { //hvis targetAdress.rute er null så er adressen ikke dækket alligevel
|
| 569 |
return null;
|
| 570 |
}
|
| 571 |
|
| 572 |
// ///////////////////////////////////////////////////////////////////
|
| 573 |
switch( eb.transport) {
|
| 574 |
case "cykel":
|
| 575 |
if (eb.afstand < 0.151) {
|
| 576 |
return "." + targetAddress.rute;
|
| 577 |
} else if (eb.afstand < 0.501) {
|
| 578 |
return ".." + targetAddress.rute;
|
| 579 |
} else if (eb.afstand < 0.701) {
|
| 580 |
return "..." + targetAddress.rute;
|
| 581 |
} else if (eb.afstand < 1.001) {
|
| 582 |
return "...." + targetAddress.rute;
|
| 583 |
}
|
| 584 |
break;
|
| 585 |
case "scooter":
|
| 586 |
if (eb.afstand < 0.151) {
|
| 587 |
return "." + targetAddress.rute;
|
| 588 |
} else if (eb.afstand < 0.801) {
|
| 589 |
return ".." + targetAddress.rute;
|
| 590 |
} else if (eb.afstand < 1.201) {
|
| 591 |
return "..." + targetAddress.rute;
|
| 592 |
} else if (eb.afstand < 2.101) {
|
| 593 |
return "...." + targetAddress.rute;
|
| 594 |
}
|
| 595 |
break;
|
| 596 |
case "bil":
|
| 597 |
if (eb.afstand < 0.151) {
|
| 598 |
return "." + targetAddress.rute;
|
| 599 |
} else if (eb.afstand < 1.001) {
|
| 600 |
return ".." + targetAddress.rute;
|
| 601 |
} else if (eb.afstand < 1.601) {
|
| 602 |
return "..." + targetAddress.rute;
|
| 603 |
} else if (eb.afstand < 2.601) {
|
| 604 |
return "...." + targetAddress.rute;
|
| 605 |
}
|
| 606 |
break;
|
| 607 |
default:
|
| 608 |
System.out.println("Ukendt transport type: " + eb );
|
| 609 |
}
|
| 610 |
return null;
|
| 611 |
}
|
| 612 |
|
| 613 |
public List<Address> getNonCoveredAddresses() {
|
| 614 |
List<Address> result = new ArrayList<Address>(60000);
|
| 615 |
for (Address a : alleAdresser) {
|
| 616 |
if ( a.daekningsType == DaekningsType.DAEKNING_IKKEDAEKKET) {
|
| 617 |
result.add(a);
|
| 618 |
}
|
| 619 |
}
|
| 620 |
Collections.sort(result );
|
| 621 |
return result;
|
| 622 |
}
|
| 623 |
|
| 624 |
public List<Address> get100PctAddresses() {
|
| 625 |
List<Address> result = new ArrayList<Address>(120000);
|
| 626 |
for (Address a : alleAdresser) {
|
| 627 |
if ( a.daekningsType == DaekningsType.DAEKNING_100PCT) {
|
| 628 |
result.add(a);
|
| 629 |
}
|
| 630 |
}
|
| 631 |
Collections.sort(result );
|
| 632 |
return result;
|
| 633 |
}
|
| 634 |
|
| 635 |
///////////////////////////////////////////////////////////
|
| 636 |
private String calculateExtendedBkKoreliste(ExtendedBean eb, Address orgAddress, Address targetAddress) {
|
| 637 |
String inject;
|
| 638 |
if (eb.afstand <= 0.500) {
|
| 639 |
inject = ".";
|
| 640 |
} else {
|
| 641 |
inject = "..";
|
| 642 |
}
|
| 643 |
return AddressUtils.injectIntoBk(targetAddress.koreliste, inject);
|
| 644 |
}
|
| 645 |
|
| 646 |
private Set<String> findVejAliaser(String vejnavn) {
|
| 647 |
vejnavn = vejnavn.toLowerCase();
|
| 648 |
HashSet<String> aliasSet = new HashSet<String>();
|
| 649 |
aliasSet.add(vejnavn);
|
| 650 |
|
| 651 |
aliasSet.add(vejnavn.replace("alle", "allé") );
|
| 652 |
aliasSet.add(vejnavn.replace("allé", "alle") );
|
| 653 |
|
| 654 |
|
| 655 |
// forkortelser
|
| 656 |
aliasSet.add(vejnavn.replace("dronningens", "dr") );
|
| 657 |
aliasSet.add(vejnavn.replace("dr.", "dronningens") );
|
| 658 |
aliasSet.add(vejnavn.replace("dr ", "dronningens") );
|
| 659 |
|
| 660 |
aliasSet.add(vejnavn.replace("dronning", "dr") );
|
| 661 |
aliasSet.add(vejnavn.replace("dr.", "dronning") );
|
| 662 |
aliasSet.add(vejnavn.replace("dr ", "dronning") );
|
| 663 |
|
| 664 |
aliasSet.add(vejnavn.replace("kng", "kongen") );
|
| 665 |
aliasSet.add(vejnavn.replace("kongen", "kng") );
|
| 666 |
|
| 667 |
aliasSet.add(vejnavn.replace("kvt", "kvarter") );
|
| 668 |
aliasSet.add(vejnavn.replace("kvarter", "kvt") );
|
| 669 |
|
| 670 |
aliasSet.add(vejnavn.replace("gl", "gammel") );
|
| 671 |
aliasSet.add(vejnavn.replace("gammel", "gl") );
|
| 672 |
|
| 673 |
aliasSet.add(vejnavn.replace("gl", "gamle") );
|
| 674 |
aliasSet.add(vejnavn.replace("gamle", "gl") );
|
| 675 |
|
| 676 |
aliasSet.add(vejnavn.replace("lille", "ll") );
|
| 677 |
aliasSet.add(vejnavn.replace("ll ", "lille") );
|
| 678 |
aliasSet.add(vejnavn.replace("ll.", "lille") );
|
| 679 |
|
| 680 |
aliasSet.add(vejnavn.replace("store", "st") );
|
| 681 |
aliasSet.add(vejnavn.replace("st ", "store") );
|
| 682 |
aliasSet.add(vejnavn.replace("st.", "store") );
|
| 683 |
|
| 684 |
aliasSet.add(vejnavn.replace("søndre", "sdr") );
|
| 685 |
aliasSet.add(vejnavn.replace("sdr", "søndre") );
|
| 686 |
aliasSet.add(vejnavn.replace("sønder", "sdr") );
|
| 687 |
aliasSet.add(vejnavn.replace("sdr", "sønder") );
|
| 688 |
|
| 689 |
|
| 690 |
aliasSet.add(vejnavn.replace("nørre", "nr") );
|
| 691 |
aliasSet.add(vejnavn.replace("nr", "nørre") );
|
| 692 |
|
| 693 |
aliasSet.add(vejnavn.replace("nordre", "ndr") );
|
| 694 |
aliasSet.add(vejnavn.replace("ndr", "nordre") );
|
| 695 |
|
| 696 |
|
| 697 |
aliasSet.add(vejnavn.replace("vestre", "vester") );
|
| 698 |
aliasSet.add(vejnavn.replace("vester", "vestre") );
|
| 699 |
|
| 700 |
aliasSet.add(vejnavn.replace("søndre", "sønder") );
|
| 701 |
aliasSet.add(vejnavn.replace("sønder", "søndre") );
|
| 702 |
|
| 703 |
aliasSet.add(vejnavn.replace("østre", "øster") );
|
| 704 |
aliasSet.add(vejnavn.replace("øster", "østre") );
|
| 705 |
|
| 706 |
aliasSet.add(vejnavn.replace("borgmester", "borgm") );
|
| 707 |
aliasSet.add(vejnavn.replace("borgm", "borgmester") );
|
| 708 |
|
| 709 |
|
| 710 |
aliasSet.add(vejnavn.replace("sankt", "skt") );
|
| 711 |
aliasSet.add(vejnavn.replace("sankt", "sct") );
|
| 712 |
aliasSet.add(vejnavn.replace("skt", "sankt") );
|
| 713 |
|
| 714 |
aliasSet.add(vejnavn.replace("skt", "sct") );
|
| 715 |
aliasSet.add(vejnavn.replace("sct", "skt") );
|
| 716 |
|
| 717 |
|
| 718 |
|
| 719 |
// fornavn forkortelser
|
| 720 |
aliasSet.add(vejnavn.replace("john", "j") );
|
| 721 |
aliasSet.add(vejnavn.replace("thomas", "th") );
|
| 722 |
aliasSet.add(vejnavn.replace("thorvald", "th") );
|
| 723 |
aliasSet.add(vejnavn.replace("frederik", "fr") );
|
| 724 |
aliasSet.add(vejnavn.replace("frederiks", "fr") );
|
| 725 |
|
| 726 |
|
| 727 |
aliasSet.add(vejnavn.replace("christian", "chr") );
|
| 728 |
aliasSet.add(vejnavn.replace("christians", "chr") );
|
| 729 |
aliasSet.add(vejnavn.replace("kristian", "kr") );
|
| 730 |
aliasSet.add(vejnavn.replace("kristians", "kr") );
|
| 731 |
|
| 732 |
aliasSet.add(vejnavn.replace("mylius", "myl") );
|
| 733 |
aliasSet.add(vejnavn.replace("myl", "mylius") );
|
| 734 |
|
| 735 |
aliasSet.add(vejnavn.replace("ludvig", "ludv") );
|
| 736 |
aliasSet.add(vejnavn.replace("ludv", "ludvig") );
|
| 737 |
|
| 738 |
|
| 739 |
// alternative stavninger
|
| 740 |
aliasSet.add(vejnavn.replace("peder", "peter") );
|
| 741 |
aliasSet.add(vejnavn.replace("peter", "peder") );
|
| 742 |
|
| 743 |
|
| 744 |
|
| 745 |
// Romertal
|
| 746 |
aliasSet.add(vejnavn.replace("1", "i") );
|
| 747 |
aliasSet.add(vejnavn.replace("i", "1") );
|
| 748 |
|
| 749 |
aliasSet.add(vejnavn.replace("2", "ii") );
|
| 750 |
aliasSet.add(vejnavn.replace("ii", "2") );
|
| 751 |
|
| 752 |
aliasSet.add(vejnavn.replace("3", "iii") );
|
| 753 |
aliasSet.add(vejnavn.replace("iii", "3") );
|
| 754 |
|
| 755 |
aliasSet.add(vejnavn.replace("4", "iv") );
|
| 756 |
aliasSet.add(vejnavn.replace("iv", "4") );
|
| 757 |
|
| 758 |
aliasSet.add(vejnavn.replace("5", "v") );
|
| 759 |
aliasSet.add(vejnavn.replace("v", "5") );
|
| 760 |
|
| 761 |
aliasSet.add(vejnavn.replace("6", "vi") );
|
| 762 |
aliasSet.add(vejnavn.replace("vi", "6") );
|
| 763 |
|
| 764 |
aliasSet.add(vejnavn.replace("7", "vii") );
|
| 765 |
aliasSet.add(vejnavn.replace("vii", "7") );
|
| 766 |
|
| 767 |
aliasSet.add(vejnavn.replace("8", "viii") );
|
| 768 |
aliasSet.add(vejnavn.replace("viii", "8") );
|
| 769 |
|
| 770 |
aliasSet.add(vejnavn.replace("9", "ix") );
|
| 771 |
aliasSet.add(vejnavn.replace("ix", "9") );
|
| 772 |
|
| 773 |
aliasSet.add(vejnavn.replace("10", "x") );
|
| 774 |
aliasSet.add(vejnavn.replace("x", "10") );
|
| 775 |
|
| 776 |
|
| 777 |
//alternative måder at stave vej/gade/alle
|
| 778 |
aliasSet.add(vejnavn.replace("vej", "ve") );
|
| 779 |
aliasSet.add(vejnavn.replace("vej", "vj") );
|
| 780 |
aliasSet.add(vejnavn.replace("vej", "v") );
|
| 781 |
aliasSet.add(vejnavn.replace("vej", "vejen") );
|
| 782 |
aliasSet.add(vejnavn.replace("vejen", "vej") );
|
| 783 |
|
| 784 |
aliasSet.add(vejnavn.replace("v", "vej") );//Vi kan have vejnavne i DB der bare slutter på v istedet for vej
|
| 785 |
|
| 786 |
aliasSet.add(vejnavn.replace("alle", "all") );
|
| 787 |
aliasSet.add(vejnavn.replace("allé", "all") );
|
| 788 |
aliasSet.add(vejnavn.replace("alle", "allú") ); //Fundet i logs.hentruteinfo
|
| 789 |
aliasSet.add(vejnavn.replace("allé", "allú") );
|
| 790 |
|
| 791 |
aliasSet.add(vejnavn.replace("gade", "gaed") ); //Fundet i logs.hentruteinfo
|
| 792 |
aliasSet.add(vejnavn.replace("gade", "gde") );
|
| 793 |
|
| 794 |
aliasSet.add(vejnavn.replace("plads", "pl") );
|
| 795 |
aliasSet.add(vejnavn.replace("vænget", "vænge") );
|
| 796 |
|
| 797 |
aliasSet.add(vejnavn.replace("boulevard", "blvd") );
|
| 798 |
aliasSet.add(vejnavn.replace("blvd", "boulevard") );
|
| 799 |
|
| 800 |
aliasSet.add(vejnavn.replace("boulevard", "boule") );
|
| 801 |
aliasSet.add(vejnavn.replace("boule", "boulevard") );
|
| 802 |
|
| 803 |
aliasSet.add(vejnavn.replace("kronborg", "krbg") ); //Krbg ladegårdsvej, 3000
|
| 804 |
aliasSet.add(vejnavn.replace("krbg", "kronborg") );
|
| 805 |
|
| 806 |
// Opbyg æøå varianter over alle fundne aliaser
|
| 807 |
|
| 808 |
@SuppressWarnings("unchecked")
|
| 809 |
HashSet<String> variants = (HashSet<String>) aliasSet.clone();
|
| 810 |
|
| 811 |
for (String vVejnavn : variants) {
|
| 812 |
// danske tegn 1
|
| 813 |
aliasSet.add( vVejnavn.replace("æ", "ae") );
|
| 814 |
aliasSet.add( vVejnavn.replace("ø", "oe") );
|
| 815 |
aliasSet.add( vVejnavn.replace("å", "aa") );
|
| 816 |
aliasSet.add( vVejnavn.replace("ae", "æ") );
|
| 817 |
aliasSet.add( vVejnavn.replace("oe", "ø") );
|
| 818 |
aliasSet.add( vVejnavn.replace("aa", "å") );
|
| 819 |
|
| 820 |
//danske tegn 2
|
| 821 |
aliasSet.add( vVejnavn.replace("æ", "ae").replace("ø", "oe") );
|
| 822 |
aliasSet.add( vVejnavn.replace("æ", "ae").replace("å", "aa") );
|
| 823 |
aliasSet.add( vVejnavn.replace("ø", "oe").replace("å", "aa") );
|
| 824 |
aliasSet.add( vVejnavn.replace("ae", "æ").replace("oe","ø") );
|
| 825 |
aliasSet.add( vVejnavn.replace("ae", "æ").replace("aa","å") );
|
| 826 |
aliasSet.add( vVejnavn.replace("oe", "ø").replace("aa", "å") );
|
| 827 |
|
| 828 |
//danske tegn 3
|
| 829 |
aliasSet.add( vejnavn.replace("æ", "ae").replace("ø", "oe").replace("å", "aa") );
|
| 830 |
aliasSet.add( vejnavn.replace("ae", "æ").replace("oe", "ø").replace("aa", "å") );
|
| 831 |
|
| 832 |
|
| 833 |
//udenlandsketegn
|
| 834 |
aliasSet.add(vejnavn.replace("u", "ü") );
|
| 835 |
aliasSet.add(vejnavn.replace("ü", "u") );
|
| 836 |
|
| 837 |
aliasSet.add(vejnavn.replace("ä", "æ") );
|
| 838 |
aliasSet.add(vejnavn.replace("æ", "ä") );
|
| 839 |
|
| 840 |
aliasSet.add(vejnavn.replace("ö", "ø") );
|
| 841 |
aliasSet.add(vejnavn.replace("ø", "ö") );
|
| 842 |
}
|
| 843 |
|
| 844 |
return aliasSet;
|
| 845 |
}
|
| 846 |
|
| 847 |
public Set<Short> getPostnumre() {
|
| 848 |
return new TreeSet<Short>( searchPostnrVejnavnGadeid.keySet() );
|
| 849 |
}
|
| 850 |
|
| 851 |
public Set<Entry<String,Integer>> getVejnavne(short postnr) {
|
| 852 |
Map<String,Integer> map = searchPostnrVejnavnGadeid.get(postnr);
|
| 853 |
|
| 854 |
TreeMap<String,Integer> newMap = new TreeMap<String,Integer>( map );//Lav et nyt TreeMap for at sikre sortering
|
| 855 |
|
| 856 |
return newMap.entrySet();
|
| 857 |
}
|
| 858 |
|
| 859 |
public Set<String> getHusnumre(int gadeid) {
|
| 860 |
|
| 861 |
Map<Short,Map<String, Address>> gade = searchGadeidentAdresser.get(gadeid);
|
| 862 |
|
| 863 |
Set<String> set = new TreeSet<String>( new NaturalOrderComparator<String>() );
|
| 864 |
for(Map<String,Address> litraList : gade.values()) {
|
| 865 |
for (Address a: litraList.values()) {
|
| 866 |
set.add( a.husnr + a.husnrbogstav );
|
| 867 |
}
|
| 868 |
}
|
| 869 |
|
| 870 |
return set;
|
| 871 |
}
|
| 872 |
|
| 873 |
public Address getAdresse(int gadeid, String husnrStr) {
|
| 874 |
short husnr = Short.parseShort( husnrStr.replaceAll("[^\\d]","") );
|
| 875 |
String litra = husnrStr.replaceAll("\\d", "");
|
| 876 |
|
| 877 |
Map<Short,Map<String, Address>> gade = searchGadeidentAdresser.get(gadeid);
|
| 878 |
Map<String, Address> litraList = gade.get(husnr);
|
| 879 |
return litraList.get(litra);
|
| 880 |
|
| 881 |
}
|
| 882 |
|
| 883 |
}
|
Parent Directory
| 
Revision Log