/[projects]/dao/DaoAdresseService/src/dk/daoas/daoadresseservice/db/DatabaseLayer.java
ViewVC logotype

Diff of /dao/DaoAdresseService/src/dk/daoas/daoadresseservice/db/DatabaseLayer.java

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 2283 by torben, Fri Feb 13 15:45:24 2015 UTC revision 2320 by torben, Tue Feb 17 08:58:41 2015 UTC
# Line 14  import dk.daoas.daoadresseservice.Daekni Line 14  import dk.daoas.daoadresseservice.Daekni
14  import dk.daoas.daoadresseservice.beans.Address;  import dk.daoas.daoadresseservice.beans.Address;
15  import dk.daoas.daoadresseservice.beans.ExtendedBean;  import dk.daoas.daoadresseservice.beans.ExtendedBean;
16  import dk.daoas.daoadresseservice.beans.HundredePctBean;  import dk.daoas.daoadresseservice.beans.HundredePctBean;
17    import dk.daoas.daoadresseservice.util.DeduplicateHelper;
18    
19  public class DatabaseLayer {  public class DatabaseLayer {
20                    
# Line 21  public class DatabaseLayer { Line 22  public class DatabaseLayer {
22                                    
23                  String sql = "SELECT id,vejnavn,husnr,husnrbogstav,kommunekode,vejkode,postnr,gadeid,upper(distributor) AS distributor,dbkbane,koreliste,rute "                  String sql = "SELECT id,vejnavn,husnr,husnrbogstav,kommunekode,vejkode,postnr,gadeid,upper(distributor) AS distributor,dbkbane,koreliste,rute "
24                                  + "FROM fulddaekning.adressetabel "                                  + "FROM fulddaekning.adressetabel "
25                                  //+ "WHERE postnr >=2000" //DEBUG only                                  + "WHERE gadeid IS NOT NULL "
26                                    //+ "AND postnr = 8700" //DEBUG only
27                                  ;                                  ;
28                                    
29                  Connection conn = DBConnection.getConnection();                          Connection conn = DBConnection.getConnection();        
30                  Statement stmt = conn.createStatement(java.sql.ResultSet.TYPE_FORWARD_ONLY, java.sql.ResultSet.CONCUR_READ_ONLY);                  Statement stmt = conn.createStatement(java.sql.ResultSet.TYPE_FORWARD_ONLY, java.sql.ResultSet.CONCUR_READ_ONLY);
31                    stmt.setFetchSize(Integer.MIN_VALUE);
32                  ResultSet res = stmt.executeQuery(sql);                  ResultSet res = stmt.executeQuery(sql);
33                                    
34                  List<Address> list = new ArrayList<Address>();                  List<Address> list = new ArrayList<Address>(2600000);//initial capacity 2.6 mio
35                    
36                    DeduplicateHelper<String> vejnavnCache = new DeduplicateHelper<String>();
37                    DeduplicateHelper<String> distributorCache = new DeduplicateHelper<String>();
38                    DeduplicateHelper<String> korelisteCache = new DeduplicateHelper<String>();
39                    DeduplicateHelper<String> ruteCache = new DeduplicateHelper<String>();
40    
41                                    
42                  while (res.next()) {                  while (res.next()) {
43                            
44                          Address a = new Address();                          Address a = new Address();
45                          a.id = res.getInt(1);                          a.id = res.getInt(1);
46                          a.vejnavn = res.getString(2);                          a.vejnavn = vejnavnCache.getInstance( res.getString(2) );
47                          a.husnr = res.getInt(3);                          a.husnr = res.getInt(3);
48                          a.husnrbogstav = res.getString(4);                          a.husnrbogstav = res.getString(4);
49                          a.kommunekode = res.getInt(5);                          a.kommunekode = res.getInt(5);
50                          a.vejkode = res.getInt(6);                          a.vejkode = res.getInt(6);
51                          a.postnr = res.getInt(7);                          a.postnr = res.getInt(7);
52                          a.gadeid = res.getLong(8);                          a.gadeid = res.getLong(8);
53                          a.distributor = res.getString(9);                          a.distributor = distributorCache.getInstance(res.getString(9));
54                          a.dbkBane = res.getInt(10);                          a.dbkBane = res.getInt(10);
55                          a.koreliste = res.getString(11);                          a.koreliste = korelisteCache.getInstance( res.getString(11) );
56                          a.rute = res.getString(12);                          a.rute = ruteCache.getInstance( res.getString(12) );
57                                                    
58                          //a.vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn);                          //a.vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn);
59                                                    
# Line 65  public class DatabaseLayer { Line 75  public class DatabaseLayer {
75          }          }
76                    
77          public static List<ExtendedBean> getExtendedAdresslist() throws SQLException {          public static List<ExtendedBean> getExtendedAdresslist() throws SQLException {
78                    
79                  String sql = "select orgid, a.id as targetid, afstand, LOWER(type) as type from fulddaekning.afstand_anden_rute a " +                  String sql = "select orgid, a.id as targetid, afstand, LOWER(type) as type from fulddaekning.afstand_anden_rute a " +
80                                          "join odbc.transporttype t " +                                          "join odbc.transporttype t " +
81                                          "on t.Art = 'Transpost' " +                                          "on t.Art = 'Transpost' " +
# Line 80  public class DatabaseLayer { Line 91  public class DatabaseLayer {
91                                    
92                  Connection conn = DBConnection.getConnection();                          Connection conn = DBConnection.getConnection();        
93                  Statement stmt = conn.createStatement(java.sql.ResultSet.TYPE_FORWARD_ONLY, java.sql.ResultSet.CONCUR_READ_ONLY);                  Statement stmt = conn.createStatement(java.sql.ResultSet.TYPE_FORWARD_ONLY, java.sql.ResultSet.CONCUR_READ_ONLY);
94                    stmt.setFetchSize(Integer.MIN_VALUE);
95                    
96                  ResultSet res = stmt.executeQuery(sql);                  ResultSet res = stmt.executeQuery(sql);
97                                    
98                  List<ExtendedBean> list = new ArrayList<ExtendedBean>();                  DeduplicateHelper<String> transportCache = new DeduplicateHelper<String>();
99                  while (res.next()) {                  
100                    List<ExtendedBean> list = new ArrayList<ExtendedBean>( 350000); //Initial capacity 350K
101                    while (res.next()) {            
102                            
103                          ExtendedBean eb = new ExtendedBean();                          ExtendedBean eb = new ExtendedBean();
104                          eb.orgId = res.getInt(1);                          eb.orgId = res.getInt(1);
105                          eb.targetId = res.getInt(2);                          eb.targetId = res.getInt(2);
106                          eb.afstand = res.getDouble(3);                          eb.afstand = res.getDouble(3);
107                          eb.transport = res.getString(4);                          eb.transport = transportCache.getInstance(res.getString(4));
108                                                                                                    
109                          list.add(eb);                          list.add(eb);
110                  }                  }
# Line 112  public class DatabaseLayer { Line 128  public class DatabaseLayer {
128    
129                  Map<Integer,HundredePctBean> map = new HashMap<Integer,HundredePctBean>();                  Map<Integer,HundredePctBean> map = new HashMap<Integer,HundredePctBean>();
130                                    
131                    DeduplicateHelper<String> distributorCache = new DeduplicateHelper<String>();
132                    
133                  while (res.next()) {                  while (res.next()) {
134                                                    
135                            
136                          HundredePctBean bean = new HundredePctBean();                          HundredePctBean bean = new HundredePctBean();
137                          bean.postnr = res.getInt(1);                          bean.postnr = res.getInt(1);
138                          bean.distributor = res.getString(2);                          bean.distributor = distributorCache.getInstance(res.getString(2));
139                          bean.rute = res.getString(3);                          bean.rute = res.getString(3);
140                          bean.koreliste = res.getString(4);                          bean.koreliste = res.getString(4);
141                          bean.dbkBane = res.getInt(5);                                            bean.dbkBane = res.getInt(5);                  
# Line 128  public class DatabaseLayer { Line 147  public class DatabaseLayer {
147                  stmt.close();                  stmt.close();
148                  conn.close();                  conn.close();
149                                    
150                  System.out.println("Loaded " + map.size() + " extendedbeans");                  System.out.println("Loaded " + map.size() + " 100pct beans");
151                                    
152                  return map;                  return map;
153                                    
Legend:
Removed from v.2283  
changed lines
  Added in v.2320
  ViewVC Help
Powered by ViewVC 1.1.20