/[projects]/dao/DaoAdresseService/src/dk/daoas/daoadresseservice/db/DatabaseLayer.java
ViewVC logotype

Diff of /dao/DaoAdresseService/src/dk/daoas/daoadresseservice/db/DatabaseLayer.java

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 2274 by torben, Fri Feb 13 11:48:23 2015 UTC revision 2318 by torben, Tue Feb 17 08:27:13 2015 UTC
# Line 6  import java.sql.ResultSet; Line 6  import java.sql.ResultSet;
6  import java.sql.SQLException;  import java.sql.SQLException;
7  import java.sql.Statement;  import java.sql.Statement;
8  import java.util.ArrayList;  import java.util.ArrayList;
9    import java.util.HashMap;
10  import java.util.List;  import java.util.List;
11    import java.util.Map;
12    
 import dk.daoas.daoadresseservice.Address;  
 import dk.daoas.daoadresseservice.AddressUtils;  
13  import dk.daoas.daoadresseservice.DaekningsType;  import dk.daoas.daoadresseservice.DaekningsType;
14    import dk.daoas.daoadresseservice.beans.Address;
15    import dk.daoas.daoadresseservice.beans.ExtendedBean;
16    import dk.daoas.daoadresseservice.beans.HundredePctBean;
17    import dk.daoas.daoadresseservice.util.DeduplicateHelper;
18    
19  public class DatabaseLayer {  public class DatabaseLayer {
20                    
21          public static List<Address> getAllAdresses() throws SQLException {          public static List<Address> getAllAdresses() throws SQLException {
22                                    
23                  String sql = "SELECT id,vejnavn,husnr,husnrbogstav,kommunekode,vejkode,postnr,gadeid,distributor,dbkbane,koreliste,rute "                  String sql = "SELECT id,vejnavn,husnr,husnrbogstav,kommunekode,vejkode,postnr,gadeid,upper(distributor) AS distributor,dbkbane,koreliste,rute "
24                                  + "FROM fulddaekning.adressetabel "                                  + "FROM fulddaekning.adressetabel "
25                                  + "WHERE postnr BETWEEN 8700 and 8899" //DEBUG only                                  + "WHERE gadeid IS NOT NULL "
26                                    //+ "AND postnr = 8700" //DEBUG only
27                                  ;                                  ;
28                                    
29                  Connection conn = DBConnection.getConnection();                          Connection conn = DBConnection.getConnection();        
30                  Statement stmt = conn.createStatement(java.sql.ResultSet.TYPE_FORWARD_ONLY, java.sql.ResultSet.CONCUR_READ_ONLY);                  Statement stmt = conn.createStatement(java.sql.ResultSet.TYPE_FORWARD_ONLY, java.sql.ResultSet.CONCUR_READ_ONLY);
31                    stmt.setFetchSize(Integer.MIN_VALUE);
32                  ResultSet res = stmt.executeQuery(sql);                  ResultSet res = stmt.executeQuery(sql);
33                                    
34                  List<Address> list = new ArrayList<Address>();                  List<Address> list = new ArrayList<Address>(2600000);//initial capacity 2.6 mio
35                    
36                    DeduplicateHelper<String> vejnavne = new DeduplicateHelper<String>();
37                    DeduplicateHelper<String> distributorer = new DeduplicateHelper<String>();
38    
39                                    
40                  while (res.next()) {                  while (res.next()) {
41                            
42                            // Cache String instanserne for vejnavne for at mindske hukommelses forbruget
43                            String dbVejnavn = res.getString(2);                    
44                            String vejnavn = vejnavne.getInstance(dbVejnavn);
45    
46                            // Cache String instanserne for distributor for at mindske hukommelses forbruget
47                            // (De-dubblicate)
48                            String dbDistributor = res.getString(9);                        
49                            String distributor = distributorer.getInstance(dbDistributor);
50                            
51                          Address a = new Address();                          Address a = new Address();
52                          a.id = res.getInt(1);                          a.id = res.getInt(1);
53                          a.vejnavn = res.getString(2);                          a.vejnavn = vejnavn;
54                          a.husnr = res.getInt(3);                          a.husnr = res.getInt(3);
55                          a.husnrbogstav = res.getString(4);                          a.husnrbogstav = res.getString(4);
56                          a.kommunekode = res.getInt(5);                          a.kommunekode = res.getInt(5);
57                          a.vejkode = res.getInt(6);                          a.vejkode = res.getInt(6);
58                          a.postnr = res.getInt(7);                          a.postnr = res.getInt(7);
59                          a.gadeid = res.getLong(8);                          a.gadeid = res.getLong(8);
60                          a.distributor = res.getString(9);                          a.distributor = distributor;
61                          a.dbkBane = res.getInt(10);                          a.dbkBane = res.getInt(10);
62                          a.koreliste = res.getString(11);                          a.koreliste = res.getString(11);
63                          a.rute = res.getString(12);                          a.rute = res.getString(12);
64                                                    
65                          a.vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn);                          //a.vasketVejnavn = AddressUtils.vaskVejnavn(a.vejnavn);
66                                                    
67                          if (a.rute != null && a.rute.length()> 0) {                          if (a.rute != null && a.rute.length()> 0) {
68                                  a.daekningsType = DaekningsType.DAEKNING_DIREKTE;                                  a.daekningsType = DaekningsType.DAEKNING_DIREKTE;
69                          } else {                          } else {
70                                  a.daekningsType = DaekningsType.DAEKNING_IKKEDAEKKET;                                  a.daekningsType = DaekningsType.DAEKNING_IKKEDAEKKET;
71                          }                          }                      
72                                                    
73                          list.add(a);                          list.add(a);
74                  }                  }
# Line 60  public class DatabaseLayer { Line 80  public class DatabaseLayer {
80                                    
81                  return list;                  return list;
82          }          }
83            
84            public static List<ExtendedBean> getExtendedAdresslist() throws SQLException {
85                    
86                    String sql = "select orgid, a.id as targetid, afstand, LOWER(type) as type from fulddaekning.afstand_anden_rute a " +
87                                            "join odbc.transporttype t " +
88                                            "on t.Art = 'Transpost' " +
89                                            "and ( (t.Type = 'Cykel' and a.Afstand < 1.001) or (t.Type = 'Scooter' and a.Afstand < 1.201) or (t.Type = 'Bil' and a.Afstand < 2.601) ) " +
90                                            "and t.Rute = a.Rute " +
91                                            
92                                            "UNION ALL " +
93                                            
94                                            "SELECT orgid, a.id as targetid, afstand,'' as type FROM  fulddaekning.afstand_anden_rute_bk a " +
95                                            "left join bogleveringer.postnummerdistributor d on d.PostNr = a.orgPostnr " +
96                                            "WHERE d.Distributor <> 10057"
97                                            ;
98                    
99                    Connection conn = DBConnection.getConnection();        
100                    Statement stmt = conn.createStatement(java.sql.ResultSet.TYPE_FORWARD_ONLY, java.sql.ResultSet.CONCUR_READ_ONLY);
101                    stmt.setFetchSize(Integer.MIN_VALUE);
102                    
103                    ResultSet res = stmt.executeQuery(sql);
104                    
105                    DeduplicateHelper<String> transportTyper = new DeduplicateHelper<String>();
106                    
107                    List<ExtendedBean> list = new ArrayList<ExtendedBean>( 350000); //Initial capacity 350K
108                    while (res.next()) {
109                            
110                            String dbTransport = res.getString(4);                  
111                            String transport = transportTyper.getInstance(dbTransport);
112                            
113                            ExtendedBean eb = new ExtendedBean();
114                            eb.orgId = res.getInt(1);
115                            eb.targetId = res.getInt(2);
116                            eb.afstand = res.getDouble(3);
117                            eb.transport = transport;
118                                                    
119                            list.add(eb);
120                    }
121                    
122                    res.close();
123                    stmt.close();
124                    conn.close();
125                    
126                    System.out.println("Loaded " + list.size() + " extendedbeans");
127                    
128                    return list;
129            }
130            
131            public static Map<Integer,HundredePctBean> get100PctList() throws SQLException {
132                    String sql = "SELECT postnr,UPPER(distributor) as distributor,rute,koreliste,dbkbane " +
133                                             "FROM bogleveringer.adresser_udenfor_daekning";
134                    
135                    Connection conn = DBConnection.getConnection();        
136                    Statement stmt = conn.createStatement(java.sql.ResultSet.TYPE_FORWARD_ONLY, java.sql.ResultSet.CONCUR_READ_ONLY);
137                    ResultSet res = stmt.executeQuery(sql);
138    
139                    Map<Integer,HundredePctBean> map = new HashMap<Integer,HundredePctBean>();
140                    
141                    DeduplicateHelper<String> distributorer = new DeduplicateHelper<String>();
142                    
143                    while (res.next()) {
144                            
145                            String dbDistributor = res.getString(2);                        
146                            String distributor = distributorer.getInstance(dbDistributor);
147                            
148                            HundredePctBean bean = new HundredePctBean();
149                            bean.postnr = res.getInt(1);
150                            bean.distributor = distributor;
151                            bean.rute = res.getString(3);
152                            bean.koreliste = res.getString(4);
153                            bean.dbkBane = res.getInt(5);                  
154                                                    
155                            map.put(bean.postnr, bean);
156                    }
157                    
158                    res.close();
159                    stmt.close();
160                    conn.close();
161                    
162                    System.out.println("Loaded " + map.size() + " 100pct beans");
163                    
164                    return map;
165                    
166            }
167            
168  }  }
Legend:
Removed from v.2274  
changed lines
  Added in v.2318
  ViewVC Help
Powered by ViewVC 1.1.20