/[projects]/android/TrainInfoService/src/dk/thoerup/traininfoservice/banedk/DepartureFetcher.java
ViewVC logotype

Diff of /android/TrainInfoService/src/dk/thoerup/traininfoservice/banedk/DepartureFetcher.java

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 389 by torben, Fri Oct 2 17:18:31 2009 UTC revision 829 by torben, Thu Jun 10 22:26:09 2010 UTC
# Line 1  Line 1 
1  package dk.thoerup.traininfoservice.banedk;  package dk.thoerup.traininfoservice.banedk;
2    
 import java.sql.Connection;  
 import java.sql.ResultSet;  
 import java.sql.Statement;  
3  import java.util.ArrayList;  import java.util.ArrayList;
4  import java.util.Collections;  import java.util.Collections;
5  import java.util.List;  import java.util.List;
6    import java.util.Map;
7  import java.util.logging.Logger;  import java.util.logging.Logger;
8    
9    import com.gargoylesoftware.htmlunit.BrowserVersion;
10  import com.gargoylesoftware.htmlunit.WebClient;  import com.gargoylesoftware.htmlunit.WebClient;
11  import com.gargoylesoftware.htmlunit.html.DomNodeList;  import com.gargoylesoftware.htmlunit.html.DomNodeList;
12  import com.gargoylesoftware.htmlunit.html.HtmlElement;  import com.gargoylesoftware.htmlunit.html.HtmlElement;
13  import com.gargoylesoftware.htmlunit.html.HtmlPage;  import com.gargoylesoftware.htmlunit.html.HtmlPage;
14    
15  import dk.thoerup.traininfoservice.DBConnection;  import dk.thoerup.circuitbreaker.CircuitBreaker;
16    import dk.thoerup.circuitbreaker.CircuitBreakerManager;
17    import dk.thoerup.traininfoservice.StationBean;
18    import dk.thoerup.traininfoservice.StationDAO;
19    import dk.thoerup.traininfoservice.Statistics;
20    
21  public class DepartureFetcher {  public class DepartureFetcher {
22                    
23          Logger logger = Logger.getLogger(DepartureFetcher.class.getName());          Logger logger = Logger.getLogger(DepartureFetcher.class.getName());
24                    
25          TimeoutCache<Integer, List<DepartureBean>> cache = new TimeoutCache<Integer,List<DepartureBean>>(120 * 1000);          Map<String, List<DepartureBean>> cache;
26            
27            StationDAO stationDao = new StationDAO();
28            
29            private boolean useTempSite;
30            
31            public DepartureFetcher(boolean tempSite, int cacheTimeout) {
32                    useTempSite = tempSite;
33                    cache = new TimeoutMap<String,List<DepartureBean>>(cacheTimeout);
34            }
35            
36                    
37                                    
38                    
39          public List<DepartureBean> cachedLookupDepartures(int stationID) throws Exception {          public List<DepartureBean> cachedLookupDepartures(int stationID, boolean arrival) throws Exception {
40                    final String key = "" + stationID + ":" + arrival;
41                    
42                    List<DepartureBean> list = cache.get(key);
43    
                 List<DepartureBean> list = cache.get(stationID);  
44                                    
45                  if (list == null) {                  if (list == null) {
46                          list = lookupDepartures(stationID);                          list = lookupDepartures(stationID,arrival);
47                          cache.put(stationID, list);                          cache.put(key, list);
48                  } else {                  } else {
49                          logger.info("Departure: Cache hit " + stationID); //remove before production                          Statistics.getInstance().incrementDepartureCacheHits();
50                            logger.info("Departure: Cache hit " + key); //remove before production
51                  }                  }
52                  return list;                  return list;
53          }          }
54                                    
55    
56          public List<DepartureBean> lookupDepartures(int stationID) throws Exception {          public List<DepartureBean> lookupDepartures(int stationID, boolean arrival) throws Exception {
57                  List<DepartureBean> departureList = new ArrayList<DepartureBean>();                  List<DepartureBean> departureList = new ArrayList<DepartureBean>();
58                                    
59                  Connection conn = null;                  StationBean station = stationDao.getById(stationID);
60                  try                  
61                  {                  if (station.getRegional() != null) {
62                          conn = DBConnection.getConnection();                          List<DepartureBean> list = lookupDepartures(station.getRegional(), "FJRN", arrival);
63                                            departureList.addAll(list);                    
                         String SQL = "SELECT stationcode_fjrn, stationcode_stog FROM trainstations WHERE id=" + stationID;  
                         Statement stmt = conn.createStatement();  
                         ResultSet rs = stmt.executeQuery(SQL);  
                           
                         if (rs.next()) {  
                                 String code = rs.getString( 1 );  
                                 if (! rs.wasNull() ) {  
                                         List<DepartureBean> list = lookupDepartures(code, "FJRN");  
                                         departureList.addAll(list);  
                                 }  
                                   
                                 code = rs.getString(2);  
                                 if (! rs.wasNull() ) {  
                                         List<DepartureBean> list = lookupDepartures(code, "S2");  
                                         departureList.addAll(list);      
                                 }  
                                 Collections.sort( departureList );  
                           
                         }  
                           
                 } finally {  
                         if (conn != null && !conn.isClosed() ) {  
                                 conn.close();  
                         }  
64                  }                  }
65                                    
66                    if (station.getStrain() != null) {
67                            List<DepartureBean> list = lookupDepartures(station.getStrain(), "S2", arrival);
68                            departureList.addAll(list);    
69                    }              
70                    
71                    Collections.sort( departureList );
72    
73                    
74                  return departureList;                  return departureList;
75          }          }
76                    
77          public List<DepartureBean> lookupDepartures(String stationcode, String type) throws Exception {          public List<DepartureBean> lookupDepartures(String stationcode, String type, boolean arrival) throws Exception {
78                    if (useTempSite == false) {
79                            return lookupDeparturesNormalSite(stationcode, type, arrival);
80                    } else {
81                            return lookupDeparturesFromTemporarySite(stationcode, type);
82                    }
83            }
84            
85            public List<DepartureBean> lookupDeparturesNormalSite(String stationcode, String type, boolean arrival) throws Exception {
86                                    
87                  List<DepartureBean> departureList = new ArrayList<DepartureBean>();                  List<DepartureBean> departureList = new ArrayList<DepartureBean>();
88                                    
89              final WebClient webClient = new WebClient();              final WebClient webClient = new WebClient( BrowserVersion.FIREFOX_3 );
90              webClient.setTimeout(2500);              webClient.setTimeout(2500);
91              webClient.setJavaScriptEnabled(false);              webClient.setJavaScriptEnabled(false);
92                                                            
93                String uri = "http://www.bane.dk/visStation.asp?ArtikelID=4275&W=" + type + "&S=" + stationcode;
94                BanedkInvocation wrapper = new BanedkInvocation(webClient, uri);
95                CircuitBreaker breaker = CircuitBreakerManager.getManager().getCircuitBreaker("banedk");
96                
97                HtmlPage page = (HtmlPage) breaker.invoke(wrapper);
98                            
99              final HtmlPage page = webClient.getPage("http://www.bane.dk/visStation.asp?ArtikelID=4275&W=" + type + "&S=" + stationcode);              String tableName = arrival == false ? "afgangtabel" : "ankomsttabel";
100                            
101              HtmlElement table = page.getElementById("afgangtabel");              System.out.println(uri);
102                System.out.println(tableName);
103                
104                HtmlElement table = page.getElementById(tableName);
105                            
106              if (table != null) {              if (table != null) {
107                      DomNodeList<HtmlElement> tableRows =  table.getElementsByTagName("tr");                      DomNodeList<HtmlElement> tableRows =  table.getElementsByTagName("tr");
# Line 107  public class DepartureFetcher { Line 122  public class DepartureFetcher {
122                                  departure.setUpdated(updated);                                  departure.setUpdated(updated);
123                                                                    
124                                  String trainNumber = fields.get(2).asText();                                  String trainNumber = fields.get(2).asText();
125                                  if (trainNumber.trim().length() == 1)                                  if (type.equalsIgnoreCase("S2")) //If it is S-train we need to extract the trainNumber
126                                          trainNumber = trainNumber + " " + extractTrainNumber(fields.get(2));                                          trainNumber = trainNumber + " " + extractTrainNumber(fields.get(2));
127                                  departure.setTrainNumber(trainNumber);                                  departure.setTrainNumber(trainNumber);
128                                                                    
# Line 126  public class DepartureFetcher { Line 141  public class DepartureFetcher {
141                                  String note = extractNote( fields.get(7) );                                  String note = extractNote( fields.get(7) );
142                                  departure.setNote(note);                                  departure.setNote(note);
143                                                                    
144                                    departure.setType(type);
145                                    
146                                  departureList.add(departure);                                  departureList.add(departure);
147                          }                          }
148                      }                      }
149              } else {              } else {
150                  logger.warning("No departures found for station=" + stationcode + ", type=" + type);                  logger.warning("No departures found for station=" + stationcode + ", type=" + type);
151              }              }
152                webClient.closeAllWindows();
153                
154                return departureList;
155            }
156            
157            public List<DepartureBean> lookupDeparturesFromTemporarySite(String stationcode, String type) throws Exception {
158                    
159                    List<DepartureBean> departureList = new ArrayList<DepartureBean>();
160                    
161                final WebClient webClient = new WebClient(BrowserVersion.FIREFOX_3);
162                webClient.setTimeout(2500);
163                webClient.setJavaScriptEnabled(false);
164                
165    
166                String uri = "http://bane.dk/lite/station.asp?w=" + type + "&s=" + stationcode;
167                
168                BanedkInvocation wrapper = new BanedkInvocation(webClient, uri);
169                CircuitBreaker breaker = CircuitBreakerManager.getManager().getCircuitBreaker("banedk");
170                
171                HtmlPage page = (HtmlPage) breaker.invoke(wrapper);
172                
173                HtmlElement table = page.getElementById("traf_afgang");
174                
175                if (table != null) {                        
176                        DomNodeList<HtmlElement> tableRows =  table.getElementsByTagName("tr");
177                        
178                        boolean isFirst = true;
179                        
180                        for (HtmlElement currentRow : tableRows) {
181                            if (isFirst == true) { //skip table headers
182                                    isFirst = false;
183                                    continue;
184                            }
185                            
186                            DomNodeList<HtmlElement> fields = currentRow.getElementsByTagName("td");
187    
188                            DepartureBean departure = new DepartureBean();
189    
190                            String time = fields.get(0).asText().trim();
191    
192                            if (time.equals(""))
193                                    time = "0:00"; //Bane.dk bug work-around
194                            departure.setTime(time);
195    
196    
197                            String trainNumber = fields.get(1).asText();
198                            departure.setTrainNumber(trainNumber);
199    
200                            String destination = fields.get(2).asText();
201                            departure.setDestination(destination);
202    
203                            String origin = fields.get(3).asText();
204                            departure.setOrigin(origin);
205    
206                            String status = fields.get(4).asText();
207                            departure.setStatus(status);
208    
209                            String note = fields.get(5).asText();
210                            departure.setNote(note);
211    
212                            departureList.add(departure);
213                        }
214                } else {
215                    logger.warning("No departures found for station=" + stationcode + ", type=" + type);
216                }
217                webClient.closeAllWindows();
218                
219                            
220              return departureList;              return departureList;
221          }          }
222    
223                    
224          private int extractUpdated(HtmlElement updatedTd) { //extract the digit (in this case: 4) from "media/trafikinfo/opdater4.gif"          private int extractUpdated(HtmlElement updatedTd) { //extract the digit (in this case: 4) from "media/trafikinfo/opdater4.gif"
225                  int updated = -1;                  int updated = -1;
# Line 179  public class DepartureFetcher { Line 264  public class DepartureFetcher {
264                  }                  }
265                                    
266                                    
                   
267                  return number;                  return number;
268          }          }
269                    
270          //test          //test
271          public static void main(String args[]) throws Exception{          /*
272            public static void main(String args[]) throws Exception {
273                  DepartureFetcher f = new DepartureFetcher();                  DepartureFetcher f = new DepartureFetcher();
274                  List<DepartureBean> deps = f.lookupDepartures("AR", "FJRN");                  List<DepartureBean> deps = f.lookupDepartures("AR", "FJRN");
275                  for(DepartureBean d : deps) {                  for(DepartureBean d : deps) {
# Line 193  public class DepartureFetcher { Line 278  public class DepartureFetcher {
278                  }                  }
279                                    
280                  System.out.println("--------------------------");                  System.out.println("--------------------------");
281          }          }*/
282  }  }
Legend:
Removed from v.389  
changed lines
  Added in v.829
  ViewVC Help
Powered by ViewVC 1.1.20