Java實時獲取基金收益項目源碼分享
本文章向大傢介紹JAVA爬取天天基金網數據,主要包括JAVA爬取天天基金網數據使用實例、應用技巧、基本知識點總結和需要註意事項,具有一定的參考價值,需要的朋友可以參考一下。
天天基金網網址:http://quote.eastmoney.com/center/gridlist.html#fund_lof
Java爬蟲實時獲取基金收益歷史記錄代碼:
首先要自己定義幾個參數:基金編碼,頁數,每頁顯示條數 開始時間結束時間等
(我這直接寫的靜態方法使用的 大傢可以改成Test方法自行進行測試)
/** * httClient 請求 GET * 獲取基金網數據1 */ public static JSONArray testDepartmentList1(String code){ Integer pageIndex = 1; Integer pageSize=20; String startTime="2018-1-1"; String endTime = "2020-4-15"; String referer = "http://fundf10.eastmoney.com/f10/jjjz_" + code + ".html"; long time = System.currentTimeMillis(); String url = "http://api.fund.eastmoney.com/f10/lsjz?callback=jQuery18306596328894644803_1571038362181&" + "fundCode=%s&pageIndex=%s&pageSize=%s&startDate=%s&endDate=%s&_=%s"; url = String.format(url,code,pageIndex,pageSize,startTime,endTime,time); System.out.println("url= " + url); System.out.println(url); HttpRequest request = HttpUtil.createGet(url); request.header("Referer", referer); String str = request.execute().body(); //獲取str的長度 System.out.println("str=" + str); int length = str.length(); System.out.println("length=" + length); //indexOf返回某個指定的字符串值在字符串中首次出現的位置 int indexStart = str.indexOf("("); System.out.println(indexStart); //截取字符串 str = str.substring(indexStart + 9, length - 90); System.out.println(str); //轉換為Obj類型 JSONObject jsonObject = JSON.parseObject(str); System.out.println(jsonObject); //獲取數組 JSONArray jsonArray = jsonObject.getJSONArray("LSJZList"); //計算數組的長度 int size = jsonArray.size(); System.out.println(size); return jsonArray; }
通過基金編碼查詢基金名稱
(由於基金網url裡面的信息隻有基金編號跟漲跌幅日期等 沒有基金名稱 我們通過基金網的查詢功能自行填充基金編碼進行查詢)
/** * httClient 請求 GET * 獲取基金網數據2 */ @Test public static String testDepartmentList2(String code) { //數據鏈接 String referer = "http://so.eastmoney.com/web/s?keyword="+code+""; long time = System.currentTimeMillis(); String url = "http://push2.eastmoney.com/api/qt/stock/get?ut=fa5fd1943c7b386f172d6893dbfba10b&fltt" + "=2&fields=f59,f169,f170,f161,f163,f171,f126,f168,f164,f78,f162,f43,f46,f44,f45,f60,f47," + "f48,f49,f84,f116,f55,f92,f71,f50,f167,f117,f85,f84,f58,f57,f86,f172,f108,f118,f107,f164," + "f177&invt=2&secid=0."+code+"&cb=jQuery1124006112441213993569_1587006450385&_=1587006450403"; url = String.format(url,code); System.out.println("請求url:" + url); //http請求 HttpRequest request = HttpUtil.createGet(url); request.header("Referer", referer); String str = request.execute().body(); //獲取str的長度 System.out.println("str=" + str); int length = str.length(); System.out.println("length=" + length); //indexOf返回某個指定的字符串值在字符串中首次出現的位置 int i = str.indexOf("("); System.out.println(i); //截取字符串 str = str.substring(i + 55, length - 3); System.out.println(str); //轉換為Obj類型 JSONObject jsonObject = JSON.parseObject(str); System.out.println(jsonObject); String fundName = jsonObject.getString("f58"); return fundName; }
java實時獲取基金收益
業務層實現:(主要功能:用戶輸入基金編號查詢某個基金時如果數據庫沒有,自動從天天基金網爬取數據存儲到數據庫並顯示到頁面上)
顯示的數據分別有:基金編號 基金日期 基金名稱 實際價格 每日漲跌幅
@Override public List<FundHistory> query(String fundCode) { List<FundHistory> query = fundHistoryDao.query(fundCode); if (query.size()==0) { JSONArray jsonArray = testDepartmentList1(fundCode); System.out.println(jsonArray); //計算數組的長度 int size = jsonArray.size(); System.out.println(size); //for循環遍歷 for (int j = 0; j < size; j++) { JSONObject jsonObject1 = jsonArray.getJSONObject(j); //獲取凈值日期 String date = jsonObject1.getString("FSRQ"); //獲取單位凈值 Double unit = jsonObject1.getDouble("DWJZ"); //獲取累積凈值 Double Accumulates = jsonObject1.getDouble("LJJZ"); //獲取日增長率 String growthRate = jsonObject1.getString("JZZZL"); //創建時間 DateTime dateTime = new DateTime(); //獲取創建時間 String datetime = String.valueOf(dateTime); FundHistory fundHistory = new FundHistory(); fundHistory.setFundCode(fundCode); fundHistory.setDate(date); fundHistory.setUnit(unit); fundHistory.setAccumulates(Accumulates); fundHistory.setGrowthRate(growthRate); fundHistory.setCreateTime(datetime); fundHistoryDao.saveFundHistory(fundHistory); } FundHistory fundHistory = new FundHistory(); fundHistory.setFundCode(fundCode); //獲取基金名稱 String fundName = testDepartmentList2(fundCode); fundHistory.setFundName(fundName); fundHistoryDao.updateFundHistory(fundHistory); List<FundHistory> query2 = fundHistoryDao.query(fundCode); FundHistory fundHistory1 = query2.get(0); fundDao.saveFund2(fundHistory1); return query2; } return query; }
controller層
/** * 基金頁面數據交互 * @param * @return */ @RequestMapping("/enquiryfund") @ResponseBody public Result enquiryfund(String fundCode,String fundName){ Result result = new Result<>(); if (fundCode!=""){ List<FundHistory> query = fundHistoryService.query(fundCode); if (query==null){ List<FundHistory> query2 = fundHistoryService.query(fundCode); result.setData(query2); return result; } result.setData(query); return result; }else if (fundName!=""){ List<FundHistory> fundHistories = fundHistoryService.query2(fundName); result.setData(fundHistories); return result; } return result; }
java實時獲取基金收益項目運行效果如圖:
(根據基金編號進行查詢基金 如果數據庫沒有則自動從天天基金網拉取數據並顯示到頁面上 共拉取20條歷史數據)
/** * httClient 請求 GET * 獲取基金網數據1 */ public static JSONArray testDepartmentList1(String code){ Integer pageIndex = 1; Integer pageSize=20; String startTime="2018-1-1"; String endTime = "2020-4-15"; String referer = "http://fundf10.eastmoney.com/f10/jjjz_" + code + ".html"; long time = System.currentTimeMillis(); String url = "http://api.fund.eastmoney.com/f10/lsjz?callback=jQuery18306596328894644803_1571038362181&" + "fundCode=%s&pageIndex=%s&pageSize=%s&startDate=%s&endDate=%s&_=%s"; url = String.format(url,code,pageIndex,pageSize,startTime,endTime,time); System.out.println("url= " + url); System.out.println(url); HttpRequest request = HttpUtil.createGet(url); request.header("Referer", referer); String str = request.execute().body(); //獲取str的長度 System.out.println("str=" + str); int length = str.length(); System.out.println("length=" + length); //indexOf返回某個指定的字符串值在字符串中首次出現的位置 int indexStart = str.indexOf("("); System.out.println(indexStart); //截取字符串 str = str.substring(indexStart + 9, length - 90); System.out.println(str); //轉換為Obj類型 JSONObject jsonObject = JSON.parseObject(str); System.out.println(jsonObject); //獲取數組 JSONArray jsonArray = jsonObject.getJSONArray("LSJZList"); //計算數組的長度 int size = jsonArray.size(); System.out.println(size); return jsonArray; }
這就是我為大傢分享的Java實時獲取基金收益項目源碼,希望對大傢有幫助哈~~~
到此這篇關於Java實時獲取基金收益項目源碼分享的文章就介紹到這瞭,更多相關Java獲取基金收益內容請搜索WalkonNet以前的文章或繼續瀏覽下面的相關文章希望大傢以後多多支持WalkonNet!
推薦閱讀:
- Java使用fastjson對String、JSONObject、JSONArray相互轉換
- Java 如何遍歷JsonObject對象
- java如何給對象按照字符串屬性進行排序
- 如何修改JSON字符串中的敏感信息
- java中JSONArray互相轉換List的實現