关键词不能为空

当前您在: 主页 > 英语 >

网络爬虫实验

作者:高考题库网
来源:https://www.bjmy2z.cn/gaokao
2021-02-15 14:32
tags:

-

2021年2月15日发(作者:piglet)





湖北文理学院








网络数据挖掘项目解决方案







实验报告





专业班级:








软件工程


1111





















名:







韩江玲





















号:








2011193158














任课教师:







吴中博































2014





9





20






实验


5



网 络数据挖掘解决方案(


X


学时)




一、实验目的与要求



1


、掌握小型项目的架构与设计;



2


、能够独自实现小型项目的开发;



3


、通过实现网络数据挖掘项目,锻炼综合应用能力。



二、预习与准备



1



Swing


编程;

< br>


2


、正则表达式的使用;



3


、网络数据的提取;



4


、分层架构。



三、实验内容



1


、实现网络数据挖掘项目;



2


、撰写实验报告。



四、实验过程



1.


首先明确项目解决思路:



首先建立数据库


?



swing


编写用户界面


?


从数据库获 取


StockId


?


通过


StockId


获取


UR


?


利用


URL


可以得到

< br>URL


里面的内容


?


对该内容进 行解析,


获取需要的数据


?



入数据库。




2.


了解该项目的系统架构:



显示层


:


构建用户界面,提供用户中介



业务逻辑层


:1)


获取


StockId



2)


通过


StockId


获取

URL



3)


通过


URL


提取网页内容;







4)


解析网页内容获取需要的数据;


5)


存入相应的数据库。




数据访问层


:


实现对于数据库的访问,连接,增 加,修改,删除,查询。



3


、开始项目




1


)建数据库




1



(< /p>


2


)建立数据库的连接并定义增删改查操作接口

< br>


public



class


Conn {





private



static


String


dri ver


=



;



private



static


String


url


=



zeroDateTimeBeha vior=convertToNull


;



private



static


String


user


=



;



private



static


String


pas sword


=



;



public



static


Connection getConn(){




Connection conn=


null


;




try


{





Class.

forName


(


driver


) ;





c onn=DriverManager.


getConnection

< br>(


url


,


user


,


password


);




}


catch


(Exception e) {





tackTrace();




}




return


conn;



}






//


获得数据库的连接




public



static


Connection getConnection(String className,String url,String


user,String password){




Connection connection =


null


;




try


{





Cla ss.


forName


(className);





connection = DriverManager.


g etConnection


(url, user, password);







}


catch


(Exception e) {





tackTrace();




}




return


connection;






}





public



static



void


main(String[] args) {




int


i =


updateStockName


(

< br>


华夏



,



);



}









//


更新股票名称




public



static



int


updateStockName(String stockName,String stockId){




Connection connection =


getC onnection


(


driver


,


url


,


user


,


password


);




int


result = 0;




try


{





Statement statement = Statement();





result = eUpdate(




2



'


+s tockName+



+stockId+



);





return


result;




}


catch


(Exception e) {





//


TODO


Auto-generated catch block






result = 0;




}




return


result;






}




//


获得 股票的


id




public



static


List getStockIds() {




List list=


null


;




Connection connection =


getConnection


(


driver


,


url


,


user


,


password


);




try


{





Statement statement = Statement();





ResultSet resultSet = eQuery(



stockbase


);





list =


new


ArrayList();





while


(()){






(ing(1));





}




}


catch


(Exception e) {





//


TODO


Auto-generated catch block






tackTrace();




}







return


list;



}



//



stockmoney


中插入数据




public



static



int


insertStockFH(List list) {




Connection connection =


getC onnection


(


driver


,


url


,


user


,


password


);




int


result = 0




try


{





f or


(


int


i=0;i<();i++){






List stocklist = (i);






for


(


int


j=0;j<(()/5);j++){













Statement statement = Statement();







String

< br>id=(5*j+0).toString()+(5*j+1).toString();













result = eUpdate(



stockmoney(id,stockid,year,qian,songgu,zhuangu) values (


+










+id+



+









(5*j+0)+










+(5*j+1)+



+









(5*j+4)+



+









(5*j+2)+



+









(5*j+3)+



);












}










}








}


catch


(Exception e) {





//


TODO


Auto-generated catch block






result=0;




}



< /p>


System.


out


.println (result);




return


result;



}



3


















}


//


删除所有的钱



public



static


Boolean deleteAllmoney() {



Boolean result =


null


;



Connection connection =


getC onnection


(


driver


,


url


,


user


,


password


);



try


{




Statement statement = Statement();




result = e(



);



}


catch


(SQLException e) {




//


TODO


Auto-generated catch block





tackTrace();



}



return


result;




}


(< /p>


3


)定义


URL


连接接口



public



class


WebConnUtil {




public


String getWebContent(URLConnection urlConnection) {




InputStream is;




StringBuffer sb =


new


StringBuffer();




try


{





is = utStream();





System.

< br>out


.println(is);





InputStreamReader isr=


new


InputStreamReader(is,



);



BufferedReader br=


new


BufferedReader(isr);





String strLine;





while


((strLine=n e())!=


null


)





{






(strLine);





}








}


catch


(IOException e) {





System.


out


.println(



连接失败



);




}




return



new


String(sb);



}


}



4


)对获取的内容进行分析



public



class


Search


extends


Thread{




//


通过


i d


获得名字




public


List getStockNames(Stock stock, List stockId) {







List list =


new


ArrayList();




StringBuffer sb=


new


StringBuffer();




sb=(



股票代码


t


股票名称

< br>n


);



< br>for


(


int


i=0;i<();i++){





String nameurl =



+(i)+



;





sto ck.


jTextField1


.setText(

< p>


正在加载


id



'


+(i)+



的股票名




);





try


{






URL url =


new


URL(nameurl);






URLConnection urlConnection = nnection();






String webcontent =


new



WebConnUtil( ).getWebContent(urlConnection);








4

-


-


-


-


-


-


-


-



本文更新与2021-02-15 14:32,由作者提供,不代表本网站立场,转载请注明出处:https://www.bjmy2z.cn/gaokao/655462.html

网络爬虫实验的相关文章

  • 余华爱情经典语录,余华爱情句子

    余华的经典语录——余华《第七天》40、我不怕死,一点都不怕,只怕再也不能看见你——余华《第七天》4可是我再也没遇到一个像福贵这样令我难忘的人了,对自己的经历如此清楚,

    语文
  • 心情低落的图片压抑,心情低落的图片发朋友圈

    心情压抑的图片(心太累没人理解的说说带图片)1、有时候很想找个人倾诉一下,却又不知从何说起,最终是什么也不说,只想快点睡过去,告诉自己,明天就好了。有时候,突然会觉得

    语文
  • 经典古训100句图片大全,古训名言警句

    古代经典励志名言100句译:好的药物味苦但对治病有利;忠言劝诫的话听起来不顺耳却对人的行为有利。3良言一句三冬暖,恶语伤人六月寒。喷泉的高度不会超过它的源头;一个人的事

    语文
  • 关于青春奋斗的名人名言鲁迅,关于青年奋斗的名言鲁迅

    鲁迅名言名句大全励志1、世上本没有路,走的人多了自然便成了路。下面是我整理的鲁迅先生的名言名句大全,希望对你有所帮助!当生存时,还是将遭践踏,将遭删刈,直至于死亡而

    语文
  • 三国群英单机版手游礼包码,三国群英手机单机版攻略

    三国群英传7五神兽洞有什么用那是多一个武将技能。青龙飞升召唤出东方的守护兽,神兽之一的青龙。玄武怒流召唤出北方的守护兽,神兽之一的玄武。白虎傲啸召唤出西方的守护兽,

    语文
  • 不收费的情感挽回专家电话,情感挽回免费咨询

    免费的情感挽回机构(揭秘情感挽回机构骗局)1、牛牛(化名)向上海市公安局金山分局报案,称自己为了挽回与女友的感情,被一家名为“实花教育咨询”的情感咨询机构诈骗4万余元。

    语文