Download to read offline
Spider介绍与实现
- 1. Sp ider -spider Fanfan
- 3. outline ! www ! Spider 么 ~ ! Spider 么 ! fanfan spider ! Fanfan-spider
- 4.
- 5. www ! http://www.fanfan.com/list? keyword=%E6%97%A5%E7%B3%BB&fcid=qvwedwfao …… ! http://www.fanfan.com/list?keyword= &fcid=qvwedwfao
- 6. www ! WWW World Wide Web ! Internet ! QA(if needed) url, ip, dns ..
- 7. www ! HTML ! HTML HyperText Mark-‐up Language ! HTML HTML Head Body ! ! <b> </b> ! <img src=“ ”/> ! <a herf=“ URL”…></a>
- 8. www ! HTTP ! http://www.fanfan.com/list?keyword= &fcid=qvwedwfao ! DNS www.fanfan.com IP ! DNS IP 122.225.108.108 ! 122.225.108.108 ! GET rewrite ! 122.225.108.108 html ! ! html
- 9.
- 10. Spider 么 ~ ! —> —> ! fanfan 1 ! ! ! Doc1-‐>KeyWord1, KeyWord2, KeyWords3…… ! Doc2-‐>KeyWord3, KeyWord2, KeyWords3…… ! ! KeyWord1-‐>Doc1…… ! KeyWord2-‐>Doc1, Doc2……
- 12.
- 13. Spider 么
- 15. Spider 么
- 16. Spider 么
- 17. Spider 么
- 18. <a href …> <a href …> <a href …> <a href …> <a href …> <a href …> <a href …> == !
- 19.
- 21. fanfan spider
- 22. fanfan spider
- 23. fanfan spider
- 24. fanfan spider
- 25. fanfan spider
- 26. fanfan spider
- 27.
- 29.
- 30.
- 31.