Download to read offline
Uploaded byYING LUI ALAN SIU
Seo網上推廣課程 2 mar
本文件讨论了网站的 robots.txt 文件及其对搜索引擎爬虫的指示。文件还比较了白帽与黑帽SEO技术，并解释了网络蜘蛛的工作原理。此外，文中分析了博文与论坛的主要区别，以及如何撰写有效的文章结构。
![1.[web security share]google_hacking](https://cdn.slidesharecdn.com/ss_thumbnails/1-wssservergooglehackingwebshare-130409212118-phpapp01-thumbnail.jpg?width=640&height=640&fit=bounds)
![[系列活動] Python爬蟲實戰](https://cdn.slidesharecdn.com/ss_thumbnails/python-170809083644-thumbnail.jpg?width=640&height=640&fit=bounds)
![[113部落格]01 搜尋引擎活用](https://cdn.slidesharecdn.com/ss_thumbnails/01-110905195529-phpapp02-thumbnail.jpg?width=640&height=640&fit=bounds)
![[系列活動] Python 爬蟲實戰](https://cdn.slidesharecdn.com/ss_thumbnails/pythonafunjimv1-171213041823-thumbnail.jpg?width=640&height=640&fit=bounds)
Seo網上推廣課程 2 mar
- 1.
- 2. Robots.txt Robots.txt 放在 index page root directory. 當一個搜尋 robot 訪問一個站時，它首先爬行檢查該網站根目錄下是否存在 robots.txt
- 3. Robots.txt content User-agent:*Disallow: User-agent:* = 允許被網絡搜尋引擎搜尋到 User-agent: Googlebot = 只允許 Google 搜尋引擎搜尋到
- 4. Robots.txt content Disallow:= 不允許搜尋路徑 = 0 Disallow:/ = 不允許搜尋網站訪問任何部份 Disallow:/ images = 不允許搜尋網站訪問圖片 Allow:/ = 允許搜尋網站訪問任何部份
- 5. User-agent:* Disallow: 或者User-agent:* Allow:/
- 6. Index page <html> <head> <title>…</title> <meta name = “robots” content = “all”> 指示搜尋引擎可以沿著 robots.txt 中的指示搜尋該網頁
- 7. User-agent 目錄BaiduSpider = www.baidu.com YodaoBot = www.yodao.com ia_archiver = www.alexa.com Googlebot = www.google.com Sosospider = www.soso.com Yahoo!+Slurp+China = www.yahoo.com.cn MSNBOT = search.msn.com Sogou+web+spider = www.sogou.com Googlebot-image = Google image Scooter = AltaVista Lycos = Lycos NorthernLight = Gulliver Fast = Fast Excite, WebCrawler = ArchitextSpider DirectHit = Grabber Infoseek = Infoseek
- 8. Web content 網頁內容 Title Image Keywords Links: internal links, external links Description
- 9. H1, H2 標題 <Body> <h1>apple</h1> <h2>iPhone 4S</h2> </Body>
- 10.
- 11. 圖片註解 <IMG ALT = “ 為慶祝聖誕 , 海洋公園活潑好動嘅企鵝團隊首次向全港巿民帶來聖誕祝福 , 祝大家聖誕快樂 ! Merry Christmas!” SRC = “ oceanpark-pengiun.jpg ”>
- 12.
- 13.
- 14.
- 15.
- 16.
- 17.
- 18.
- 19.
- 20.
- 21.
- 22.
- 23.
- 24.
- 25. 網絡蜘蛛 webspider 網絡蜘蛛基本原理 網絡蜘蛛是通過網頁的鏈接地址來尋找網頁，從網站某一個頁面（通常是首頁）開始爬入，讀取網頁的內容，找到在網頁中的其它鏈接地址 ，然後通過這些鏈接地址尋找下一個網頁，這樣一直循環下去，直到把這個網站所有的網頁都抓取完為止。
- 26. 如果把整個互聯網當成一個網站，那麼網絡蜘蛛 (Web Spider)就可以用這個原理把互聯網上所有的網頁都抓取下來。
- 27. 白帽與黑帽 白帽 = 用一些合理技術使這些內容很容易被 spider 接觸到。 黑帽 = 是指在優化過程中，使用作弊手段。如垃圾連結，跳頁，隱藏網頁，關鍵字堆砌。
- 28. 黑帽例子 色情網頁，分類廣告，假圖片註解，垃圾關鍵字堆砌。 將文字顏色設定為與網頁景相同或者近似的顏色。在文章中加入大量垃圾文字。 選項 <input type = “hidden”> 垃圾文字 Noframe 註解中加入關鍵字，而網頁不存在框架。
- 29.
- 30.
- 31.
- 32.
- 33. 黑帽障眼法之後果 有很多用黑帽障眼法，多數用劫持用家 IE，發放對話盒，木馬程式，網頁彈出，電腦 FREEWARE 等等。 百度及 Google 會把排名 Page Rank 下降。
- 34.
- 35.
- 36.
- 37.
- 38.
- 39.
- 40.
- 41.
- 42.
- 43.
- 44.
- 45.
- 46.
- 47.
- 48.
- 49.
- 50.
- 51. 博文 = 大多數是官方發表。持中肯立場。以好友推介形式來宣傳。具有起承轉合次序。 論壇 = 大多數以私人性質。大部份是惡搞成份。多數以博文中的三份之一內容惡搞出來。中間有大量抽水及抺黑成份。
- 52. 起承轉合 起 = 標題，題目，一段簡介 承 = 解釋以上標題 轉 = 從另一角度解釋以上標題 合 = 總結
- 53.
- 54.
- 55.
- 56.
- 57. 身子弱跑樓梯暈低」 峯迷狂轟歪曲形象 頒獎禮上玩 chok 樣 「你啲真嘢跌晒落嚟」 悶爆 Chok 樣 易暈
- 58.
- 59.
- 60.
- 61.
- 62.
- 63. 詹瑞文再笑唐英年《硬膠人生》 http:// www.youtube.com/watch?v=oK6SlJBDVow
- 64.
- 65.
- 66.
- 67.
- 68.
- 69.
- 70.
- 71.
- 72.
- 73.
- 74.
- 75.
- 76.
- 77.
- 78.
- 79.
- 80.
- 81.
- 82.
- 83.
- 84.
- 85.
- 86.
- 87.
- 88.
- 89.