Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

HiVe Prezentacja Na Seminarium 2008.05

1,019 views

Published on

Published in: Technology
  • Be the first to comment

  • Be the first to like this

HiVe Prezentacja Na Seminarium 2008.05

  1. 1. BYŁ: HiVe
  2. 2. JEST: Szuku-Szuku.pl
  3. 3. Szuku-Szuku.pl • Szuku-Szuku co to jest?
  4. 4. Szuku-Szuku.pl • Szuku-Szuku co to jest? • Co planowałem zrobić...
  5. 5. Szuku-Szuku.pl • Szuku-Szuku co to jest? • Co planowałem zrobić... • Co zostało zrobione...
  6. 6. Szuku-Szuku.pl • Szuku-Szuku co to jest? • Co planowałem zrobić... • Co zostało zrobione... • Zmiany niektórych założeń...
  7. 7. Szuku-Szuku.pl • Szuku-Szuku co to jest? • Co planowałem zrobić... • Co zostało zrobione... • Zmiany niektórych założeń... • Szczegóły...
  8. 8. Szuku-Szuku.pl • Szuku-Szuku co to jest? • Co planowałem zrobić... • Co zostało zrobione... • Zmiany niektórych założeń... • Szczegóły... • Plany na przyszłość...
  9. 9. Szuku-Szuku - Co to jest? • Oficjalnie: Projekt i wykonanie systemu do rozproszonego wyszukiwania na przykładzie danych osobowych
  10. 10. Szuku-Szuku - Co to jest? • Oficjalnie: Projekt i wykonanie systemu do rozproszonego wyszukiwania na przykładzie danych osobowych • Nieoficjalnie: Wyszukiwarka pomagająca znaleźć informacje o naszych znajomych, kontaktach w pracy
  11. 11. Szuku-Szuku - Co miało być? • Wersja private beta
  12. 12. Szuku-Szuku - Co miało być? • Wersja private beta • Interfejs użytkownika
  13. 13. Szuku-Szuku - Co zrobiłem? • Wersja private beta
  14. 14. Szuku-Szuku - Co zrobiłem? • Wersja private beta • Interfejs użytkownika
  15. 15. Szuku-Szuku - Co zrobiłem? • Wersja private beta • Interfejs użytkownika • Algorytmy klastrujące wyniki
  16. 16. Szuku-Szuku - Co zrobiłem? • Wersja private beta • Interfejs użytkownika • Algorytmy klastrujące wyniki • Zaawansowany crawler
  17. 17. Szuku-Szuku - XI.2007
  18. 18. Szuku-Szuku - III.2008
  19. 19. Szuku-Szuku - IV.2008
  20. 20. Szuku-Szuku - Private Beta
  21. 21. Szuku-Szuku - Interfejs
  22. 22. Szuku-Szuku - Interfejs
  23. 23. Szuku-Szuku - Interfejs
  24. 24. Szuku-Szuku - Interfejs
  25. 25. Szuku-Szuku - Interfejs
  26. 26. Szuku-Szuku - Private Beta
  27. 27. Szuku-Szuku - Zmiany • Zaskakująco dobre możliwości klastrowania wyników
  28. 28. Szuku-Szuku - Zmiany • Zaskakująco dobre możliwości klastrowania wyników • Dobudowanie modułu crawlera
  29. 29. Szuku-Szuku - Zmiany • Zaskakująco dobre możliwości klastrowania wyników • Dobudowanie modułu crawlera • Tworzenie własnej bazy danych na podstawie materiałów dostępnych w sieci
  30. 30. Szuku-Szuku - Infrastruktura • Do crawlowania / przetwarzania danych potrzeba dużo mocy
  31. 31. Szuku-Szuku - Infrastruktura • Do crawlowania / przetwarzania danych potrzeba dużo mocy • Wirtualne serwery
  32. 32. Szuku-Szuku - Infrastruktura • Do crawlowania / przetwarzania danych potrzeba dużo mocy • Wirtualne serwery • Amazon Web Services
  33. 33. Szuku-Szuku - Infrastruktura • Do crawlowania / przetwarzania danych potrzeba dużo mocy • Wirtualne serwery • Amazon Web Services • Linux Ubuntu Server Edition
  34. 34. Szuku-Szuku - Crawler Teraz: Crawl szkół z portalu nasza-klasa.pl 9000 •Anonimowa sieć TOR 6750 •Sterowanie przez: •telnet •bazę danych •Cachowanie wyników 4500 W przyszłości: 2250 •Rozproszony 0 08:00 10:00 12:00 14:00 16:00 18:00 20:00 22:00 00:00 02:00 04:00 06:00 08:00 10:00 12:00 •Dużo szybszy Pobranych stron na godzinę
  35. 35. Szuku-Szuku - Węzeł Web Crawler Agenty Agenty Zewnętrzne Silnik wyszukiwarki Zdarzenia Serwer HTTP Przeglądarka
  36. 36. Szuku-Szuku - Plany • Dokumentacja i stworzenie “właściwej pracy magisterskiej”
  37. 37. Szuku-Szuku - Plany • Dokumentacja i stworzenie “właściwej pracy magisterskiej” • Uruchomienie działającej “komercyjnej” wyszukiwarki na podstawie konceptów i algorytmów
  38. 38. Szuku-Szuku - Plany • Dokumentacja i stworzenie “właściwej pracy magisterskiej” • Uruchomienie działającej “komercyjnej” wyszukiwarki na podstawie konceptów i algorytmów • Szukamy chętnych do pracy nad systemem :)
  39. 39. Dziękuję :) Zapraszam do wypróbowania: mklujszo@gmail.com http://slideshare.net/mickek

×