Indeksowanie bazy danych udostępnionej w robots i sitemap

Strona internetowa posiadająca tysiące produktów/ogłoszeń to niejako baza danych podlegająca ochronie.
Gdy na serwerze owej strony istnieje "zezwolenie" (plik robots.txt) dla robotów indeksujących tzw. crawler'ów (np. Google) oraz mapę strony (sitemap) zawierającą zestawienie wszystkich produktów/ogłoszeń, to czy można zakładać, że taką bazę można indeksować?

Nie ma przepisu prawnego zabraniającego indeksowania.

większość serwisów/sklepów ma stałą regułkę w regulaminie:

• Pobieranie lub wykorzystywanie w jakimkolwiek zakresie dostępnych w ramach serwisu materiałów wymaga każdorazowo zgody
• Zabronione jest jakiekolwiek agregowanie i przetwarzanie danych

...a indeksowanie to przecież m.in. pobieranie i przetwarzanie.
Tymczasem wszystkie te serwisy udostępniają mapę strony do indeksowania i tak jak Google robi - pobiera, wykorzystuje, agreguje, przetwarza.

cho napisał:

...a indeksowanie to przecież m.in. pobieranie i przetwarzanie. ...

Kliknij, aby rozszerzyć...

Nie, indeksowanie to co do zasady oznaczanie, opisywanie zawartości a nie pobieranie zawartości. Samo pobieranie zawartości bazy danych, jej przetwarzanie wymaga zgody producenta, reguluje to Ustawa o ochronie baz danych.

LeszsekS napisał:

indeksowanie to co do zasady oznaczanie, opisywanie zawartości a nie pobieranie zawartości.

Kliknij, aby rozszerzyć...

Indeksowanie stron to proces analizy dokumentów np. w formacie HTML przez program komputerowy, a nie oznaczenie i opisywanie zawartości. Przykładowo Google nie opisuje zawartości oo: w praktyce: pobiera dane ze stron i tworzy ich indeks, by skrócić czas dostępu do nich.
Google indeksując strony internetowe nie pomija też bazy danych - pobiera je i przetwarza bez zgody ich właściciela. Można to jedynie zablokować - noindex.
Wątek dotyczy przypadku, gdy właściciel strony internetowej z bazą danych dodatkowo zezwala na jej indeksowanie poprzez umiejscowienie na serwerze mapy strony która to ułatwia robotom indeksującym jej pobieranie i przetwarzanie, by umożliwić dalsze jej przeszukiwanie w wyszukiwarce np. Google. Czy nie jest to niejako zgoda producenta?


moderacja

Niestety ale tamtego portalu nie traktujemy jako wiarygodnego źródła wiedzy. Analiza to nie jest pobieranie a tak jak napisałem wyżej: SJP - analiza -> rozpatrywanie, badanie w celu wyjaśnienie lub opisu.


Na temat zgody na pobieranie i wykorzystywanie jej zawartości baz danych otrzymałeś już podstawę prawną.

By dokonać analizy danych należy je pobrać ze strony.
Link do objaśnienia znaczenia "indeksowanie stron" podałem, by rozgraniczyć od indeksowania (wg. SJP), bo to fizycznie całkiem co innego oznacza.
Co do zgody do pobierania danych ze stron i danych z baz to Google nie pobiera od nikogo takowej...

cho napisał:

By dokonać analizy danych należy je pobrać ze strony.
...

Kliknij, aby rozszerzyć...

Pobranie bazy danych ze strony w ramach przeglądania owej strony nie narusza praw wynikających ze wspomnianej wyżej Ustawy. Resztę już wiesz.