Wydobywanie danych publicznych ofert na potrzeby pracy magisterskiej

[vitalker]

Dzień dobry.

Piszę pracę magisterską i chciałbym w niej analizować treści z ofert. Interesują mnie opisy, ceny oraz liczba zakupionych jednostek. Niestety API Allegro nie pozwala na pobieranie takich danych. Próbowałem też uzyskać dane bezpośrednio ze stron za pomocą biblioteki requests w Python, natomiast ten sposób jest zablokowany przez Allegro. Aktualnie używam biblioteki selenium (webdriver), która pozwala sterować przeglądarką. Jednak istnieją dwie wady: prędkość jest niska (jedna strona w ciągu kilku sekund) oraz captche. Czy ktoś posiada wiedzę, jak to można zrobić sprawniej? Byłbym bardzo wdzięczny.

[mr_oma]

@vitalker, dopytam, czy jesteśmy w stanie jakoś Ci pomóc. 🙂 Gdy będę wiedziała coś więcej, wrócę z odpowiedzią. 

[mr_oma]

@vitalker, jeśli otrzymałeś informację, że nie udostępniamy takich danych, to obawiam się, że nie ma możliwości do ich zbiorczego wyciągnięcia. Jeśli te dane są dla Ciebie niezbędne, wydaje mi się, że pozostaje analiza "ręczna" na dostępnych w serwisie ofertach.

Tym niemniej trzymam kciuki za pomyślne ukończenie Twojej pracy magisterskiej. 🙂

[vitalker]

@mr_oma, tak, niestety otrzymałem taką informację. Szkoda, że nie udostępniają Państwo takich danych. No cóż, będę próbował własnymi siłami. 🙂

Dziękuję Pani za odpowiedź.