Wiedza o tym, jak skrobać komentarze na youtube, może pomóc ludziom przejść krótką analizę i podejmować decyzje na podstawie wyników. Zbieranie danych dotyczących treści wideo, polubień i komentarzy pomoże użytkownikom w zbiorowym zrozumieniu tego, co działało dobrze, a co nie. Raport Data Reportal na temat globalnego zasięgu odbiorców mówi, że YouTube ma 2,476 miliarda użytkowników na całym świecie w lipcu 2022 roku. Dane te wyraźnie mówią, że YouTube jest jedną z najbardziej kwalifikujących się platform do przeprowadzania badań rynkowych. W tym artykule wyjaśnimy, jak wykorzystać tak szerokie dane z YouTube do podejmowania decyzji biznesowych lub finansowych.
Niezależnie od tego, czy promujesz programy, czy dostarczasz informacje studentom, Youtube to najlepszy sposób na komunikację z szeroką publicznością. Jest to druga co do wielkości wyszukiwarka na świecie, obok Google. Ponieważ Google i inne wyszukiwarki mają tendencję do faworyzowania filmów, możesz poprawić swój ranking w wyszukiwarkach, udostępniając filmy na Youtube z dobrymi tytułami, tagami i opisami. Możesz także przekazywać wiadomości o swojej marce na Youtube za pomocą filmów, ponieważ są one doskonałą metodą na uchwycenie emocji i fizycznych atrybutów tego, co promujesz.
Skrobanie Youtube umożliwia skrobanie danych wideo, subskrypcji, komentarzy, rankingu, rekomendacji i reklam. Za pomocą skrobaka Youtube można skrobać wyszukiwania, wybierając dane z wybranej strony URL Youtube. Możesz teraz skrobać kanały, filmy i ich szczegóły oraz komentarze i napisy, co otwiera zupełnie nowy wymiar analizy danych wideo. Możesz zeskrobać zarówno automatycznie wygenerowane, jak i dodane napisy w różnych językach za pomocą skrobania stron internetowych.
Skrobanie danych z Youtube jest przydatne z kilku następujących powodów.
Aby skrobać komentarze z Youtube za pomocą Pythona, należy wykonać poniższe kroki.
Musisz zaimportować niezbędne pakiety za pomocą polecenia Python, jak pokazano poniżej.
pip install datakund-bot-studio
!pip install youtube-comment-scraper-pythonTeraz należy zaimportować wymagane pakiety.
from youtube_comment_scraper_python import *
import pandas as pdMusisz otworzyć wybrany link do filmu na Youtube i przejść do sekcji komentarzy, używając poniższych poleceń.
youtube.open("https://www.youtube.com/watch?v=rSDy5AdfRDI")
youtube.keypress("pagedown")Po wykonaniu tego polecenia otrzymasz następujące dane wyjściowe.
Po wykonaniu powyższego fragmentu kodu należy otworzyć przeglądarkę internetową, w której film jest już otwarty. Automatycznie wykona ona Page Down i zeskrobuje komentarze, więc musisz poczekać na zakończenie procesu. Czas potrzebny na wykonanie tego kroku może się różnić w zależności od liczby komentarzy na filmie.
data = []
currentpagesource=youtube.get_page_source()
lastpagesource=''
while(True):
if(lastpagesource==currentpagesource):
break
lastpagesource=currentpagesource
response=youtube.video_comments()
for c in response['body']:
data.append(c)
youtube.scroll()
currentpagesource=youtube.get_page_source()
Teraz usuwamy zduplikowane dane i konwertujemy naszą listę do ramki danych. Następnie eksportujemy nasze dane do pliku CSV.
df = pd.DataFrame(data)
df = df.replace('\n',' ', regex=True)
df = df[['Comment', 'Likes']].drop_duplicates(keep="first")
df.to_csv('data.csv',index=False)Sprawdzamy nasze dane za pomocą df.head(), jak pokazano poniżej.
df.head()
Youtube proxy to serwer pośredniczący, który zapewnia wymianę danych między urządzeniem a serwerami. Pomaga utworzyć pośrednie połączenie pozwalające ominąć zaporę sieciową administratora systemu lub dostawcy usług internetowych. Z pomocą serwerów proxy można zwiększyć liczbę wyświetleń filmów na Youtube i uzyskać więcej komentarzy.
Należy otworzyć wiersz polecenia i wpisać następujące polecenie.
$ git clone https://github.com/MShawon/YouTube-Viewer.git
$ cd YouTube-Viewer
$ pip install -r requirements.txtNastępnie sprawdź wersję przeglądarki Google Chrome i pobierz tę samą wersję chromedriver.exe ze strony https://chromedriver.chromium.org/downloads i umieść ją w folderze chromedriver_win32.
Musisz przefiltrować poniższe polecenie, aby odfiltrować dobre proxy, jeśli masz dużą kolekcję proxy. Następnie należy użyć GoodProxy.txt dla pliku python proxy.
$ python proxy_check.pyIstnieje kilka możliwych powodów, dla których warto korzystać z serwera proxy Youtube:
Youtube to świetne miejsce do budowania indywidualnej platformy, a także miejsce, w którym można przeprowadzić mnóstwo badań klientów i marketingu cyfrowego. Sekcja komentarzy do filmów na Youtube daje wiele informacji na temat oczekiwań ludzi i tego, co im się podoba/nie podoba. Komentarze na Youtube można skrobać za pomocą Pythona, a podczas ich skrobania należy używać serwerów proxy. Wynika to z faktu, że serwery proxy chronią przed zablokowaniem, a także umożliwiają prowadzenie bardziej ukierunkowanych badań. Do skrobania Youtube można używać dedykowanych serwerów proxy. Chociaż są one drogie, są bezpieczniejsze niż inne serwery proxy.
Mam nadzieję, że dowiedziałeś się, jak skrobać komentarze na Youtube za pomocą Pythona.