Eksperyment: czy AI pisze na Twitterze lepiej niż ludzie?
Wszyscy mówią i tweetują o sztucznej inteligencji. Prawdopodobnie już to wszystko słyszałeś: sztuczna inteligencja może pomóc Ci lepiej pisać. Sztuczna inteligencja może pomóc Ci szybciej tweetować. Sztuczna inteligencja przyjdzie do twojej pracy (porzućmy tę teorię – sztuczna inteligencja to narzędzie, a nie zamiennik).
Ale czy sztuczna inteligencja może pomóc w lepszym działaniu podpisów społecznościowych?
Jako zajęty marketingowiec w mediach społecznościowych uwielbiam wszystko, co obiecuje uprościć i przyspieszyć proces tworzenia treści. Chcieliśmy jednak dowiedzieć się, czy wykorzystanie sztucznej inteligencji rzeczywiście wpływa na zaangażowanie i zasięg, zwłaszcza na Twitterze.
Czy podpisy napisane przez ludzi mają większy zasięg i zaangażowanie niż podpisy napisane przez sztuczną inteligencję? Czy algorytm Twittera penalizuje tweety napisane przez AI? Zrobiłem eksperyment, żeby się tego dowiedzieć.
Hipoteza: podpisy napisane przez ludzi na Twitterze przyciągną większą uwagę i zasięg niż podpisy napisane przez sztuczną inteligencję.
Nasze wykształcone przypuszczenie jest takie, że podpisy napisane przez ludzi na Twitterze zyskają większe zaangażowanie i zasięg niż te napisane przez sztuczną inteligencję.
Twitter to platforma konwersacyjna. Ludzie lubią tweety z wyraźnym głosem, a użytkownicy Twittera lubią łączyć się z innymi ludźmi. Podejrzewamy, że tweet, który nie brzmi tak, jakby pochodził od osoby, nie przyciągnie ludzi.
Ale czy ludzie naprawdę będą wiedzieć, czy tweet został napisany przez sztuczną inteligencję, czy nie? A jeśli tak, to jak wpłynie to na zasięg i zaangażowanie?
Dowiedzmy Się.
Metodologia
Aby sprawdzić, czy podpisy napisane przez ludzi na Twitterze generują większe zaangażowanie i zasięg niż te napisane przez sztuczną inteligencję, udostępniłem trzy zestawy tweetów na moim osobistym koncie na Twitterze . Każdy zestaw tweetów używał tego samego formatu, aby można je było rzetelnie porównać.
W tym eksperymencie opublikowałem dwa tweety zawierające tylko tekst, dwa tweety z linkami i dwa tweety z obrazami.
Aby skomponować tweety generowane przez sztuczną inteligencję, użyłem narzędzia Lately, które zmienia przeznaczenie długich treści w krótkie podpisy społecznościowe.
(Bonus: możesz połączyć aplikację Lately z Hootsuite, aby dostroić, zaplanować i automatycznie publikować swoje posty bezpośrednio na pulpicie nawigacyjnym Hootsuite)
Następnie przeanalizuje treść i utworzy podpisy do przeglądania i edytowania. Po edycji możesz przesłać je bezpośrednio do Hootsuite w celu planowania.
Kilka rzeczy, o których należy pamiętać Ostatnio i wszelkie inne narzędzia do tworzenia treści AI: Po pierwsze, musisz je wyszkolić. Aby narzędzia sztucznej inteligencji mogły generować treści najbardziej zbliżone do Ciebie lub Twojej marki, muszą zrozumieć Twój głos, treść i odbiorców. Dlatego ostatnio prosi Cię o przesłanie długiej części, zanim będzie mogła wygenerować napisy.
Inną rzeczą, na którą należy zwrócić uwagę w przypadku treści generowanych przez sztuczną inteligencję, jest to, że nadal musi być edytowana przez człowieka.
Gdy ostatnio wygeneruje tweety na podstawie przesłanych przez Ciebie treści, możesz je edytować pod kątem dźwięku, przejrzystości i kontekstu. Ostatnio wykorzystuje te pomysły do tworzenia lepszych treści następnym razem. Im częściej go używasz, tym bardziej będzie wyglądać to, co faktycznie opublikuje Twoja marka.
Po utworzeniu podpisów ludzkich użyłem integracji Hootsuite Lately do stworzenia podobnych tweetów przy użyciu tych samych długich fragmentów treści. Następnie naszkicowałem je w Hootsuite i wykorzystałem funkcję sugerowanego czasu publikacji, aby je zaplanować.
Wyniki
Testowałem wydajność każdego tweeta około 24 godzin po jego opublikowaniu (cykl życia Twittera przebiega szybko). Oto wyniki:
Zebrałem wskaźnik zaangażowania dla każdego tweeta, aby zrozumieć, jak działają. Poniżej rozważę konkretne wskaźniki dla każdego z nich.
Tweet nr 1: Tweet zawierający tylko tekst
Ponieważ w tym eksperymencie używam narzędzia Lately AI, musiałem skupić się na przeformułowaniu długich fragmentów treści dla tych napisów.
Oto pierwszy tweet, który napisałem na potrzeby tego eksperymentu. W tym tweecie sparafrazowałem cytat z artykułu o obowiązkach freelancera.
A oto wyniki tego tweeta, według Hootsuite Analytics. Współczynnik zaangażowania wyniósł 14,14% przy łącznie 28 interakcjach i 198 wyświetleniach.
Jeśli chodzi o styl, jest to dla mnie normalny tweet. Uwielbiam dodawać głos za pomocą gwiazdek i uwielbiam używać nawiasów w moich e-mailach. Wypowiedzi w nawiasach (wypowiedzi, które wyjaśniają lub wyjaśniają coś i są zwykle ujęte w nawiasy) to świetny sposób na przekazanie dodatkowych informacji i zapewnienie szerszego kontekstu (zobacz, co tam zrobiłem?). Ponadto zdania w nawiasach po prostu dodają dodatkowy element ludzki, jeśli mnie o to poprosisz.
Wszystko, co można powiedzieć, to to, że kiedy sztuczna inteligencja wygenerowała podobny tweet z tego samego artykułu, nie edytowałem go, aby dodać moje zwykłe ludzkie akcenty, ponieważ chciałem zobaczyć, jak będzie działać samodzielnie.
Oto wyniki podpisu wygenerowanego przez AI. Współczynnik zaangażowania wyniósł 4,06% przy zaledwie 5 interakcjach i 123 wyświetleniach.
W tym pierwszym porównaniu tweetów lepiej wypadł podpis napisany przez człowieka. Czy to z powodu brakujących nawiasów? Może, ale raczej nie.
Istnieje kilka czynników, które mogły wpłynąć na skuteczność tego tweeta, więc spróbujmy ponownie z innym typem tweeta.
Tweet nr 2: Tweet z linkiem
Do następnego porównania chciałem zobaczyć, jak zadziała tweet z linkiem. Sparafrazowałem artykuł, który napisałem o rodzajach ścieżek kariery dla osób pracujących w content marketingu (szczególnie na stanowiskach freelancerów i in-house).
Oto tweet, który napisałem:
Biorąc pod uwagę wszystkie niepewności związane z pracą, z którymi ostatnio borykało się wielu, ten artykuł, który napisałem dla @superpathco, wydaje się być przypomnieniem na czas.
Freelancing nie powinien być decyzją typu „wszystko albo nic”! Wiele osób, z którymi rozmawiałem na potrzeby tego artykułu, robi to na boku lub między pracą. https://t.co/EI8rePLBuS
A oto wyniki tego tweeta. Współczynnik zaangażowania wyniósł 8,47% przy 32 interakcjach i 378 wyświetleniach.
Ten tweet zawierał link do artykułu i wzmiankę o marce, dla której go napisałem. Ten tweet miał większy zasięg niż mój poprzedni tweet i podejrzewam, że to dlatego, że wspomniana przeze mnie marka podała go dalej. Sprawdziłem wbudowane narzędzia analityczne Twittera w celu uzyskania dodatkowych danych i ten tweet otrzymał 21 szczegółowych ujawnień i pięć kliknięć linków. Ciekawy!
W przypadku podpisu napisanego przez sztuczną inteligencję niedawno sparafrazowałem ten sam artykuł i utworzyłem dla niego tweeta. Zawierał również link i wzmiankę (którą musiałem dodać), ale nic nie zmieniłem w wygenerowanym tekście.
„Miło jest wiedzieć, że freelancing istnieje na wypadek, gdyby moja kariera ponownie skierowała mnie na tę ścieżkę!” Nierzadko zdarza się, że marketerzy treści FT podejmują pracę jako freelancer na boku lub przechodzą między FT a freelancerem przez całą swoją karierę. @superpathco
Oto ostateczne wyniki tego tweeta. Wygenerował współczynnik zaangażowania na poziomie 7,5% przy zaledwie 6 interakcjach i 80 wyświetleniach. Sprawdziłem również analitykę Twittera dla tego tweeta i otrzymałem jedno szczegółowe ujawnienie i dwa kliknięcia linku.
W tej rundzie mój tweet napisany przez człowieka przewyższył tweet wygenerowany przez sztuczną inteligencję. Chociaż wskaźnik zaangażowania był mniej więcej taki sam, tweet, który napisałem, miał cztery razy więcej wyświetleń, prawdopodobnie dlatego, że został przesłany dalej.
Czy napis wygenerowany przez sztuczną inteligencję działałby lepiej, gdyby został również przesłany dalej? Może. Czy uzyskałby więcej kliknięć linków, gdyby miał większy zasięg? Może. Ale można też argumentować, że nie było to retweetowane ani klikane tak często, ponieważ sam nagłówek nie był tak wciągający.
Zróbmy kolejny test.
Tweet nr 3: Tweet z łączem wizualnym
Do mojego ostatniego porównania tweetów chciałem dołączyć coś wizualnego, aby zobaczyć, jak wpłynęło to na zaangażowanie i zasięg. Dla porównania wykorzystałem dwa artykuły, które napisałem dla Hootsuite. (Ponownie, ponieważ używam ostatnio do tego eksperymentu, tweety powinny być oparte na długim fragmencie treści).
Każdy z nich ma podobną miniaturę i będzie tak samo wyświetlany w kanale. Ponadto oba artykuły poruszają podobny temat – dostępność społeczna – więc ich treść można rzetelnie porównać.
Oto pierwszy tweet, który udostępniłem z napisem, który napisałem.
Jeśli pracowałeś w mediach społecznościowych przez ostatnie kilka lat, wiesz, że dostępność cyfrowa i integracja są priorytetami.
W moim najnowszym poście dla @hootsuite wyjaśniam, dlaczego tekst alternatywny Facebooka jest jednym ze sposobów na zwiększenie dostępności i odkrywania treści. https://t.co/huQ5AksuCg
Ten tweet wygenerował współczynnik zaangażowania na poziomie 5,71% przy łącznie 8 interakcjach i 140 wyświetleniach. Ma kilka polubień i jeden komentarz. Według własnych analiz Twittera, ten tweet otrzymał również jedno kliknięcie linku i pięć szczegółów.
Niedawno utworzyłem tweeta do innego artykułu, który napisałem na podobny temat o napisach automatycznych TikTok. Powinienem zauważyć, że sztuczna inteligencja sparafrazowała artykuł dla pierwszej części tweeta, ale musiałem dodać drugą linię dla pewnego kontekstu i zawrzeć wzmiankę, tak jak to miało miejsce w moim pierwszym tweecie.
Czy chcesz, aby więcej osób oglądało Twoje filmy TikTok? Spraw, aby oglądanie było jak najbardziej przystępne i przyjemne, dodając automatyczne napisy.
Przeczytaj więcej o podpisach automatycznych w moim pierwszym artykule dla @hootsuite: https://t.co/JhSjH0TQ0g.
W sumie ten tweet nie zadziałał. Nie miał prawie żadnego zasięgu ani zaangażowania – żadnych polubień, komentarzy, retweetów, kliknięć linków. Ale otrzymał kilka szczegółowych rozszerzeń.
Po raz kolejny tweet napisany przez człowieka przewyższył tekst wygenerowany przez sztuczną inteligencję.
Co oznaczają wyniki?
Ostatecznie wszystkie moje tweety napisane przez ludzi działały lepiej niż podpisy napisane przez sztuczną inteligencję. Muszę przyznać, że nie mam wielu obserwujących na moim osobistym koncie na Twitterze, więc żadna z tych liczb nie jest zbyt ekscytująca. Ale myślę, że pokazują (na bardzo małą skalę), że więcej ludzkich tweetów lepiej rezonuje na platformie.
Oto niektóre z moich wniosków z tego eksperymentu:
Napisy napisane przez sztuczną inteligencję mogą zaoszczędzić czas
Szczerze mówiąc, może i jestem pisarzem, ale napisanie tweeta zajmuje mi dużo czasu, zwłaszcza takiego, który jest parafrazą długiego artykułu. Byłem zdumiony, jak szybko narzędzie AI było w stanie wymyślić napisy, nawet jeśli nie były gotowe do publikacji.
Niezależnie od tego, czy z natury jesteś dobry w pisaniu, czy nie, wymyślanie kreatywnych napisów co tydzień zabiera czas i energię z dala od innych zadań, takich jak opracowywanie strategii lub kontakt z obserwującymi. Kiedy więc Twoim zadaniem jest napisanie dziesiątek podpisów społecznościowych w ciągu jednego dnia lub tygodnia, użycie narzędzia AI może zaoszczędzić dużo czasu.
Narzędzie takie jak Ostatnio jest szczególnie przydatne, jeśli używasz Twittera do udostępniania długich treści, takich jak posty na blogu. To narzędzie może utworzyć dziesiątki podpisów z jednego elementu, co oznacza, że możesz stworzyć miesięczne zadanie napisów na Twitterze w ciągu kilku minut.
Napisy napisane przez sztuczną inteligencję nadal wymagają kontaktu z człowiekiem
Ponieważ Ostatnio wygenerowałem dziesiątki podpisów dla każdego artykułu, który mu podałem, było wiele podpisów, które nie znalazły się na liście. Niektóre z nich były przyzwoite, ale inne były po prostu mylące i wymagały wielu edycji.
Jeśli korzystasz z narzędzia do tworzenia napisów, nadal będziesz musiał je przeglądać i edytować, przynajmniej na początku — szczególnie w przypadku dodawania głosu.
Narzędzia AI zwykle nie rozumieją pełnego kontekstu tweeta i nie rozpoznają od razu głosu Twojej marki. Większość narzędzi sztucznej inteligencji wymaga przeszkolenia, aby lepiej zrozumieć, czego od nich oczekujesz, i nadać odpowiedni ton Twojej marce. Przyswojenie tych narzędzi może zająć trochę czasu, ale im częściej ich używasz i poprawiasz to, co piszą, tym lepiej się dostosowują.
Jak bezpośrednio napisy napisane przez sztuczną inteligencję wpływają na zasięg? Jury jeszcze nie wyszło. W moim eksperymencie wszystkie moje napisy napisane przez ludzi miały większy zasięg niż napisy napisane przez sztuczną inteligencję, ale mogło to być spowodowane tym, że sama treść była bardziej rezonowana. Trudno powiedzieć, czy platforma wiedziała, że tweety napisane przez sztuczną inteligencję zostały faktycznie napisane przez sztuczną inteligencję. Ale gdybym miał zgadywać, powiedziałbym, że Twitter nie karze cię za używanie sztucznej inteligencji do pisania podpisów.
Ostatecznie, jeśli zamierzasz używać sztucznej inteligencji do pisania podpisów na Twitterze, pomyśl o nich bardziej jako o punkcie wyjścia. Będziesz musiał wykorzystać swoje doświadczenie społecznościowe, aby uczynić je atrakcyjnymi i gotowymi do publikacji, ale będziesz w stanie usunąć je znacznie szybciej, niż gdybyś zaczynał od zera.
Dodaj komentarz