Skocz do zawartości


Zdjęcie

Scrapebox - problem z harvestowaniem


  • Zaloguj się, aby dodać odpowiedź
13 odpowiedzi w tym temacie

#1 Delta

Delta

    Elita

  • Elita
  • PipPipPip
  • 500 postów

Napisano 18 lipiec 2012 - 09:39

Mam problem z harvestowaniem z googla wykorzystując do tego znalezione proxy przez SB. Wszystkie wyszukane proxy są sprawne, mają Google Y, jednak jak dodam jakiegoś footpronta i zacznę harvestowanie to dla każdego proxy mam Error 302 (IP blocked) i nic nie wyszukuje.

Jak poprzez te proxy sprawdzam np. zaindeksowanie stron w google to działa poprawnie, problem jest tylko z tym harvestowaniem.

Może coś mam źle ustawione?

#2 pozpoz

pozpoz

    BlackHat

  • BlackHat
  • PipPipPip
  • 483 postów

Napisano 18 lipiec 2012 - 14:09

Mam podobny problem. Niestety, ale chyba chodzi o to, że są różne rodzaje banów. Proxy działą na zwykłe słowo kluczowe, a nie działa na słowo z operatorami.



Ktoś jakoś to omija? Prywatne proxy zdają egzamin?

#3 weblo

weblo

    BlackSeo

  • Użytkownik
  • PipPipPip
  • 176 postów

Napisano 13 czerwiec 2013 - 13:06

Zna ktoś może odpowiedź na to jak zrobić żeby w sb użyć operatory?

Za każdym razem dostaję 302 IP blocked

#4 krzyniolek

krzyniolek

    BlackHat

  • BlackHat
  • PipPipPip
  • 854 postów

Napisano 13 czerwiec 2013 - 14:02

Ostatnio google zaostrzyło warunki harvestu - i trzeba mieć naprawde dużo proxy by coś podziałać. Jedyne co mozecie zrobić - to zmieniejszac liczbę połączeń - by tych dobrych nie zajechać od razu.

Co do operatorów - to gdy korzystałem ze sb do harvestu to działały - masz na myśli inurl, intitle?

#5 weblo

weblo

    BlackSeo

  • Użytkownik
  • PipPipPip
  • 176 postów

Napisano 13 czerwiec 2013 - 17:31

Tak inurl, intitle, site.
Z yahoo jest ok, google odrazu blokuje IP.

#6 krzyniolek

krzyniolek

    BlackHat

  • BlackHat
  • PipPipPip
  • 854 postów

Napisano 13 czerwiec 2013 - 19:43

Jakie masz ratio proxy/połaczeń?

#7 weblo

weblo

    BlackSeo

  • Użytkownik
  • PipPipPip
  • 176 postów

Napisano 13 czerwiec 2013 - 20:01

Aktualnie na 5 mam ustawione.

Prywatne proxy tu trzeba [black-seo.gif]

#8 krzyniolek

krzyniolek

    BlackHat

  • BlackHat
  • PipPipPip
  • 854 postów

Napisano 13 czerwiec 2013 - 23:53

No to jak masz 5 połączeń to przynajmniej 30 proxy.

#9 weblo

weblo

    BlackSeo

  • Użytkownik
  • PipPipPip
  • 176 postów

Napisano 16 czerwiec 2013 - 21:37

Średnio mam 20/30 proxy - na tym samym proxy standardowe zapytania wchodzą ;)

#10 krzyniolek

krzyniolek

    BlackHat

  • BlackHat
  • PipPipPip
  • 854 postów

Napisano 17 czerwiec 2013 - 00:09

Jedyne co mozsz to zwiększać to ratio - względenie dac timeout - ale tu chyba sb nie ma takiej opcji jak usm np.

#11 weblo

weblo

    BlackSeo

  • Użytkownik
  • PipPipPip
  • 176 postów

Napisano 17 czerwiec 2013 - 12:01

G chyba blokuje IP jak widzi, że idą z niego zapytania z operatorami i może wykrywa, że to proxy. Jako, że publiczne to dużego problemu z tym nie ma;)

#12 krzyniolek

krzyniolek

    BlackHat

  • BlackHat
  • PipPipPip
  • 854 postów

Napisano 17 czerwiec 2013 - 14:08

Raczej na typ proxy nie patrzy, tylko własnie operatory, jedynie timeout może trochę opóźnić takiego bana - ale tutaj tez sytuacja jest różna, po 100 pobranych danie timeouta może pozwolic dociągnąć footprint do końca, a bez tego przy 2-3 podejściu pewnie proxy dostanie bloka.

#13 weblo

weblo

    BlackSeo

  • Użytkownik
  • PipPipPip
  • 176 postów

Napisano 17 czerwiec 2013 - 15:33

Potestuje jeszcze. Dzięki za odpowiedzi.

Jakie proxy używasz?

#14 krzyniolek

krzyniolek

    BlackHat

  • BlackHat
  • PipPipPip
  • 854 postów

Napisano 17 czerwiec 2013 - 16:45

Do harvestu publiczne, maxpan ostatnio podawał metodę na harvest, ale nie publicznie tylko kilku osobom na pio, jesli masz taki sposób to wal na pw, ja wyciągam proxy na podobnej zasadzie jak to sie dzieje w proxymarkecie, tylko na znacznie mniejszą skalę. Także jak masz jakąś ciekawą metode to pisz, bo jak wiadomo metody te sa dobre gdy zbyt wiele osób z nich nie korzysta.




Użytkownicy przeglądający ten temat: 0

0 members, 0 guests, 0 anonymous users