АРМАДА
Парсер русского гугла
На страницу Пред.  1, 2, 3  След.
Новая тема Написать ответ
Ср Ноя 19, 2008 2:16 pm Start Post: Парсер русского гугла 

Cabal
Гуру
Зарегистрирован: 20.10.2007
Сообщений: 1360
Обратиться по нику
# Добавлено:Сб Ноя 22, 2008 7:09 pmОтветить с цитатой
Powder писал(а):
Cabal, ссылка на адвордс предназначалась для Pepper, у которого есть парсер, работающий с ними.
Не знаю информации точнее. Знал бы - выложил бы урлы, а не мутил бы воду.


Так я того. Вообще то не упрекал, а извинялся...
Cabal - патентованный зануда.

pepper
Опытный
Зарегистрирован: 10.04.2008
Сообщений: 184
Обратиться по нику
# Добавлено:Сб Ноя 22, 2008 8:12 pmОтветить с цитатой
m_Stasuk писал(а):
хм.. а я могу получить скриптик?


Конечно.

Прошу потестить скрипт. Все подробности в readme.txt
http://www.uploading.com/files/FTFTKASR/adwords_parser.rar.html
Размер ~500kb. Такой большой потому, что используется софтина для конверта капчи. Сделано так, чтобы не использовать сторонние дополнения к питону, которые бы пришлось качать отдельно. Поэтому достаточно только установить сам python.
ICQ 434шесть49шесть8O

Cabal
Гуру
Зарегистрирован: 20.10.2007
Сообщений: 1360
Обратиться по нику
# Добавлено:Сб Ноя 22, 2008 10:24 pmОтветить с цитатой
Классно. Спасибо. :thup:
Cabal - патентованный зануда.

pepper
Опытный
Зарегистрирован: 10.04.2008
Сообщений: 184
Обратиться по нику
# Добавлено:Вс Ноя 23, 2008 12:27 pmОтветить с цитатой
Пожалуйста. Надеюсь скрипт окажется полезным не только мне.

Powder
Горячий финский парень
Зарегистрирован: 13.11.2007
Сообщений: 1762
Обратиться по нику
# Добавлено:Пн Апр 13, 2009 8:37 pmОтветить с цитатой
Апну старую тему Smile
Мне человек делал базы НЕ АДВОРДС, но он пропал. Откуда он брал статсы - я не знаю.
Нужен аналогичный парсер, но что парсить - непонятно. Дилемма.

pepper
Опытный
Зарегистрирован: 10.04.2008
Сообщений: 184
Обратиться по нику
# Добавлено:Пт Июн 05, 2009 8:25 pmОтветить с цитатой
UP Smile
Обновил версию парсера Adwords. Добавил возможность собирать адалтные кейворды через опцию showAdult, теперь собираются не только ключевики, но и статистика по ним.

http://uploading.com/files/LJSGQGE0/gap2.rar.html
http://rapidshare.com/files/241178833/gap2.rar.html

MD5: 8DE578A0B511FBCB29A5CF935F870DE0

iskand3r
Свой
Зарегистрирован: 20.11.2009
Сообщений: 66
Обратиться по нику
# Добавлено:Вс Ноя 29, 2009 9:22 pmОтветить с цитатой
pepper, чето скриптяра вываливается с ошибкой:
Traceback (most recent call last):
File "D:\work\SOFT\gap2\gap2.py", line 123, in <module>
raise ScriptStop
__main__.ScriptStop

Sad
Censored Signature

Cabal
Гуру
Зарегистрирован: 20.10.2007
Сообщений: 1360
Обратиться по нику
# Добавлено:Вс Ноя 29, 2009 11:42 pmОтветить с цитатой
iskand3r, судя по всему скрипт не нашел файл "keywords.txt". Без него не запустится кинет как раз то самое исключение. Кури файл "readme.txt" там написано как запускать.
Cabal - патентованный зануда.

iskand3r
Свой
Зарегистрирован: 20.11.2009
Сообщений: 66
Обратиться по нику
# Добавлено:Пн Ноя 30, 2009 10:49 amОтветить с цитатой
Cabal писал(а):
iskand3r, судя по всему скрипт не нашел файл "keywords.txt". Без него не запустится кинет как раз то самое исключение. Кури файл "readme.txt" там написано как запускать.



весьма забавен тот факт, что файл keywords.txt как раз был создан
Unknown
Censored Signature

Cabal
Гуру
Зарегистрирован: 20.10.2007
Сообщений: 1360
Обратиться по нику
# Добавлено:Пн Ноя 30, 2009 12:11 pmОтветить с цитатой
Посмотри в gap2\Log\log.txt что пишет. И проверь нет ли ошибки в имени файла "keywords.txt".
Cabal - патентованный зануда.

Cabal
Гуру
Зарегистрирован: 20.10.2007
Сообщений: 1360
Обратиться по нику
# Добавлено:Чт Мар 18, 2010 4:27 pmОтветить с цитатой
pepper, если ты ещё с нами откликнись и обнови пожалуста ссылки а то они умерли. Если же уже нет то кому надо, может скачать дописанную до функционала второй первую версию:
gap1,5. Cabal Edition
Cabal - патентованный зануда.

Cabal
Гуру
Зарегистрирован: 20.10.2007
Сообщений: 1360
Обратиться по нику
# Добавлено:Пт Мар 19, 2010 3:47 pmОтветить с цитатой
Плюс ко всему бонусом убрано неудобство с файлом options.ini Кто часто пользовался знает что скрипт выбрасывал исключение сообщающее о том что фунция index не дала результатов если в списке ключевиков нет того который записан в этом файле. Файл перед каждым новым парсингом приходилось удалять в ручную. Теперь если парсер завершил работу штатно, а не вылетел по ошибке или был закрыт до завершения парсинга, файл options.ini удаляется без вашего участия. Если завершение не штатное или досрочное то файл остаётся и при следующем запуске парсинг начинает с того же слова на котором был прерван как и планировась аффтаром.
Ссылка в предыдущем посте измена если качали вчера и вышеописанная особенность вас напрягла, то перекачайте.
Cabal - патентованный зануда.

humanbot
Профессионал
Зарегистрирован: 05.03.2009
Сообщений: 535
Обратиться по нику
# Добавлено:Пт Мар 19, 2010 7:34 pmОтветить с цитатой
Cabal писал(а):
pepper, если ты ещё с нами откликнись и обнови пожалуста ссылки а то они умерли. Если же уже нет то кому надо, может скачать дописанную до функционала второй первую версию:
gap1,5. Cabal Edition


это с "адалтными кейвордами"?

PS: Cabal спасибо работает. :thup:
И как человеку подхватившему знамя разработки парсера, вопрос а можно прикрутить проверку стоимости клика?
humanBot
Новостной сайт за пять минут. Уже нет! Sad

Cabal
Гуру
Зарегистрирован: 20.10.2007
Сообщений: 1360
Обратиться по нику
# Добавлено:Пт Мар 19, 2010 9:02 pmОтветить с цитатой
humanbot писал(а):
Cabal писал(а):
pepper, если ты ещё с нами откликнись и обнови пожалуста ссылки а то они умерли. Если же уже нет то кому надо, может скачать дописанную до функционала второй первую версию:
gap1,5. Cabal Edition


это с "адалтными кейвордами"?

PS: Cabal спасибо работает. :thup:
И как человеку подхватившему знамя разработки парсера, вопрос а можно прикрутить проверку стоимости клика?


Да это с адальтом и статой по кейвордам. Обсуждаем эту версию и пишем вопросы и предложения не в этом топике, а в том в котором начали этот разговор будя уж так сложилось исторически.
PS: Проверки стоимости клика на этом сервисе нет, а это знаешь ли парсер именно его, да и я не "подхватил знамя" а только дописал парсер до кондиции которая была у второй версии.
Cabal - патентованный зануда.

Cabal
Гуру
Зарегистрирован: 20.10.2007
Сообщений: 1360
Обратиться по нику
# Добавлено:Сб Мар 20, 2010 12:28 amОтветить с цитатой
http://uploading.com/files/d6c355e9/gap1.5.rar/
То же самое что и по прошлой ссылке плюс информация по Avg.CPC
Avg.CPC - это такой показатель который якобы обозначает цену клика. Причём якобы среднюю. На самом деле таких денег за клик вы скорее всего никогда не увидите если только вы сами не адвертайзей который должен их Гуглу заплатить Smile Если же вы смертный паблишер то этот показатель почти ничего не даёт - цена за клик для вас скорее всего будет другой. Пусть и не всегда разительно меньше но всегда другой.
При этом у меня все параметры парсятся одной регуляркой а регулярки прожорливы тем более большие и если циферки с таким вот $ знаком - не ваш фетишь, то качать новый вариант не обязательно.
Cabal - патентованный зануда.
Новая тема Написать ответ    ГЛАВНАЯ ~ ПОИСКОВЫЕ СИСТЕМЫ

Перейти:  





Генеральный спонсор



Партнеры