search

croot / nekopaw

Automatically exported from code.google.com/p/nekopaw
1 stars 0 forks source link

Грабер постоянно "падает" и выдаёт ошибки доступа, перестаёт отвечать, выдаёт различные ошибки #116

Closed GoogleCodeExporter closed 9 years ago

GoogleCodeExporter commented 9 years ago 
1. составляю список
2. делаю запрос
3. начинаю выкачку
4. получаю кучу ошибок и "закрыть программу, 
и искать решение проблемы в интернете" или 
просто отказ доступа к прогармме программы 
- скрины лога прилагаются

Клинится в основном при запросах к санкаку 
и хентай-фаундри

graber2.exe v2.0.1.59а (видно на скринах)
Win Vista Ultimate SP2 x32(x86)

Original issue reported on code.google.com by Vic.Vaul...@gmail.com on 10 Jun 2013 at 11:40

Attachments:

GoogleCodeExporter commented 9 years ago 
вылет с ошибкой

Original comment by Vic.Vaul...@gmail.com on 10 Jun 2013 at 12:12

Attachments:

GoogleCodeExporter commented 9 years ago 
Откуда с какими ключевыми словами качаешь? 
Какие настройки скачки? (кол-во потоков, др. 
настройки).

Original comment by catgirlfighter on 17 Jun 2013 at 7:51

GoogleCodeExporter commented 9 years ago 
И интересует, на сколько стабильно 
происходит ошибка, можно ли воспроизвести 
с первого раза?

Original comment by catgirlfighter on 17 Jun 2013 at 7:53

GoogleCodeExporter commented 9 years ago 
К сожалению, сейчас совершенно нет времени 
этим всем заниматься. Настройки особо не 
менял вроде, кроме настройки шаблона имён 
сохраняемых файлов, качал с нескольких 
сайтов как всегда, по каким тегам - уже не 
помню (вроде бы ergo_proxy только водил, хотя 
может быть и что-то ещё добавлял). 
Повторялась стабильно, каждый раз после 
запуска задачи скачивания...

Original comment by Vic.Vaul...@gmail.com on 25 Jun 2013 at 3:30

GoogleCodeExporter commented 9 years ago 
Вероятнее всего, ошибка уже устранена. Если 
что - переоткрой или просто оставь тут 
комментарий.

Original comment by catgirlfighter on 11 Jul 2013 at 12:50

GoogleCodeExporter commented 9 years ago 
Увы и ах - но нет. Хотя подозреваю что моя 
проблема всё в том же -выкачке изображений 
(точнее их поиске) везде где только можно...

Original comment by Vic.Vaul...@gmail.com on 11 Jul 2013 at 1:38

GoogleCodeExporter commented 9 years ago 
Это я к тому, что на днях совершал похожий 
запрос, но уже по другим тегам, и получил 
всё ту же проблему с вылетами и повисаниями 
грабера. Ежели скажешь, какие окна настроек 
поскринить -могу сделать и залить сюда все 
необходимые скрины.

Original comment by Vic.Vaul...@gmail.com on 11 Jul 2013 at 1:39

GoogleCodeExporter commented 9 years ago 
какие настройки потоков стоят, с каких 
ресурсов качаешь, какие ключевые слова 
используешь. В общем, все точь в точь тоже 
самое, что мне нужно было раньше.

Original comment by catgirlfighter on 11 Jul 2013 at 1:49

GoogleCodeExporter commented 9 years ago

Original comment by catgirlfighter on 11 Jul 2013 at 1:58

GoogleCodeExporter commented 9 years ago 
Ну вот всё что есть.
Кстати, замечен ещё такой косяк: при опросе 
сайтов на предмет загрузки списков в 
процессе показывает что на том же Зерочане, 
например, больше 2к совпадений и на Санках 
ещё полтора, а по окончании процесса 
остаётся всего сотни три картинок в списке 
на скачивание... Как так?

Original comment by Vic.Vaul...@gmail.com on 11 Jul 2013 at 2:16

Attachments:

GoogleCodeExporter commented 9 years ago 
>Кстати, замечен ещё такой косяк: при опросе 
сайтов на предмет загрузки списков в 
процессе показывает что на том же Зерочане, 
например, больше 2к совпадений и на Санках 
ещё полтора, а по окончании процесса 
остаётся всего сотни три картинок в списке 
на скачивание... Как так?

От твоих настроек поиска дублей зависит. У 
зерочана нет данных по md5 пикчи, т.е. ты 
точно используешь какие-то кастомные 
правила.

Original comment by catgirlfighter on 11 Jul 2013 at 2:20

GoogleCodeExporter commented 9 years ago 
А, нет.

Все просто, никогда не качай сразу со всех 
ресурсов. Это ни разу не тестировалось 
(точнее, тестировалось, но всегда 
заканчивалось багами, глюками и непонятным 
результатом).

Правится будет хз когда, ибо качать сразу 
со всех ресурсов это бред. Нужно выбирать 
хотя бы однотипные.

Original comment by catgirlfighter on 11 Jul 2013 at 2:22

GoogleCodeExporter commented 9 years ago 
+ на твоем скрине все ошибки нормальные, они 
все должны были произойти (разве что не 
считая Item Index out of Bounds. Они возникли потому, 
что ты использовал неправильные клюючевые 
слова для указанных ресурсов (на которых 
произошла ошибка).

Original comment by catgirlfighter on 11 Jul 2013 at 2:24

GoogleCodeExporter commented 9 years ago 
Ясно. ну, просто дело в том, что я не знаю 
точно  пока , где есть что, и опять же, 
возможен вариант, когда, скажем, на Санках И 
Данбору (это как рандомный пример, я не 
утверждаю, что это так на самом деле) к 
примеру 3500 картинок с Чен из Тохо 
одинаковые, но при этом, скажем, штук 500 на 
Данбору есть тех, которых нет на Санкаку, 
или наоборот. По этому и качаю отовсюду, 
откуда только ни попадя, чтобы получить 
максимум уникальных результатов и ничего 
не упустить.
Опять же, понимаю, что не тестировалось, но 
хотелось бы, чтобы подобное работало 
как-то, если теоретически подобную задачу 
дать программе возможно. Алсо, хотелось бы 
списочек (может он уже где-то есть - просто я 
не искал?) с описаниями доступных в 
программе сайтов, что бы хоть примерно 
представлять, как с какими из них работать 
(те же правила подбора и построения 
структуры тегов) и где в целом что есть, и 
что где искать -возможно какие-то 
всплывающие подсказки в списке ресурсов 
или ещё то-то (понимаю, что это всё не по 
щелчку пальцами делается, и на всё нужно 
время, чтобы реализовать, нов будущем 
подобное, думаю, было бы приятно видеть в 
программе) а заодно - было бы неплохо, если 
бы были, скажем, группы (как бы "папки") в 
списке ресурсов, для группировки ресурсов 
по темам (например отдельно лоли-ресурсы, 
отдельно - фурри-ресурсы и т.д.) и по 
поведению (например все "буроподобные" 
сайты были сгруппированы вместе в один 
"раздел", а всякие там пиксивы-зерочаны или 
хентай-фаундри чтобы шли особняком)... Это 
так, в целом "мои 5 копеек" Что до правил 
-никаких особенных правил я не задавал, ибо 
я вообще в этом всём весьма поверхностно 
разбираюсь, и кроме как настройки потоков 
(чтоб не перегружать капризные "Санки", всё 
время запросами, как было в начал, с 
настройками по-дефолту) да настройки 
сортировки скачанных артов по папкам и 
рейтингу ничего особо и не изменял ни 
намерено, ни, вроде, даже случайно...
Про эти ошибки я ничего и не говорю - 
понимаю, что там, видимо, такой формат тегов 
не читается - меня "беспокоят" изменяющиеся 
количества артов пр исканировании и при 
скачивании, и зависания/падения программы - 
со всем остальным я уже научился бороться 
(например, удалил оба wildcritters и seiga.nicovideo из 
списка ресурсов дял опроса, ибо при их 
наличии в списке процесс клинится ещё на 
стадии опроса ресурсов на предмет наличия 
на них нужных артов...

Original comment by Vic.Vaul...@gmail.com on 11 Jul 2013 at 3:23

GoogleCodeExporter commented 9 years ago 
Да, группировки тоже были в идеях, и даже в 
планах на реализацию.

Wildcritters и nicovideo требуют обязательную 
авторизацию, поэтому без предварительной 
авторизации на них программа не может 
приступить к работе.

По поводу возможности использовать тэги 
чтобы покрыть все ресурсы и как нужно 
формировать ключевые слова. Если есть 
возможность, я добавляю ссылку на cheatsheet 
(кнопка "?" у поля для ввода тэгов). Описывать 
все довольно геморройная задача, с учетом 
того, что я не всегда сам знаю все нюансов 
поиска (просто добавляю "вввод" тех данных, 
которые пытается отправить пользователь в 
соотв. полях). В программе есть механизм 
преобразования строки тэгов под тот вид, 
который используется у ресурса (напр. на 
бурах anarchy_stocking, а где-то "anarchy stocking", 
программа сама подставит нужные вариант на 
разных ресурсах), но программа не может 
учесть, если на разных ресурсах одинаковые 
тэги пишутся по разному (напр. вместо 
anarchy_stocking - stocking_anarchy). На данный момент в 
списке еще есть ресурсы, которые вместо 
тэгов используют id искомых данных (thedoujin 
качает додзи с указанными id-шниками, таким 
же будет e/exhentai).

Original comment by catgirlfighter on 12 Jul 2013 at 8:34

GoogleCodeExporter commented 9 years ago 
Ммм, понятно... Ну, подобные нюансы учест 
ьвообще невозможно, ибо  на тех же "санях" 
тег вообще stocking_(psg)=/Тут важно скорее 
разобратсья с разделителями (то-есть как, к 
примеру, оформить теги на несколько 
персонажей с указанием аниме или на слеш, 
например... Типа vincent_law ergo_proxy или vincent law ergo 
proxy или vincent_law_(ergo_proxy) и т.п. или, енапример, 
слеш Стокинг и Брифа из PSG с учётом того, что 
stoking и brief могут быть вообще отдельные теги 
относящиеся просто к предметам одежды и 
никак не связаны с этим аниме... =_="

Original comment by Vic.Vaul...@gmail.com on 12 Jul 2013 at 11:33

GoogleCodeExporter commented 9 years ago 
По идее, проблема должна была решиться.

Original comment by catgirlfighter on 10 Sep 2013 at 11:29

GoogleCodeExporter commented 9 years ago

Original comment by catgirlfighter on 10 Sep 2013 at 11:36