0000134: Многопоточная закачка \ отдельный качальщик

Notes
(0000260) Fighter (reporter) 06-10-2010 04:19	Поддерживаю

(0000265) gpsMax (manager) 06-10-2010 18:14 edited on: 06-10-2010 18:14	А по-моему, система закачек и так офигенна. До сих пор поражаюсь удобству этих окошек. И особо непонятно, какая разница, что держать запущенной внешнюю качалку, что сам САС? Вообще, в качестве внешней качалки можно использовать wget. Консольная утилита, с широкими возможностями конфигурирования в командной строке, и всё, что потребуется от САСа - выдавать ей задания пачками. Кроссплатформенная, кстати - при желании можно переносить файл заданий на никсы и качать там.

(0000269) Parasite (administrator) 07-10-2010 05:13	>А по-моему, система закачек и так офигенна. До сих пор поражаюсь удобству этих окошек. Выше речь шла не про окошки (не про интерфейс). Сама же закачка в сасе (на уровне алгоритмов) весьма убога. Куков нет, REUSE_SOCKET нет, multi-threads нет, RESUME нет, итд. >какая разница, что держать запущенной внешнюю качалку, что сам САС? Причем тут внешняя качалка? Мы говорим о самом сасе в части его собственного функционала, коль скоро сас без фичи закачки (в нем же, как части себя) - никому не нужен. >при желании можно переносить файл заданий на никсы и качать там. При желании ВЕСЬ сас прекрасно работает под никсами (в выне) даже на наст.момент, включая имеющиеся на сег.день алгоритмы закачек в оном. И токи да, работает стабильнее чем под виндой. :)

(0000275) gpsMax (manager) 07-10-2010 06:21	Хм. Посмотрел сейчас трафик - куки, как минимум, отдаются. Где подвох? >задал участок\карту в саcе, сбросил задание в этот "aka планировщик", и забыл. САС при этом можно вообще выключить\выйти из. Это разве не описание внешней качалки? Вот и непонятно, зачем функционал по закачке выводить вовне, когда можно допилить внутренние механизмы. Впрочем, сильно хуже от этого точно не будет, а вам, как знающему систему изнутри, всё куда как виднее.

(0000280) Parasite (administrator) 07-10-2010 08:33 edited on: 07-10-2010 08:36	>куки, как минимум, отдаются. Где подвох? САС сроду, с первых своих версий, не работал с куками. Это общеивестный боян на форуме, вызывавший в свое время немалые бурления, и обходимый по настоящее время разнообразнейшими костыликами (например я обхожу это путем прокси-скриптика на перле, кой и делает то что сасу пока не по зубам). Если куки в Вашем случае - отдаются, то непонятно откуда они взялись и что они там собственно делают. Контроль\использование же куков со стороны пользователя, мягко скажем, НУЖНО - многие сервисы банят без них, например тот же гугль. На настоящий момент полноценно ввести работу с куками в сасе нельзя, даже зная алгоритм их формирования. :( >Это разве не описание внешней качалки? Нет, это описание функциональной части именно саса. Вы же не называете например дллку для работы с жпегом (ijl15.dll) - "внешним просмотрщиком к сасу". А оно в составе саса давно есть, причем от совершенно левого программиста который и знать про сас ничего не знает, наверное. :) >вам, как знающему систему изнутри, всё куда как виднее. Я не являюсь прямым разработчиком саса.

(0000284) DJ VK (manager) 07-10-2010 12:41 edited on: 07-10-2010 12:58	ИМХО невозможность задания последовательно нескольких уровней закачки и невозможность задания разных прокси для каждой закачки - большие минусы. 0. Когда можно будет выбрать несколько уровней закачки? 1. Предлагаю для программы предусмотреть несколько прокси серверов, скажем 4 штуки. И при создании закачки выбитать - 0(без прокси), прокси1, прокси2,... Я так панимаю что небольшой массив браузеров не намного сложнее 1 браузера. 2. Я бы сделал для всех закачек отдельную панель с таблицей - каждая строка - отдельная закачка. Или дочерние панельки с лампочками и индикаторами. Можно сразу видеть все закачки - можно их вообще не видеть, скрыв панель. И проблемы с пропаданием окошек дочерних тоже больше не будет. Голосую за отдельную панель. Еще вариант: Панель свернута-Панель краткая (задача, % и живучесть)-Полная таблица в новой форме. TMS AdvStringGrid прекрасно подойдет - там и прогресс бар, и индикатор -лево-право(для быстрой оценки протух прокси или нет можно юзать), и т.д. 3. Совсем не реальное. хорошо бы задавать очередность закачек - эту прямо щас - одновременно с уже качающимися, а эту добавить в конец - после всех. Ой, щас начнут критиковать. (((

(0000286) zed (manager) 07-10-2010 18:29	>Ой, щас начнут критиковать. ((( Почему же, вполне реальные хотелки, и было бы здорово чтобы в SAS такое появилось. И не к 2012-му году, а хотя бы на годик раньше.

(0000289) vdemidov (manager) 08-10-2010 06:40	2012 это оптимистичная оценка. Если я буду продолжать ковыряться один, то может и на годик позже или вообще никогда.

(0000294) Fighter (reporter) 08-10-2010 12:06	А какой язык программирования? Может я смогу чем помочь?

(0000299) DJ VK (manager) 11-10-2010 06:49 edited on: 11-10-2010 06:51	Я могу нарисовать интерактивную табличку и тулбар для закачек, в принципе именно визуалкой и занимаюсь (плагины для меня в этом плане ну гораздо менее родные, поэтому с ними вышли затруднения...), предлагаю создать ветку для этого в "разработке". Мне понадобится только алгоритм запроса тайлов и описание как это сейчас работает в потоках (Возможно фрагменты исходников). Если надо могу для начала сделать тулбар для абстрактных задач (типо генератора случайных чисел) в качестве демки.

(0000312) gpsMax (manager) 12-10-2010 18:07 edited on: 17-05-2011 10:50	C форума, тема "Чего вы хотите", 2008 год: http://sasgis.org/forum/viewtopic.php?t=14&f=2#p46 Многопоточную закачку, причем каждый поток со своим прокси. Если без многопоточной, то хотябы какой-то ротатор проксей из списка с возможностью импорта списка по ссылке. Да, можно настроить это все через проксисвичер какой-нить, но он ведь не знает, что прокси забанен гуглом и постоянно натыкается на нерабочие, что сильно тормозит процесс. А вот программа могла бы выкидывать забаненные гуглей проксики из списка и юзать только чистенькие.

Users who viewed this issue
User List	Anonymous (3078x), vdemidov (2x), zed (3x)
Total Views	3083
Last View	20-04-2024 00:51

Issue History
Date Modified	Username	Field	Change
04-10-2010 13:20	Parasite	New Issue
04-10-2010 13:25	vdemidov	Status	new => acknowledged
04-10-2010 13:26	vdemidov	Target Version	=> 40xxxx
06-10-2010 04:19	Fighter	Note Added: 0000260
06-10-2010 18:14	gpsMax	Note Added: 0000265
06-10-2010 18:14	gpsMax	Note Edited: 0000265	View Revisions
07-10-2010 05:13	Parasite	Note Added: 0000269
07-10-2010 06:21	gpsMax	Note Added: 0000275
07-10-2010 08:33	Parasite	Note Added: 0000280
07-10-2010 08:36	Parasite	Note Edited: 0000280	View Revisions
07-10-2010 08:36	Parasite	Note Revision Dropped: 280: 0000090
07-10-2010 12:41	DJ VK	Note Added: 0000284
07-10-2010 12:51	DJ VK	Note Edited: 0000284	View Revisions
07-10-2010 12:58	DJ VK	Note Edited: 0000284	View Revisions
07-10-2010 18:29	zed	Note Added: 0000286
08-10-2010 06:40	vdemidov	Note Added: 0000289
08-10-2010 12:06	Fighter	Note Added: 0000294
11-10-2010 06:49	DJ VK	Note Added: 0000299
11-10-2010 06:51	DJ VK	Note Edited: 0000299	View Revisions
12-10-2010 18:07	gpsMax	Note Added: 0000312
13-10-2010 05:18	vdemidov	Note Added: 0000318
13-10-2010 09:33	Parasite	Note Added: 0000324
07-11-2010 19:37	gpsMax	Tag Attached: загрузка
13-11-2010 10:45	Parasite	Note Deleted: 0000318
13-11-2010 10:46	Parasite	Note Deleted: 0000324
13-11-2010 10:56	gpsMax	Tag Attached: закачка
07-04-2011 00:03	gpsMax	Tag Attached: прокси
11-04-2011 07:11	vdemidov	Status	acknowledged => confirmed
17-05-2011 10:50	gpsMax	Note Edited: 0000312	View Revisions
17-05-2011 10:51	gpsMax	Tag Attached: http headers
17-05-2011 10:51	gpsMax	Tag Attached: антибан
17-05-2011 10:52	gpsMax	Tag Attached: скачка
17-05-2011 10:53	gpsMax	Tag Attached: плагины
18-05-2011 10:45	Parasite	Tag Detached: http headers
06-06-2011 21:53	gpsMax	Priority	high => none
22-10-2012 06:53	Tolik	Relationship added	has duplicate 0001647
22-10-2012 08:23	Tolik	Relationship replaced	related to 0001647

SASGIS