Ru-Board.club
← Вернуться в раздел «Программы»

» SatMap

Автор: rex
Дата сообщения: 02.03.2009 11:57

Цитата:
relictus

Цитата:
Регулируется. В SatMap. Я же писал уже насчет этих настроек.

Я их видел, но в них у меня реконнект по сути отключен - вывел в них время на 30 сек дабы не было конфликта с прогой провайдера, впрочем сам windo'вый реконнект тоже отключен еще с 3.18 и по тем же причинам. Та, что реконнект внешний, не SatMap'овский.
Автор: relictus
Дата сообщения: 02.03.2009 12:14
rex

Цитата:
Та, что реконнект внешний, не SatMap'овский.

Да это понятно, что внешний. Суть этого параметра в проге такова: допустим, качался файл, внешний "реконнектор" (неважно какой) разорвал инет соединение на половине закачанного файла, SatMap это дело просек, подождал N сек и повторил закачку оборванного файла. Яснее я уже объяснить не могу

Добавлено:
egor23
netrebos

Цитата:
мы готовы это проверить

Специально для вас: turbo-SatMap
Реальное ускорение только на скоростном инете, диалап не годится.
Также пофиксены некоторые баги и устранен (я надеюсь) пропуск тайла при вводе каптчи. Тестим и сообщаем результаты
Автор: rex
Дата сообщения: 02.03.2009 18:20
relictus

Цитата:
Суть этого параметра в проге такова: допустим, качался файл, внешний "реконнектор" (неважно какой) разорвал инет соединение на половине закачанного файла, SatMap это дело просек, подождал N сек и повторил закачку оборванного файла. Яснее я уже объяснить не могу

Это вы о параметре "при обрыве соединения рекрннект после..." или еще какой-то есть?
Автор: netrebos
Дата сообщения: 02.03.2009 18:58
relictus

Цитата:
turbo-SatMap
Кажется, то что надо!!!!

Провел три теста.
Первый -- настройки интернета по умолчанию (5 сек реконект и 1 попытка) выделенный квадрат на 11 470 тайлов 15,16,17 уровни.
результат -- 629 тайлов за 4 минуты. Выскочило окно о том, что 628 тайлов загружено, 1 нет. Без каких либо изменений, по новой нажимаю старт -- отдает еще 622 тайла.

Второй -- в настройках интернета реконект уменьшен до 2 сек, а попытки увеличены до 10 раз. Объем выделения -- 2 237 тайлов 15,16,17 уровни. Результат тот же -- отдает по 635 -- 683 тайла.

Третий -- в настройках интернета реконект увеличен до 10 сек, попытки так же 10 раз. Объем выделения 25 718 тайлов 19 уровень. Результат -- качает (аж свистит) уже 36 минут. Явно через каждые четыре минуты притормаживает, но ничего не обрывается -- подумает и дальше качает. На этот момент уже отдал около 4 200 тайлов, процесс продолжается. Но даже если бы и оборвался, скорость в 4 тыс т. в полчаса уже очень даже приемлема!!!!. А то от прежней скорости у меня зубы сводило.


P.S- Кстати окно капчи у мнея ни разу не выскакивало. Сразу вываливается сообщение, что такое-то сообщение загружено успешно.

Добавлено:
relictus

Цитата:
turbo-SatMap


Все, на 9 000 тайлов сам оборвал выкачивание и посмотрел, чего получилось. В общем все получилось, только остались пробои в один тайл. Я так понимаю, что примерно через 500 - 680 тайлов Satmap делает реконект (и 5 секунд по умолчанию ему явно мало), а тайл на котором он реконектится по-прежнему не скачивается. Поскольку это проблема обсуждается относительно давно, у меня есть только ссылка на соседский опыт Sas. Там на любом масштабе рабочего поля можно в фоновом режиме посмотреть загружены или нет тайлы другого уровня. Такой функцией удобно подчищать большие площади, тем более, что такие пробои могут возникать не только по вине программы -- не совпали два выделения на большом масштабе и получился пробой, который отловить не так уж и просто. Но это уже разговор про немного более дальнюю концепцию, если вы всерьез хотите выйти за рамки просто подготовительной программы картоосновы для OZI. Если иметcя возможность оперировать десятками гигабайт информации, то загонять ее только в плоский мир растра OZI, почти то же самое что использовать SATmap только для распечатки бумажных карт на цветном принтере.

Ну а сейчас на ночь хочу оставить задание в 300 тыс тайлов -- посмотрим как справится.

Автор: Nikolai2004
Дата сообщения: 02.03.2009 20:15
netrebos
для информации скажи какой у тебя результат на speedtest.net
Автор: netrebos
Дата сообщения: 02.03.2009 20:31
relictus
Тут еще одна идея -- вопрос. (Пусть програмисты не кидают в меня камни). А нельзя ли сделать так, что бы одновременно запускалось и параллельно работали, скажем, два SatMap. Выделенка такую нагрузку явно пропустит, а вот пропустят ли винды и гугль?. А так скорость будет уже не 8 тыс тайлов в час, а 16 и получится настоящий пылесос для гугля. Если мне память не изменяет, GooglMV работал параллельно сам с собой.

Автор: rex
Дата сообщения: 02.03.2009 20:39
netrebos

Цитата:
а вот пропустят ли винды и гугль?

Если запускать в разные потоки разные слои то без проблем. У меня так одновременно работали SatMap и два GMV. Но лучше эти слои разнести в одной проге.
Кстати последняя версия satmap_v1.4.1.25 работает раза в 2-3 быстрее предыдущей.
Автор: netrebos
Дата сообщения: 02.03.2009 20:44
Nikolai2004

За три минуты speedtest.net выдал три разных показателя.
download 62472 kb\s | 29970 | 50660
upload 58196 kb\s | 26332 | 32864

В принципе он достаточно мощный на выходе из конторы, но сильно ужат по потребителям, цифр сейчас не помню, а дежурного напрягать не хочу.

Добавлено:
rex

Цитата:
запускать в разные потоки разные слои

Мне, что бы это понять, требуется более подробное объяснение или ссылка, где можно почитать.


Цитата:
Но лучше эти слои разнести в одной проге.
-- это, как я понимаю, уже пожелание relictus


Автор: rex
Дата сообщения: 02.03.2009 21:21
netrebos
Карту качать одним потоком, спутник другим, гибрид третьим.
Автор: netrebos
Дата сообщения: 02.03.2009 23:06
rex

Цитата:
Карту качать одним потоком, спутник другим, гибрид третьим.

Это я как раз понял сразу, а как это организовать технически?. Например, SatMap и SAS нормально работают в параллельном режиме без дополнительных усилий. Но как заставить на одном компьютере пусть и с разных дисков одновременно загрузить две SatMap? Пусть даже у них будут разные цели, кэши и т.п.
Автор: relictus
Дата сообщения: 03.03.2009 07:48
rex

Цитата:
Это вы о параметре "при обрыве соединения рекрннект после..." или еще какой-то есть?

Да-да, о нем самом.

netrebos

Цитата:
Я так понимаю, что примерно через 500 - 680 тайлов Satmap делает реконект (и 5 секунд по умолчанию ему явно мало), а тайл на котором он реконектится по-прежнему не скачивается.

В турбо-версии прога специально НЕ реконнектится, только при обрыве связи, которая, как я понял, имеет место быть в твоем случае. И тут главное подобрать правильные значения реконнекта и числа попыток, что наглядно показал твой третий тест. Но неужели тайл пропускался и в нем? Технически такого быть не могет

Цитата:
Ну а сейчас на ночь хочу оставить задание в 300 тыс тайлов -- посмотрим как справится.

Сообща результат! Выскакивала ли каптча?

Цитата:
Тут еще одна идея -- вопрос. (Пусть програмисты не кидают в меня камни). А нельзя ли сделать так, что бы одновременно запускалось и параллельно работали, скажем, два SatMap.

Можно, но сейчас стоит запрет на это Одновременно может работать только один экземпляр проги.

Автор: relictus
Дата сообщения: 03.03.2009 10:49
netrebos
Скинул в личку ссылку на версию с возможностью одновременного запуска нескольких копий программы. Используй ее на свой страх и риск - я не знаю, как прога поведет себя при мульти-закачке в один кэш. Теоретически - должна нормально работать, а там - проверяй сам )
Но о результатах доложи, интересно
Автор: rex
Дата сообщения: 03.03.2009 11:26
relictus

Цитата:
Это вы о параметре "при обрыве соединения рекрннект после..." или еще какой-то есть?
Да-да, о нем самом.

Круто! Идея назвать стандартным именем операции, совершенно другую операцию явно не стандартна. Вы случайно не к 1-му апрелю готовитесь?
Или просто хотите избавить программу от ненавистного настоящим профессионалам интуитивно понятного юзеру интерфейса? Пока получается!
Автор: relictus
Дата сообщения: 03.03.2009 12:11
rex
Юморишь?
Предлагай свое название, интуитивно понятное.
Автор: egor23
Дата сообщения: 03.03.2009 12:48
Идёт закачка по выделению
шаловливые ручки в это время кликнули правой кнопкой мыши загрузить тайл
и SatMap перестал загружать тайлы, через некоторое время возобновил закачку
тайл на котором кликал непонятно, то ли загрузился, то ли нет, останавливать закачку ради выяснения этого нет желания.
Автор: relictus
Дата сообщения: 03.03.2009 12:54
egor23

Цитата:
тайл на котором кликал непонятно, то ли загрузился, то ли нет

Ну, если он есть на сервере, то должен был загрузиться
Автор: egor23
Дата сообщения: 03.03.2009 13:09
relictus
обозначения
b\kb\Gb и т.п. надо B\kB\GB
b - бит
B - байт

а как на счёт отображения высоты решения никого нет?
Автор: relictus
Дата сообщения: 03.03.2009 13:28
egor23

Цитата:
b\kb\Gb и т.п. надо B\kB\GB
b - бит
B - байт

Ну, если быть совсем правильным, то согласно стандартам МЭК их вообще надо писать как KiB/MiB/GiB (кибибайт/мебибайт/гибибайт), но ведь так никто не пишет?


Цитата:
а как на счёт отображения высоты решения никого нет?

Есть, но этим надо просто вплотную заняться.
Автор: egor23
Дата сообщения: 03.03.2009 13:42
relictus

Цитата:
Ну, если быть совсем правильным, то согласно стандартам МЭК их вообще надо писать как KiB/MiB/GiB (кибибайт/мебибайт/гибибайт), но ведь так никто не пишет?

смотря где
в MediaInfo пишут
может стоит писать, пускай народ образовывается.
Автор: rex
Дата сообщения: 03.03.2009 13:52
relictus

Цитата:
Предлагай свое название, интуитивно понятное.

Да хоть: "После восстановления соединения повторить закачку последнего тайла"
Немного длинно, зато однозначно!
А регулировка времени реконнекта пусть уж относится к реконнекту, как привыкли.
Автор: egor23
Дата сообщения: 03.03.2009 13:56
relictus

Цитата:
Предлагай свое название, интуитивно понятное.

Дополнительно:
Всплывающие подсказки, и там в развёрнутом виде описание за что отвечает настройка.
Автор: rex
Дата сообщения: 03.03.2009 14:22
relictus
Как "погасить" прямоугольник выделения не выходя за пределы прямоугольника?

egor23

Цитата:
Дополнительно:
Всплывающие подсказки, и там в развёрнутом виде описание за что отвечает настройка.

Присоединяюсь.
Учитывая отсутствие хэлпа очень полезная функция. Особенно для новых кнопок и боксов.
Автор: relictus
Дата сообщения: 03.03.2009 14:36
egor23

Цитата:
может стоит писать, пускай народ образовывается

SatMap - не образовательная программа
Кого сильно напрягает, в хекс-редакторе меняется легко

rex

Цитата:
"После восстановления соединения повторить закачку последнего тайла"

Слишком длинно, не помещается. Придумай покороче

egor23

Цитата:
Всплывающие подсказки, и там в развёрнутом виде описание за что отвечает настройка.

Где-то так и сделано.

rex

Цитата:
Как "погасить" прямоугольник выделения не выходя за пределы прямоугольника?

Кликнуть туда-сюда "использовать координаты"


Цитата:
Учитывая отсутствие хэлпа очень полезная функция. Особенно для новых кнопок и боксов.

А я ведь просил кого-нибудь помочь мне с хэлпом. В ответ - тишина, а мне некогда прогой заниматься, не то что хэлпом. А сезон настанет, так вообще уйду в поля/леса....
Автор: egor23
Дата сообщения: 03.03.2009 15:14
relictus

Цитата:
Кого сильно напрягает, в хекс-редакторе меняется легко

дело не в напряге, а в том что должно быть правильно, хотя бы b - B.

Цитата:
А я ведь просил кого-нибудь помочь мне с хэлпом. В ответ - тишина, а мне некогда прогой заниматься, не то что хэлпом. А сезон настанет, так вообще уйду в поля/леса....


Цитата:
оффициально - не возьмусь. (не выходят у меня факи, затягивается на неопределённое время)
не оффициально - посмотрю топик, набросок наверно сделаю.

времени нет, совсем, даже набросок сделать.
Автор: relictus
Дата сообщения: 03.03.2009 15:22
egor23

Цитата:
дело не в напряге, а в том что должно быть правильно, хотя бы b - B.

Уговорил

Цитата:
времени нет, совсем, даже набросок сделать.

Во-во, аналогично....
Автор: netrebos
Дата сообщения: 03.03.2009 15:30
relictus
По порядку. Пока только про
Цитата:
turbo-SatMap
, до эксперимента с файлом из лички еще не
добрался. Вчера оставил
Цитата:
turbo-SatMap
на ночь с заданием в 470744 тайлов на 19 уровне (реконект 10 сек, попытки 10 раз). Уже сегодня обнаружил сообщение об успешно выкаченных 2700 тайлов. Нажал "оК", снова "выполнить" -- пошло качать. На 1100 остановилось сообщила об успехе. Сегодня интеренет работал заметно хуже вчерашнего -- видимые обрывы связи есть даже в Мозилле. Увеличил реконект до 15 секунд -- пока качает. Ни одного окна каптчи ни вчера, ни сегодня не появлялось. Пропуски тайла фиксируются на каждой паузе. Похоже для максимальной автоматизации процесса надо выставлять максимально большое значение реконекта. Тогда если выставить 120 сек программа будет реконектиться 2 минуты. Это затруднит ей работу, если реальный обрыв не превышал 2 - 3 секунды или нет? Или программа должна уметь в автоматическом режиме нажимать "ОК" и "выполнить", т.е делать два вида реконекта -- скажем до 1 мин в настройках и через 10 - 30 мин, если лимит настроек оказался мал. У нас в конторе интернет конечно хорош, но загрузка трафика непредсказуема, да и дос-атаки частое явление. Пока писал, закачка прекратилась на 3 тыс с 15 секундным реконектом. Увеличил до 30 секунд -- справился только с 1000 тайлов. А потом и вовсе стал показыват 0. Но это уже явно проблемы с нашим сервером.

По поводу этого пропущенного тайла. Я, как пользователь, так и не понял, чего вы все беспокоитесь? Ну пропустит Satmap на 20 тыс тайлов 200 штук. При таких объемах обрабатываемых файлов пробои неизбежны и не только по вине программы. Слишком много факторов. Важнее иметь способ с более низкого уровня видеть заполнение следующих слоев. Тогда при заполненном кэше добрать недостающие тайлы минутное дело. Ну и, конечно, полигоноое выделение еще больше облегчит задачу.

Походу еще одна проблема нарисовалась, которую пока впрямую связывать с Satmap не стал. Дома попробовал запустить Satmap на малыше EeePC 700. Satmap с кэшем расположил на 16 гб SDHC карте, предварительно отформатированной в NTSF, во встроенном картридере. В таком режиме версия 1.4.1.23 работала нормально. Но через 100 тайлов работы turbo-SatMap малыш повис насмерть. После перезагрузки (через кнопку) карта умерла, т.е стала не читаемой. Вот теперь я не могу понять кто виноват -- то ли карат оказалсь глючной (но она уже полгода отработала в формате FAT32), то ли форматирование оказала корявым, то ли виноват ужатый шлюз кардридера EeePC, который не справился с потоком информации от SatMap, а грубая перезагрузка в системе NTSF погубила карту.
Автор: relictus
Дата сообщения: 03.03.2009 15:52
netrebos

Цитата:
Похоже для максимальной автоматизации процесса надо выставлять максимально большое значение реконекта. Тогда если выставить 120 сек программа будет реконектиться 2 минуты. Это затруднит ей работу, если реальный обрыв не превышал 2 - 3 секунды или нет?

Не совсем так. Как упрекнул меня rex, использованный мной термин "реконнект" неправилен. Программа, при возникновении ошибки во время закачки тайла (обрыв связи) ждет (просто пауза в работе) указанное время ("При потере соединения, реконнект после (сек)"), после которого повторяет закачку этого тайла. Т.е. 2 минуты нисколько не затруднит проге работу, наоборот, она будет это время отдыхать

Цитата:
Вот теперь я не могу понять кто виноват

Упс... Мне кажется, что карта не выдержала форматирование в NTFS. Попробуй низкоуровневое форматирование сделать для ее реанимации.
Автор: egor23
Дата сообщения: 03.03.2009 16:40
netrebos

Цитата:
расположил на 16 гб SDHC карте

Вот интересно, помнится у карт памяти (раньше так было) был ограниченный ресурс циклов записи, может что-то изменилось, не отслеживаю новинки.
на данный момент 1.4.1.25 имеет скорость 1.3тайла\сек (час пик)
за 1мин происходит 2700 операций записи в кэш и cache-journal.
Автор: netrebos
Дата сообщения: 03.03.2009 17:06

Цитата:
Попробуй низкоуровневое форматирование
Как, если ни один комп ее вообще никак не определяет?
Автор: egor23
Дата сообщения: 03.03.2009 17:08

Цитата:
может что-то изменилось, не отслеживаю новинки

насколько понял ничего не изменилось
http://www.transcendusa.com/Products/ModDetail.asp?ModNo=147&LangNo=0&Func1No=&Func2No=
Specification
Durability:
10,000 insertion/removal cycles

Страницы: 12345678910111213141516171819202122232425262728293031323334353637383940414243444546474849505152535455565758596061626364656667

Предыдущая тема: 2gis (ДубльГИС) 2ГИС


Форум Ru-Board.club — поднят 15-09-2016 числа. Цель - сохранить наследие старого Ru-Board, истории становления российского интернета. Сделано для людей.