» SatMap

Основные функции и возможности (на данный момент):
1. Импорт данных из кэша GoogleMV (версии 2.7+), GoogleV, EarthSlicer (только спутник)
2. Формат кэша: 1 кэш = 1 файл
3. До 100 подключаемых кэшей
4. Экспорт в кэш формата GoogleMV, SatMap
5. Поиск, сохранение и переход по введенным координатам/названию места
6. Работа с путевыми точками и треками в формате OziExplorer (*.wpt, *.plt)
7. Измерение расстояния
8. Склейка/экспорт данных в графические форматы JPG, PNG, TIFF, ECW, JPEG2000
9. Геопривязка в форматах Ozi Explorer, MapInfo, world-файл, TomTom overlay
10. Закачивание данных с сервиса Google Maps без бана
11. Показ высоты по данным SRTM

Планируется:
1. Работа с форматом kml/kmz
2. Возможность скачивать данные с других сервисов
3. Полноценная работа с GPS приемником
4. и многое другое......

Программа распространяется бесплатно. Используйте ее на свой страх и риск.


Про нумерацию уровней в различных программах:
N-й уровень SatMap = N-му уровню Google Maps = количеству букв в названии тайла (совпадает с нумерацией EarthSlicer). Нумерация уровней в GoogleMV, GoogleV соответствует N+1 уровню программы SatMap.

Так, записываюсь одним из первых тестеров!
Кстати, если не секрет, как планируется обходить защиту гугла? С помощью прокси?

Добавлено:
И ещё - сейчас "бан" гугла обходится ожиданимем в 24 часа?
А то я 8 мегабайт успел утянуть, и вот уже часов 18 сижу, ничего не могу скачать

141215

Цитата:

Кстати, если не секрет, как планируется обходить защиту гугла?

Не хотелось бы выкладывать метод на паблик (к тому же не опробованный на 100%), хоть это и не большой секрет. В инете можно найти кое-что по этому вопросу
А банят на сутки, по-крайней мере, при скачивании GoogleMV

Скачал, протестировал и вот впечатления:
Нужно увеличить шкалу уровней до 24 – есть такие места!!!
Конвертер – первые 7 уровней у меня конвертировал 30 мин – долго, что будет дальше – боюсь пробовать. И хотелось бы, чтобы был какой-нибудь прогрессбар.
Может добавить еще конвертер из EarthSlicer (forum.belmap.info/viewtopic.php?t=14)?
Порадовало наличие опции Найти/Перейти!
Может быть возможно сделсть так, чтобы на первых уровнях картинка была не в верхнем левом углу а в центре экрана?
И самое главное – глюков не замечено

Спасибо за альфа-версию! Будем надеяться на дальнейшее развитие!

svarog72

Цитата:

Нужно увеличить шкалу уровней до 24 – есть такие места!!!

Сделаю, не проблема. Честно, не знал, что такие места есть. Где такое покрытие?

Цитата:

Конвертер – первые 7 уровней у меня конвертировал 30 мин – долго, что будет дальше – боюсь

Небольшое отступление. Просьба ко всем, при описании проблемы, указывать из какой программы делалась конвертация (если она была), кол-во конвертированных блоков/тайлов, размер ОЗУ, ОС и какая файловая система, HDD, процессор.
К примеру, на моем компе (WinXP SP2 NTFS, 1 Gb ОЗУ, HDD 160 Gb SATA, Athlon 64 3000+) все, ранее закачанные в GoogleMV блоки, на всех уровнях сконвертировались в собственный формат SatMap за 15+ минут. Около 160000 файлов. Больше просто не имею
Да, из-за того, что в качестве хранилища используется один файл-контейнер на уровень, скорость загрузки изображений из кэша при смене уровня в самой программе, может происходить с незначительной задержкой. Но, на мой взгляд, плюсом такой организации кэша является отсутствие проблем при переносе кэша с одного источника на другой. Сравните скорость записи на CD/DVD ста тысяч файлов с несколькими файлами! Теоретически, размер файла неограничен 4 GB даже на FAT32. Проверить, к сожалению, пока не могу, в виду отсутствия как FAT32, так и кэша такого размера

Цитата:

И хотелось бы, чтобы был какой-нибудь прогрессбар.

Если простого окна с сообщением о процессе конвертации недостаточно, сделаю прогрессбар. Но это будет не первоочередная задача...

Цитата:

Может добавить еще конвертер из EarthSlicer

Можно, но также не первоочередная задача...

Цитата:

сделсть так, чтобы на первых уровнях картинка была не в верхнем левом углу

И это можно, в следующих версиях сделаю. Самому не нравится

Цитата:

И самое главное – глюков не замечено

Не существует программ без глюков Моя не исключение: есть утечка памяти при добавлении нового места, а еще можно попробовать пометить файл кэша атрибутом read-only и посмотреть, что получится (не советую ). Все это будет устраняться в следующих версиях.
Спасибо за внимание!

relictus
Конвертацию делал из GoogleV на компьютере Athlon 64 3800, 2 Gb ОЗУ, HDD 200 Gb SATA, WinXP SP2, NTFS кластер 512, сильная дефрагментация. Время, как уже писал, на 7 уровней – 30 минут. (Кэш у меня из 208 тыс. файлов на 2 гига. Завтра попробую еще поэкспериментировать.)

Мест с высоким разрешением нашел несколько, вот они:
Бегущие животные    -15.835324    27.194555
Верблюды    15.294508    20.479902
Колодец    15.298503    19.429724
Морские котики    -18.445900    12.012229
пляж    -33.890722    151.282125
Пляж    -33.891556    151.277487
Поселок    13.595014    20.006574
слоны    10.903606    19.932294
слоны 2    10.903621    19.933233
слоны 3    10.903822    19.935073
Человек в пустыне    15.664616    -2.189093

Добавлять места пока не пробовал – увидел, что кнопка Удалить неактивна и решил, что эта функция пока не реализована, просто перезаписал файл мест своим из GoogleV.
Те пожелания, что я написал, будут необходимы когда программа из альфа перейдет в бета Пожелания, в основном относятся, к юзабельности, а не функциональности
А пока тестирую новую классную программу SATMAP и надеюсь, что она будет плодотворно развиваться!!!
С нетерпением буду ждать следующую версию.

relictus
спасибо! отличная программа, правда над скоростью можно еще поработать.
0. Завести TODO.
1. Перемещение карты: если нажать левую кнопку мыши и потянуть в сторону, появляется значок руки и карта перемещается, если отпустить левую кнопку мыши и подождать, то значок руки исчезает. Все перемещается плавно. Но если в момент, пока значок руки не исчез, снова попытаться потянуть в сторону, все замирает, как будто заново перечитывается уровень. У меня это наблюдается с 6-го уровня.
2. Изменение масштаба всегда будет двумя способами одновременно: колесиком мыши либо левая/правая кнопка мыши, или будет сделано разделение, как в GoogleMV?
3. После выбора места в меню «найти/перейти», хотелось бы видеть на карте отметку для ориентирования.
4. При перемещении курсора, хотелось бы видеть не только координаты, но и название плитки.
5. При наведении курсора на "Найти/перейти" нет горячей подсказки.
6. Импортировать кэш 1 уровня нельзя?

Доступна новая альфа (линк в шапке): в основном багофикс + кнопка "Удалить" в окне поиска места теперь доступна и рабтоает как надо
Дальше буду выкладывать только версии, в которых есть значительные, по сравнению с предыдущей выложенной, изменения.
svarog72

Цитата:

Время, как уже писал, на 7 уровней – 30 минут. (Кэш у меня из 208 тыс. файлов на 2 гига.

Думаю, для такого количества файло - это нормально. Ведь конвертация делается только один раз, можно и подождать Если же потребуется снова обновить кэш SarMap'a из другой программы, то в него будут добавлятся только отсутствующие блоки, т.е. процесс будет много быстрее.

Цитата:

увидел, что кнопка Удалить неактивна и решил, что эта функция пока не реализована, просто перезаписал файл мест своим из GoogleV

Теперь активна, пробуй. Кстати, формат файла с сохраненными местами соответствует формату путевых точек OziExplorer'a, так что places.wpt можно смотреть/дополнять и в этой программе.
algoror

Цитата:

0. Завести TODO.

Имеется.

Цитата:

1. Перемещение карты:...все замирает, как будто заново перечитывается уровень.

Так и есть. Увы, это минус (надеюсь, единственный), от использования технологии 1уровень=1файл кэша + плавный скроллинг. Однако, паузы больше 1 сек я не наблюдал. Я и так месяц оптимизировал это дело, но количество фалов тайлов ведь не уменьшишь никак, а это основные тормоза.....

Цитата:

2. Изменение масштаба... колесиком мыши либо левая/правая кнопка мыши

Зуминг пока ЛКМ="+", ПКМ="-". Колесиком можно сделать, но нужно ли? Лично меня это очень раздражает в GoogleV

Цитата:

3. После выбора места в меню «найти/перейти», хотелось бы видеть на карте отметку для ориентирования.

В процессе реализации.

Цитата:

4. При перемещении курсора, хотелось бы видеть не только координаты, но и название плитки.

Будет.

Цитата:

5. При наведении курсора на "Найти/перейти" нет горячей подсказки.

И правда Исправлю.

relictus

Цитата:

0. Завести TODO.

Имеется.

в дистрибутиве?

Цитата:

Однако, паузы больше 1 сек я не наблюдал.

при переходе между 5-6 уровнями, пауза 3-5 сек. выше уровни еще не смотрел.

Цитата:

Зуминг пока ЛКМ="+", ПКМ="-". Колесиком можно сделать, но нужно ли? Лично меня это очень раздражает в GoogleV

точно, колесико не работает. почему то после вчерашнего быстрого тестирования, отложилось в памяти, что работает. я обычно кнопками мыши центрировал изображение, а колесиком менял масштаб. так что отдаю свой голос первым за колесико.

размер суммарного кэша 2-го уровня в GoogleMV составляет 93336 байт (sat+map+hyb). в SatMap 233752 байта, что в 2,5 раза больше. на 7-м уровне разница составляет 3 раза. что за формат кэша такой? это кластер = 16Kb? на cd он = 2Kb.

а 6. вопрос?
6. Импортировать кэш 1 уровня нельзя?

баловался с добавлением уровней. 2 раза вылезло: добавились пустые уровни 10 и 12. сейчас более подробно потестирую это место.

algoror

Цитата:

в дистрибутиве?

Нет, в голове
А зачем он в дистрибутиве?

Цитата:

при переходе между 5-6 уровнями, пауза 3-5 сек. выше уровни еще не смотрел.

Это очень странно... Какая конфигурация компа?

Цитата:

что за формат кэша такой?

Single File System без компрессии и крипто.

Цитата:

6. Импортировать кэш 1 уровня нельзя?

Пока отвечал, этого вороса еще не было
Да, 1 уровень поставляется с прогой. Только там сейчас один сателлит, гибрид и карту что-то не могу скачать... Есть? Выложи, запихну внутрь.

Цитата:

добавились пустые уровни 10 и 12.

Откуда добавляешь?

relictus
У меня 30 минут конвертировало только 7! уровней, весь кэш я пока не задавал.

relictus

Цитата:

А зачем он в дистрибутиве?

что бы все знали, что их пожелания не забыты и автор о них помнит

Цитата:

Это очень странно... Какая конфигурация компа?

celeron 2.4GHz + 512Mb RAM+ winXP+fat32. пока гоняю с винта. потом запишу на сд и там посмотрю.

Цитата:

Пока отвечал, этого вороса еще не было

когда добавлял вопрос, ответов на предыдущие еще не было

Цитата:

Есть? Выложи, запихну внутрь.

можешь вытащить из EarthSlicer, либо я качал в начале месяца: http://disk.tom.ru/vndulgh
но все же, почему не активен выбор 1-го уровня? если в кэше ничего нет, то ничего не перетрется. но если появится что-то новое, то, при той реализации какая сейчас есть, ничего не добавится.

Цитата:

Single File System без компрессии и крипто.

как-то не оптимально распределено дисковое пространство.

Цитата:

Откуда добавляешь?

из кэша GoogleMV, GoogleV не пользуюсь.

svarog72

Цитата:

У меня 30 минут конвертировало только 7! уровней, весь кэш я пока не задавал.

Попробуй добавлять по одному уровню. Засеки и сообщи кол-во блоков, время конвертации, уровень.
algoror

Цитата:

что бы все знали, что их пожелания не забыты и автор о них помнит

Помнится такое было у GoogleV, но толку? Уже ни сайта того, ни TODO не выполнено...
Я ведь хотел выложть более-менее функциональную версию своей проги, черт меня дернул сказать, что я ее пишу Хотя, плюсы очевидны - уже столько предложений!

Цитата:

но все же, почему не активен выбор 1-го уровня?

Уговорил, активирую

Цитата:

как-то не оптимально распределено дисковое пространство.

Согласен, но помни, сейчас прога только рождается, внутренности ее только формируются, и все еще может поменяться в лучшую сторону.

А что с настройками интернета?

v1.0.0.2 alpha 2007 Oct 29



Не могу выйти через прокси...

DSER

Цитата:

А что с настройками интернета?

Да нету еще инету:

Цитата:

(данная версия выложена по просьбе желающих протестировать вьювер кэша, ее функциональность очень ограничена.)

Подождем. Надеюсь что по функциональности SatMap скоро обгонит конкурентов...

relictus

Цитата:

GoogleV, но толку? Уже ни сайта того, ни TODO не выполнено

главное, чтобы SatMap не постигла судьба GoogleV. а TODO удобнее тем, что перед тем как хотелку/багу написать, почитал, и уже знаешь что это уже в очереди на выполнение.

Цитата:

черт меня дернул сказать, что я ее пишу

дорогу осилит идущий (с)

Цитата:

помни, сейчас прога только рождается, внутренности ее только формируются

вот поэтому я сразу этот вопрос поднимаю, может народ подскажет более оптимальный способ хранения. а в Single File System можно уменьшить размер блока хранения?
сейчас конвертировал вешь кэш, который есть у меня. 48538 файлов за 20мин 30сек.
в кэше реально 48592 файла вместе с 1-м уровнем (3 файла). куда делся 48592-3-48538 = 51 файл?

При переходе на 14-15 уровень ощутимые тормоза, после чего программа слетела безо всяких сообщений

Цитата:

главное, чтобы SatMap не постигла судьба GoogleV

Хотелось бы сказать, что не постигнет, но... Человек предполагает, а Бог располагает...
По-крайней мере, мне эта программа нужна самому и бросать ее я не собираюсь. Другое дело, что пишу я ее в свободное от основной работы время, а его не так уж и много

Цитата:

может народ подскажет более оптимальный способ хранения

По этой теме вопрос, как ведет себя такое хранилище как Berkley DB, которую использует EarthSlicer (я не пробовал эту прогу)? Как увеличивается размер базы, каково быстродействие. Плюсы и минусы, в общем.

Цитата:

куда делся 48592-3-48538 = 51 файл?

Ты уверен, что этот 51 файл имеет отношение к кэшу? Я имею в виду, что конвертор обращает внимание только на файлы с расширением *.jpg и *.png, т.е. в папку кэша могли каким-то образом затесаться посторонние файлы. Посмотри, плиз, ибо мои 160 с лишним тысяч файлов сконвертировались один в один.
o22

Цитата:

При переходе на 14-15 уровень ощутимые тормоза, после чего программа слетела безо всяких сообщений

Сколько на этих уровнях блоков? И
Возможно, вылет обусловлен тем, что я запаковал exe-шник пакером для уменьшения его размера и это как-то сказалось на ее стабильности?
Что скажете, может не надо паковать прогу? Это немного увеличит размер архива...

relictus

Цитата:

Ты уверен, что этот 51 файл имеет отношение к кэшу? Я имею в виду, что конвертор обращает внимание только на файлы с расширением *.jpg и *.png

перепроверил тремя способами, результат совпал. при закачке в кэш, проверяется ли целостность файлов? могу кинуть результат dir /s и содержимое базы, но только как мне вытащить имена файлов, хранящихся в базе?

Цитата:

Что скажете, может не надо паковать прогу?

Я не думаю, что вылет был из-за этого.
Скорее поверю, что памяти не хватило, так как у меня в этот момент было загружено много программ.
Если в кэш GMV добавляется информация, нужно пересоздавать кэш заново ? По-моему неудобно. Почему вообще было решено хранить кэш в одном файле ?
Ведь это потеря в скорости и более высокие требования к ресурсам.

algoror

Цитата:

перепроверил тремя способами, результат совпал. при закачке в кэш, проверяется ли целостность файлов?

Целостность файлов кэша? Да.
Попробуй локализовать на каком/каких уровнях получается несовпадение по кол-ву сконвертированных/имеющихся в наличии блоков путем конвертации по одному уровню.
Завтра пришлю отдельный просмотрщик кэш-файла.
o22

Цитата:

Скорее поверю, что памяти не хватило, так как у меня в этот момент было загружено много программ.

И это возможно. Неплохо бы конфигурацию компа увидеть и кол-во свободной памяти в момент вылета.

Цитата:

Если в кэш GMV добавляется информация, нужно пересоздавать кэш заново ?

Нет. При конвертации сначала проверяется есть ли такой файл в контейнере, т.е. при следующей конвертации (после обновления кэша GMV) будут добавлятся только отсутствующие блоки. Это должно происходить быстро.

Цитата:

Почему вообще было решено хранить кэш в одном файле ?

Потеря в скорости теоретически должна быть незначительной, как и требования к ресурсам. А один файл - из-за проблем с переносом десятков/сотен тысяч файлов. Цитирую "еще одна неприятная особенность - если организовывать большие кэши плиток в одной папке на разделе NTFS то начинает очень сильно тормозить работа с папкой. например на папке в 900 000 плиток время архивации без сжатия в архив папки длится около семи суток. но это видимо проблемы NTFS (с FAT32 и большими коллекциями работать просто невозможно - например коллекция в 10 000 плиток занимающая порядка 400 мб в архиве, не умещаетяс в развернутом виде на 2 гб. занимает процесс распаковки порядка суток. так что лучше NTFS)."

relictus
Сейчас провел эксперимент по конвертации из кэша.
Программа GoogleV
Уровень 2 – 7 мин. 5 сек.
Уровень 3 – 27 сек.
Уровень 4 – 27 сек.
Уровень 5 – 27 сек.
Уровень 6 – 27 сек.
Уровень 7 – 37 сек.
Уровень 8 – 2 мин. 4 сек.
Уровень 9 –42 сек.
Уровень 10 –38 сек. и т.д.
На уровне 10 выдало, что скопировано 855 плиток – у меня есть сомнения в реальности, да и на других уровнях тоже, но проверить не могу – в GoogleV трудно подсчитать количество плиток на уровне.

Конвертация из GoogleMV происходит, можно сказать, мгновенно – не засекал даже время.

relictus

Цитата:

Целостность файлов кэша? Да.

ты про какой кэш говоришь? GoogleMV? посмотрел, нашел 3 битых файла. итого 51-3=48 файлов потеряно при переносе.

Цитата:

Завтра пришлю отдельный просмотрщик кэш-файла.

жду.

Цитата:

При конвертации сначала проверяется есть ли такой файл в контейнере, т.е. при следующей конвертации (после обновления кэша GMV) будут добавлятся только отсутствующие блоки.

а если в кэше GoogleMV будут более новые плитки, чем уже есть в кэше SatMap, они не обновятся?

принес вчера домой последнюю альфу SatMap. и ... облом. на домашнем компьютере по всему изображению плиток идут равномерные вертикальные зеленые полосы. при перемещении, они также перемещаются. такое ощущение, что сначала прочитали картинку, затем наложили полосы, после чего работа идет с уже "подправленными" изображениями.
проверял на win98, winXP и даже в линуксе под вайном. везде одна и та же картина.
т.е. от оси зависимости никакой. видео Radeon 9600 (RV350). может у кого повторяется, отпишитесь. скриншоты снял, могу выложить.
и еще: предлагаю сделать как в GoogleMV настройку пути своего кэша, но по умолчанию брать в каталоге, от куда был запущен SatMap. а то вчера нарвался на "TSFSHugeFile.WriteBuffer - Stream write error", когда на фрешке принес домой, а там конечно же другой путь до кэша, чем прописан в *.ini.

P.S. GoogleMV и GoogleV работают без проблем на тех же осях.

algoror
на счет полос на изображении - у меня такие были на работе, а дома все нормально.

svarog72
а какая видюшка на работе?

svarog72

Цитата:

Сейчас провел эксперимент по конвертации из кэша.
Программа GoogleV
Уровень 2 – 7 мин. 5 сек.

Ужас! Это все из-за непродуманной организации кэша GV. Приходится делать рекурсивный поиск по всей той куче директорий, что в нем имеется. Отсюда тормоза, и врядли что тут поделаешь.

Цитата:

ты про какой кэш говоришь? GoogleMV?

Про кэш SM говорил. Смотри ПМ. Проверь по количеству, где не совпадение файлов по уровням, плиз.

Цитата:

а если в кэше GoogleMV будут более новые плитки, чем уже есть в кэше SatMap, они не обновятся?

Хм... и правда не обновятся. Придется делать проверку еще и по дате. Это замедлит конвертацию, но это нужно сделать. Спасибо, учту.

Цитата:

по всему изображению плиток идут равномерные вертикальные зеленые полосы

Не сталкивался с таким. Выложи скриншоты.

Цитата:

сделать как в GoogleMV настройку пути своего кэша, но по умолчанию брать в каталоге

Логично. Сделаю.

relictus

Цитата:

Проверь по количеству, где не совпадение файлов по уровням, плиз.

попробовал открыть кэш 19 уровня, в нем д.б. быть 18191 файл, но показывает, что там 0 файлов, хотя имена файлов видны. может добавишь экспорт имен файлов в текст? другие каталоги просмотрел, количество сошлось, а вот этот под вопросом. и если окажется, что цифра количества файлов при добавлении в кэш не равна их реальному количеству в кэше, придется думать о добавлении в satmap вывода в лог имен файлов при добавлении. кстати, сконвертировались в новый кэш и битые файлы (1 недокаченный и 2 в виде html страницы).

Цитата:

Не сталкивался с таким. Выложи скриншоты.

http://disk.tom.ru/kjlu7gx

algoror

Цитата:

может добавишь экспорт имен файлов в текст?

Ок, добавлю. Вчера просто не успел это сделать.

Цитата:

кстати, сконвертировались в новый кэш и битые файлы

Мда... придется еще и проверку на "битость" делать. В TODO...

Насчет полос. Есть смутное подозрение, что виноват в этом проц. При обработке JPEG-ов, в целях ускорения мат.вычислений используются команды SSE2. Можешь посмотреть на том компе, где есть полосы, поддерживает ли проц SSE2?

Цитата:

Цитата:а если в кэше GoogleMV будут более новые плитки, чем уже есть в кэше SatMap, они не обновятся?

Хм... и правда не обновятся. Придется делать проверку еще и по дате. Это замедлит конвертацию, но это нужно сделать. Спасибо, учту.

Вероятней всего нужно добавлять "галочки"

1. Не заменять
2. Заменить всё
3. Заменить старые (по времени)
4. Заменить если размер больше (как показывает опыт файлы имеющие большее разрешение имеют больший размер)