Ru-Board.club
← Вернуться в раздел «Программы»

» i2: Analyst's Notebook, iBase, TextChart, etc.

Автор: Arbat
Дата сообщения: 02.06.2014 22:58
Это, я как понимаю, Главкод? (по поводу плагинов?;)
Автор: maksyoustas
Дата сообщения: 02.06.2014 23:14
Именно так
Автор: Gladstone
Дата сообщения: 03.06.2014 11:25
Для тех кто не знал, в iBase есть учебная база данных, основанная на вот этом деле.
В базе уже есть:
Шаблон
Данные
Формы запросов
Множества
Спецификации импорта



МЕЧТА КАЖДОГО АНАЛИТИКА

ЛИКВИДИРОВАНА МЕЖДУНАРОДНАЯ НАРКОГРУППИРОВКА:
программные продукты i2 помогают следователям пробираться сквозь джунгли информации.


Комиссар земли Бавария (Германия) наконец-то получил именно то, что ему было крайне необходимо: новое эффективное оружие по борьбе с международной организованной преступностью - специальное программное обеспечение. Об этом свидетельствует одно из недавно проведенных расследований.

Германо-румынская преступная группировка осуществляла поставку 1 тонны героина (стоимость на «черном» рынке 350 млн. долларов США) из Турции в Голландию, Испанию и Англию.
Дело было открыто после задержания 30 килограммов героина в Дувре. Следы наркокурьеров были обнаружены в Германии, затем в Англии и Нидерландах. К расследованию срочно были подключены следователи службы криминальной полиции Баварии, которым коллеги из Роттердама, Лондона и Будапешта стали поставлять всю информацию, касающуюся этой наркогруппировки.

Собранная по делу информация включала более 60.000 записей, в том числе телефонных переговоров по 6.000 номерам, по 3.000 адресам, 1.500 лицам, 800 компаниям …
Этот огромный массив сведений вполне мог загрузить детективов на годы непростой «ручной» работой.

Важно отметить, что чаще всего по сложным делам детективам удается поймать только «мелкую рыбешку», в то время как ключевые игроки и сама структура международной преступной группировки остаются нераскрытыми.

Однако по данному делу следователи использовали другую тактику. С самого начала была сформирована аналитическая рабочая группа, оснащенная системой «Analyst’s Notebook» (программный продукт компании i2). Используя визуальное представление данных, следователи смогли выявить все связи, совершив прорыв в расследовании крупного дела. В результате уже на первом этапе расследования по всей Европе были арестованы 40 подозреваемых, включая предполагаемого лидера преступной группировки, а также изъято более 300 килограммов героина.


На примере этого дела Главный комиссар Гюнтер Сейболд и его коллеги из службы криминальной полиции Баварии в полной мере продемонстрировали эффективность программных продуктов i2, которые в настоящее время приняты в качестве стандарта для правоохранительных органов многих развитых стран.

Никогда до этого не проводился одновременный анализ такого объема самой разной информации. В данном случае вся информация по делу, полученная из баз данных полиций различных стран, а также данные о телефонных переговорах, объединялись в одну гигантскую схему и затем анализировались с использованием Analyst’s Notebook.

«Мы просеяли примерно 7 миллионов записей и выявили 8 тысяч объектов, - сказал г-н Сейболд, выразив изумление, - только щелкай «мышкой» и просматривай связи и их отношения. Это мечта каждого аналитика! Представленные графические схемы, отображающие взаимосвязи, просто невероятны!»
«Программный продукт Analyst’s Notebook,- добавил Главный комиссар, - уже используется во всех подразделениях Баварии по борьбе с организованной преступностью. Благодаря постоянному обучению и постоянной работе с Analyst’s Notebook, мы будем использовать все его возможности. Это - превосходный продукт! Конечно, он не заменяет интуицию, опыт и знания аналитика, но проясняет мышление и помогает поставить правильные вопросы».
Автор: Undaster
Дата сообщения: 03.06.2014 21:11
Gladstone, любопытно поглядеть.. где это можно найти?
Автор: Gladstone
Дата сообщения: 04.06.2014 10:37
ПУСК--> iBase --> Сервис --> Установка Базы Данных Руководство Пользователя.

После этого эту базу, со всеми причиндалами(данные по платежам, биллинг наркодиллеров, листы посадки пассажиров и так далее) в Мои Документы, соответствующая папка iBase и так далее
Автор: LIFA71
Дата сообщения: 25.06.2014 17:25
Всем привет!

Принимайте новичка на ваш форум

Работаю с программой i2 Analyst's Notebook с февраля этого года.

На этой неделе сдал экзамен на сертификат по этой программе.
Ссылка на этот экзамен на сайте IBM (Test C2170-051: IBM i2 Analyst's Notebook V8.9):
https://www-03.ibm.com/certify/tests/ovrC2170-051.shtml

Есть хорошие теоретические знания по этой программе, отсутствует опыт решения практических задач.

Хотелось бы собрать набор реальных практических задачек решаемых с помощью IBM i2 Analyst's Notebook.

Если есть чем поделиться из реальной практики - бросайте в личку!

Автор: Gladstone
Дата сообщения: 26.06.2014 15:01

Цитата:
Всем привет!
 Принимайте новичка на ваш форум
 Работаю с программой i2 Analyst's Notebook с февраля этого года.
 На этой неделе сдал экзамен на сертификат по этой программе.
Ссылка на этот экзамен на сайте IBM (Test C2170-051: IBM i2 Analyst's Notebook V8.9):
https://www-03.ibm.com/certify/tests/ovrC2170-051.shtml


Привет!
Сразу оговорюсь что экзамен с сертификатом прямо скажем не показатель так как следующее ваше предложение об этом говорит:

Цитата:
Есть хорошие теоретические знания по этой программе, отсутствует опыт решения практических задач.



Цитата:
Работаю с программой i2 Analyst's Notebook с февраля этого года

Может расскажите как и над какими задачами(задачами какой области) вы работаете используя этот продукт?


Цитата:
Хотелось бы собрать набор реальных практических задачек решаемых с помощью IBM i2 Analyst's Notebook.

Опять вам нужно собрать?? Или все таки порешать?


Для понимания вашей подкованности нам надо понимать какой уровень у вас владения инструментом. И каков ваш интерес освоения ANB:
1. Если вы для себя ищете пример решения какой-то задачи, то пишите сюда, вам ответят как ее решить

2. Если для кого-то, то пусть передадут эту проблему через вас, опять же сюда, мы попробуем помочь.
Автор: LIFA71
Дата сообщения: 08.07.2014 09:44
[more] Gladstone,

Извиняюсь за долгий ответ (лето, пора отпусков )

1) Сертификат - действительно не показатель. Ибо больше на техническое запоминание интерфейса программы (где какие кнопки расположены и какие инструменты для чего предназначены).

2) По поводу моих задачек. Моя основная задача - обучать других людей работать с i2 Analyst's Notebook (i2 ANB). Под это дело меня и взяли в феврале на работу в мою нынешнюю компанию. Наша компания является официальным партнером IBM и продает IBM i2 Analyst's Notebook (как и другие продукты IBM) внешним заказчикам. После покупки, обычно, заказчики просят провести им мини-обучающие занятия (1-2 дня) и научить базовым принципам работы с i2 ANB.
В нашем учебном курсе мы используем практические задачки связанные с обработкой биллингов звонков сотовых операторов. Типа:
- загрузить биллинг телефонных звонков (изучение импорта)
- проанализировать загруженные данные. Например, на вопрос пересечения одинаковых номеров с различных мест (аналитические инструменты)
- отформатировать нужную информацию определенным образом (изучение условного форматирования)

3) Если более конкретно - сейчас меня интересует вопрос (задачи) как можно использовать i2 ANB в целях экономической безопасности. Чтоб приводить соответствующие примеры в своем учебном курсе. Знаю, что некоторые компании в Москве используют инструменты i2 ANB для проверки контрагентов (вопросы аффилированности юридических лиц и т.д.). Пока я просто не могу понять КАКИЕ данные можно использовать для этих задач

4) В идеале - набрать теоретических задачек под любые виды заказчиков (силовые ведомства, финансовые структуры и т.д.). В самом простом виде: источник данных и что с ним можно делать. Например:
- файлы биллингов телефонных звонков. Найти одинаковые номера в различных источниках (пересечение множеств)
- файлы распознавания номеров транспортных средств (система "Поток"). Найти одинаковые номера в различных источниках (пересечение множеств)
- файлы серверов почтовой переписки. Анализ социальных сетей (например, выделить кластеры групп общения)
- и т.д.
[/more]
Автор: Gladstone
Дата сообщения: 11.07.2014 16:43

Цитата:
файлы биллингов телефонных звонков. Найти одинаковые номера в различных источниках (пересечение множеств)

Пересечение множеств, конечно Да.
Можете использовать так же функцию "найти общих соседей" для выявления новых подозреваемых к примеру.

Биллинг можно использовать в качестве денежных транзакций, применив "тепловую матрицу", "найти путь" - для выявления случаев денежных переводов которые превышают заданный уровень, а затем отслеживание пути передачи денег.


Цитата:
файлы распознавания  номеров транспортных средств (система "Поток"). Найти одинаковые номера в различных источниках (пересечение множеств)


Тут целесообразней выставлять Alert'ы так как система "Поток" все таки для он-лайн анализа, а Analyst's Notebook пост-анализа.


Цитата:
файлы серверов почтовой переписки. Анализ социальных сетей (например, выделить кластеры групп общения)
- и т.д.

Группы общения сами по себе ничего не дают, но если использовать полнотекстовый поиск по ключевым словам, то это конечно ДА.

Честно говоря Analyst's Notebook без функций iBase это тоже самое что человек без одной руки.


Цитата:
Знаю, что некоторые компании в Москве используют инструменты i2 ANB для проверки контрагентов (вопросы аффилированности юридических лиц и т.д.).


Для этой задачи даже ANB не нужен. iBase - достаточно. Если только начальство не фанат красивых отчетных-картинок. Правильно написанные запросы в iBase решают эту задачу.



Автор: lykaina
Дата сообщения: 21.07.2014 02:36
Пожалуйста, мне нужно войти в контакт с пользователем licxippo. Может кто поможет мне пожалуйста? Мне также нужно найти "Analyst's Notebook" программного обеспечения. Спасибо.
Автор: LIFA71
Дата сообщения: 21.07.2014 14:26
[more] [more] Просьба о помощи с массовыми импортами в Analyst's Notebook (ANB)

Народ, всем привет!

Столкнулся с необходимостью массовых импортов однотипных файлов в ANB (по 20-30 файлов биллингов за раз). Решение нашел в использовании встроенной утилиты ANB: SeriesImport.exe.
(Данная утилита находится в папке: "C:\Program Files (x86)\i2 Analyst's Notebook 8\Utils")

Но! У меня данная утилита не работает с русскими названиями (имя спецификации импорта, имя файла для импорта)

Сидеть и переименовывать имена 30-ти входных файлов в латиницу - грустно и не интересно.

Кто-нибудь сталкивался с необходимостью массового импорта в ANB? Если кто сталкивался - как вы решали это проблему?

P.S. Сейчас я решил эту проблему таким способом:
1) Написал скрипт массовой конвертации XLS файлов в текстовый формат (использую утилиту ssconvert из пакета GNumeric)
2) Написал скрипт "склейки" всех текстовых файлов в один
3) Импортится этот один конечный большой текстовый файл
Но как-то обидно изобретать велосипеды, когда есть родные утилиты под это дело
[/more] [/more]
Автор: lykaina
Дата сообщения: 21.07.2014 16:01
Одна вещь, я знаю, что это мне очень помогло при импорте данных, чтобы спасти TXT или CSV файл как UTF-8 без BOM. В противном случае я не могу импортировать слова с акцентами на португальском языке. Извините за безобразное написаны на русском языке, но я использую Google Переводчик.
Автор: LIFA71
Дата сообщения: 22.07.2014 08:39

Цитата:
Одна вещь, я знаю, что это мне очень помогло при импорте данных, чтобы спасти TXT или CSV файл как UTF-8 без BOM



lykaina, да, спасибо! Уже знаю про эту проблему, тоже делаю это
Автор: LIFA71
Дата сообщения: 22.07.2014 14:50
[more] [Импорт одинаковых связей в iBase]

Всем привет!

Изучаю iBase. Не могу выполнить импорт одинаковых связей в iBase с подсчетом количества этих связей.
Звучит запутанно, постараюсь объяснить подробней.

Пусть у нас есть БД с такой структурой:
Entities
Место (одно поле ID_Место: Type=Text;Size=50;Discriminator=Yes)
Номер (одно поле ID_Номер: Type=Text;Size=50;Discriminator=Yes)
Links
Поток (связывает "Номер" и "Место")


Файл импотра
---------------
Номер;Место
111;AAA
111;AAA
111;AAA
222;AAA
222;AAA
333;AAA
---------------

В этом файле импорта находятся 3 одинаковых связи [111-AAA]; 2 одинаковых связи [222-AAA] и одна связь [333;AAA].

В Analyst's Notebook я мог легко сделать спецификацию импорта и для связи указать такое свойство:
Название = "Количество вхождений". После импорта я бы получил схему с 4-мя объетами (111;222;333;ААА) и 3-мя подписанными связями:
- связь [111-AAA] имеет название "3"
- связь [222-AAA] имеет название "2"
- связь [333-AAA] имеет название "1"
===========================================================

Можно ли сделать что-то похожее в iBase? Чтоб после импорта было видно СКОЛЬКО однотипных связей присутствовало в файле импорта (иногда реально надо знать количество однотипных связей)

[/more]
Автор: Arbat
Дата сообщения: 24.07.2014 19:40
Bonjour lykaina
Vous travaillez pour la police?
Est-ce que Vous parlez en franсais?
je pourrez peut-etre vous aider si vous avez un exemple (avec les donnees modifiees pour garder anonymat des votre travail.

LIFA71

Добавлено:
Привет а не пробовал юзать SDK?
Автор: Bratec_Greem
Дата сообщения: 25.07.2014 11:57
Приветствую.

SDK активно используем. Что уже готово и можно использовать для оперативной работы не покидая окна ANB.
Все источники можно расширять как отдельно, так и совместно:

- Плагин для сбора данных по регистрации ЮЛ-ФЛ: ФНС - ЕГРЮЛ, ЕГРИП, Росстат, D&B, СПАРК, Интегрум, Прима ИНФОРМ, Апокриф, СФП, Земельный кадастр, Реестр неблагонадежных ЮЛ.

- Плагин для соц сетей - VK, Однокласники, Фейс Бук, Май Спайс, Ю туб.
Сбор сети по 1 млн обектов примерно пол дня. Возможен мониторинг активности сети, заходы пользователей, появление записей и т.д

- EmailExaminer плагин для мониторинга почтового трафика, доступна версия для Exchange

Любые дополнительные источники можем добавить по Вашим запросам.

БГ


PS

Из инсайда есть подтвержденная информация, ЧТО следующая версия Analitical Platform:

iBase, AnB интегрированные с SPSS, Cognos и Сontent Analitic.

Будет базироваться на ORACLE
Автор: maksyoustas
Дата сообщения: 25.07.2014 13:26
Добрый день!
Цитата:
Плагин для соц сетей - VK, Однокласники
при импорте данных на схему свойства объектов: имя, фамилия, д.р., вуз и тп записываются в название идентификатора? или раскидывается по атрибутам?...возможно ли после загрузить полученные данные в БД? что бы потом юзать локально...Спасибо
Автор: Bratec_Greem
Дата сообщения: 25.07.2014 14:32
Все разбирается и складывается в iBase
Автор: Arbat
Дата сообщения: 25.07.2014 21:51

Цитата:
Все разбирается и складывается в iBase

Я понял вопрос юстаса) не по iBase, а по раскладке в АНБ по атрибутам, потому что то, что я видел обрабатывало только вк и помещало инфу исключительно в лейбл...
Автор: licxippo
Дата сообщения: 26.07.2014 09:54
no he entendido cual es su problema para la importacion masiva
I did not understand what your problem for mass import
Я не понял, в чем твоя проблема для массового импорта
Автор: Bratec_Greem
Дата сообщения: 26.07.2014 11:04
Надо программистам правильно руки отрывать ))
Тогда будет и не только лейбл.

А что касается сетей то их ещё лет 10 назад разбирали даже удавалось полностью соц сети крупных организаций мониторить на предмет активности пользователей.

Вообщем задача на 100 рублей
Автор: armenchik
Дата сообщения: 26.07.2014 12:53
Bratec_Greem
[q][/q]

Очень интересуют Ваши решения.
Можно описание этого ПО (желательно со скриншотами)?
Заранее признателен
Автор: Bratec_Greem
Дата сообщения: 27.07.2014 22:59

Цитата:
со скриншотами



Еще одним аналистом больше )))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))))

Добавлено:
А чо кто кого назвал аналистом??

Добавлено:
Software para você de graça

Добавлено:
нифига по португальски но понимаю
Автор: licxippo
Дата сообщения: 28.07.2014 01:02
lykaina
could you download the file with the ANB 8.9 ENGLISH VERSION?
Автор: LIFA71
Дата сообщения: 28.07.2014 09:47

Цитата:
I did not understand what your problem for mass import
Я не понял, в чем твоя проблема для массового импорта


Еще раз про эту проблему:
1) Существует большое количество Excel файлов с данными которые надо импортить в i2 ANB (например, 20-30 файлов телефонных биллингов). Пример названий файлов:
МЕГАФОН_1407_БС_0001.xls
МЕГАФОН_1407_БС_0002.xls
МЕГАФОН_1407_БС_0003.xls
....
МЕГАФОН_1407_БС_0030.xls

Причем это я привел самые простые названия (чисто для демонстрации). Более часто в именах файлов встречаются русские названия улиц (где находится Базовая Станция), или фамилии абонентов.

2) Структура у всех этих файлов одинаковая, поэтому создается одна спецификация импорта под все эти файлы. Например "IMP_MEGAFON.ximp

3) Теперь, используя стандартную утилиту SeriesImport.exe (входит в состав i2 ANB) я мог бы написать такой BAT файл:
SeriesImport -bIMP_MEGAFON.ximp -i"МЕГАФОН_1407_БС_0001.xls"
SeriesImport -bIMP_MEGAFON.ximp -i"МЕГАФОН_1407_БС_0002.xls"
SeriesImport -bIMP_MEGAFON.ximp -i"МЕГАФОН_1407_БС_0003.xls"
...
SeriesImport -bIMP_MEGAFON.ximp -i"МЕГАФОН_1407_БС_0030.xls"

В этом примере (для простоты) подразумевается, что утилита SeriesImport.exe, спецификация импорта IMP_MEGAFON.ximp и файлы импортов лежат все в одной папке (просто чтоб не писать длинные пути)

4) Теперь собственно сама проблема: когда все имена (спецификации импорта и имена файлов) строго на латинице - все работает правильно. Если встречаются русские буквы - импорт не работает Пишет, что не может найти данный файл.

Именовать спецификации импортов строго на латинице - не проблема. А вот что делать с большим количеством входных файлов импорта которые уже исходно с русскими буквами? Либо массово переименовывать (не всегда это удобно), либо думать как решить другим путем. Может в реестре для i2 ANB что-то прописать, чтоб он нормально воспринимал кириллицу?
==========================

В общем, проблема звучит так: есть множество однотипных входных файлов импорта. Как импортить их массово наиболее оптимально? (чтоб не выполнять вручную импорт файл-за-файлом)

Автор: Bratec_Greem
Дата сообщения: 28.07.2014 10:05

Цитата:
[/q]
[q]Еще раз про эту проблему


Может абонента пришлете мы и геолакацию по перемещению сделаем )))
Автор: maksyoustas
Дата сообщения: 28.07.2014 10:17
Может есть все-таки решение из "коробки", какой-нибудь плагин для импорта нескольких однотипных файлов с одной спецификацией? Странно что такую на мой взгляд элементарную функцию не реализовали а АНБ...Меня если честно тоже задолбала эта проблема. Надо либо "протезы" писать, либо через иБасе, что тоже не всегда удобно.
Автор: Bratec_Greem
Дата сообщения: 28.07.2014 11:10
Элементарно только у Ватсона там все файлы сразу в i2 грузятся
Автор: licxippo
Дата сообщения: 28.07.2014 11:43
ibase has this option. In Analyst Notebook... i dont remember. but the new version (8.9) has new features.
I thiking your problem... and I try to have an answer

IBase Имеет эту опцию. В Analyst Notebook ... я не помню. но новая версия (8.9) имеет новые функции.
Я thiking вашу проблему ... и я стараюсь не есть ответ
Автор: maksyoustas
Дата сообщения: 01.08.2014 09:31
Братец Грим... может поделитесь своим богатым опытом и все-таки что то подскажите по существу )... про Ваши колоссальные возможности мы уже все в курсе. Нужна помощь для решения конкретных задач. Спасибо )

Страницы: 1234567891011

Предыдущая тема: Звонки от Adobe


Форум Ru-Board.club — поднят 15-09-2016 числа. Цель - сохранить наследие старого Ru-Board, истории становления российского интернета. Сделано для людей.