0. MrWonder 580 22.08.19 10:29 Сейчас в теме

Журнали2Ст: сверхбыстрый журнал регистрации 1С

Строит внешний индекс по журналам регистрации любого формата и делает поиск в них фантастически быстрым. Дополнительно ничего не нужно настраивать! Журналы Регистрации остаются на своём месте и не занимают дополнительного, а сервис Журнали2Ста обеспечивает их постоянную индексацию.

Перейти к публикации

Комментарии
Избранное Подписка Сортировка: Древо
1. cmd_vasec 34 22.08.19 15:54 Сейчас в теме
4. MrWonder 580 22.08.19 16:39 Сейчас в теме
2. Dream_kz 95 22.08.19 16:10 Сейчас в теме
Для того, чтобы оценить скорость работы, Вы две недели можете совершенно свободно использовать Журнали2Ста.

Поясните, пожалуйста, 2-х недельная лицензия за стартмани? А потом что, за рубли покупать?
3. MrWonder 580 22.08.19 16:39 Сейчас в теме
(2) Исправил описание. Хвосты от коммерческой публикации. Спасибо за Вашу внимательность.
5. SerVer1C 199 23.08.19 07:41 Сейчас в теме
Интересно было бы почитать про техническую составляющего данного решения, хотя бы в общих чертах.
6. MrWonder 580 23.08.19 08:17 Сейчас в теме
(5) Служба индексирует имеющиеся жр напрямую в Solr. Обработка запрашивает у службы отбор, служба стучится в Solr и возвращает данные, обработка обогащает их и выводит.
9. Dach 284 23.08.19 16:07 Сейчас в теме
Сразу после запуска служба откусила почти 1Гб оперативки. Она всегда так будет делать или только до тех пор, пока не проиндексирует все журналы на сервере?

И еще вопрос, индексы она хранит прямо в своем собственном каталоге установки?
11. MrWonder 580 23.08.19 16:12 Сейчас в теме
(9) Java сразу откусит два гига. Оперативы потребляет до 10% от размера ЖР. Но макс размер ограничен в 32ГБ.
14. Dach 284 23.08.19 16:25 Сейчас в теме
(11) java так и откусила, но потом расход памяти снизился до 300 Мб.

Немного потестил - действительно круто работает!

Служба самой Журнали2Сты проц нагрузила на 30% - это тоже будет только пока не построит индексы, или так все время?

А скажите, плз, какие отличия от коммерческой версии? Мне просто очень нравится работа "из коробки", думаю и моему руководству она тоже понравится. И дайте плз ссылку на коммерческий аналог.
15. MrWonder 580 23.08.19 17:00 Сейчас в теме
(14) Вчера имеющеяся коммерческая версия стала бесплатной. Рад, что Вам нравится работа продукта. Если будут какие-то изменения, то я отражу их в этой публикации.

По CPU - на время индексации потребление CPU будет больше, потом снизится.
13. MrWonder 580 23.08.19 16:21 Сейчас в теме
(9)
И еще вопрос, индексы она хранит прямо в своем собственном каталоге установки?

Да.
10. acanta 75 23.08.19 16:12 Сейчас в теме
Можно ли указывать какие журналы требуется индексировать?
Вообще было бы круто как в Виндоус, отдельный журнал регистрации для конфигуратора и для пользовательского режима.
12. MrWonder 580 23.08.19 16:14 Сейчас в теме
(10) На текущий момент в этот некоммерческий продукт новые фичи будут добавляться очень ограниченно.
16. user612295_death4321 24.08.19 09:20 Сейчас в теме
Добрый день!

Подскажите, пожалуйста, в системных требованиях указана Версия платформы 1С не ниже 8.3.5.1068, есть ли разница если версия платформы выше, но конфигурация в режиме совместимости?

Спасибо.
17. MrWonder 580 25.08.19 14:16 Сейчас в теме
(16) Там используется функционал, появившийся в 8.3.5.1068 ( не скажу на память что именно ). Можете попробовать. Если получите ошибку - код обработки открыт.
18. user612295_death4321 25.08.19 16:46 Сейчас в теме
(17) Я прикинул количество своих событий в ЖР и решил возобновить свою старую идею заливки ЖР в elasticsearch.

Посмотрел ради интереса количество событий в ЖР в одной из своих баз за 1 минуту и количество в виде 44к немного меня расстроило.
19. MrWonder 580 26.08.19 08:20 Сейчас в теме
(18) Это с включенными данными по транзакциями? (в событиях по умолчанию отображение транзакций отключено)
20. user612295_death4321 26.08.19 09:03 Сейчас в теме
(19) Это с максимальным уровнем протоколирования в настройках журнала регистрации + куски кода в конфигурации для доп. логирования событий.
21. Dach 284 26.08.19 10:21 Сейчас в теме
Службы Журнали2Сты стабильно расходует 30% процессора. Если и разворачивать ее в продуктиве, то видимо, надо поднимать отдельный рабочий сервер в кластере чисто для ЖР.
22. MrWonder 580 26.08.19 10:25 Сейчас в теме
(21) 30% у вас после завершения начальной индексации или во время неё?
23. Dach 284 26.08.19 10:56 Сейчас в теме
(22)

Я свой локальный рабочий ПК оставлял на выходные специально. Индексы по идее, должны были уже построиться. Файл индекса занял 40 Гб (при размере самого ЖР в 100 Гб). Утром проверил - служба расходует 30 проц процессора. Обработка показывает "готовность данных" = 99%
24. MrWonder 580 26.08.19 10:58 Сейчас в теме
(23) Посмотрите в ПУСКе в Журанли2Ст = > Панель управления.
25. Dach 284 26.08.19 11:04 Сейчас в теме
(24) посмотрел, пишет - 100% обработано. Расход цп такой же по прежнему
26. MrWonder 580 26.08.19 11:46 Сейчас в теме
(25) Ответил про диагностику в ЛС.
27. MrWonder 580 26.08.19 16:16 Сейчас в теме
29. Fox-trot 108 27.08.19 05:45 Сейчас в теме
в описании
Ничего настраивать или устанавливать больше не нужно!

однако далее по тексту
Ключевые особенности:
Не нужно ничего настраивать - всё работает из коробки - установил и наслаждайся.

маркетинг такой нонче?
34. MrWonder 580 27.08.19 13:39 Сейчас в теме
(29) Спасибо за Ваше замечание.
30. triviumfan 10 27.08.19 09:30 Сейчас в теме
Индексация ЖР будет для всех баз или можно настраивать для конкретных?
31. MrWonder 580 27.08.19 10:41 Сейчас в теме
(30) Для всех, причём при добавлении новых баз они тоже начнут индексироваться.
32. Ndochp 101 27.08.19 10:45 Сейчас в теме
Можно как то подружить с Линукс-сервером? (папку с журналом расшарить, Журналидвасту как-то объяснить, куда лезть)
33. MrWonder 580 27.08.19 13:39 Сейчас в теме
(32) Можете выделить отдельный сервер для журналов регистрации под Windows (через требования назначения функциональности, лицензия 1С для сервера в этом случае не должны быть нужна) и использовать его.
35. Denium79 14 29.08.19 13:39 Сейчас в теме
Программа установилась, все логи проиндексировались. При открытии обработки - она пустая, в сообщении: "Exception8 '[НазваниеБазы]'"

В чем может быть ошибка? Или сейчас работает только коммерческая версия
36. MrWonder 580 29.08.19 14:39 Сейчас в теме
(35) Всё должно работать. Ответил по диагностике в ЛС.
37. triviumfan 10 30.08.19 09:26 Сейчас в теме
Народ, поделитесь, кто уже пользовался на рабочем сервере?
40. Dach 284 12.09.19 16:12 Сейчас в теме
(37)

Мы начали использовать. Впечатления очень положительные.

Были кое-какие ошибки в работе службы, но Алексей все оперативно починил.

У нас довольно нагруженная база, в день ЖР прирастает на 3 Гб, количество событий в секунду 150-160.

3 Гб журнал программа проиндексировала за 20 минут. Индексы весят примерно 20% от веса журнала.

Отборы работают мухой, даже когда накладываешь отбор на комментарий или на представление данных. И при этом не "вешают" все приложение у всех пользователей.

По расходу ресурсов на сервере - java потребляет примерно 1.5 Гб оперативки, сама служба - 80 Мб. Процессорное время тратится не более 5-10%.
41. triviumfan 10 12.09.19 17:15 Сейчас в теме
(40) Звучит очень убедительно в пользу использования. Эти ресурсы стоят того.
Спасибо за отзыв.
55. Andywar 02.12.19 13:20 Сейчас в теме
(40) Мы встречались на прошлой неделе и я консультировался по этому вопросу. Попытался написать в ЛС, но не могу из за ограничений инфостарта. Напишите мне пожалуйста
38. Dach 284 12.09.19 09:55 Сейчас в теме
Пытались запустить на рабочем сервере.

При во таких параметрах службы программа не видит журналы регистрации на сервере;

"C:\Program Files\1cv8\8.3.12.1529\bin\ragent.exe" -srvc -agent -regport 1541 -port 1540 -range 1560:1591 -d "E:\user-1c\1c_cache\srvinfo"
39. MrWonder 580 12.09.19 13:20 Сейчас в теме
42. Junny321 15.09.19 16:54 Сейчас в теме
Параметры службы 1С: "C:\Program Files\1cv8\8.3.12.1714\bin\ragent.exe" -srvc -agent -regport 1541 -port 1540 -d "E:\srvinfo-upp82"

В файле Journal2ct\debug\Journal2Ct.10504.log:
2019-09-15 18:12:22.194595::::::service start
2019-09-15 18:12:22.194595::::::service start threads
2019-09-15 18:12:22.194595::::::В файле конфигурации нет информационных баз
2019-09-15 18:12:22.194595::::::Debug enabled = 1
2019-09-15 18:12:22.194595:::my little cherry:::Thread initialized
2019-09-15 18:12:22.210195:::my pretty solr thread:::Thread initialized
2019-09-15 18:12:22.210195:::my pretty solr thread:::starting "\bin\java.exe" -server -Xms -Xmx -Duser.timezone=UTC -XX:NewRatio=3 -XX:SurvivorRatio=4 -XX:TargetSurvivorRatio=90 -XX:MaxTenuringThreshold=8 -XX:+UseConcMarkSweepGC -XX:ConcGCThreads= -XX:ParallelGCThreads= -XX:+CMSScavengeBeforeRemark -XX:PretenureSizeThreshold=64m -XX:+UseCMSInitiatingOccupancyOnly -XX:CMSInitiatingOccupancyFraction=50 -XX:CMSMaxAbortablePrecleanTime=6000 -XX:+CMSParallelRemarkEnabled -XX:+ParallelRefProcEnabled -XX:-OmitStackTraceInFastThrow -XX:+ExitOnOutOfMemoryError -Xss256k -Dsolr.log.dir="\server\logs" -Dlog4j.configuration="file:\server\resources\log4j2.xml" -DSTOP.PORT=7983 -DSTOP.KEY=solrrocks -Dsolr.log.muteconsole -Dsolr.solr.home="\server\solr" -Dsolr.install.dir="" -Dsolr.default.confdir="\server\solr\configsets\_default\conf" -Djetty.host= -Djetty.port= -Djetty.home="\server" -Djava.io.tmpdir="\server\tmp" -jar "start.jar" "--module=http" ""
2019-09-15 18:12:22.210195:::list lgp:::Thread initialized
2019-09-15 18:12:22.210195:::lgp parser:::Thread initialized
2019-09-15 18:12:22.210195:::list lgd:::Thread initialized
2019-09-15 18:12:22.210195:::lgd parser:::Thread initialized
2019-09-15 18:12:22.210195:::IB monitor:::Thread initialized
2019-09-15 18:12:22.210195:::warming cache:::Thread initialized
2019-09-15 18:12:37.217203::::::Exception srv_1c list index out of range

Процесс java не стартует, индексирование ЖР не производится.
43. MrWonder 580 15.09.19 17:02 Сейчас в теме
(42) Добрый день. Спасибо за сообщение, ответил в ЛС.
44. mistermp3 01.10.19 09:02 Сейчас в теме
У меня есть обрезанные файлы логов в формате SQlite (один файл = 1 месяц). Каждый файл порядка 100 Гб, лежат на локальной машине. Что я должен сделать, чтобы проанализировать их?
Поднять отдельный сервер, подсунуть туда логи? Какой наиболее простой путь?
golex-nsk; +1 Ответить
45. MrWonder 580 01.10.19 09:07 Сейчас в теме
46. AlexEuro 01.10.19 16:36 Сейчас в теме
не видит папку с логами если используется swpuser.ini с указанием папки с логами
47. MrWonder 580 02.10.19 12:24 Сейчас в теме
(46) Всё так. Добавляю в таск-лист для реализации.
48. olegmedvedev 47 29.10.19 10:24 Сейчас в теме
Добрый день! Возник вопрос (возможно невнимательно читал). будет работать такая схема?
Схема:
1) Журналы регистрации считываются в Журнали2Ст
2) Журналы регистрации очищаются/удаляются/нечитаемы
3) В Журнали2Ст остаются данные очищенных журналов? или он обрабатывает только те, что существуют?
Спасибо!
49. MrWonder 580 29.10.19 10:42 Сейчас в теме
(48) Добрый день. В текущем релизе этого нет. Вообще я делал так изначально.
А почему вы хотите очищать ЖР? Если проблема в том, что они занимают много места, то здесь выручает дедупликация.
50. olegmedvedev 47 29.10.19 10:45 Сейчас в теме
(49)Спасибо за ответ. Интересует именно хранение. Тут скорее имеет ситуация не "очищать", а "битый", либо "удаленный".
51. MrWonder 580 29.10.19 11:55 Сейчас в теме
(50) Могу добавить в wishlist. Но быстро не сделаю - приоритет сейчас другой.
52. olegmedvedev 47 30.10.19 15:33 Сейчас в теме
(51) На ваше усмотрение. Я думаю этот функционал не всем нужен.
53. golex-nsk 19.11.19 07:44 Сейчас в теме
У меня тоже есть отдельно лежащие логи. Напишите пожалуйста и мне как их обработать.
54. MrWonder 580 30.11.19 13:38 Сейчас в теме
(53) Пока - только подложить в одну из баз (или копий баз).
Оставьте свое сообщение
Новые вопросы с вознаграждением
Автор темы объявил вознаграждение за найденный ответ, его получит тот, кто первый поможет автору.

Вакансии

Автор новостных обзоров на тему 1С и бухучета
Санкт-Петербург
По совместительству

Программист/Cтарший программист 1С
Москва
зарплата от 100 000 руб. до 250 000 руб.
Полный день

Программист 1С
Калининград
зарплата от 60 000 руб. до 80 000 руб.
Полный день

Руководитель проектов 1С
Санкт-Петербург
Полный день

Программист 1С
Новосибирск
зарплата от 80 000 руб. до 150 000 руб.
Полный день