bitrix (11) 1C (10) vTiger (8) JS (7) Bitrix24 (7) php (5) ERP (5) Asterisk (4) CRM (4) WMS (4) moodle (4) WordPress (3) BigData (3) simplaCMS (3) GoLang (2) magento (2) optimization (2) shopify (2) joomla (2) WebAssyst (2) ↵ Показать все
Участие в разработке одной из самых полных баз электротехнических товаров РФ.

Агрегация данных поставщиков, каталогов. Морфологический триграмм поиск на Sphinx ( Manticore )
#Sphinx #Manticore #BigData
Крупная база электротехнических товаров РФ
e-kc.ru - Оптовые поставки электротехнической продукции, b2b-базы

Мультипоточный GoLang паук для парсинга данных с миллионов сайтов. Обработка данных.

Парсер информации юридических лиц ( контакты, адреса, ссылки и тд ) с миллионов различных сайтов организаций. Пакетная обработка. Возможность запуска с разных ОС. Повтор неудачных запросов.
#GoLang #parsing #BigData
Онлайн-База российских юридических лиц
e-kc.ru - Оптовые поставки электротехнической продукции, b2b-базы

Калькуляция схожести сайтов на основе выдачи поисковиков с помощью RUST.

Обработка огромного массива пересечений по выдаче, требующая сотен гигабайт ОЗУ без оптимизаций и smart перебора с эвристикой. Удалось посчитать на одном PC за пару дней по всем сайтам Рунета ( yandex, google SERP )
#RUST #BigData
Онлайн-База российских юридических лиц
e-kc.ru - Оптовые поставки электротехнической продукции, b2b-базы