Рубрика: elasticsearch
ищем хикке-тян. маппинг
Давнанько меня тут небыло. и я таки закончил свой самопальный поисковик. вроде я писал про всё, кроме маппинга и кролика.
Начнём с мапинга. И создадим новый индекс.
curl -XPUT 'http://192.168.1.5:4200/tan/' -d ' index: number_of_replicas:2 number_of_shards :3 '
После чего обозначим используемые типы.
ищем хикке-тян. vk.api
для парсинга мы буим использовать node.js, а так-же некоторые фреймворки для него. для начала vksdk, node-crate, node-amqp, для вебморды используем jade. Ещё нам понадобится rabbitmq. И вообще, что-бы далеко не ходить я воспользуюсь стандартным шаблоном приложения InteLlij для node.js. Но! ..но по порядку. Сначала разберёмся с vk.api и получением данных для тянобазы. И определением важных для мапинга данных.
Мы ведь ищем хикке-тян. а хикке-тян не будет заполнять большую часть информации. она же хикке.
Вот ты анон, заполняешь графу ВУЗа, Школы, Адреса? Вооот. и хикке-тян не заполняет. А если заполняет, то не хикке она вовсе. Фоток у хикке-тян скорее всего не будет, а вот другие вещи могут быть очень даже полезны. те же паблики.
Думаю будет бесполезно искать хикке-тян по возрасту. Он наверняка будет скрыт, возможно будет скрыт и город.
игрища с elasticsearch krate.io и kibana. Ищем хикке-тян. Начало
..а начну пожалуй собирать себе поисковик для поиска хикке-тян.
Я вдохновился вот этой статейкой. она публиковалась на хабре около полугода назад. Думаю если подключить к ней втентакле.апи, можно добится некоторых успехов в этом деле. Да и весело это, даже если нихрена в итоге не получится.