V
V
Vadim Solovyov2017-07-23 19:59:11
Search Engine Optimization
Vadim Solovyov, 2017-07-23 19:59:11

How to parse question headers from the otvet.mail.ru service?

a4a13227d0834e31b88135746f14f352.png
I know that this can be done using the Content Downloader X1 program, but I don’t know how.

Answer the question

In order to leave comments, you need to log in

3 answer(s)
D
dummyman, 2017-07-23
@VadimSoloviev

Keep the finished code for Casper:

// test.js
var links = [];
var casper = require('casper').create();

function getLinks() {
    var links = document.querySelectorAll('.pageQuestions .q--li a.q--li--text');
    return Array.prototype.map.call(links, function(e) {
        return e.innerHTML;
    });
}

casper.start('https://otvet.mail.ru/', function() {
   this.waitForSelector('.pageQuestions');
});

casper.then(function() {
    links = this.evaluate(getLinks);
});

casper.run(function() {
    this.echo(links.length + ' links found:');
    this.echo(' - ' + links.join('\n - ')).exit();
});

Run:
Get:
20 links found:
 - Зачем охотники водку с собой берут на охоту ?
 - Нужно ли объяснять происхождение денег при покупке квартиры? Речь о 8-9 миллионах рублей.
 - Как не грустить в такое дождливое лето? как ни крути - а погода влияет на настроение...
 - Я русская, но живу в Дагестане. И вот в школе дети-дагестанцы издевались и унижали меня из-за моей нации
 - У вас есть вера в то, что Путин начнет приносить пользу как это было еще лет 5 назад? Или только хуже и хуже будет?
 - Я карлик ростом 165 см как дальше жить? Что делать? Немогу больше так
 - А если ты пополнил стим кошелёк меньше 150 рублей, нечего не будет, никаких банов?
 - Как сами считаете, Вам идёт Ваше имя? Или какое другое было бы уместнее? ;-)
 - В России власть обязана быть Царем, Богом и Воинским начальником это не наша привычка к рабству а счастье быть империей?
 - Рыжая из гарри поттера, как актрису зовут?
 - Что будите делать, если каждый день - воскресенье? (и так до конца жизни)
 - Стучат копыта по асфальту. Кромешники скачут- подковами звеня. Опричники в чёрных кафтанах с собачьими головами .
 - hola недоступна прямо сейчас но мы работаем над этим что делать?
 - Где можно скачать мультфильм Галактический футбол в формате mp4? На телефон.
 - Как назвать канал на ютубе? Ребята помогите назвать канал на ютуб имя (Шахзада)
 - Есть фильмы похоже на Аутласт или на Палату
 - C каким философом вы бы себя сравнили и почему?
 - Опять о Минске, насчёт бензина.
 - Как ухаживать за проколотым носом?
 - Какой сценарический наряд красивее?

X
xmoonlight, 2017-07-23
@xmoonlight

There is only one answer: cURL/phantom.js + regular expressions.

D
Dimonchik, 2017-07-23
@dimonchik2013

the content of the downloader has a forum
+ the interface helps to highlight

Didn't find what you were looking for?

Ask your question

Ask a Question

731 491 924 answers to any question