Скраб HTML в веб-приложении Rails

Question

Скраб HTML в веб-приложении Rails

0

Я пытаюсь получить мое приложение rails для извлечения HTML-страницы веб-страницы.

Я хочу получить весь HTML из URI, например /news_articles/7 в строку.

Я попытался использовать что-то вроде Nokogiri, но, похоже, заблокировал мьютекс.

Цель этого - отправить строку HTML в Amazon SES.

благодаря

Valkyrie0512 26 март 2014, в 16:36

Источник

0

1) Я не могу разобрать ваш ... получить весь HTML URI .... 2) Что такое Нокугири? 3) Кажется => Кажется 4) Причина => Цель
sawa 26 март 2014, в 14:51
0

Вы можете просто зайти в свое приложение, щелкнуть правой кнопкой мыши и view source ?
Richard Peck 26 март 2014, в 14:51
1

Возможно, вы захотите использовать что-то вроде ActionMailer с SES вместо того, чтобы пытаться отобразить страницу в строку. stackoverflow.com/questions/4798437/...
Casper 26 март 2014, в 14:52

Показать ещё 1 комментарий

Теги:

html

ruby-on-rails

ruby

web-scraping

amazon

1 ответ

Ещё вопросы

1) Я не могу разобрать ваш ... получить весь HTML URI .... 2) Что такое Нокугири? 3) Кажется => Кажется 4) Причина => Цель
Вы можете просто зайти в свое приложение, щелкнуть правой кнопкой мыши и view source ?
Возможно, вы захотите использовать что-то вроде ActionMailer с SES вместо того, чтобы пытаться отобразить страницу в строку. stackoverflow.com/questions/4798437/...

TheCha͢mp · Accepted Answer · 2014-03-26T13-27-00.000Z

Nokogiri в сочетании с Mechanize будет хорошо служить вам.

Gemfile

gem 'nokogiri'
gem 'mechanize'

контроллер

agent = Mechanize.new()
# allow the agent to follow redirects
agent.follow_meta_refresh = true
# get the desired page
page = agent.get('http://www.mysite.com/new_articles/7')
# output its html
page.body

Возможный дубликат

Я думаю, что он пытается запустить это из цикла запроса Rails. Следовательно, он заблокирует все приложение Rails. Это его главная проблема.
Jup, который имеет больше смысла, я думаю, вы предоставили правильную ссылку