Невозможно сделать базу данных MySQL из SO вопросов по Python

Question

Невозможно сделать базу данных MySQL из SO вопросов по Python

0

Brent answer предлагает мне, что создал базу данных SO-вопросов, чтобы он мог быстро анализировать вопросы.

Я заинтересован в создании подобной базы данных MySQL, чтобы я мог практиковать MySQL с похожими запросами как Brent.

База данных должна включать по крайней мере следующие поля (я угадываю здесь, поскольку API SO api, по-видимому, является сектой). Я собираюсь перечислить только релевантные переменные, которые позволили бы мне провести аналогичный анализ как Brent.

Вопросы
Question_id (закрытый ключ)
Question_time
Комментарии
Comment_id (закрытый ключ)
COMMENT_TIME
User_id (закрытый ключ)
Имя_пользователя

Нам нужно, по-видимому, очистить данные Python Beautiful Soap, поскольку база данных Brent, по-видимому, скрыта.

Как вы можете сделать такую базу данных MySQL Python Beautiful Soap? **

Léo Léopold Hertz 준영 28 июнь 2009, в 16:26

Источник

0

Зачем создавать базу данных? Вы создаете базу данных, чтобы вы могли искать? Это кажется немного глупым, так как SO предлагает поиск.
S.Lott 28 июнь 2009, в 15:45
0

@ S.Lott: я создаю базу данных для практики с MySQL. Я стремлюсь сделать анализ данных с MySQL.
Léo Léopold Hertz 준영 28 июнь 2009, в 15:53

Теги:

mysql

database

python

2 ответа

1

Я не знаю подробностей о том, как импортировать данные в MySQL, но необработанные данные Qaru доступны: http://blog.stackoverflow.com/2009/06/stack-overflow-creative-commons-data-dump/

Там нет секретного API и не нужно использовать Beautiful Soup.

RichieHindle 28 июнь 2009, в 12:12

Ещё вопросы

Зачем создавать базу данных? Вы создаете базу данных, чтобы вы могли искать? Это кажется немного глупым, так как SO предлагает поиск.
@ S.Lott: я создаю базу данных для практики с MySQL. Я стремлюсь сделать анализ данных с MySQL.

Alex Martelli · Accepted Answer · 2009-06-28T13-42-00.000Z

Я уверен, что можно напрямую работать с дампом данных XML @RichieHindle, но я был намного счастливее с @nobody_ sqlite, особенно после добавления индексов в качестве файла README в этой версии sqlite.

Если у вас есть полная, индексированная версия sqlite и вы хотите загрузить подмножество под маркой Python в базу данных MySQL, это можно рассматривать как простое, но аккуратное упражнение при использовании двух экземпляров API-интерфейса DB, чтение из sqlite и запись к MySQL один (лично я обнаружил, что производительность sqlite полностью удовлетворительна после завершения индексации, поэтому я не делал никаких подмножеств и не переходил на другие механизмы БД) - для этой цели не нужен суп или мыло. В любом случае, это было намного проще и быстрее для меня, чем загрузка из XML напрямую, несмотря на lxml и все.

Конечно, если вы все еще хотите выполнить поднаборную нагрузку, и если у вас возникнут какие-либо проблемы при его кодировании, спросите (с образцами схемы и кода, сообщения об ошибках, если они есть, и т.д.), и SOers попытаются ответить, как обычно! -)

@Спасибо за ваш ответ! --- Я сделаю все возможное, чтобы решить эти небольшие проблемы и опубликовать решение для SO.