Проблема: Я хотел бы создать автономную базу данных для поиска цен/информации о n самых полезных книгах для продажи в Соединенных Штатах (где n, вероятно, 3 миллиона или около того).
Вопрос: Итак, мой вопрос (и я также открыт для других подходов здесь), я пытаюсь выяснить, как использовать Amazon AWS для загрузки списка самых продаваемых книжек продаж, а также некоторую информацию о книге ( т.е. название, цены и т.д.).
Что я сделал до сих пор: Во-первых, что-то вроде этого уже существует (asellertool.com), однако я думал, что это будет интересный проект для работы и, откровенно говоря, мы недостаточно серьезны, чтобы заплатить подписку в размере 30 долларов США в месяц.
Теперь AWS великолепно (и легко), если у вас есть несколько элементов, которые вы хотите найти, но я не могу понять, как перечислять их в ранге продаж. Первоначально я надеялся перечислить все предметы книги, которые Amazon имел ISBN. Но это тоже не было. Затем я подумал, что могу найти список всех номеров ISBN, но это тоже был тупик. Наконец, я подумал, что могу создать свой собственный список номеров ISBN, но, как я уже делал некоторые из расчетов с конвертом, я подумал об этом лучше, так как моим решениям потребуется примерно один год, чтобы пройти треть из 10-значного пространства при 100/во-вторых (и это было слишком сложно).
Итак, я вернулся к Sales Ranking, который в настоящее время также кажется тупиковым. Итак, если у вас есть какие-то мысли, я был бы признателен.
У Amazon есть служба передачи данных, которую вы можете использовать, которая содержит файлы GZipped xml всех своих продуктов на основе категорий верхнего уровня. Он обновляется один раз в день и составляет около 20 ГБ /110 ГБ сжатых/несжатых данных. Поскольку вам нужны только книги, это больше в области 4 ГБ /31 ГБ. Единственное, что я не знаю, кто может использовать это и что связано с получением учетной записи. Они не перечисляют ничего об этом на своем веб-сайте, насколько я знаю, поэтому вам, скорее всего, придется связаться с кем-то там, чтобы узнать больше об этом. Мы используем это для работы над тем, что мы делаем с ними, и это часть самой сумасшедшей обработки XML, которую я должен был сделать.
Посмотрите AWS Zone в разделе Amazon E-Commerce Service
.
Я тоже не программист, но любопытный и дешевый. Asellerstool, вероятно, замечательный, но они не будут вокруг, если не для свободной базы данных Amazons. Ну, я думаю, никто не заботится о подержанные цены на книги?
Мне было интересно, какую из услуг Amazon AWS вы хотите использовать? Или вы не знаете?
И зачем нужна автономная база данных? Почему бы не сделать запросы на все, что вам нужно, и сделать временный кеш?