Python, облачный онлайн-инструмент для очистки веб-страниц с возможностями планирования

#python #cloud

#python #облако

Вопрос:

Я планирую разработать веб- / облачное приложение с использованием python, которое выполняет следующее:
1. Загрузите скрипты очистки Perl / Python и выполните.
2. Загруженные скрипты для запуска по расписанию.
3. Запустите несколько экземпляров одного и того же скрипта с разными входными параметрами.
4. Измерьте производительность скриптов.
5. Просмотр стандартного вывода / журнала сценариев.

Я получил ограниченные / не имеющие знаний о технологиях, которые могут удовлетворить мои требования,
Советы, указатели, идеи для существующей работы, библиотеки, реализация с открытым исходным кодом и т. Д. Приветствуются.

Спасибо,
Раджеш.

Комментарии:

1. вы смогли создать это?

2. да, SRUCLA, но с другим подходом!

Ответ №1:

Используйте Scrapy в качестве основы для своей работы:

http://scrapy.org/

Для загрузки, производительности скрипта и вывода (я полагаю, через веб-интерфейс) вам необходимо написать свой пользовательский веб-интерфейс, который хранит эту информацию в базе данных, где вы можете ее затем изучить. Одним из вариантов для этого является Pyramid:

http://pypi.python.org/pypi/pyramid/

Для развертывания облачных приложений Python см. Heroku:

http://www.heroku.com/