ФорумСообществоФлейм → Идеи десктопных проектов, связанных с получением данных из сайтов...

Идеи десктопных проектов, связанных с получением данных из сайтов...

  • Rotten

    Сообщения: 2243 Репутация: N Группа: Адекваты

    Spritz 29 февраля 2012 г. 20:30

    Для аналогии, как популярный пример, это информеры и гаджеты на рабочий стол, который получают с интернетов курсы валют, погоду, новости и прочую хрень…
    НО - в условиях адекватного общепринятого программирования эти данные клиентские приложения получают через XML, JSON, etc.

    А вот есть дохрена интересных полезных сайтов, которые, скажем, не предлагают никакого протокола/интерфейса для предоставления данных.
    И что приходится? парсить сами хтмл-страницы?

    Это ж непрактично как минимум, т.к. дизайн время от времени меняется, и шаблоны регулярок надо соответственно тоже менять…

    Кто-нибудь сталкивался с подобной ситуацией?

  • Rotten

    Сообщения: 2243 Репутация: N Группа: Адекваты

    Spritz 29 февраля 2012 г. 20:35, спустя 5 минут 25 секунд

    Как это вообще воспринимать? Нормально, так как хоть и дизайн меняется но не так часто и брать во внимание что надо переписывать шаблоны регулярок под новую верстку… ?
    Либо забивать и искать сайты в которых такой протокол может быть доступен?
    Либо еще вариант - подписатся на рсс, и работать уже с рсс-файлами. Там же формат представления данных точно не меняется….
  • phpdude

    Сообщения: 26646 Репутация: N Группа: в ухо

    Spritz 29 февраля 2012 г. 20:40, спустя 4 минуты 52 секунды

    лол. парси парси, не еби мозг никому)
    Сапожник без сапог
  • adw0rd

    Сообщения: 22959 Репутация: N Группа: в ухо

    Spritz 29 февраля 2012 г. 21:59, спустя 1 час 18 минут 39 секунд


    Для аналогии, как популярный пример, это информеры и гаджеты на рабочий стол, который получают с интернетов курсы валют, погоду, новости и прочую хрень…
    НО - в условиях адекватного общепринятого программирования эти данные клиентские приложения получают через XML, JSON, etc.

    А вот есть дохрена интересных полезных сайтов, которые, скажем, не предлагают никакого протокола/интерфейса для предоставления данных.
    И что приходится? парсить сами хтмл-страницы?

    Это ж непрактично как минимум, т.к. дизайн время от времени меняется, и шаблоны регулярок надо соответственно тоже менять…

    Кто-нибудь сталкивался с подобной ситуацией?




    хех, я сейчас делаю проект, который предоставляет API тем сайтам, у которых их нет
    я писал о нем на пыхе год-два назад, а идея уже с 2009-года у меня, но пока особо не сдинулся в нём, думаю через пару месяцев можно будет что-то посмотреть

    Если кто-нибудь знает о аналогах, то пишите, тут, тема мне очень интересна
    Спустя 32 сек.
    Спроси md5 или vasa_c, я им про этот проект уже 100 раз рассказывал ))
    Спустя 110 сек.
    о, нашел ссылку на пост http://pyha.ru/forum/topic/3751.msg77302#msg77302
    Спустя 222 сек.
    Вообщем сервис должен предоставлять:
    * систему контроля версий на выбор (в том числе внешний)
    * язык программирования на выбор (в том числе смешанное содержимое)
    * виртуалное окружение для проектов и приложений
    * тарификация реквестов клиентов (лимиты на подключения в день) + платные тарифы на бОльшие подключения, а также выделенные сервера для запуска приложений
    * монетизация за счет клиентов, также перечисления команде разработчиков проекта
    … и т.д., у меня даже есть презентация на 5 страничек :)
    Спустя 56 сек.
    Ну естественно должно быть внутренее API для предоставления интерфейсов, тестирование и полуавтоматическая документация
    https://smappi.org/ - платформа по созданию API на все случаи жизни
  • Troy

    Сообщения: 2532 Репутация: N Группа: Джедаи

    Spritz 29 февраля 2012 г. 22:15, спустя 16 минут 11 секунд

    adw0rd, идея интересная, завтра покажу аналог. Там суть чуть другая только. Их серверы служат прокси к api различных сайтов, чтобы снизить нагрузку.
  • adw0rd

    Сообщения: 22959 Репутация: N Группа: в ухо

    Spritz 1 марта 2012 г. 1:40, спустя 3 часа 25 минут 22 секунды

    Troy, ага, понял, жду ссылку на аналог :)
    https://smappi.org/ - платформа по созданию API на все случаи жизни
  • adw0rd

    Сообщения: 22959 Репутация: N Группа: в ухо

    Spritz 21 декабря 2012 г. 0:44, спустя 294 дня 23 часа 3 минуты

    Илья, где ссылка? :-)
    https://smappi.org/ - платформа по созданию API на все случаи жизни

Пожалуйста, авторизуйтесь, чтобы написать комментарий!