urllib2

  • 316 рейтинг
    8 ответов
    Ошибка импорта: нет имени модуля urllib2

    Вот мой код:

    import urllib2.request
    
    response = urllib2.urlopen("http://www.google.com")
    html = response.read()
    print(html)
    

    Любая помощь?

  • 139 рейтинг
    15 ответов
    Скачивание картинки через urllib и python

    Итак, я пытаюсь создать скрипт Python, который загружает веб-комиксы и помещает их в папку на моем рабочем столе. Я нашел несколько подобных программ, которые делают что-то похожее, но не совсем то, что мне нужно. Тот, который я нашел наиболее похожим,

    ...
  • 91 рейтинг
    9 ответов
    Изменение пользовательского агента на urllib2.urlopen

    Как загрузить веб-страницу с помощью пользовательского агента, отличного от используемого по умолчанию на urllib2. urlopen?

  • 69 рейтинг
    7 ответов
    Прокси с urllib2

    Я открываю URL с:

    site = urllib2.urlopen('http://google.com')

    И что я хочу сделать, это подключиться таким же образом с прокси Я где-то сказал мне:

    site = urllib2.urlopen('http://google.com', proxies={'http':'127.0.0.1'})

    но это тоже не сработало.

    Я знаю, что у urllib2 есть что-то вроде

    ...
  • 67 рейтинг
    6 ответов
    urllib2 и json

    Может кто-нибудь указать учебник, который показывает мне, как сделать запрос POST, используя urllib2 с данными в формате JSON?

  • 60 рейтинг
    3 ответов
    Как отправить пользовательский заголовок с urllib2 в запросе HTTP?

    Я хочу отправить пользовательский заголовок «Принять» в моем запросе при использовании urllib2. urlopen (. , ). Как я могу это сделать?

  • 57 рейтинг
    2 ответов
    Обработка таймаута urllib2? - питон

    Я использую параметр timeout в urlopen urllib2.

    urllib2.urlopen('http://www.example.org', timeout=1)
    

    Как мне сообщить Python, что по истечении тайм-аута должна возникнуть пользовательская ошибка?


    Есть идеи?

  • 53 рейтинг
    4 ответов
    Поток больших двоичных файлов с urllib2 в файл

    Я использую следующий код для потоковой передачи больших файлов из Интернета в локальный файл:

    fp = open(file, 'wb')
    req = urllib2.urlopen(url)
    for line in req:
        fp.write(line)
    fp.close()
    

    Это работает, но загружается довольно медленно. Есть ли более быстрый способ? (Файлы большие,

    ...
  • 52 рейтинг
    8 ответов
    Python: путаница urllib / urllib2 / httplib

    Я пытаюсь проверить работоспособность веб-приложения, написав последовательность входа в Python, но у меня возникли некоторые проблемы.

    Вот что мне нужно сделать:

    1. Сделайте POST с несколькими параметрами и заголовками.
    2. Следуйте перенаправления
    3. Получите тело HTML.

    Теперь я относительно новичок в python, но

    ...
  • 46 рейтинг
    6 ответов
    Python `urllib2`: почему я получаю ошибку 403, когда я` urlopen` на странице Википедии?

    У меня странная ошибка при попытке urlopen определенной страницы из Википедии. Это страница:

    http: // en. википедия. org / wiki / OpenCola_ (напиток)

    Это сеанс оболочки:

    >>> f = urllib2.urlopen('http://en.wikipedia.org/wiki/OpenCola_(drink)')
    Traceback (most recent call last):
      File "C:\Program Files\Wing IDE 4.0\src\debug\tserver\_sandbox.py",
    ...
  • 45 рейтинг
    4 ответов
    Как я могу предотвратить urllib (2) Python от перенаправления

    В настоящее время я пытаюсь зайти на сайт с помощью Python, однако сайт, похоже, отправляет файл cookie и оператор перенаправления на той же странице. Похоже, что Python следит за этим перенаправлением, что не позволяет мне читать куки, отправленные со страницы

    ...
  • 45 рейтинг
    6 ответов
    Использование MultipartPostHandler для POST-данных формы с Python

    Проблема: При размещении данных с помощью Python urllib2 все данные кодируются в виде URL-адреса и отправляются как Content-Type: application / x-www-form-urlencoded. При загрузке файлов вместо Content-Type следует установить multipart / form-data, а содержимое должно быть закодировано в MIME. Обсуждение этой

    ...
  • 45 рейтинг
    2 ответов
    urllib2 читать в Юникоде

    Мне нужно хранить содержимое сайта, которое может быть на любом языке. И мне нужно иметь возможность искать содержимое строки Unicode.

    Я пробовал что-то вроде:

    import urllib2
    
    req = urllib2.urlopen('http://lenta.ru')
    content = req.read()
    

    Контент является потоком байтов, поэтому я могу найти

    ...
  • 44 рейтинг
    5 ответов
    Как сделать метод HTTP DELETE, используя urllib2?

    Поддерживает ли urllib2 метод DELETE или PUT? Если да, приведите любой пример, пожалуйста. Мне нужно использовать поршневой API.

  • 40 рейтинг
    7 ответов
    Python urllib2 с поддержкой активности

    Как я могу сделать HTTP-запрос "keep alive" с помощью Pyll's urllib2?

  • 38 рейтинг
    10 ответов
    Получить статью из Википедии с Python

    Я пытаюсь получить статью из Википедии с urllib Python:

    f = urllib.urlopen("http://en.wikipedia.org/w/index.php?title=Albert_Einstein&printable=yes")           
    s = f.read()
    f.close()
    

    Однако вместо HTML-страницы я получаю следующий ответ: Ошибка - Фонд Викимедиа:

    Request: GET http://en.wikipedia.org/w/index.php?title=Albert_Einstein&printable=yes, from 192.35.17.11 via knsq1.knams.wikimedia.org (squid/2.6.STABLE21) to ()
    Error: ERR_ACCESS_DENIED, errno
    ...
  • 38 рейтинг
    3 ответов
    Получить данные JSON через URL и использовать в Python (simplejson)

    Я полагаю, что это должен быть простой ответ, но я изо всех сил: я хочу взять URL (который выводит JSON) и получить данные в пригодном для использования словаре в Python. Я застрял на последнем шаге.

    >>> import urllib2
    >>> import
    ...
  • 37 рейтинг
    3 ответов
    Python и urllib2: как сделать GET-запрос с параметрами

    Я создаю «API API», это в основном оболочка для собственного веб-сервиса REST, к которому веб-приложение будет обращаться с большим количеством запросов. Некоторые вызовы веб-службы должны быть GET, а не отправлять, но передавать параметры.

    Есть ли лучший метод кодирования словаря в

    ...
  • 37 рейтинг
    5 ответов
    Использование HTTP PROXY - Python

    Я знаком с фактом, что я должен установить переменную среды HTTP_RPOXY в адрес прокси.

    Обычно urllib работает нормально, проблема связана с urllib2.

    >>> urllib2.urlopen("http://www.google.com").read()
    

    возвращает

    urllib2.URLError: 
    

    или

    urllib2.URLError: 
    

    Дополнительная информация:

    urllib. urlopen (. , , , ) работает отлично! Это

    ...
  • 33 рейтинг
    7 ответов
    Как скачать любую (!) Веб-страницу с правильным набором символов в python?

    Задача

    При очистке экрана веб-страницы с помощью python необходимо знать кодировку символов страницы. Если вы ошиблись в кодировке, ваш вывод будет испорчен.

    Люди обычно используют некоторую элементарную технику для обнаружения кодирования. Они либо используют набор символов из заголовка, либо набор

    ...