... които може би сте виждали.

datetime е модул, който ви дава основна функционалност за дати

• datetime.date(year, month, day) - клас за дата
• datetime.time(hour, minute, second, microsecond, tzinfo=None) - клас за време
• datetime.datetime(...) - клас за дата и време
• datetime.timedelta - разлика м/у datetime.datetime

... ама това трябва да сте го виждали вече.

os - функционалност от операционната система

os.path - функционалност за работа с пътища във файловата система

• os.system(command) - изпълнява командата
• os.getcwd() - дава текущата директория
• os.chdir(path) - сменя текущата директория
• os.listdir(path) - дава съдържанието на директорията
• os.makedirs(path) - създава директория и родители
• os.remove(path) - трие файл
• os.rmdir(path) - трие празна директория
• os.stat(path) - данни за файла
• os.walk(path) - ходи из разни неща
• os.path.exists(path) - проверява дали нещото съществува
• os.path.isdir(path)- проверява дали нещото е директория

... ама и това сте го виждали по време на семестъра

Нещо, което може би не сме ви показали

json е модул, който може да сериализира прости Python обекти.

• json.dump(object, file) - Приема binary отворен за писане файл file и Python обект object. Записва обекта в файла.
• json.load(file) - Приема binary отворен за четене файл и прочита един обект, който е и резултат от функцията
• json.dumps(object) - връща низ
• json.loads(str) - връща обект от низ

• configparser - модул за обработка на конфигурационни файлове
• getopt - parser за опции от командния ред
• StringIO - буфер, който създава стабилното впечатление, че е файл
• xml.dom.minidom - ако някой ви е излъгал, че работата с DOM дървета е яка
• lxml - ако искате да парсвате xml, като хората
• html.parser - парсва html
• hashlib - хешира разни неща с md5, sha1, sha256, sha512...
• email - праща разни мейли

модул за обработка на command line параметри

import argparse

parser = argparse.ArgumentParser(description='Process some integers.')
parser.add_argument('integers', metavar='N', type=int, nargs='+',
                    help='an integer for the accumulator')
parser.add_argument('--sum', dest='accumulate', action='store_const',
                    const=sum, default=max,
                    help='sum the integers (default: find the max)')

args = parser.parse_args()
print(args.accumulate(args.integers))

• zlib
• gzip
• bz2
• zipfile
• tarfile

... които няма да намерите в стандартната библиотека

Преди това да обясним какъв му е проблемът на urllib

Да речем, че правим някакви заявки към някакво API и си казваме какво ни връща

Имайки urllib, в стандартната библиотека ще направим ей така:

import urllib.request
import urllib.error
import urllib.parse

gh_url = 'https://api.github.com'

req = urllib.request.Request(gh_url)

password_manager = urllib.request.HTTPPasswordMgrWithDefaultRealm()
password_manager.add_password(None, gh_url, 'user', 'pass')

auth_manager = urllib.request.HTTPBasicAuthHandler(password_manager)
opener = urllib.request.build_opener(auth_manager)

urllib.request.install_opener(opener)

handler = urllib.request.urlopen(req)

print(handler.getcode())
print(handler.getheader('content-type'))

Не трябваше ли нещата в Python да са кратки и лесни?

> pip install requests

• International Domains and URLs
• Keep-Alive & Connection Pooling
• Sessions with Cookie Persistence
• Browser-style SSL Verification
• Basic/Digest Authentication
• Elegant Key/Value Cookies
• Automatic Decompression
• Unicode Response Bodies
• Multipart File Uploads
• Connection Timeouts
• .netrc support
• Thread-safe.

Celery е дистрибутирана опашка за задачи

Опашките за задачи се използват за разпределяне на работа между нишки и машини

Задачите им са да:

Сelery e използва външна система за подаване на съобщения и я използва за да координира "клиенти" и "worker"-и.

За да се свърши някаква работа "клиент" пуска задача в опашката и системата за подаване на съобщения доставя задачата до worker. Една Celery система обикновено се състои от много много worker-и и системи за подаване на съобщения което прави скалирането на приложението много лесно, а и го прави много надеждно

• Приемат единици работа (tasks)
• Разпределят работата на worker процеси
• Постоянно следят за нова работа и състоянието на worker-ите

from celery import Celery

# Първият аргумент трябва да е името на сегашния модул
# Вторият аргумент е адреса на диспечера на съобщения
celery = Celery('hello', broker='amqp://guest@localhost//')

@celery.task
def answer_to_the_question_of_life_universe_and_everything():
    return 42

• Приложение което трябва да върши много работа паралелно
• Система за подаване на съобщения (Message broker)
• Препоръчва се RabbitMQ
• Възможно е и с SQL база данни, Redis, MongoDB

• Celery спокойно може да обработва милиони задачи в минута
• Worker-ите и клиентите автоматично пробват отново при загуба на мрежа или други проблеми
• Почти всяка част от Celery може да бъде наследена и нагодена до вашите нужди
• Интегрира се лесно с Django

pip install urwid

urwid е библиотека за конзолни GUI-та

Съдържа всичко което ви трябва за да направите удобно изцяло конзолно плиожение:

• Widget класове
• Поддръжка на мишка и клавиатура
• Дисплей модули за различни видове конзоли както и за web/html
• Функции за форматиране на текст

pip install coverage

Проверява през каква част от кода ви се изпълнява в дадени случаи

coverage run баба.py
coverage report

• Показахме ви logging
• Проблемът е, че трудно се намират неща в огромен лог
• structlog решава този проблем
• Без да чупи съвместимост с logging

• Пример:
• Намери всички заявки, които са отнели повече от 200ms и са дошли от Европа

pip install ipython ipdb

По-удобен терминал и дебъгър

Покъртително добра библиотека за парсване

re.compile("a(b|c)d+e")
parsley.makeGrammar("foo = 'a' ('b' | 'c') 'd'+ 'e'", {})

parsley.makeGrammar("""
foo = 'a':one baz:two 'd'+ 'e' -> (one, two)
baz = 'b' | 'c'
""", {})

На 2014-06-11 в Борисовата градина ще пием бира

• http://fmi.py-bg.net/
• fmi@py-bg.net
• @pyfmi