https://tyvik.ru/ Recent content on Берлога программиста Hugo -- gohugo.io ru Tue, 07 Apr 2026 09:02:00 +0300 https://tyvik.ru/posts/pet-project-issues/ Tue, 07 Apr 2026 09:02:00 +0300 https://tyvik.ru/posts/pet-project-issues/ Есть у меня один pet-проект - GeoPuzzle. Вот настоящий чемодан без ручки - и закрыть жалко, всё-таки 10k человек в месяц играют, и развивать времени нет. А ещё он постоянно ломается. Нет, не из-за кода, а из-за новых внешних ограничений. Изначально там были гуглокарты - с ключиком, всё красиво. Но внезапно оказалось, что при ~5k человек в месяц лимиты в $200 на карты заканчиваются. Ну ладно, отключаем ключик и показываем карты в режиме разработчика. https://tyvik.ru/posts/constant-hard-deadlines/ Sat, 13 Dec 2025 20:04:00 +0300 https://tyvik.ru/posts/constant-hard-deadlines/ В этом году я репостил статью как дышать, а не задыхаться. Там была интересная мысль про то, как заставлять себя делать больше. Всё очень просто - публично пообещайте что-то сделать к определённому времени. Я попробовал и поставил над собой эксперимент длиной 8 месяцев. О результатах и выводах далее чуть подробнее. Начало 🔗Итак, в чём состоял эксперимент? Я захотел проверить на сколько хватит моих сил - физических и моральных. Но по итогу выяснилось, что есть ещё и коммуникативные. https://tyvik.ru/posts/born-runet/ Wed, 10 Sep 2025 20:08:00 +0300 https://tyvik.ru/posts/born-runet/ Это было интересное время, которое никогда больше не повторится. То время, когда интернет раздавали по талонамкарточкам, и берегли каждую минуту в сети. Самым популярным сайтом для меня тогда был локальный форум http://forums.kuban.ru, где обсуждали вообще всё. И незаменимой была программа Teleport Pro, которая скачивала локально в фоне страницы, чтобы можно было их почитать спокойно в оффлайне. Там я познакомился с программистом из Уралсиба, который был для меня гейм-дилером. Он мне давал копировать диски с интересными играми: Baldur’s Gate, Neverhood, Петька… https://tyvik.ru/posts/tail-calling-optimization/ Tue, 08 Apr 2025 20:08:00 +0300 https://tyvik.ru/posts/tail-calling-optimization/ В последнее время в моём инфополе появилось много шума вокруг нового типа интерпретатора в Python: tail-calling. Я посмотрел PR на Github, из которого понял, что [[clang::musttail]] должен ускорить рантайм на 5%. Ещё я почитал Соболева, но понял только то, что эта инструкция генерирует вызов метода в asm-коде как jmp, а не call, то есть экономит один стэк-фрейм — посмотреть можно тут. Но почему эти инструкции в данном случае эквивалентны и сработают в CPython — непонятно. https://tyvik.ru/posts/enterprise-interview/ Fri, 26 Jul 2024 20:08:00 +0300 https://tyvik.ru/posts/enterprise-interview/ Волею судеб я снова стал ходить на собеседования, и хочу поделиться некоторыми наблюдениями. На этот раз речь про энтерпрайзные компании, в которых должен быть выстроен процесс найма. Скрининг 🔗Всё начинает с него, и тех-скрининг становится нормой. Рекрутер прям на первом звонке задаёт каверзные вопросы и сверяется со шпаргалкой. Например: как остановить контейнер? неизменяемые типы данных в python? какой pid у ядра linux? как расшифровывается CAP и PACELC? … Тинькофф пошёл ещё дальше и создал целую платформу с небольшими кусками кода, который можно запускать. https://tyvik.ru/posts/skillbox-genetics/ Sat, 09 Dec 2023 08:06:00 +0300 https://tyvik.ru/posts/skillbox-genetics/ Прошёл следующий курс на Skillbox, который называется “Основы генетики”. Если честно, то немного разочарован. Нет на мой взгляд самого интересного: генной инженерии, CRISPR/CAS9, расшифровки ДНК, сборки вакцины от COVID и т.п. С другой стороны он именно что про основы. Если вы не прогуливали биологию в школе и хоть как-то следите за генетикой, то найдёте для себя мало нового. Тем не менее, что я узнал: пол у других животных может быть абсолютно по-разному спроектирован (Y-хромосома не обязательно отвечает за мужской) при кодировании мРНК репликация идёт только от 5’ к 3’ основаниям понимание статистики в генетике крайне необходимо как устроен горизонтальный перенос генов между бактериями и растениями мне интересно больше изучение генотипа и микробиологии, нежели фенотипа Из плюсов хочется отметить хорошо сделанные слайды и, пожалуй, раскрытие темы основ генетики. https://tyvik.ru/posts/communication/ Thu, 07 Dec 2023 13:02:00 +0300 https://tyvik.ru/posts/communication/ За свои 15+ лет в разработке я понял, что чуть ли не половина времени уходит на коммуникацию. И хотя в основном я работаю в IDE, общения всё равно достаточно много. Дейли, груминги и прочие scrum-ритуалы; выяснение требований у заказчика; обсуждение MR и архитектуры… Просто обратите внимание сколько времени вы пишете код, а сколько общаетесь с коллегами. В распределённой команде коммуникация становится в несколько раз сложнее. Там нет встреч у кулера, общих обедов, курилок и т. https://tyvik.ru/posts/skillbox-medieval-history/ Mon, 20 Nov 2023 20:06:00 +0300 https://tyvik.ru/posts/skillbox-medieval-history/ Пользуясь возможностью, стал проходить курсы Skillbox. В первую очередь для общего развития, и начал с истории. Мне интересна эта наука, потому что позволяет понять почему что-то появилось в нашей жизни именно в таком виде; что повлияло и какие были предпосылки. Это даёт представление как о границах применимости инструмента или понятия, так и о его актуальности. Возможно, наша жизнь настолько изменилась, что пора бы уже этот атавизм и отбросить. Начал с курса “Мир Страдающего Средневековья”. https://tyvik.ru/posts/what-is-chatgpt-doing/ Sat, 03 Jun 2023 10:55:00 +0300 https://tyvik.ru/posts/what-is-chatgpt-doing/ Просто добавляйте по одному слову… 🔗То, что ChatGPT может автоматически генерировать что-то, что хотя бы на первый взгляд похоже на написанный человеком текст, удивительно и неожиданно. Но как он это делает? И почему это работает? Цель этой статьи - дать приблизительное описание того, что происходит внутри ChatGPT, а затем исследовать, почему он может так хорошо справляться с созданием более-менее осмысленного текста. С самого начала я должен сказать, что собираюсь сосредоточиться на общей картине происходящего, и хотя я упомяну некоторые инженерные детали, но не буду глубоко в них вникать. https://tyvik.ru/posts/alpine-python/ Wed, 14 Dec 2022 13:02:00 +0300 https://tyvik.ru/posts/alpine-python/ По мотивам моего доклада на PyCon “Контейнеризация Python без боли”. На своей практике я постоянно сталкиваюсь со спорами какой базовый образ лучше использовать для проектов: alpine или debian. Аргументы есть и у той, и у другой стороны, но мне это настолько надоело, что я решил сам разобраться и наконец-то поставить точку. В конце концов “В наше время верить нельзя никому, даже себе. Но мне - можно.” (с) Сравниваем базовые образы alpine и debian 🔗Перед тем, как мы перейдём к специфике запуска python-проектов под alpine, давайте заглянем под капот базовых образов и сравним что они нам предлагают. https://tyvik.ru/posts/apt-key-migrate/ Fri, 25 Nov 2022 13:02:00 +0300 https://tyvik.ru/posts/apt-key-migrate/ В наше время тотальной слежки и всеобщего недоверия всё должно подписываться публичными ключами. Утрирую, конечно, но проблема стара как мир - как убедиться, что файл был создан действительно тем, кому мы доверяем? Сегодня речь пойдёт об apt и установку пакетов. Прошло то время, когда люди ставили ПО из исходников. Это было реально неудобно по многим причинам, так что на свет появился сначала dpkg, а потом и apt-get. dpkg умеет работать с зависимостями и устанавливать пакеты, а apt - искать их в репозиториях. https://tyvik.ru/posts/stocks-deals-visualizer/ Sat, 05 Nov 2022 13:02:00 +0300 https://tyvik.ru/posts/stocks-deals-visualizer/ Скоро декабрь - самая пора резать лосей. Не тех, за которыми надо охотиться, а которые у нас в брокерском портфеле (loss - минусовые позиции). Тем более, что год выдался удивительным на события, и отрицательных позиций, уверен, много у каждого. Вот и я решил узнать что можно продать с минимальным убытком. Считать ручками как-то лень, так что весь код на github. Немного теории 🔗Наш налоговый кодекс допускает некоторую оптимизацию уплаты. Первая попавшаяся статья говорит нам, что можно провернуть много чего, но я пользуюсь только парой пунктов: https://tyvik.ru/posts/my-games/ Mon, 22 Aug 2022 06:43:00 +0300 https://tyvik.ru/posts/my-games/ Сегодня хотел бы поднять тему игр. Кто-то относится к ним как к бесполезной трате времени, кто-то азартен и не может остановиться, но мне хочется показать как с помощью них можно учиться. С рождения мы познаём мир через игры: сначала в какие-нибудь кубики и конструкторы, позже - с помощью специальных программ и обучающих материалов. Пожалуй, это самый простой способ получать знания даже неосознанно. Потому что интересно! Интересно победить, поэкспериментировать, сделать что-то новое… Да, не могу сказать, что такая техника обучения самая эффективная, но то, что она работает - определённо. https://tyvik.ru/posts/hr-interview/ Wed, 10 Aug 2022 06:43:00 +0300 https://tyvik.ru/posts/hr-interview/ Дорогие рекрутеры! Я искренне ценю ваш труд. Перебрать сотни резюме, созвониться с кандидатом, организовать встречи, собрать фидбек - это требует огромных усилий. Особенно, если это работа, которую надо делать каждый день. И я представляю вашу радость, когда оффер наконец-то принимают, и новый человек в команде хорошо приживается. Поздравляю! Но случается это, увы, не так часто. И мне хотелось бы рассказать как процесс общения и найма выглядит со стороны кандидата и как можно улучшить коммуникацию. https://tyvik.ru/posts/modern-frontend/ Mon, 02 May 2022 06:43:00 +0300 https://tyvik.ru/posts/modern-frontend/ Волею судеб мне пришлось глубоко погрузиться в промышленную фронтенд разработку. До этого у меня были некоторые свои небольшие проекты, но писал я их в одиночку и не знал всех best practice. Следовал логике что чем проще, тем лучше, и они как-то работали. Пример можно посмотреть на GitHub GeoPuzzle - там используется React вместе с bootstrap, получилось достаточно минималистично. Сейчас же я работаю с крупным проектом на сотни компонент, несколько десятков страниц и сложной бизнес-логикой. https://tyvik.ru/posts/postgres-index-scan-backward/ Fri, 24 Dec 2021 16:07:00 +0300 https://tyvik.ru/posts/postgres-index-scan-backward/ Каждый разработчик знает, что если запрос тормозит, то надо просто добавить индекс. Контринтуитивна обратная ситуация - чтобы запрос работал быстрее, надо индекс удалить. Вот именно с таким случаем я и столкнулся на работе. Попробуем смоделировать ситуацию. У нас есть всего одна таблица, в которой хранится информация по обработанным задачам. Пользователи дёргают ендпоинт, запускается Celery задача, и результат отправляется на email. Ничего сложного, всего несколько столбцов: id - уникальный ключ task_id - номер задачи user_id - кто запустил started_at - время начала finished_at - время окончания О хранении исторической информации в реляционной БД Вообще, хранить в Postgres данные, которые не меняются - не самая хорошая практика. https://tyvik.ru/posts/linters-love/ Thu, 15 Jul 2021 09:02:00 +0300 https://tyvik.ru/posts/linters-love/ Я думаю, все понимают пользу стайлгайдов и оду линтерам не писал только ленивый, так что я собираюсь покинуть их число. За последние 10 лет правила форматирования кода появились у всех языков (а для некоторых даже несколько!). Причина понятна - единообразно написанный код проще читать. Глаз не цепляется за пропущенный пробел или скобку не на той строке. В Go это даже возведено в абсолют - вы не можете форматировать свою программу по-другому. https://tyvik.ru/posts/python-m/ Sun, 11 Jul 2021 13:02:00 +0300 https://tyvik.ru/posts/python-m/ На днях меня попросили посмотреть один странный баг, связанный с запуском приложения. Вот так $ python mymodule интерпретатор валился с ошибкой ModuleNotFoundError: No module named 'http.server'; 'http' is not a package (или ImportError: cannot import name 'server' from partially initialized module 'http' - зависит от того как импортировать http.server). Проблема уходит, если запускать пакет правильно $ python -m mymodule. И вроде бы вопрос закрыт, можно было бы и забить, но что-то меня заставило копнуть глубже и разобраться чем эти 2 команды различаются. https://tyvik.ru/posts/dualboot-datetime-issue/ Sun, 04 Jul 2021 13:02:00 +0300 https://tyvik.ru/posts/dualboot-datetime-issue/ У меня на ноутбуке установлено 2 ОС: Linux Mint и Windows 10. Первая - для работы, вторая - для Steam. Переключаюсь поиграть я не так чтобы часто, но в этот раз меня окончательно достал сброс времени при возврате в linux на 3 час, так что я решил всё-таки разобраться в проблеме. Мой часовой пояс Europe/Moscow UTC+3, значит где-то не происходит перевод из datetime with timezone в naive datetime или наоборот. И что же может быть общего между двумя ОС на разных разделах диска? https://tyvik.ru/posts/caddy/ Sat, 12 Dec 2020 13:02:00 +0300 https://tyvik.ru/posts/caddy/ За свои 15 лет в IT я перепробовал разные веб-серверы. Сначала это был Apache (куда же без него), потом перешёл на более лёгкий nginx (а как меня однажды OpenResty спас!). Поразвлекался с lighttpd когда держал дома FreeNAS, даже заводил pet-project под YAWS. И вот в одном из репозиториев увидел новый для себя Caddy. Поспрашивал в местных чатиках кто его использует, и меня убедили, что он уже вполне production-ready. Более того - настраивать ничего не надо, сертификаты сам обновляет, быстрый, всего один бинарник! https://tyvik.ru/posts/dump-kinopoisk/ Wed, 04 Nov 2020 23:02:00 +0300 https://tyvik.ru/posts/dump-kinopoisk/ У меня есть некоторая паранойя касательно моих данных. Мне постоянно кажется, что я могу их потерять. Поэтому, я стараюсь делать бэкапы всего, что только можно: фото, видео, проектов… и рейтинга просмотренных фильмов. Один раз меня это уже спасло - когда внезапно закрылся ImhoNet. Тогда я перебрался на Kinopoisk. И что-то не уверен в правильности своего решения. После того, как он убил аккаунт жены, добавив туда кучу мусора, я решил проверить не случилось ли это с моим, а заодно и сделать бэкап. https://tyvik.ru/posts/images-in-mind/ Sun, 09 Aug 2020 12:08:00 +0300 https://tyvik.ru/posts/images-in-mind/ Есть у меня такое хобби - интересоваться как же на самом деле работает наш мозг. И чем больше я знакомлюсь с ним, тем больше он меня удивляет. Насколько это мощный, но в то же время и бажный механизм. Сегодня я остановлюсь на образах. Здесь под образом я понимаю собирательное представление чего-либо: предмета, человека, роли (жены, профессионала) и пр. У которого в свою очередь у каждого свои определения (привет, навешивание ярлыков и ошибки атрибуции). https://tyvik.ru/posts/why-not-iphone/ Wed, 05 Aug 2020 12:08:00 +0300 https://tyvik.ru/posts/why-not-iphone/ Одним из призов за победу в конкурсе приложений VK был iPhone 11. Я решил воспользоваться случаем и попробовать перейти на него. tl;dr Это закончилось фейлом, я вернулся на свой прежний аппарат Xiaomi Mi A2. Первое ощущение, когда вы берёте этот аппарат в руку - он тяжёлый! Мне вспомнилась какая-то Нокия из студенчества. Долговечность, надёжность, в общем, весчъ! И по началу вроде бы ok, но со временем рука начинает уставать. Да, Mi A2 всего на 30г легче, но это заметно. https://tyvik.ru/posts/sparql/ Sun, 12 Jul 2020 20:31:00 +0300 https://tyvik.ru/posts/sparql/ Disclaimer: Текстовая расшифровка лишь частично пересекается с видео. На мастер-классе всё пошло не так :) Здравствуйте, меня зовут Виктор Тыщенко, и сегодня я бы хотел поговорить как можно удобно получать факты из самой большой базы знаний - Wikipedia. Давным давно я увидел игру Puzzle Mercator, которую сделал один из сотрудников Google. Мне очень понравилась идея, так что я решил её скопировать, расширить и доработать. Например, показывать информацию об объектах в отдельном окошке, который бы напоминал инфобокс Wikipedia. https://tyvik.ru/sparql/ Mon, 18 May 2020 12:52:00 +0300 https://tyvik.ru/sparql/ Страны Европы с флагами 🔗 Населённые пункты Исландии 🔗 Население Германии 🔗 Страны Африки с регионами 🔗 Русские города, основанные с 900 до 1100 г. 🔗 https://tyvik.ru/posts/peg/core-developer-sprint/ Mon, 04 Nov 2019 06:46:00 +0300 https://tyvik.ru/posts/peg/core-developer-sprint/ Оригинал: ‘PEG at the Core Developer Sprint’ by Guido van Rossum В этой статье я не буду рассказывать о новых фичах генератора парсера - я достаточно описал его в предыдущих частях. Вместо этого хочу рассказать что я делал на Core Developer Sprint на прошлой неделе, прежде чем всё сотрётся из моей памяти. Хотя большая часть материала так или иначе всё равно касается PEG. Так что мне придётся показать некоторый код, который задаёт направление в реализации PEG-парсера для Python 3. https://tyvik.ru/posts/peg/features/ Fri, 01 Nov 2019 22:56:00 +0300 https://tyvik.ru/posts/peg/features/ Оригинал: ‘Implementing PEG Features’ by Guido van Rossum После того, как я собрал все части генератора PEG-парсеров воедино в предыдущем посте, я готов показать как реализовать и некоторые другие интересные штуки. Содержание серии статей о PEG-парсере в Python PEG парсеры Реализация PEG парсера Генерация PEG парсера Визуализация работы PEG парсера Леворекурсивные PEG грамматики Добавление экшенов в грамматику PEG Мета-грамматика для PEG парсера Реализация остальных возможностей PEG PEG на Core Developer Sprint Мы рассмотрим следующие фичи PEG: https://tyvik.ru/posts/peg/meta-grammar/ Wed, 30 Oct 2019 06:36:00 +0300 https://tyvik.ru/posts/peg/meta-grammar/ Оригинал: ‘A Meta-Grammar for PEG Parsers’ by Guido van Rossum На этой неделе мы делаем генератор парсеров «самостоятельным», то есть он будет генерировать свой собственный парсер. Содержание серии статей о PEG-парсере в Python PEG парсеры Реализация PEG парсера Генерация PEG парсера Визуализация работы PEG парсера Леворекурсивные PEG грамматики Добавление экшенов в грамматику PEG Мета-грамматика для PEG парсера Реализация остальных возможностей PEG PEG на Core Developer Sprint Итак, у нас уже есть генератор парсера, часть которого является парсером грамматики. https://tyvik.ru/posts/peg/actions/ Tue, 29 Oct 2019 04:31:00 +0300 https://tyvik.ru/posts/peg/actions/ Оригинал: ‘Adding Actions to a PEG Grammar’ by Guido van Rossum Грамматика становится ещё лучше, если вы можете добавить (некоторую) семантику в соответствии с правилами. В частности, для анализатора Python, который я разрабатываю, мне нужно возвращать узел AST из каждой альтернативы, поскольку я хочу придерживаться текущей реализации AST в CPython. Содержание серии статей о PEG-парсере в Python PEG парсеры Реализация PEG парсера Генерация PEG парсера Визуализация работы PEG парсера Леворекурсивные PEG грамматики Добавление экшенов в грамматику PEG Мета-грамматика для PEG парсера Реализация остальных возможностей PEG PEG на Core Developer Sprint Многие грамматики используют соглашение, позволяющее добавлять экшены к правилам - обычно это блок кода внутри {фигурных скобок}. https://tyvik.ru/posts/peg/left-recursive-grammar/ Sat, 26 Oct 2019 07:14:00 +0300 https://tyvik.ru/posts/peg/left-recursive-grammar/ Оригинал: ‘Left-recursive PEG Grammars’ by Guido van Rossum Я упоминал о левой рекурсии как о камне преткновения несколько раз, и пришло время разобраться с этим. Основная проблема заключается в том, что парсер с лево-рекурсивным спуском мгновенно падает из-за переполнения стека. Содержание серии статей о PEG-парсере в Python PEG парсеры Реализация PEG парсера Генерация PEG парсера Визуализация работы PEG парсера Леворекурсивные PEG грамматики Добавление экшенов в грамматику PEG Мета-грамматика для PEG парсера Реализация остальных возможностей PEG PEG на Core Developer Sprint Рассмотрим это гипотетическое правило грамматики: https://tyvik.ru/posts/peg/visualization/ Wed, 23 Oct 2019 05:06:00 +0300 https://tyvik.ru/posts/peg/visualization/ Оригинал: ‘Visualizing PEG Parsing’ by Guido van Rossum В прошлый раз получился простой генератор парсера PEG. Сейчас же я покажу, что на самом деле делает сгенерированный парсер при разборе программы. Я погрузился в ретро-мир ASCII-арта, в частности, библиотеку с именем «curses», которая доступна в стандартной поставке Python для Linux и Mac, а также как дополнение для Windows. Содержание серии статей о PEG-парсере в Python PEG парсеры Реализация PEG парсера Генерация PEG парсера Визуализация работы PEG парсера Леворекурсивные PEG грамматики Добавление экшенов в грамматику PEG Мета-грамматика для PEG парсера Реализация остальных возможностей PEG PEG на Core Developer Sprint <В конце статьи под спойлером приводится gif. https://tyvik.ru/posts/peg/generation/ Mon, 21 Oct 2019 18:33:00 +0300 https://tyvik.ru/posts/peg/generation/ Оригинал: ‘Generating a PEG Parser’ by Guido van Rossum Теперь, когда я набросал основу самописного парсера, давайте перейдём к генерации его методов из грамматики, как я и обещал. Также покажу как реализовать packrat-парсер с помощью декоратора @memoize. Содержание серии статей о PEG-парсере в Python PEG парсеры Реализация PEG парсера Генерация PEG парсера Визуализация работы PEG парсера Леворекурсивные PEG грамматики Добавление экшенов в грамматику PEG Мета-грамматика для PEG парсера Реализация остальных возможностей PEG PEG на Core Developer Sprint В прошлый раз мы разобрали несколько методов парсера. https://tyvik.ru/posts/peg/implementation/ Sat, 19 Oct 2019 22:08:00 +0300 https://tyvik.ru/posts/peg/implementation/ Оригинал: ‘Building a PEG Parser’ by Guido van Rossum Вдохновленный лишь частичным пониманием PEG, я решил попробовать его реализовать. Результат может получиться и не самым лучшим среди парсеров PEG общего назначения - их уже много (например, TatSu написан на Python и генерирует код Python) - но это хороший способ разобраться в PEG. В дальнейшем я хочу заменить им текущую реализацию парсера в CPython. Содержание серии статей о PEG-парсере в Python PEG парсеры Реализация PEG парсера Генерация PEG парсера Визуализация работы PEG парсера Леворекурсивные PEG грамматики Добавление экшенов в грамматику PEG Мета-грамматика для PEG парсера Реализация остальных возможностей PEG PEG на Core Developer Sprint В этом разделе я закладываю основы для понимания работы парсера, на примере простой самописной реализации игрушечной грамматики из прошлой статьи. https://tyvik.ru/posts/peg/parsers/ Thu, 17 Oct 2019 09:36:00 +0300 https://tyvik.ru/posts/peg/parsers/ Оригинал: ‘PEG parsers’ by Guido van Rossum Несколько лет назад меня кто-то спросил имеет ли смысл превести Python на PEG-парсер (или на грамматику PEG; я не помню точно кто и когда это было). Тогда я немного посмотрел на него, но так и не пришёл к какому-либо выводу, а потому и отбросил эту тему. Недавно я узнал больше о PEG (Parsing Expression Grammars, грамматике по парсингу выражений), и теперь я думаю, что это интересная альтернатива самописному генератору парсеров, который был разработан 30 лет назад, когда только начинал работать над Python. https://tyvik.ru/posts/peg/ Tue, 15 Oct 2019 04:31:00 +0300 https://tyvik.ru/posts/peg/ Оригинал: ‘PEG Parsing Series Overview’ by Guido van Rossum Содержание серии статей о PEG-парсере в Python 🔗 PEG парсеры Реализация PEG парсера Генерация PEG парсера Визуализация работы PEG парсера Леворекурсивные PEG грамматики Добавление экшенов в грамматику PEG Мета-грамматика для PEG парсера Реализация остальных возможностей PEG PEG на Core Developer Sprint А вот видео с North Bay Python, в котором он рассказывает про PEG парсеры. https://tyvik.ru/posts/write-cut/ Thu, 07 Mar 2019 11:55:00 +0300 https://tyvik.ru/posts/write-cut/ Тема выражения своих мыслей, их структурирования и умение донести идею сейчас очень актуальна для меня. Порой мне кажется, что это даже важнее, чем способность писать код. Так что когда несколько человек примерно в одно и то же время посоветовали мне “Пиши, сокращай”, я сразу пошёл в Читай-город (не реклама, в других магазинах можно найти дешевле). Немного об издании 🔗Книга выполнена отлично! Приятная на ощупь плотная бумага, чёткая печать, яркие иллюстрации (за комикс с девушкой отдельное спасибо! https://tyvik.ru/posts/multitenancy/ Fri, 01 Mar 2019 11:55:00 +0300 https://tyvik.ru/posts/multitenancy/ слайды Что такое SaaS и тенант? 🔗Sofware as a Service (SaaS) - модель реализации вашего приложения, когда вы предоставляете свой продукт разным клиентам практически не меняя его. Например, есть у вас CRM, и вы подключаете в неё нескольких клиентов, разнося их по поддоменам: mvideo.crm.ru, dns.crm.ru, eldorado.crm.ru… Код процентов на 90% совпадает, различаются лишь стили и третьестепенная бизнес-логика. Каждый клиент в этом случае завётся тенантом. А чтобы чуть упростить вашу жизнь как разработчика, познакомлю с такой классной вещью как мультитенантность на примере DjangoORM и PostgreSQL. https://tyvik.ru/posts/python-meetup-1/ Sat, 16 Feb 2019 04:31:00 +0300 https://tyvik.ru/posts/python-meetup-1/ Список докладов: Влад Токарев: “Itertools и функциональный python”. Видео Презентация Дмитрий Жерлицын: “Опциональная статическая типизация в Python 3”. Видео Презентация Виктор Тыщенко: “Реализация мультитенантности на примере Django и Postgres”. Видео Презентация Фото в группе в Vk и facebook https://tyvik.ru/posts/habra-bookmarks/ Tue, 29 Jan 2019 11:03:00 +0300 https://tyvik.ru/posts/habra-bookmarks/ У каждого из нас есть традиции. У меня, например, раз в год перебирать закладки в браузере и избранное на других сайтах. Что-то становится не актуальным, что-то я и так выучиваю за год. Вот и сейчас подошла пора навести порядок в избранном Хабра. На момент начала чистки там 598 статей - довольно большая колекция на самые разные темы: и как работать с картинкам в CSS, и немного функциональщины, и для умного дома рецептики… А чтобы ничего не потерять, я решил выгрузить все статьи в pdf и выложить в общий доступ. https://tyvik.ru/posts/geopuzzle/ Thu, 01 Nov 2018 08:50:00 +0300 https://tyvik.ru/posts/geopuzzle/ Хочу рассказать о проекте, который развивал последние пару лет. Называется он GeoPuzzle и представляет собой игру-паззл на политической карте мира. Цель - расставить кусочки-страны на свои места. Идея подсмотрена в статье “Головоломка Mercator для знатоков географии”, также в детстве играл в тетрис из стран (ещё под DOS), но название программы уже не припомню. Я был настолько вдохновлён идеей, что захотел сделать полноценный продукт, интересный не только школьникам, но и знатокам географии. https://tyvik.ru/posts/my-subscriptions/ Mon, 24 Sep 2018 23:21:00 +0300 https://tyvik.ru/posts/my-subscriptions/ Сегодня хотел бы поговорить о поисках информации в интернете. Так уж сложилось, что я интересуюсь довольно большим кругом тем в области программирования. Самый лучший на мой взгляд способ получения информации - подписка на блоги, сайты и прочие интересные RSS. К сожалению, Google Reader умер (вернее, его убили), так что пришлось переехать на аналоги - Feedly тут делать - заодно почистил ленту. Итак, мои подписки: Блоги 🔗 Хабрахабр🇷🇺 - в пояснении не нуждается :) Дайджест новостей о python🇺🇸🇷🇺- новости в мире python: выход новых версий библиотек, статьи и пр. https://tyvik.ru/posts/circleci/ Sat, 07 Jul 2018 11:55:00 +0300 https://tyvik.ru/posts/circleci/ Зачем мне это? 🔗Ну куда ж в наше время без CI/CD - пришлось настраивать. Чтобы пуш в мастер обновлял прод, чтобы тесты прогонялись, и вообще спокойно жилось… У меня open source проект, ничего ставить на свои виртуалки я не хочу, так что подходили как минимум 2 сторонних сервиса: TravisCI и CircleCI. С первым я уже знакомился в рамках автоматического тестирования своей библиотеки для работы с Yandex.Disk, так что почему бы не попробовать другой для сравнения? https://tyvik.ru/posts/elasticsearch-queries/ Fri, 23 Feb 2018 12:08:00 +0300 https://tyvik.ru/posts/elasticsearch-queries/ В предыдущей статье мы разобрали основы Elasticsearch: индексы, маппинги и анализаторы. В этой же я хочу углубиться в тему построения запросов. У Elasticsearch свой собственный DSL, который может показаться непривычным, но по своей гибкости не уступает всем знакомому SQL. Набор данных, над которым я буду приводить примеры, можно взять здесь: Набор данных POST /twitter/tweet/_bulk {"index": {"_id": 1}} {"subject": "Первая запись в твиттер", "geotag": "Краснодар", "hashtags": ["твит", "новости", "Краснодар"], "published": "2014-09-12T20:44:42+00:00"} {"index": {"_id": 2}} {"subject": "Первая запись в Геленджике", "geotag": "Геленджик", "hashtags": ["твит", "море", "Геленджик"], "published": "2014-09-13T20:44:42+00:00"} {"index": {"_id": 3}} {"subject": "Солнечный Краснодар", "geotag": "Краснодар", "hashtags": ["Краснодар"], "published": "2014-09-11T20:44:42+00:00"} {"index": {"_id": 4}} {"subject": "Солнечный Геленджик", "geotag": "Геленджик", "hashtags": ["Геленджик"], "published": "2014-09-11T10:44:42+00:00"} PUT /twitter/retweet/1? https://tyvik.ru/posts/elasticsearch/ Tue, 06 Feb 2018 20:08:00 +0300 https://tyvik.ru/posts/elasticsearch/ Отсутствие опыта работы с Elasticsearch всегда считал своим слабым местом. Эту NoSQL БД используют для хранения логов, анализа информации и, самое главное, поиска. Собственно, она и представляет собой поисковый движок на базе Apache Lucene по json документам. Ну, плюс, конечно же, шардирование и репликация из коробки, настройки которых я пока касаться не буду. Видео доклада 🔗На базе этой статьи был подготовлен доклад на Krasnodar Backend: Meetup #2. Возможно, кому-то такая подача материала ближе, так что добавлю видео и слайды. https://tyvik.ru/posts/without-phone/ Sun, 26 Nov 2017 20:04:00 +0300 https://tyvik.ru/posts/without-phone/ Так уж вышло, что мой Nexus 5X внезапно ушёл в циклическую перезагрузку, и мне пришлось отдать его в ремонт. После диагностики выяснилось, что виноват контроллер питания, и работы займут около недели. Я решил поэкспериментировать и на какое-то время остаться без телефона, и тут выяснилась страшная правда. Без телефона вы беспомощны 🔗Он настолько сильно влился в нашу жизнь, что мы его уже не замечаем - а зря. Вы лишаетесь доступа к информации - посмотреть погоду или пробки становится невозможным. https://tyvik.ru/posts/krddevdays-python/ Thu, 02 Nov 2017 10:40:00 +0300 https://tyvik.ru/posts/krddevdays-python/ слайды Всем привет! Меня зовут Тыщенко Виктор, я backend team-lead в компании 3d4medical. Вижу, тут собралось много людей, любящих решать задачи и интересующихся чем-то новым. У каждого из нас есть свои способы, свои проверенные инструменты и, в конце концов, любимые языки программирования. Я же хочу рассказать о своём, который помогает сосредоточиться на задаче, а не заставляет бороться с компилятором и вспоминать какие-то низкоуровневые конструкции. Python 🔗Что за зверь? Первая его версия вышла более 20 лет назад, причём написал его человек, получивший образование именно в сфере разработки языков программирования. https://tyvik.ru/about/ Mon, 30 Oct 2017 12:52:00 +0300 https://tyvik.ru/about/ Где я? 🔗Вы попали в берлогу, где любят компьютеры, сети, ОС и программирование во всех его проявлениях. Здесь собраны материалы по самым разным областям. Кто здесь? 🔗Здесь обитает программист. На входе кофе и пицца, на выходе код, причём качество второго напрямую зависит от качества первого. Итак, пописывает он себе программки да сайтики. Что из этого выходит можно посмотреть в разделе проектов. Пишется на всём, что под руку попадётся — от asm до python, не гнушаясь php, erlang, java… https://tyvik.ru/projects/ Mon, 30 Oct 2017 12:52:00 +0300 https://tyvik.ru/projects/ Geo!Puzzle 🔗 Игра для изучения политической карты мира. Необходимо перетащить контуры стран на свои места. Прям как в детстве мы собирали паззлы кусочек за кусочком, так и здесь карта мира складывается из множества государств. YaDiskClient 🔗Python-библиотека для работы с Yandex.Disk, которую я хотел сделать максимально простой. Описана в статье Python API для Яндекс.Диск (а исходники на github), общение идёт по протоколу WebDAV. AWS doc 🔗За годы работы с AWS у меня накопилась некоторая экспертиза в этой области, и я был очень удивлен, когда не нашёл хоть какой-то документации на русском языке, кроме официальной. https://tyvik.ru/posts/asyncio-for-the-working-python-developer/ Fri, 08 Sep 2017 09:27:00 +0300 https://tyvik.ru/posts/asyncio-for-the-working-python-developer/ Оригинал: ‘AsyncIO for the Working Python Developer’ by Yeray Diaz; перевод был впервые опубликован на Хабрахабре. Я помню тот момент, когда подумал «Как же медленно всё работает, что если я распараллелю вызовы?», а спустя 3 дня, взглянув на код, ничего не мог понять в жуткой каше из потоков, синхронизаторов и функций обратного вызова. Тогда я познакомился с asyncio, и всё изменилось. Если кто не знает, asyncio — новый модуль для организации конкурентного программирования, который появился в Python 3. https://tyvik.ru/posts/getting-mars-photos-from-nasa-using-aiohttp/ Thu, 29 Jun 2017 20:04:00 +0300 https://tyvik.ru/posts/getting-mars-photos-from-nasa-using-aiohttp/ Оригинал: ‘Getting Mars photos from NASA using aiohttp’ by PAWEŁ FERTYK; перевод был впервые опубликован на Хабрахабре. Я большой фанат книги «Марсианин» Энди Вейера. Читая её, мне было интересно, что же Марк Уотни чувствовал, гуляя по красной планете. Недавно наткнулся на пост на Twillo, в котором упоминалось, что у NASA есть публичный API для доступа к фотографиям с марсоходов. Так что я решил написать собственное приложение для просмотра изображений непосредственно в браузере. https://tyvik.ru/posts/yes-python-is-slow-and-i-dont-care/ Fri, 02 Jun 2017 08:11:00 +0300 https://tyvik.ru/posts/yes-python-is-slow-and-i-dont-care/ Оригинал: ‘Yes, Python is Slow, and I Don’t Care’ by Nick Humrich; перевод был впервые опубликован на Хабрахабре. Я беру паузу в моём обсуждении asyncio в Python, чтобы поговорить о скорости Python. Позвольте представиться, я — ярый поклонник Python, и использую его везде, где только удаётся. Одна из причин, почему люди выступают против этого языка, — то, что он медленный. Некоторые отказываются даже попробовать на нём поработать лишь из-за того, что «X быстрее». https://tyvik.ru/posts/python-3-print-function/ Sat, 20 May 2017 00:01:00 +0300 https://tyvik.ru/posts/python-3-print-function/ Оригинал: ‘Why print became a function in Python 3’ by Brett Cannon После моего поста “Почему Python3 получился именно таким”, в котором я ответил на самые популярный вопрос почему в python 3 разделили текстовые и бинарные данные, меня попросили ответить на второй по популярности вопрос: почему в python3 print стал функцией. Кто это сделал? 🔗print как выражение 🔗В самом простом случае выражение print A является эквивалентом sys.stdout.write(str(A) + '\n'). Если вы укажите дополнительные аргументы через запятую, то они будут переданы в str() и выведены в одной строке через пробел. https://tyvik.ru/posts/why-python3-exists/ Fri, 19 May 2017 11:07:00 +0300 https://tyvik.ru/posts/why-python3-exists/ Оригинал: ‘Why Python 3 exists’ by Brett Cannon В этом месяце я отвечал на канале Q&A at PuPPY, что в конце концов заставило меня разобраться почему в Python3 появилось разделение по работе со строками и байтами. В итоге я получил благодарности по поводу объяснения, что несколько удивило меня, т.к. я наивно предполагал, что все знают зачем так было сделано. Хотя было бы глупо с моей стороны полагать что каждый - будь то новичок или продвинутый питонист - задавался этим вопросом и пытался найти объяснение. https://tyvik.ru/posts/django-cache/ Wed, 22 Mar 2017 23:02:00 +0300 https://tyvik.ru/posts/django-cache/ Как известно, есть 2 проблемы программирования: выбор имени переменной и инвалидация кеша. Вторая меня на этой неделе прям достала. Извините, наболело… Итак, кеширование - классная штука, она позволяет существенно ускорить работу приложения, но привносит свои проблемы. Главная из них - поддержание кеша в консистентном состоянии. Вроде бы ничего сложного - на сигнал post_save вешаем функцию по перерассчёту и радуемся жизни, но не всё так просто. В Django есть несколько адаптеров для работы с кешем, рассмотрим парочку из django. https://tyvik.ru/posts/wikidata-sparql/ Mon, 20 Feb 2017 23:19:00 +0300 https://tyvik.ru/posts/wikidata-sparql/ В своей игре GeoPuzzle мне понадобились некоторые данные о странах: флаги, столицы, население… Откуда бы их взять? Наверно, с Википедии :) Задача, вроде, достаточно распространённая, так что спросим Google как это делается, авось и библиотека найдётся. Сразу бросается в глаза то, что настоятельно не рекомендуют парсить инфобоксы. Это верно - я сходу нашёл 3 разных их шаблона на 10 страницах. В одном из ответов на StackOverflow настоятельно рекомендовали использовать SPARQL. Так я узнал о том, что есть некий язык запросов для Википедии (на самом деле это реализовано в качестве плагина для MediaWiki). https://tyvik.ru/posts/krddevdays-postgres/ Mon, 26 Dec 2016 10:40:00 +0300 https://tyvik.ru/posts/krddevdays-postgres/ слайды Всем привет! Postgres 🔗Да, тема большая, так что я уточнил словом «Начало». Цель моего доклада — заинтересовать вас, рассказать о преимуществах и обсудить недостатки. В конце слайдов будут ссылочки на интересный материал на мой взгляд. В основу баз данных была положена так называемая CAP-теорема. Она гласит, что для распределённых систем вы можете выбрать только 2 свойства из 3х: согласованность, доступность, партицирование. Ну это как создание сайта — выберите 2 из 3х: быстро, дёшево или качественно. https://tyvik.ru/posts/pillow-almighty/ Thu, 20 Oct 2016 16:07:00 +0300 https://tyvik.ru/posts/pillow-almighty/ Рано или поздно, но всем нам приходится работать с графикой. Заказчики просят добавить ватермарки, сделать превьюшки картинок, построить графики… В мире python для этого есть библиотека Pillow, которая действительно умеет если не всё, то очень многое. Установка pillow 🔗Pillow далеко не самостоятельная библиотека, ей необходима поддержка форматов сжатия файлов. Для ubuntu как правило хватает установки следующих пакетов: $ sudo apt-get install libjpeg-dev libfreetype6-dev zlib1g-dev libpng12-dev То есть работы с jpg, png, ttf (шрифты) и gzip (нужен для некоторых форматов). https://tyvik.ru/posts/parsing-scrapy/ Tue, 20 Sep 2016 22:47:00 +0300 https://tyvik.ru/posts/parsing-scrapy/ Рано или поздно перед каждым разработчиком встаёт задача что-нибудь стянуть с какого-нибудь сайта :) На этот раз я улетал туда, где интернета не было, так что хотел получить некую оффлайновую копию информации с сайта. Сам я не поощряю такие вещи (всё-таки авторы приложили немало усилий для наполнения контентом), но один разочек исключительно для личных нужд можно :) В интернете есть куча библиотек для парсинга сайтов, но я бы хотел найти реализацию на питоне. https://tyvik.ru/posts/django-migrations-without-downtime/ Sat, 23 Jul 2016 18:56:00 +0300 https://tyvik.ru/posts/django-migrations-without-downtime/ Оригинал: ‘Django migrations without downtimes’ by Ludwig Hähne Большинство современных веб-приложений используют реляционные базы данных. Время от времени в них приходится менять схему для реализации новых фич или удаления ставших ненужными полей или таблиц. Так что все миграции должны быть учтены в процессе деплоя. С одной стороны, даже запланированный даунтайм может дорого обойтись бизнесу, а уж для больших компаний и подавно. С другой стороны, применение миграций на боевой системе может порушить веб-приложение самым неожиданным образом. https://tyvik.ru/posts/postgresql-psql/ Mon, 11 Apr 2016 23:51:00 +0300 https://tyvik.ru/posts/postgresql-psql/ Оригинал: ‘PostgreSQL on the Command Line’ by Philipe Fatio Мне настолько понравилась эта статья, что я решил её перевести. Получилось весьма вольно, но сама суть сохранена. Я уже больше 4 лет работаю с PostgreSQL. В начале использовал графические программы, сейчас же обхожусь только встроенными утилитами командной строки. Так получается более эффективно. Этот пост разделён на несколько секций согласно задачам, которые можно решать с помощью psql: настройка psql получение справки возня в песочнице описание БД построение запросов сравнение вывода клонирование базы данных получение данных Настройка psql 🔗psql отлично настроена и из коробки, однако я бы хотел остановиться на 2х вещах, которые использую каждый день и которые делают psql более удобным инструментом. https://tyvik.ru/posts/telegram-bot-setwebhook/ Tue, 21 Jul 2015 22:17:00 +0300 https://tyvik.ru/posts/telegram-bot-setwebhook/ Не так давно Telegram открыл API для написание ботов. Примеры уже существующих можно посмотреть на их сайте. Всё общение сводится к отправке команды, её параметров и получение ответа, вот и меня попросили разобраться с этим и написать пример бота. Ну ok, почему бы и нет? :) Регистрация нового бота telegram 🔗Начнём, как полагается, с документации. В ней сказано, что для регистрации своего бота надо обратиться к @BotFather с оной просьбой (/newbot). https://tyvik.ru/posts/first-with-rust/ Sun, 12 Jul 2015 10:15:00 +0300 https://tyvik.ru/posts/first-with-rust/ Итак, у меня наконец-то появилось немного свободного времени, а значит пришло время попробывать rust. Давно хотел познакомиться с этим языком, т.к. разработчики обещают очень много плюшек: безопасный код, компилируемый в нативный, под кучу архитектур, интегрируемый с C/C++… В общем, попробовать стоит! В качестве туториала взял статью на Хабре. Установка 🔗В репозитории ubuntu 14.04 пакета с именем rust не нашлось. Странно, вроде уже не молодой язык… Хотя там проблемы совместимости были до версии 1. https://tyvik.ru/posts/shebang/ Mon, 03 Nov 2014 20:21:00 +0300 https://tyvik.ru/posts/shebang/ Уже второй раз за выходные натыкаюсь на особенность моей ОС - работа с шебенг. Это понятие применительно исключительно к миру *nix. Если вкратце, то это первая строка в файле, которая говорит с помощью какой программы оный запускать. Наверняка сталкивались с нечто похожим: #!/bin/bash или #!/usr/bin/python- это оно и есть :) Вернее, не совсем так, должны быть соблюдены следующие условия: файл исполняемый (**x); файл не бинарный (в противном случае он запустится “как exe-шник”); первые 2 байта должны быть # и ! https://tyvik.ru/posts/python-defaults/ Sat, 01 Nov 2014 16:55:00 +0300 https://tyvik.ru/posts/python-defaults/ Проходил как-то собеседование на должность python-разработчика, одним из вопросов был что выведет следующий код: def f(value=[]): value.append(1) print value f() f([1]) f() К сожалению, хоть я и знал в чём подвох (значения по умолчанию в python не так уж просты :) ), но ответил неправильно. Что же тут не так можно посмотреть под катом. Всё дело тут в т.н. значении по умолчанию, которое на самом деле не совсем уж значение, а очень даже переменная. https://tyvik.ru/posts/gdg-krasnodar/ Sun, 12 Oct 2014 17:49:00 +0300 https://tyvik.ru/posts/gdg-krasnodar/ Всем привет, прошу прощения, что так долго не писал, но на то были веские причины. За последние пару месяцев я узнал столько всего нового, написал кучу полезных вещей… Увы, времени и сил на то, чтобы оформить это в статью уже не остаётся :( Но обо всём по-порядку. GDG Краснодар: начало положено 🔗С месяц назад в IT-парке Краснодара состоялось собрание, посвящённое созданию GDG движения в Краснодаре. GDG расшифровывается как Google Development Group - собрания программистов, на которых обсуждаются технологии Google. https://tyvik.ru/posts/odtphp-images/ Wed, 03 Sep 2014 18:50:00 +0300 https://tyvik.ru/posts/odtphp-images/ В последнее время я всё глубже погружаюсь в Yii и вообще php-инфраструктуру. К сожалению, некоторые библиотеки авторы забросили, и приходится их дотачивать под свои нужды. Одной из таких является odtPHP, которая шаблонизирует odt документы. Мне казалось, что такая задача весьма распространена, ан решений всего парочка, и odtPHP понравилось мне больше всего. (Если кто-то использует что-то другое для работы с OOo из-под php, пожалуйста, отпишитесь). Однако, картинки она вставляет настолько криво, что современный LibreOffice напрочь отказывается читать документ. https://tyvik.ru/posts/deploy-django-uwsgi-nginx/ Thu, 29 May 2014 10:35:00 +0300 https://tyvik.ru/posts/deploy-django-uwsgi-nginx/ Несколькими статьями ранее я рассказывал как на одной странице вывести список объектов и форму для добавления нового. Пришло время запульнуть это приложение на сервер :) Для этого нам понадобится nginx (1.4.6), uwsgi (1.0.3), virtualenv (1.7.1.2), supervisor. Определимся, что файлы проекта будут лежать в /var/www/tyvik/markettyvik. Установка виртуального окружения 🔗Любое приложение на Django по-хорошему надо поместить в песочницу, чтобы пакеты, которые оно требует, не конфликтовали с системными. Для этих целей есть специальные пакеты virtualenv и virtualenvwrapper. https://tyvik.ru/posts/django-angular/ Tue, 20 May 2014 14:34:00 +0300 https://tyvik.ru/posts/django-angular/ Данный материал сильно устарел и оставлен лишь для истории Оригинал: ‘Tutorial: Using AngularJS with Django’ by Glyn Jackson Я надеялся написать простенькое руководство по использованию Angular вместе с Django. В том, что получилось, есть заслуга Red Bull. Прошу прощения за несколько скомканный конец! Прочитав несколько статей, посвящённых Angular+Django, мне показалось, что все изобретают свои велосипеды. Пример, приведённый в этой статье, сыроват, но он должен показать как я использую эту связку. https://tyvik.ru/posts/django-list-create-view/ Sun, 18 May 2014 15:13:00 +0300 https://tyvik.ru/posts/django-list-create-view/ Для одного из своих pet-проектов понадобилось реализовать список с формой добавления туда элемента. Как оказалось, в Django это несколько нетривиальная задача. Все, кто работал с этим фреймворком, знают про class-view (CreateView, ListView…): вызываешь as_view с нужными параметрами в urlconf и всё готово :) Но класса типа ListAndCreateView я не нашёл. Хотя, как мне кажется, это довольно распространённая задача. Немного погуглив, я нашёл два ответа на SO (1, 2) на подобный вопрос. https://tyvik.ru/posts/dyndns-vs-noip/ Wed, 16 Apr 2014 21:21:00 +0300 https://tyvik.ru/posts/dyndns-vs-noip/ В связи с отключением бесплатных аккаунтов на dyn.com появилась необходимость перейти на что-то похожее. Вкратце, этот сервис предоставлял возможность получить статичное имя на динамический белый IP. Было удобно, т.к. он поддерживался моим модемом, который отвечал за это. Увы, халява кончилась :( Первое, что я придумал - написать скриптик, который бы лез на internet.yandex.ru, получал IP и писал его в файлик, который синхронизировался с каким-нибудь облаком. Всё отлично, но на домашнем компе был установлен только клиент Dropbox’а, а он имеет привычку уведомлять о том, что какой-то файлик изменился, что очень раздражает, т. https://tyvik.ru/posts/first-with-erlang/ Wed, 05 Feb 2014 16:37:00 +0300 https://tyvik.ru/posts/first-with-erlang/ Посмотрев замечательную вводную от Юрия Жлобы, я понял, что писал под YAWS совсем не так, как нужно. Всё-таки без OTP, на чистом erlang, трудно делать серьёзные вещи. Вот и стал копать глубже в инфраструктуру этого языка: узнавать какие есть веб-сервера, библиотеки, концепции и правила. Посему эта заметка будет от новичка для новичка :) С чего же начать? 🔗Прежде всего основы следует изучить на RSDN (там же и про обработку ошибок). После этого стоит посмотреть видео по ссылке выше. https://tyvik.ru/posts/yandex-disk-python/ Thu, 30 Jan 2014 11:55:00 +0300 https://tyvik.ru/posts/yandex-disk-python/ Дело было вечером, делать было нечего, вот и решил я написать обёртку для Яндекс Диска на python, дабы потом прикрутить скрипты бекапа для своих VPS. Готовое решение можно посмотреть на github или установить через pip: pip install YaDiskClient. Прежде чем начать, как полагается, посмотрел что же уже реализовано. Есть одна библиотека на PHP, которая удовлетворяет всем моим требованиям за исключением языка - хочется всё же работать на питоне. На pypi нашёл наработку от lexich. https://tyvik.ru/posts/personal-vps/ Sun, 24 Nov 2013 11:03:00 +0300 https://tyvik.ru/posts/personal-vps/ Задался я целью сделать себе виртуалочку, куда в дальнейшем переедет блог и демо всяких моих наработок. К тому же и жена себе фотосайтик захотела :) Делов-то: развернуть систему, выбрать имя и перенести проекты. А проектов много, и все они разные - тут и erlang, и django, и ruby… В общем, небольшая тренировочка, хотя дома и так всё успешно работает. Выбор виртуалки 🔗Остановился я на серверах от DigitalOcean, выбрал самый базовый тариф: 512Mb ОЗУ, 2. https://tyvik.ru/posts/postgresql-91-ubuntu/ Tue, 19 Nov 2013 20:19:00 +0300 https://tyvik.ru/posts/postgresql-91-ubuntu/ Что-то мне в последнее время честенько приходится ставить postgres. То на новый боевой сервер, то на свою персональную VPS, так что я решил написать заметочку на будущее. Авось и ещё кому-нибудь пригодится :) Процесс установки я буду описывать на голой системе (ubuntu 16.04), и все команды будут от root’а. Так работать, конечно, не принято - все мы знаем, что sudo наше всё, но здесь я ничем не рискую, а пользователя добавлю уже после описанного. https://tyvik.ru/posts/python-coding/ Thu, 19 Sep 2013 17:44:00 +0300 https://tyvik.ru/posts/python-coding/ Сегодня пришлось мне повозиться с кодировкой строк. Задача: записать в базу русские буквы. Реализация: Python (MySQLdb) + MySQL + OS X. Не зря я здесь указал платформу ;) Казалось бы, тривиальная задача, ан нет - в таблицу падали крякозябры. Сначала я грешил на питон с его странными строками (Python 2.7). Известно, что обычная строка там - просто последовательность байтов. Получить юникодную строку можно несколькими способами: указать в начале файла # -*- coding: UTF-8 -*-, т. https://tyvik.ru/posts/mercator-client/ Sun, 08 Sep 2013 20:06:00 +0300 https://tyvik.ru/posts/mercator-client/ Содержание: Введение Подготовка данных (ruby) Сервер (Erlang+YAWS) Клиент (JS) Сегодня заключительная статья из серии про Mercator. На этот раз поговорим про клиентскую часть. Из прошлой статьи видно, что после получения информации о странах из БД, эти данные пишутся в js-массив. Таким образом, ответы также есть в этом массиве (мы ведь пока просто играемся ;) ). Но сначала нужно создать объекты стран, которые можно двигать: function addCountries() { var options = { strokeColor: '#FF0000', strokeOpacity: 0. https://tyvik.ru/posts/ide-vs-editor/ Fri, 23 Aug 2013 15:24:00 +0300 https://tyvik.ru/posts/ide-vs-editor/ Сегодня хотел бы поговорить по поводу того, что же использовать в работе программисту: IDE или текстовый редактор? Я так и не пришёл к единому мнению что же использовать. Есть крупные IDE, которые создаются под язык программирования: Visual Studio - C++ XCode - Objective-C Delphi - pascal (тут немного сложнее, но для общей картины) Eclipse - Java PHPStorm - PHP PyCharm - Python RubyMine - Ruby Сама идея IDE замечательна: тут и код, и дебаг, и структура модуля и прочие полезные плюшки, но все они далеки от идеала. https://tyvik.ru/posts/mercator-server/ Sat, 03 Aug 2013 11:43:00 +0300 https://tyvik.ru/posts/mercator-server/ Содержание: Введение Подготовка данных (ruby) Сервер (Erlang+YAWS) Клиент (JS) Это третья статья из цикла об игрушке Mercator - паззл из стран. На мой взгляд, самая интересная часть - Erlang. Почему он, а не, например, Node.js? Мне уже давно хочется познакомиться с миром функционального программирования, а Erlang - наиболее приспособленый для практического применения. Его основная фишка - легковесные потоки, которые выполняются параллельно, друг другу никогда не мешая, т.к. в этом языке нет понятия “переменная”. https://tyvik.ru/posts/my-open-source/ Wed, 24 Jul 2013 11:17:00 +0300 https://tyvik.ru/posts/my-open-source/ Чем старше я становлюсь, тем больше начинаю задумываться о своём участии в open source проектах. Я пользуюсь открытой Ubuntu, шарюсь в интернете через бесплатные браузеры, использую программы, которые кто-то написал и поделился со всеми остальными. Я потребитель! Но ведь я же могу стать и производителем полезного-доброго-вечного. Да, у меня не всегда хватает времени и сил для вклада в общее дело, но уж деньги-то есть. Я стараюсь поддерживать интересные мне проекты - те, которые, как мне кажется, будут полезны многим людям. https://tyvik.ru/posts/mercator-data/ Thu, 18 Jul 2013 21:28:00 +0300 https://tyvik.ru/posts/mercator-data/ Содержание: Введение Подготовка данных (ruby) Сервер (Erlang+YAWS) Клиент (JS) Итак, у нас есть XML файл с координатами стран, теперь хорошо бы его загнать в базу данных. В нашем случае это PostgreSQL. Делать мы это будем с помощью замечательного языка Ruby. Для этого установим gem для работы с Postgres по имени pg (неожиданно, правда?): $ gem install pg Но для начала создадим структуру БД: -- создадим пользователя mercator CREATE ROLE mercator LOGIN NOSUPERUSER INHERIT CREATEDB NOCREATEROLE NOREPLICATION; -- добавим ему схему CREATE SCHEMA mercator AUTHORIZATION mercator; -- последовательность для таблицы стран CREATE SEQUENCE countries_seq INCREMENT 1 MINVALUE 1 MAXVALUE 9223372036854775807 START 1 CACHE 1; ALTER TABLE countries_seq OWNER TO mercator; -- создадим таблицу стран CREATE TABLE "Countries"( "ID" integer NOT NULL DEFAULT nextval('countries_seq'::regclass), "Name" character varying(50) NOT NULL, -- имя страны "Level" character varying, -- кажется, масштаб, но пока не используется "Polygon" character varying[], -- список полигонов в виде строк "Available" boolean, -- доступность для игры "Answer" character varying(50), -- хранение ответа CONSTRAINT "CountriesID" PRIMARY KEY ("ID" ) ) WITH (OIDS=FALSE); ALTER TABLE "Countries" OWNER TO mercator; Теперь можно попробовать подключиться через пользователя mercator/mercator: https://tyvik.ru/posts/mercator-intro/ Mon, 24 Jun 2013 20:12:00 +0300 https://tyvik.ru/posts/mercator-intro/ Содержание: Введение Подготовка данных (ruby) Сервер (Erlang+YAWS) Клиент (JS) На Хабре был как-то обзор небольшой игрушки от Google для демонстрации работы с API карт. Суть в том, что надо все страны растащить по своим местам. Когда-то в детстве у меня была подобная игрушка (ещё под DOS), но она больше напоминала тетрис - надо было успеть положить страну на своё место пока она не скрылась за границами экрана. Кстати, если кто вспомнит название, буду очень благодарен? https://tyvik.ru/posts/i-am-ashamed/ Sat, 22 Jun 2013 00:11:00 +0300 https://tyvik.ru/posts/i-am-ashamed/ Мне стыдно! Нет, мне реально стыдно за тот код, который приходится писать. Хуки, костыли, заплатки… Чёрт, да я же не понимаю как это работает! Да, я это поправил, как? Чудом, интуицией - не знаю. И я не знаю где и когда оно сломается. Хотите получить гарантии, стабильность, спокойную жизнь - дайте время! Дайте время сделать всё по уму, я хочу сделать это правильно! А, что, дедлайн завтра? В пятницу вечером? Вы смеётесь? https://tyvik.ru/posts/java2me-eclipse/ Tue, 04 Jun 2013 23:04:00 +0300 https://tyvik.ru/posts/java2me-eclipse/ Данный материал сильно устарел и оставлен лишь для истории Есть у меня один проектик под J2ME (github). Это небольшое приложение - клиент для списка покупок. Разрабатывалось оно специально для моей второй половинки, чтобы было удобно сообщать что нужно купить в магазине. Т.к. телефон у неё простой, то единственный вариант нативного приложения - Java2ME. Решил я его доделать, но все настройки Eclipse слетели после перехода с OpenSUSe на Mint. Что ж, вспомним как это было :) https://tyvik.ru/posts/yii-multibox/ Sat, 11 May 2013 22:32:00 +0300 https://tyvik.ru/posts/yii-multibox/ Понадобилось мне сделать для автошколы небольшой виджет для удобного назначения учеников инструктору. Захотел я это сделать более-менее красиво - с помощью drag&drop: список нераспределённых учеников и списки инструкторов, в которые можно бросить ученика, и он автоматически назначится инструктору. К сожалению, ничего готового для Yii я не нашёл, так что пришлось писать самому :) Немного поплутав по интернету, нашёл решение на js. Мне оно приглянулось своей лаконичностью и законченностью, правда, коробок там всего 2, но это легко исправить. https://tyvik.ru/posts/import-1c-dbf-mysql/ Sat, 27 Apr 2013 17:11:00 +0300 https://tyvik.ru/posts/import-1c-dbf-mysql/ Давным давно писал статью на СвободноХабр про импорт данных из 1С файлов dbf в MySQL, решил перепостить её сюда, т.к., увы, ухожу с того ресурса. Предыстория 🔗Работали себе люди долго-долго в самописной конфигурации 1С и бед не знали, как открылись у организации филиалы, и директор захотел все данные в одном месте. Сказано — сделано: через пару месяцев родился корпоративный сайт (написанный на php (Yii) + MySQL). Пользователи ринулись добавлять новую информацию, печатать отчёты… в общем, работа закипела. https://tyvik.ru/posts/hytech-sonar-plus/ Mon, 22 Apr 2013 14:26:00 +0300 https://tyvik.ru/posts/hytech-sonar-plus/ Большое спасибо Николаю за комментарий. Если читателя интересует официальная HyTech от СКАЗ-М, настоятельно рекомендую ознакомиться с ним. Моя же заметка о форке HyTech 1.6, который был сделан году этак в 1993, и после которого пути развития сильно разошлись. Рождение форка 🔗Будучи студентом четвёртого курса довелось мне познакомиться с отечественной разработкой в области баз данных под названием HyTech. Использовалась она (да и по сей день используется) в фирме, где я тогда работал — НТЦ «Сонар-Плюс». https://tyvik.ru/posts/merge-vs-rebase/ Sat, 06 Apr 2013 17:41:00 +0300 https://tyvik.ru/posts/merge-vs-rebase/ Давеча разгорелся спор на работе по поводу того как вести историю изменений. Поводом послужила вот такая картина: Из 19 коммитов 8 не несут никакой полезной информации! Почти половина «мусорных» коммитов! К слову разработчиков на этом проекте всего трое, а сложность истории заметно выросла. Меня она задела большим количеством мерджей, хотя объективных поводов для этого не было — вносились небольшие изменения в разные файлы. Я высказал своё «фи», но ответом было что это нормально, так принято в hg и вообще надо работать, а не холиварить. https://tyvik.ru/posts/computer-life/ Sat, 09 Mar 2013 20:04:00 +0300 https://tyvik.ru/posts/computer-life/ Юра прошёл мимо стола, включив компьютер. Пока он наливал себе кофе, в его кремниевом друге наставал новый день. Если прислушаться, то можно было услышать как BIOS опрашивал устройства: — Процессор? Вижу, Intel i3, так и запишем… Видеокарта? NVidia, хорошо… Жёсткий диск? А вас как всегда двое. Хорошо, все на месте, начинаем загрузку! У меня записано, что я должен передать все дела тебе, Seagate, руководи. Seagate посмотрел на своих подчинённых и отдал все документы загрузочному разделу: https://tyvik.ru/posts/migration-from-svn-to-hg/ Sat, 09 Mar 2013 16:43:00 +0300 https://tyvik.ru/posts/migration-from-svn-to-hg/ Сегодня хотелось бы поведать о переходе с svn на hg. Subversion использовался для коммерческих продуктов, которые не хотелось выкладывать на github. Поймите меня правильно — я сторонник open source, но клиенты настаивали именно на закрытости, и их понять можно. Проблем с svn особых не было отчасти потому что я работал один, отчасти потому что много от него не требовал — update, commit, log, checkout, — линейная элементарная история. Но, поработав с mercurial на работе, осознал все прелести DVCS. https://tyvik.ru/posts/wedding-programmer/ Sun, 17 Feb 2013 20:17:00 +0300 https://tyvik.ru/posts/wedding-programmer/ Сезон свадеб скоро начнётся, и я хочу рассказать как устроить одну из них в программистском стиле 🙂 Небольшой дисклаймер — невесте нравятся компы, железяки и прочие атрибуты, а посему решили заморочиться вместе. Как театр начинается с вешалки, так каждая свадьба с приглашения. Приглашения 🔗С моей стороны были исключительно программисты, и я решил каждому написать индивидуальное приглашение на том языке, с которым он работает. Набор получился такой: HTML, PHP, SQL, C++, Pascal и Brainfuck (ох как невеста жаловалась, когда вручную переписывала этот непонятный набор знаков) Кстати, сами тексты на github). https://tyvik.ru/posts/first-with-ant/ Sat, 12 Jan 2013 18:09:00 +0300 https://tyvik.ru/posts/first-with-ant/ Понадобилось мне установить программку, которая вроде как и кросплатформенная, однако инсталлятор написан на дикой смеси bat’ников, xml и xsl преобразованиях с помощью msxsl.exe — кошмар для линуксоида. А так как это далеко не разовая операция, то было принято решение написать свой инсталлятор с кофе и муравьями 🙂 О проблемах и их решениях прошу под кат. Задача вроде как сводится к написанию xml для ant, который будет копировать куда надо файлики, выполнять xsl-преобразования, в общем, повторять все действия, которые указаны в его предыдущей реинкарнации. https://tyvik.ru/posts/istra-4816/ Mon, 07 Jan 2013 20:31:00 +0300 https://tyvik.ru/posts/istra-4816/ Осенью 1990 года, когда мне было 4 года, у нас в семье появился первый персональный компьютер — Истра-4816. Стоил он как ВАЗ 2101. Этот монстр ревел как самолёт, пикал на каждое нажатие клавиш, но работал! В нём было целых 20Мб жёсткого диска, процессор i8080 и i8086 и 640 Кб оперативной памяти. На нём я познакомился с NC (вопрос старичкам: как расшифровывается? 🙂 ), играл в «Принца Персии» и «Kings bounty", набирал тексты. https://tyvik.ru/posts/oracle-rhel-tests/ Sat, 05 Jan 2013 19:15:00 +0300 https://tyvik.ru/posts/oracle-rhel-tests/ Добрый день, %username%! Передо мной возникла задача создания виртуальной машины для тестов продукта под Oracle. Тесты какие-никакие уже есть, но необходимо автоматизировать настройку среды и их прогон. Идея до безобразия простая — запускается машина, создаётся снапшот (дабы не портить базу), устанавливается продукт, запускаются тесты. Думаю, это стандартная схема, реализовывать же это планируется на VirtualBox + RHEL 5 + Oracle 11.2. Настройка ВМ 🔗Как выяснилось опытным путём, Oracle при установке требует swap, причём минимум гиг. https://tyvik.ru/posts/hello-world/ Tue, 01 Jan 2013 10:11:33 +0300 https://tyvik.ru/posts/hello-world/ Привет %username%! Поздравляю тебя с уже наступившим годом Python’а 🙂 Желаю, чтоб баги были мелкими, не размножались и отыскивались в 2 клика ;) Так как это первая запись, то нужно, пожалуй, представиться. Я программист, пишу на всём, что под руку попадётся :) В большей или меньшей степени овладел кучей языков - от C++ и asmа до python и php. Работал (да и работаю) с Postgres, MySQL, Oracle, SQLite, HyTech (Будет время о последнем расскажу подробнее).