Информационный портал по безопасности » Материалы за 01.04.2019 » Страница 2

 

PyTest Нео

Автор: admin от 1-04-2019, 07:30, посмотрело: 120

Одним вечером, созерцая бесконечные тесты и глядя на бегущие точки, проскочила мысль — как это похоже на Матрицу! Так и родилась идея, сделать визуализацию тестов в виде Матрицы.



PyTest Нео


Под катом анимация и немного подробностей.

Категория: Сделай Сам

 

Как выдержать повышенные нагрузки на систему: рассказываем о масштабной подготовке к Черной Пятнице

Автор: admin от 1-04-2019, 07:30, посмотрело: 88

Привет, Хабр!



В 2017 году во время Черной Пятницы нагрузки выросли почти в полтора раза, и наши сервера находились на пределе возможностей. За год количество клиентов значительно выросло, и стало понятно, что без тщательной предварительной подготовки платформа может просто не выдержать нагрузок 2018 года.



Цель поставили самую амбициозную из возможных: мы хотели быть полностью готовыми к любым, даже самым мощным, всплескам активности и начали заранее выводить новые мощности в течение года.



Наш CTO Андрей Чиж (chizh_andrey) рассказывает, как мы готовились к Черной Пятнице 2018, какие меры предприняли, чтобы избежать падений, и, конечно, же о результатах такой тщательной подготовки.



Как выдержать повышенные нагрузки на систему: рассказываем о масштабной подготовке к Черной Пятнице

Категория: Сделай Сам

 

Как сделать триггер DAG'а в Airflow, используя Experimental API

Автор: admin от 1-04-2019, 07:30, посмотрело: 95

При подготовке наших образовательных программ мы периодически сталкиваемся со сложностями с точки зрения работы с некоторыми инструментами. И на тот момент, когда мы с ними сталикваемся, не всегда есть достаточно документации и статей, которые помогли бы с этой проблемой справиться.



Так было, например, в 2015 году и мы на программе “Специалист по большим данным” пользовались Hadoop-кластером со Spark на 35 одновременных пользователей. Как его готовить под такой юзкейс с использованием YARN, было непонятно. В итоге, разобравшись и пройдя путь самостоятельно, сделали пост на Хабре и еще выступили на Moscow Spark Meetup.



Предыстория



В этот раз речь пойдет о другой программе – Data Engineer. На ней наши участники строят два типа архитектуры: lambda и kappa. И в lamdba-архитектуре в рамках батч-обработки используется Airflow для перекладывания логов из HDFS в ClickHouse.



Все в общем-то хорошо. Пусть строят свои пайплайны. Однако, есть "но": все наши программы технологичны с точки зрения самого процесса обучения. Для проверки лаб мы используем автоматические чекеры: участнику нужно зайти в личный кабинет, нажать кнопку “Проверить”, и через какое-то время он видит какую-то расширенную обратную связь на то, что сделал. И именно в этот момент мы начинаем подходить к нашей проблеме.

Категория: Сделай Сам

 

О новых идеях, узости взглядов и сарафанном радио

Автор: admin от 1-04-2019, 07:30, посмотрело: 78

О новых идеях, узости взглядов и сарафанном радио



Пойми, студент, сейчас к людям надо помягше… А на вопросы смотреть ширше.

A long time ago(10 days), in a galaxy(Habr) far, far away...war will not Bee ;-)



В общем, я сделал публикацию о системе смс-весов для пасеки, которая не получила столь широкой огласки как велосипеды



Ну да ладно, горевать с того не стал, а решил запустить краудфандинг на экспериментальную пасеку, воспользовавшись платформой biggggidea.



Интересно что было дальше? прошу под кат!

Категория: Сделай Сам

 

50-летний модем: взгляд изнутри

Автор: admin от 1-04-2019, 07:10, посмотрело: 99

50-летний модем: взгляд изнутри


Несколько лет назад автор побывал на барахолке, организованной W6TRW на автостоянке компании Northrop Grumman в Редондо-Бич, Калифорния. Между телевизоров, напоминающих белых медведей, и множества зарядных устройств для телефонов и блоков питания проглядывался деревянный ящик с замком, деревянной ручкой и разъёмом DB-25 на боку. Рядом с разъёмом — переключатель: полудуплекс — полный дуплекс. Автор понял, что это. Модем. Деревянный модем. А именно — модем с акустическим сопряжением, выпущенный компанией Livermore Data Systems приблизительно в 1965 году.

Категория: Железо / Старое железо

 

Яндекс.Алиса и бот Telegram на PHP с единым функционалом

Автор: admin от 1-04-2019, 06:40, посмотрело: 166

Добрый день.



На тему Telegram-ботов статей очень много, а вот про навыки для Алисы мало кто пишет, а информации как сделать единого бота я вообще не нашел, поэтому решил поделиться своим опытом о том, как сделать простого бота Telegram и навык Яндекс.Алиса для сайта, имеющих единый функционал.

Категория: Программирование / Яндекс

 

Исповедь фуллстека: профессия, религия, мечты

Автор: admin от 1-04-2019, 04:35, посмотрело: 61

Здравствуйте, меня зовут Павел и я фулстек в Mad Devs *аплодисменты*.



На фоне большого количества статей и материалов о том, что фулстеки не нужны, фулстеки не существуют, фулстеки плохо, сложилось мнение о том, какими преимуществами обладает фулстек над узкими специалистами, и почему фулстеки нужны.

Категория: Game Development

 

Упрощаем сборку Linux из исходников с помощью сайта UmVirt LFS Packages

Автор: admin от 1-04-2019, 02:10, посмотрело: 114

Возможно многие из пользователей GNU/Linux в свете последних инициатив властей по созданию «суверенного» Интернета озадачились целью подстраховаться на случай недоступности репозиториев популярных дистрибутивов GNU/Linux.



Кто выкачивает репозитории CentOS, Ubuntu, Debian, кто-то собирает свои дистрибутивы на основе имеющихся дистрибутивов, а кто-то вооружившись книгами LFS (Linux From Scratch) и BLFS (Beyond Linux From Scratch) уже взялся за компиляцию своих дистрибутивов из исходников так как считает что в условиях «суверенного» Интернета обязательно будут происходить хакерские атаки, вирусные эпидемии, утечки данных, а бинарники просто устареют через некоторое время.

Категория: Linux

 
Назад Вперед