IPMI
IPMI (Intelligent Platform Management Interface) – отдельный контроллер BMC (Baseboard Management Controller) с сетевым интерфейсом out-of-band.<br><br> Читать дальше
Category: Misc
Основы облачных технологий и виртуализации (cloud общее)
- Частично ниже инфа как конспект вебинара HonorCup E=DC2 для сдачи HCNA Cloud.
- Описание терминов облачных вычислений можно посмотреть в документе NIST 800-145
- (Cloud, k8s) Из серии “За все хорошее против всего плохого” (Linkmeup shorts)
- Cloud native приложения на базе микросервисов, которые живут в облаке лучше используют облачные возможности для отказоустойчивости и балансировки в сравнении с монолитными приложениями, переведенными в облако; поэтому в целом хорошей практикой является переписывание монолита в микросервисное приложение.
Популярные WEB сервера и заметки о них (apache/httpd, nginx)
Сравнение WEB можно посмотреть тут
- nginx; tengine (alibaba nginx) – по сути community industry standard, особенно в высокопроизводительных решениях.
- apache – данный блог на apache, проблем из-за этого не было. Лично у меня к нему даже несколько большее доверие т.к. он как поддерживался, так и поддерживается Apache Foundation, в отличии от NGINX, из которого ушел основатель.
Методы установки приложений, компиляция приложений и ядра, библиотеки
- Через средство управления пакетами ОС (Ubuntu: apt-get, CentOS: yum, Gentoo: emerge). Пакет чаще всего имеет не последнюю версия приложения/компилятора (ruby, phantomjs), но она почти гарантированно stable и легко ставится.
Для установки приложений в среде операционной системы GNU/Linux лучше всего пользоваться средствами управления пакетами вашего дистрибутива.<br><br> Читать дальше SQL и базы данных: основы (индексы, ключи, нормализация), примеры SQL запросов, работа с таблицами CREATE, DROP, EDIT; использование SELECT (join, distinct, enlosed, like, sum, etc); балансировка/масштабирование (шардирование, репликация), TMDB (time series database)
- http://sqlfiddle.com/ – очень удобный сайт по экспериментам с SQL (запросы, создание страниц и проч.)
- https://dbfiddle.uk/Gx3c6fmQ – аналогично, с примером
основные инструменты SQL/NoSQL; big data; analytics
-
- хранение
- mysql/oracle/postres (более в почете сейчас последний, в том числе для bigdata в виде greenplum и TSDB в виде TimescaleDB)
- OpenTSDB (Time Series Database)
- redis
- s3
- elk – часто используется для логов
- clickhouse
- log stash
- визуализация
- Kibana
- поиск по данным
- ElasticSearch
- хранение
Отдельные статьи
Time series database
В основном на основе статьи из habr
A time series database (TSDB) is a software system that is optimized for storing and serving time series through associated pairs of time(s) and value(s).<br><br> Читать дальше
Windows: полезные вещи и команды (cmd, powershell)
MISC
- Для просмотра девайсов в системе на Windows/инфы с датчиков/стресс тестирования хороша утилита Everest (aida64). aida64 – everest тот же, часть вещей лучше.
- Замена telnet
Test-NetConnection 192.168.1.90 -port 3389
- Развитие IT в странах СНГ в среднем значительно хуже РФ/Москвы, не говоря о USA/Китае – в Азербайджане в основном все on-prem и напр.
Резервное копирование
Конспект вебинара HonorCup E=DC2 для сдачи HCNA Storage.
Связанные по вебинару посты:
- Резервное копирование (этот пост)
- Резервное копирование, решение huawei
- Восстановление после катастроф
- Дедупликация
Разное:
- (Резервное копирование, LVM) Если говорить в целом про snapshot:
- snapshot =! Backup как минимум потому, что
- он обычно хранит только diff от данных от текущего состояния системы и того состояния, которое было при снятии snapshot
- snapshot хранятся на тех же носителях, что и основная система
- snapshot на storage/СХД (EMC/IBM) устройствах
- snapshot используются на всю катушку – есть банки которые все бекапы делают только на них -> напр, каждые 15мин делается snapshot всей базы и их хранятся сотни штук
- разработчики таких устройств поддерживают использование snapshot, но полноценные backup это не snapshot, рекомендуется использовать snapshot + backup
- удобно и правильно комбинировать snapshot и backup – snapshot получаешь консисентное состояние в один момент времени всех элементов системы (к примеру файлов сайта и файлов БД), а backup-ом это состояние уже сохраняешь, при этом нужно учитывать, что иногда при снятии snapshot есть некоторое «подмораживание системы на запись» на некоторое время
- snapshot =! Backup как минимум потому, что
- (Обучение Lpic-2) Делать бекапы очень важно (в том числе на ленте/ленточном хранилище – подробнее про ленты ниже), сценариев потери данных без бекапов миллион и тележка
- почистили память RAID контроллера и весь RAID потерял данные (восстановление с ленты)
- обновили записи в БД и вместо того, чтоб обновление получил один оно привело к апдейту у 700к (спас лог транзакций Oracle)
- (Обучение Lpic-2) Ленты вообще используется очень часто в крупных компаниях, особенно банках (включая зеленый – за разными RAID/СХД “обязана” быть лента, с которой если что можно восстановится ; «3 года должно быть хранение в банках, как без ленты») – ленты позволяют хранить огромные объемы данных дешевле (1 картридж до 50ТБ) и дольше/надежнее, чем на других носителях
- Backup желательно делать с отключенным сервисом, backup которого делается.
Полезные Hotkey Shortcuts (бинды)
Windows (Word/Excel/etc)
-
win +> (альтернатива: win + Ж) – эмодзи/смайлы по выбору 💙❤💜❤🧡
-
1F400 и alt+x – смайлы по коду в word
-
win + arrow – позволяет удобно размещать окно приложения на экране, не занимаясь раздвиганиями границ окна
- left – to the left
- right – to the right
- up – full screen
- down – small screen
- HOME – переход к началу строки (hotkey для Linux ниже)
- END – переход к концу строки (hotkey для Linux ниже)
- ctrl+shift+esc – открыть диспетчер задач
- ctrl+shift+home (в notepad точно работает)- выделить всё от текущего места до начала файла.
Telegram и другие мессенджеры
- OpenSource
- jabber/xmpp
- rocketchat
- matrix
JABBER
- NSA использовал XMPP (Jabber) – отличная реклама
- Пример деплоя, в статье так же описаны клиенты на мобильные устройства
ROCKET.CHAT
https://rocket.chat/ – бесплатный мессенжер, можно развернуть в docker https://hub.docker.com/_/rocket.chat
Telegram
- BGP AS Telegram
- 44907
- 62014
- 62041
- 59930
- 211157
- Export всего (текстовые сообщения/фото/прочий контент из личных чатов/групп и проч) из telegram прост из desktop версий приложений, для MacBook нужно использовать версию с сайта telegram, а не с appstore (там подобной функциональности нет)
- https://github.com/goq/telegram-list
Linux: packet flow, обработка в ядре пакетов, фильтрация, connection tracking, statistics: iptables, ipset, ipfw, nftables, bpfilter, firewalld, conntrack, BPF, packetfilter, netstat, iptraf, jool, tc
- Про фильтрацию/NAT на базе TC (TC NAT, TC BLOCK) в отдельной статье
Фильтрация на базе DPDK
О ОБРАБОТКЕ ПАКЕТА В ЯДРЕ LINUX
-
Разное из интересного про сетевые карты из презентации google о BIG TCP (сама преза по ссылке):
- Часть функционала, который поддерживается loopback драйвером не поддерживается реальными аппаратными NIC.