Только в образовательных целях

Чтобы протестировать — ловите ссылку на пастебин https://pastebin.com/RGFv7Jyd

Что делать, думаю разберетесь.

Для тех, кто в танке, объясню — если присылаете владельцу iPhone сообщение содержащее данные символы, так чтобы у него выскочило уведомление, то айфон (не все) ведет себя непродсказуемо. Как именно — надо тестить. Но аккуратно. На свой страх и риск.

Не работает на новой бета-версии iOS.

P.S.: Телеграм удаляет данные символы, другие мессенждеры не проверял.

У кого получилось или не получилось применить данную информацию — велком в комментарии.

Сообщение Символы которые убивают iPhone появились сначала на Блог анонимного вебмастера.

В итоге мною было решено разрезать имеющийся исходный текстовый файл на куски (а уже после этого каждый кусок добавлять в базу sqlite). Как это сделать? В windows для похожей задачи я как-то использовал KeyWord Keeper, но тогда и файл был меньше, и сидел я на форточках, а не на линуксе, загружать вторую операционку (любимая семерочка) лень. Пришлось искать утилиту именно под Linux — и я её нашел! Родная линукс утилита split. Для того чтобы разрезать файл на куски можно использовать такие команды:

Чтобы разрезать txt-файл на 100 файлов:

split -n 100 sourcefile.txt

Чтобы разделить файл на файлы по 1 000 000 000 строк:

split -l 1000000000 sourcefile.txt

Другие варианты можно увидеть вызвав меню помощи/help:

split --help

Надеюсь, кому-нибудь данная информация будет полезной.

Сообщение Как разрезать огромный текстовый файл на куски появились сначала на Блог анонимного вебмастера.

Для настройки VPS сервера нам сначала нужен сам сервер на Ubuntu.

Покупка сервера

Где покупать сервер — дело Ваше, однако я все же вставлю свои 5 копеек и порекомендую бесплатный сервис для поиска VPS по параметрам — vds.menu. Для телеграм-ботов советую брать сервера с минимум 512 Мб ОЗУ, SSD диском и технологией виртуализации KVM. Желательно брать сервера не в РФ.

Оптимальные сервера для telegram-ботов по критерию цена/характеристики лично я беру тут: iphoster.net. Для начала подойдет тариф за $1.95 или 121 руб/мес. — цена на момент написания статьи. Процессор на самом дешевом тарифе имеет тактовую частоту 3300 МГц (одно ядро), 7ГБ NVMe SSD, интернет-канал 100 МБит/с, безлимитный трафик — все что нужно для бота.

Сервера расположены в Германии, Польше, Франции (использую именно французские сервера), так что проблемы с блокировкой доступа к телеге не возникнут. Да, я в курсе, что в том же pyTelegramBotAPI есть возможность указать прокси или подменить стандартный URL Telegram Bot API — но это не мой путь. Мое мнение — проще использовать зарубежный сервер.

Итак, сервер мы купили. Логинимся к серваку через SSH.

Можно использовать стандартный ssh-клиент, но я предпочитаю и советую использовать клиент Remmina.

Первоначальная настройка сервера на базе Ubuntu

Обновляемся на всякий случай:

apt-get update -y && apt-get upgrade -y && apt-get dist-upgrade -y && apt-get autoremove -y

Генерируем сложный пароль (его мы будем использовать вместо стандартного пароля пользователя root).

Меняем пароль пользователя root:

passwd

Вводим сгенерированный ранее пароль.

Ставим вспомогательный софт (по желанию):

apt-get install zsh nano htop ufw fail2ban screen git curl wget unzip zip systemd man -y

Правим локали на Ubuntu 16.04

apt-get install language-pack-ru

Открываем файл /etc/default/locale:

nano /etc/default/locale

Вписываем:

LANGUAGE=ru_RU:ru
LANG=ru_RU.UTF-8

Ставим последнюю версию Python (сейчас это версия 3.8)

Подготовка к установке:

apt-get install gcc build-essential make checkinstall libreadline-gplv2-dev libncursesw5-dev libssl-dev libsqlite3-dev tk-dev libgdbm-dev libc6-dev libbz2-dev libffi-dev zlib1g-dev

Установка Python 3.8 на Ubuntu:

cd /opt
wget https://www.python.org/ftp/python/3.8.2/Python-3.8.2.tgz
tar xzf Python-3.8.2.tgz
cd Python-3.8.2
./configure --enable-optimizations
make altinstall

Удаляем лишние файлы:

cd /opt
rm -f Python-3.8.2.tgz

Дополнительные действия:

sh -c "$(curl -fsSL https://raw.githubusercontent.com/robbyrussell/oh-my-zsh/master/tools/install.sh)"
nano ~/.zshrc

Вписываем в конец файла:

alias cls="clear"
alias python="python3.8"
alias pip="pip3.8"

Обновляем Pip

pip3.8 install --upgrade pip

Добавляем нового пользователя Ubuntu

Генерируем пароль для нового пользователя zzz. После чего добавляем нового пользователя в систему.

adduser zzz

Добавляем привелегий пользователю:
Открываем файл /etc/sudoers:

nano /etc/sudoers

Добавляем строчку:

zzz ALL=(ALL) ALL

Настройка безопасности SSH

Запрещаем root логиниться используя ssh:

nano /etc/ssh/sshd_config

Ищем нужные строки и редактируем файл:

PermitRootLogin no
UseDNS no
AllowUsers zzz

Изменяем стандартный порт SSH :

Port 50383

Выбирайте значение между 49152 и 65535. Для этого можно использовать команду:

shuf -i 49152-65535 -n 1

Перезагружаем SSH сервер:

service ssh restart

Обмениваемся SSH-ключами

Команда вводится не на VPS, а на нашем личном компьютере

ssh-copy-id zzz@193.77.122.77 -p50383

Настраиваем файрволл с помощью ufw

sudo ufw default deny incoming
sudo ufw default allow outgoing

Добавляем наш нестандартный (50383) порт для подключения через SSH:

sudo ufw allow 50383

Добавляем другие порты, необходимые для работы того же Telegram-бота:

sudo ufw allow 8443

Включаем firewall:

sudo ufw enable

Проверяем статус:

sudo ufw status verbose

Включаем сервис fail2ban:

sudo service fail2ban restart

Перезагружаемся:

reboot now

Обновляемся еще раз, на всякий случай:

sudo apt-get update -y && sudo apt-get upgrade -y && sudo apt-get dist-upgrade -y && sudo apt-get autoremove -y

Может пригодится — команда установки необходимых библиотек для работы бота:

pip install -r requirements.txt

P.S.: данный пост в будущем будет обновляться

Сообщение Базовая настройка VPS сервера Ubuntu 16.04 появились сначала на Блог анонимного вебмастера.

Как установить Docker на Linux Mint 19

«Освежаем» операционную систему:

sudo apt-get update -y && sudo apt-get upgrade -y && sudo apt-get dist-upgrade -y && sudo apt autoremove -y

Устанавливаем необходимые зависимости:

sudo apt-get -y install apt-transport-https ca-certificates curl software-properties-common

Импортитруем PGP-ключи

curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo apt-key add -

Добавляем нужный репозиторий

sudo add-apt-repository "deb [arch=amd64] https://download.docker.com/linux/ubuntu $(. /etc/os-release; echo "$UBUNTU_CODENAME") stable"

Обновляем списки репозиториев:

sudo apt-get update

Устанавливаем Docker:

sudo apt-get -y  install docker-ce docker-compose

После установки добавляем нашего текущего пользователя в группу docker

sudo usermod -aG docker $USER

После этого завершаем сеанс пользователя под которым мы сидим. Логинимся в систему заново.

Пробуем запустить Докер:

docker run hello-world

Если всё ОК, то в результате Вы получите примерно следующее:

$ docker run hello-world
Unable to find image 'hello-world:latest' locally
latest: Pulling from library/hello-world
1b930d010525: Pull complete 
Digest: sha256:4df8ca8a7e309c256d60d7971ea14c27672fc0d10c5f303856d7bc48f8cc17ff
Status: Downloaded newer image for hello-world:latest

Hello from Docker!
This message shows that your installation appears to be working correctly.

To generate this message, Docker took the following steps:
 1. The Docker client contacted the Docker daemon.
 2. The Docker daemon pulled the "hello-world" image from the Docker Hub.
    (amd64)
 3. The Docker daemon created a new container from that image which runs the
    executable that produces the output you are currently reading.
 4. The Docker daemon streamed that output to the Docker client, which sent it
    to your terminal.

To try something more ambitious, you can run an Ubuntu container with:
 $ docker run -it ubuntu bash

Share images, automate workflows, and more with a free Docker ID:
 https://hub.docker.com/

For more examples and ideas, visit:
 https://docs.docker.com/get-started/

Если у Вас возникла ошибка типа такой

docker: Got permission denied while trying to connect to the Docker daemon socket at unix:///var/run/docker.sock: Post http://%2Fvar%2Frun%2Fdocker.sock/v1.40/containers/create?name=test: dial unix /var/run/docker.sock: connect: permission denied.
See 'docker run --help'.

Значит Вы забыли перелогиниться в системе.

Данные для данной шпаргалки брал тут.

Сообщение Установка Docker на Linux Mint появились сначала на Блог анонимного вебмастера.

Есть несколько способов установить Python 3.6 на Linux Mint, но я использовал, вероятно, самый простой и быстрый — добавление PPA-репозитория.

Открываем терминал (у меня это можно сделать сочетанием клавиш Ctrl+Alt+T) и вводим следующие команды:

sudo add-apt-repository ppa:jonathonf/python-3.6
sudo apt-get update
sudo apt-get install python3.6

Запуск Python 3.6

После установки пробуем запустить python 3.6 с помощью команды:

python3.6

Если всё хорошо, то Вы увидите примерно следующее:

Внимание: если в Вашей системе был установлен python 3.5 (а вероятность этого 99%) — не удаляйте его!

Сообщение Установка Python 3.6 на Linux Mint 18.2 появились сначала на Блог анонимного вебмастера.

#!/usr/bin/python3
# -*- coding:utf-8 -*-
from tempfile import mkstemp
from os import close
from shutil import move

def remove_dubl(file):
     ft, temp = mkstemp() # создать temp-файл
     lines = [] # уникальные строки из file
     with open(temp, 'w', encoding='utf-8') as t, open(file) as f:
         for line in f: # читать file построчно
             if line not in lines: # для line, отсутствующих в lines
                 lines.append(line) # сохранить line в lines
                 t.write(line) # записать line в temp-файл
     close(ft) # закрыть temp-файл
     move(temp, file) # переместить/переименовать temp-файл в file

if __name__ == '__main__':
     remove_dubl('source_file.txt')

Надеюсь, кому-нибудь будет полезно.

Сообщение Удаление дубликатов строк в текстовом файле на Python 3 появились сначала на Блог анонимного вебмастера.

Данный пост является лишь неким чеклистом/шпаргалкой по плагинам, которые я использую на большинстве своих новых говносайтов проектов. Еще раз: ИМЕННО ДЛЯ НОВЫХ ПРОЕКТОВ, на голый Вордпресс.

Оптимизация может иногда приводить к потере работоспособности сайта

ВСЕГДА делайте бэкапы

Прежде чем начинать установку плагинов, желательно:

• В качестве веб-сервера желательно использовать nginx
• Включить PHP 7 версии
• Сделать бэкап/снимок состояния
• Включить кэширование на стороне сервера
• Получить и настроить SSL-сертификат
• Убедиться что используете последнюю версию WordPress
• Установить сложный пароль для админки

Плагины для базовой настройки WordPress

1. Bicycles by falbar — самый первый плагин который я устанавливаю на все сайты. Он позволяет отключить/удалить все лишнее в вордпресс. Тем самым повысив безопасность и скорость загрузки. В настройках плагина я обычно ставлю все галочки.
2. Really Simple SSL / Простой SSL — иногда требуется поставить этот плагин для полноценной поддержки шифрования. Ставить только если у вас возникают проблемы с поддержкой SSL (смешанное содержимое).
3. Advanced Automatic Updates — плагин для настройки автоматических обновлений WordPress, плагинов, тем и т.д. Обязателен для всех сайтов. Учтите: автоматическое обновление тем может привести к затиранию ваших счетчиков статистики, коды Я.Метрики, Google Analytics и т.д. Темы лучше обновлять ручками.
4. TinyMCE Advanced — плагин расширяет функционал стандартного редактора постов. Использую всегда.
5. WP Translitera — заменяет в ЧПУ кириллицу на транслит. Раньше я думал что смысла в нем нет, но потом убедился в его необходимости. Полезно если у Вас длинные заголовки.
6. Google Captcha (reCAPTCHA) by BestWebSoft — гугло-каптча для комментариев, формы регистрации и авторизации. Ставить в последнюю очередь, только если вы не используете другие плагины где уже имеется поддержка каптч (например WP Cerber — о нем речь пойдет ниже).

Плагины для защиты WordPress от взлома

1. WP Cerber — лучший плагин для защиты вордпресс. Имеет дополнительные функции защиты от спама, включает reCAPTCHA. Устанавливать обязательно.
2. Limit Login Attempts / Ограничение попыток авторизации — данный плагин обычно уже стоит по-умолчанию. Смело удаляйте после установки WP Cerber.

Плагины WordPress для защиты от спама

1. Akismet Anti-Spam — лучший антиспам-плагин для WP. Обязателен к установке на всех сайтах.
   
2. Aprove only russian comments — если Ваш сайт исключительно для русскоязычной аудитории. Устанавливать по желанию.
3. NoSpamNX — защищает от глупых спам-ботов подменяя форму комментариев.
   

Связка Akismet + NoSpamNX + Aprove only russian comments + WP Cerber защитит Вас от 99,99% спама.

Плагины для поисковой оптимизации (SEO)

1. Broken Link Checker — ищет/показывает битые ссылки на сайте и позволяет их легко чинить.
2. Yoast SEO — лучший SEO плагин для WP. Имеет огромный функционал. В том числе: редактирование .htaccess, robots.txt, хлебные крошки, создание карты сайта в формате .xml, прописывание метатегов, альтов и т.д. Использовать обязательно.
3. Yet Another Related Posts Plugin — показывает ссылки на релевантные статьи под содержимым поста. Тем самым оптимизирует внутреннюю перелинковку и улучшает поведенческие факторы. При использовании некоторых тем (в которых уже реализован данный функционал) не нужен. Устанавливать по желанию.
4. AMP — плагин для создания AMP-версий ваших страниц. Технология AMP создана для быстрой загрузки контента со смартфонов/планшетов. В выдаче Google данные страницы будут отмечаться особым значком, что потенциально повысит посещаемость и доверие к вашему сайту. Крайне советую к установке.

Плагины кэширования WordPress

1. W3 Total Cache — самый лучший плагин для кэширования. Самый мощный. Имеет массу настроек, использовать с осторожностью. Галочки ставить аккуратно, не всё сразу. При неграмотной настройки может покалечить сайт. Про настройку W3 Total Cache опубликую отдельный пост.
2. Hyper Cache — еще один плагин для кэширования, задачу выполняет отлично. Проще чем ТоталКэш, поэтому рекомендую тем, кто не любит ковыряться в тонких настройках производительности.

Лучшие плагины для ускорения WordPress

1. Speed Booster — один из моих любимых плагинов. С помощью него можно добиться показателей 100 из 100 в google-сервисе измерения скорости загрузки страниц PageSpeed Insights. Ускоряет загрузку страниц.
2. Autoptimize — оптимизирует файлы стилей и скриптов. Объединяет их и сжимает. Устанавливать только если Speed Booster не помог. Неплохо работает совместно с W3 Total Cache.
3. Optimize DB — плагин который облегчает базу данных вашего сайта.
4. Optimus — плагин для автоматической оптимизации изображений во время их загрузки на сайт.
5. Optimus Bulk Optimizer — позволяет оптимизировать уже имеющиеся на сайте изображения. Позволяет значительно сократить скорость загрузки и место на жестком диске.

Данный список плагинов будет, возможно, изменяться/пополняться в будущем.

Сообщение Лучшие плагины для WordPress появились сначала на Блог анонимного вебмастера.