- PVSM.RU - https://www.pvsm.ru -

Rust: зачем нужны макросы

Как-то я сказал своему коллеге, что в Rust имеются макросы, ему показалось, что это плохо. Раньше у меня была такая же реакция, но Rust показал мне, что макросы не обязательно плохи.

Где и как их уместно применять? Смотрите под катом.

Почему мы должны опасаться макросов

Макросы являются формой метапрограммирования [1]: они являются кодом, который манипулирует кодом. Метапрограммирование получило плохую репутацию, потому что при их использовании нелегко уберечься от написания плохого кода. Примерами служат #define в C, который легко может взаимодействовать с кодом непредсказуемым образом [2], или eval в JavaScript, который увеличивают опасность инъекции кода [3].

О макросах в Rust

Многие их этих проблем могут быть решены при использовании необходимых средств, макросы же предоставляют некоторые такие средства:

  • генерирование избыточного/тривиального кода (boilerplate) вместо его ручного написания.
  • расширение языка перед тем, как будет добавлен новый синтаксис, закрытие пробелов в языке.
  • оптимизация производительности — ибо некоторые действия, которые ранее выполнялись во время исполнения, теперь исполняются на стадии компиляции -1-.

Для того чтобы достичь этих целей, Rust включает в себя два вида макросов -2-. Они известны под разными названиями (процедурные, декларативные, macro_rules, и т. д.), хотя я считаю, что данные имена несколько запутывают. К счастью, они не так важны, поэтому я буду называть их функциональные и атрибутные.

Причиной того, что имеется два типа макросов является то, что они хорошо подходят для решения разных задач:

  • функциональные: легко включить в код.
  • атрибутные: лучше подходят для генерации кода, который не вписывается в окружающий код.

Во всем остальном результаты их применения схожи: компилятор "стирает" макросы во время компиляции, заменяя их кодом, генерирующимся из макроса, и компилируя его с "обычным", не макро-кодом -3-. Реализация двух типов макросов сильно отличается, но мы не будет здесь глубоко в это вдаваться.

Почему функциональные макросы

Функциональный макрос может быть исполнен почти как функция. Данный вид макросов имеет ! в вызове:

let x = action();       // вызов функции
let y = action!();      // вызов макроса

Зачем использовать макросы, когда можно использовать функции? Нужно помнить, что функциональные макросы ничего не имеют общего с функциями — они похожи на функции, чтобы их, макросы, было легче использовать. Поэтому вопрос стоит не в том, лучше данный тип макросов чем функции или нет, а в том, нужна ли нам возможность менять исходный код.

Полезные утверждения

Начнем с рассмотрения assert!, который используется для проверки того, что некоторое условие выполняется, вызывая панику (panic) [4], если это не так. Они проверяются во время выполнения, так что же нам дает здесь метапрограммирование? Давайте посмотрим на сообщение, которое печатается, когда assert! завершается неудачно:

fn main() {
    let mut vec = Vec::new();   // создать пустой массив
    vec.push(1);                // добавить элемент в конец массива
    assert!(vec.is_empty())     // массив не пуст - assert! завершается неудачно
    // печатается:
    // thread 'main' panicked at 'assertion failed: vec.is_empty()', srcmain.rs:4
}

Данное сообщение содержит в себе условие, которое мы проверяем. Другими словами, макрос создает сообщение об ошибке, которое основано на исходном коде, мы же получаем содержательное сообщение об ошибке, не вставляя его в программу вручную.

Типо-безопасная работа с форматом строк

Во многих языках программирования поддерживается задание форматов вывода для строк -4-. Rust не является исключением и также поддерживает задание форматов строк посредством format!. Однако по-прежнему стоит вопрос: почему мы должны использовать метапрограммирование для решения проблемы? Давайте посмотрим на println! (он внутри использует format! для обработки переданной строки) -5-.

fn main() {
    // просто ввод
    println!("{} is {} in binary", 2, 10);
    // печатает: 2 is 10 in binary

    // вывод аргументов в числовой и двоичной форме
    println!("{0} is {0:b} in binary", 3)
    // печатает: 3 is 11 in binary
}

Есть много причин того, что format! реализован как макрос -6-, я же хочу подчеркнуть то, что он может разделить строку на части во время компиляции, проанализировать ее и проверить, является ли обработка переданных аргументов типо-безопасной. Мы можем изменить наш код и получить ошибку компиляции:

fn main() {
    println!("{} is {} in binary", 2/*, 10*/);
    // Ошибка компиляции: ожидались два аргумента, был передан один

    println!("{0} is {0:b} in binary", "3")
    // Ошибка компиляции: не реализовано представление строк в двоичном виде
}

Во многих других языках данные ошибки проявились бы во время выполнения, однако в Rust мы можем использовать макросы для того, чтобы выполнять данную проверку на этапе компиляции и генерировать производительный код для обработки формата строки без проверок времени выполнения -7-.

Легкое логирование

В этом примере немного вдадимся в экосистему языка. Rust имеет пакет log [5], который используется как главный фронтенд логирования. Как и другие решения для логирования, он предоставляет разные уровни логирования, но, в отличие от других решений, данные уровни представляются макросами, а не функциями.

Логирование показывает мощность метапрограммирования в том, как оно использует макросы file! и line!; Данные макросы дают возможность установить точное место расположения вызова функции логирования в исходном коде. Давайте посмотрим на пример. Так как log является фронтендом, добавим бэкенд, пакет flexi_logger [6].

#[macro_use] extern crate log;
extern crate flexi_logger;

use flexi_logger::{Logger, LogSpecification, LevelFilter};

fn main() {
    // Установим `trace` в качестве минимального уровня логирования
    let log_config = LogSpecification::default(LevelFilter::Trace).build();

    Logger::with(log_config)
        .format(flexi_logger::opt_format)   // Specify how we want the logs formatted
        .start()
        .unwrap();

    // Логирование готово к использованию. Используем его для отладки алгоритма
    info!("Fired up and ready!");

    complex_algorithm()
}

fn complex_algorithm() {
    debug!("Running complex algorithm.");
    for x in 0..3 {
        let y = x * 2;
        trace!("Step {} gives result {}", x, y)
    }
}

Эта программа напечатает:

[2018-01-25 14:48:42.416680 +01:00] INFO [srcmain.rs:16] Fired up and ready!
[2018-01-25 14:48:42.418680 +01:00] DEBUG [srcmain.rs:22] Running complex
algorithm.
[2018-01-25 14:48:42.418680 +01:00] TRACE [srcmain.rs:25] Step 0 gives
result 0
[2018-01-25 14:48:42.418680 +01:00] TRACE [srcmain.rs:25] Step 1 gives
result 2
[2018-01-25 14:48:42.418680 +01:00] TRACE [srcmain.rs:25] Step 2 gives
result 4

Как вы видите, наши логи содержат имена файлов и номера строк.

  • мы получаем данную информацию без накладных расходов времени выполнения на получение этих данных.
  • информация корректна и полезна.

В первом случае компилятор вставляет в исполняемые файлы необходимую информацию, которую мы можем при необходимости напечатать. Если бы мы не решали данную проблемы во время компиляции, то нам пришлось мы исследовать стек во время выполнения [7], что чревато ошибками и снижает производительность.

Если мы заменим логирующие макросы на функции, то по-прежнему можем вызывать file! и line!:

fn info(input: String) {    // Надуманный вариант info!
    Log::log(
        logger(),
        RecordBuilder::new()
            .args(input)
            .file(Some(file!()))
            .line(Some(line!()))
            .build()
    )
}

А данный код вывел бы следующее:

[2018-01-25 14:48:42.416680 +01:00] INFO [srcloggersinfo.rs:7] Fired up and ready!

Имя файла и номер строки бесполезны, ибо указывают на то, где была вызвана логирующая функция. Другими словами, первый пример работал как раз потому, что мы использовали макросы, которые были заменены генерируемым кодом, помещая file! и line! напрямую в исходный код, предоставляя нам необходимую информацию (имя файла и номер строки теперь в исполняемом файле) -8-.

Почему атрибутные макросы

Rust включает в себя концепт атрибутов [8], который нужен для пометки кода. Например, функция тестирования выглядит так:

#[test]     // <- аттрибут
fn my_test() {
    assert!(1 > 0)
}

Запуск cargo test запустит данную функцию. Атрибутивные макросы позволяют вам создавать новые атрибуты, который подобны "родным" атрибутам, но имеют другие эффекты. На текущий момент существует важное ограничение: в компиляторе из ветки stable работают только макросы использующие атрибут derive [9], в то время как пользовательские атрибуты работают в ночных сборках [9]. Рассмотрим разницу ниже.

Рассматривая преимущества, даваемые атрибутивными макросами, целесообразно сравнить код, который может манипулировать исходным кодом, с тем, который не может это делать.

Получение избыточного кода (boilerplate)

Атрибут [9] derive используется в Rust для генерации реализации типажей. Давайте посмотрим на PartialEq.

#[derive(PartialEq, Eq)]
struct Data {
    content: u8
}

fn main() {
    let data = Data { content: 2 };
    assert!(data == Data { content: 2 })
}

Здесь мы создаем структуру, экземпляры кодой хотим проверять на равенство ( использовать ==), поэтому мы получаем реализацию PartialEq -9-. Мы могли бы реализовать PartialEq самостоятельно, но наша реализация была бы тривиальной, ибо мы хотим только проверять объекты на равенство:

impl PartialEq for Data {
    fn eq(&self, other: &Data) -> bool {
        self.content == other.content
    }
}

Данный код также генерирует нам компилятор, так что использование макроса экономит нам время, однако, что важнее, избавляет нас от необходимости поддержки проверяющего на равенство кода в актуальном состоянии. Если мы добавим поле в структуру, нам нужно изменить проверку в нашей ручной реализации PartialEq, иначе (например, если мы забудем изменить код проверки) проверка разных объектов может пройти успешно.

Избавление от бремени поддержки является большим преимуществом, который предоставляет нам атрибутный макрос. Мы написали код структуры в одном месте и автоматически получили реализацию функции проверки и гарантии времени компиляции того, что код проверки соответствует текущему определению структуры. Ярким примером сказанного является пакет serde [10], используемый для сериализации данных, и без макросов нам необходимо было бы использовать строки для указания serde на названия полей структур [11], поддерживая эти строки в актуальном состоянии относительно определения структуры -10-.

Derive с преимуществами

derive является одной из многих возможностей генерации кода атрибутивными макросами, а не только реализации типажей. На данный момент это доступно в ночных сборках [12], что, надеюсь, будет стабилизировано в текущем году [12].

Наиболее выдающимся случаем использования на текущий момент является Rocket [13] — библиотека для написания веб-серверов. Создание REST-endpoint'ов требует добавления атрибута к функции, так что теперь функция содержит всю необходимую информацию для обработки запроса.

#[post("/user", data = "<new_user>")]
fn new_user(admin: AdminUser, new_user: Form<User>) -> T {
    //...
}

Если вы работали с веб-библиотеками в других языка (например, Flask [14] или Spring [15]), то данный стиль для вас, вероятно, не нов. Я не буду здесь сравнивать эти библиотеки, отмечу лишь, что вы можете писать подобный код и в Rust, пользуясь его преимуществами (высокая производительность получаемого нативного кода и т. д.) -11-.

Недостатки

Макросы не идеальны, рассмотрим их некоторые недостатки:

  • увеличенное время компиляции, так как тратится время на получение кода из макроса и компиляцию данного кода.
  • Макросы могут привести к увеличению размера машинного кода, ибо легко впасть в копипаст при их использовании, при котором маленькая строка может развернуться в большой блок кода. Раньше это было проблемой пакета clap [16], о котором автор написал хорошую заметку с описанием проблемы и то, как посадил код на диету [17].
  • отладка становится сложнее, ибо нужно отлаживать сгенерированный код. К счастью, имеются инструменты [18], которые могут вам помочь. Читаемость и информативность сообщений об ошибке при использовании макросов зависит не от компилятора, а от авторов макроса. Опять же, имеются необходимые инструменты (например, compiler_error! и пакеты подобные syn [19]).
  • перегрузка DSL (немного субъективный пункт). Например, format! принимает строку, написанную на мини-языке, который является не Rust'ом, а DSL [20]. Хотя DSL является мощным инструментом, его использование легко может ввести в затруднение, если разработчик задумает создать свой свой собственный встроенный язык. Если надумаете писать DSL, помните, что большие возможности подразумевают большую ответственность, и то, что вы можете сделать DSL, не подразумевает необходимости делать это.

Выводы

Макросы являются мощным инструментом, который может помочь в разработке. Надеюсь, смог внушить вам мысль, что макросы в Rust являются положительным явлением и имеют случаи, когда их применение уместно.

-1-: Не путайте с возможностью [21] const fn.
-2-: Известны как Макросы 1.1.
-3-: Замена макроса сгенерированным кодом называется расширением макроса.
-4-: Например, printf в C [22], String.Format в C# [23], фооматирование строк в Python [24].
-5-: format! занимается форматированием строки, которая может использоваться макросами println! и другими [25].
-6-: varargs [26] использует format!. Данная возможность (varargs) входит в противоречие с решением на запрет перегрузки функций [27], поэтому использование макроса очень уместно — не нужно добавлять поддержку в ядро языка.
-7-: Scala имеет хорошую реализацию интерполяции строк [28], которая делает проверки на стадии компиляции. Не знаю, будет ли добавлена интерполяция строк в Rust, хотя мы уже видели подобные примеры: try! развился из макроса во встроенную в язык возможность [29], так что подобное возможно при целесообразности.
-8-: У Rust есть проблема — паникующие методы (например, unwrap и expect) выдают бесполезные сообщения об ошибке, потому что не имеют доступа к информации о вызывающем коде [30].
-9-: PartialEq — типаж, используемый для проверки объектов на равенство, мы также используем Eq для корректности. Документация [31] PartialEq объясняет, почему в Rust имеется подобное деление.
-10-: Проблема может быть решена рефлексией, которая не поддерживается в Rust, ибо противоречит дизайну языка, так как уменьшает производительность времени выполнения, ибо требует соответствующий runtime [32].
-11-: Sergio Benitez, автор Rocket, сделал связанное с этим хорошее выступление [33].

Автор: Булат Мусин

Источник [34]


Сайт-источник PVSM.RU: https://www.pvsm.ru

Путь до страницы источника: https://www.pvsm.ru/programmirovanie/274769

Ссылки в тексте:

[1] метапрограммирования: https://en.wikipedia.org/wiki/Metaprogramming

[2] легко может взаимодействовать с кодом непредсказуемым образом: https://en.wikipedia.org/wiki/Hygienic_macro#The_hygiene_problem

[3] инъекции кода: https://stackoverflow.com/a/18208029

[4] панику (panic): https://doc.rust-lang.org/std/macro.panic.html

[5] пакет log: https://docs.rs/log/

[6] flexi_logger: https://docs.rs/flexi_logger/

[7] пришлось мы исследовать стек во время выполнения: https://stackoverflow.com/questions/115008/how-can-we-print-line-numbers-to-the-log-in-java

[8] атрибутов: https://doc.rust-lang.org/reference/attributes.html

[9] атрибут derive: https://rustbyexample.com/trait/derive.html

[10] serde: https://serde.rs/

[11] необходимо было бы использовать строки для указания serde на названия полей структур: https://serde.rs/impl-serialize.html#serializing-a-struct

[12] ночных сборках: https://github.com/rust-lang/rust/issues/38356

[13] Rocket: https://rocket.rs/

[14] Flask: http://flask.pocoo.org/

[15] Spring: https://spring.io/

[16] clap: https://clap.rs/

[17] хорошую заметку с описанием проблемы и то, как посадил код на диету: https://clap.rs/2018/01/09/new-years-weight-loss/

[18] инструменты: https://github.com/dtolnay/cargo-expand

[19] syn: https://github.com/dtolnay/syn

[20] DSL: https://stackoverflow.com/questions/809574/what-is-domain-specific-language-anybody-using-it-and-in-what-way

[21] возможностью: https://github.com/rust-lang/rust/issues/24111

[22] printf в C: https://en.wikipedia.org/wiki/Printf_format_string

[23] String.Format в C#: https://msdn.microsoft.com/en-us/library/system.string.format(v=vs.110).aspx

[24] фооматирование строк в Python: https://docs.python.org/2/library/stdtypes.html#string-formatting

[25] другими: https://doc.rust-lang.org/std/fmt/#related-macros

[26] varargs: https://en.wikipedia.org/wiki/Variadic_function

[27] запрет перегрузки функций: https://github.com/rust-lang/rfcs/pull/153

[28] интерполяции строк: http://docs.scala-lang.org/overviews/core/string-interpolation.html

[29] из макроса во встроенную в язык возможность: https://blog.rust-lang.org/2016/11/10/Rust-1.13.html

[30] не имеют доступа к информации о вызывающем коде: https://github.com/rust-lang/rfcs/blob/master/text/2091-inline-semantic.md

[31] Документация: https://doc.rust-lang.org/std/cmp/trait.PartialEq.html

[32] уменьшает производительность времени выполнения, ибо требует соответствующий runtime: https://stackoverflow.com/a/26424561

[33] хорошее выступление: https://www.youtube.com/watch?v=QS8mrbAPLJc

[34] Источник: https://habrahabr.ru/post/350716/?utm_source=habrahabr&utm_medium=rss&utm_campaign=350716