Spark SQL with Tachyon

Spark SQL can be made faster with low latency and more interactivity by using Tachyon, an in-memory file system, to store the intermediate results. This is not a product/tool by itself but an architectural pattern to solve low-latency SQL queries on massive data sets. This combination has been used heavily at Baidu to support data warehouses and ad hoc queries from BI tools.

Spark SQL можно сделать быстрее с низкой задержкой и большей интерактивностью, используя Tachyon, файловую систему в памяти, для хранения промежуточных результатов. Это не продукт / инструмент сам по себе, а архитектурный шаблон для решения SQL-запросов с малой задержкой для массивных наборов данных. Эта комбинация широко используется в Baidu для поддержки хранилищ данных и специальных запросов из инструментов бизнес-аналитики.