SPARK AALLUx TERADATA Challenge -solution -Gain end to end view of business ETL Data from Teradata to Alluxio with large volume of data lmpact - Faster Time to Market-“Now we Queries were slow / not don't have to work Sundays" interactive, resulting in operational inefficiency Use Case: http://bit.ly/2oMx95W支持超大规模数据工作负载﹐支持超过10亿+个文件 2.0引入了分层元数据管理(tiered metadata management)这一新选项，以支持包含超过10亿个文件的单群集部署。我们现在默认使用RocksDB进行堆外存储。热数据的元数据继续存储在堆内的进程内存中，而其余元数据由Alluxio在进程内存外进行管理。alluxio.master.metastore可以配置为仅使用堆内存储。高度分布式数据服务√2.0引入了Alluxio作业服务(Job Service)，这是一种分布式集群服务，可以实现复制、持久化、跨存储移动和分布式加载等数据操作，从而实现高性能和大规模扩展。