按系统功能分，不同的数据平台对应着不同的常用软件。在大数据兴盛的今天，欲进军数据界的你，应该对此有更进一步的了解。以下，大圣众包威客平台(www.dashengzb.cn)将为你推介。
【现阶段常用的ETL软件】IBMDataStageandQualityStage、InformaticaPowerCenter、MicrosoftIntegrationService、OracleOWB、PentahoDataIntegration(Kettle)、TalendETL等，主要表现为通过拖拽和配置的方式可视化、免编码地完成ETL工作；脚本包括标准AWK、HQL、Java、Pig、PL/SQL、Python、Ruby、SparkSQL、SQL等，主要表现为通过特定的语法进行编码实现ETL工作。
3.调度模块
调度模块，可以对企业内跨平台和跨主机的软硬件资源进行统一调度。这些资源包括ETL主机、数据交换主机、报表主机、数据库主机、DQ主机、邮件服务器和打印机等。
【现阶段常用的调度软件】ApacheOozie、AsisinfoScheduleServer、AutoSys、BMCControl-M、成都塔斯克TaskCtl、JobServer、LinkedinAzkaban、MoiaControl等。这些调度软件往往提供GUI和CLI的配置方式，但是在智能化配置方面支持极其有限。
【现阶段常用的监控软件】Argus、Cacti、Collectd、Ganglia、Monit、Munin、Nagios、Observium、Zabbix、Zenoss等。
7.DQ模块
DQ模块，主要对数据质量进行控制，包括源数据的质量检查、数据清洗、数据融合和数据监控等，贯穿数据处理的整个生命周期。尽管DQ模块非常重要，但是目前好些数据处理项目都没有专门的DQ模块，这些功能以脚本形式零散分布于不同的作业中。
【现阶段常用的DQ软件】AggregateProfilier、DataCleaner、IBMQualityStage、InformaticaDataQuality、InformaticaMasterDataManagement、StudioforDataQuality、TalendOpen等。
8.资产权限模块
资产权限模块，能够统一对一些无形资产(企业的各种数据库表、视图、ETL作业、报表、邮件等)进行权限管控，保障信息安全和共享。该模块完整实现的工作量还是比较大的，多数企业都会借助不同软件自带的权限管理能力，形成分散的资产权限模块。
【现阶段常用的资产权限软件】并没有完全开箱即用的资产权限模块。
想要纵横大数据世界，傍身技能必不可少，善用工具能让你百战不殆！
(更多大数据与商业智能领域干货、或电子书，可添加个人微信号(dashenghuaer))
相关资源：Umi-OCR 批量图片转文字工具离线批量文字识别(图片转文字)软件.rar
来源：翎姐超凶
声明：本站部分文章及图片转载于互联网，内容版权归原作者所有，如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢！