茂港网站设计公司,台州网站制作系统,中山h5网站建设,广告网站建设实训报告转自#xff1a;http://www.csdn.net/article/2013-05-02/2815116-introduce-from-mozilla-heka-go摘要#xff1a;一直崇尚开源的Mozilla近日释放了Heka测试版——插件架构#xff0c;Go编写。在支持使用Go扩展功能的同时#xff0c;还通过允许“Sandboxed Filters”提供了…转自http://www.csdn.net/article/2013-05-02/2815116-introduce-from-mozilla-heka-go 摘要一直崇尚开源的Mozilla近日释放了Heka测试版——插件架构Go编写。在支持使用Go扩展功能的同时还通过允许“Sandboxed Filters”提供了另一种选择——Lua同时这种选择下还省去了配置文件的编辑和系统的重启。 近日Mozilla Service团队首次发布了 Heka测试版v0.2b1Heka是一款拥有数据收集、分析、监视和报表的工具。其主要组件为 hekad一个适用于任何主机的轻量级守护程序其主任务是 通过读取和解析日志文件收集数据监视服务器状况和或使用任何协议syslog、statsd、http、heka等接收客户端网络连接。将采集到的数据转换成标准的内部表示把元数据封装成Heka系统其它组件可以有效处理的形式。使用一组路由规则评估消息内容和原数据并为每一个消息分配相应的处理过滤器和外部端点。飞速地处理消息内容用以执行聚合、滑窗sliding-window事件处理和监控、非结构化数据到结构化数据的形成举个例子将日志输入文档解析到数字统计数据或者更加友好的数据结构并将新的消息以报表的形式输出。将接收到或者是内部生成的消息数据发送到外部位置数据可能被写入一个数据库、一个时间序列数据库或者一个网络服务包括上行的一个hekad实例做更深的处理和或聚合。 Heka使用Go语言编写在α测试中已被证明其非常适合构建数据管道并让数据管道同时占有快速和灵活两方面的优势在α测中一个单hekad实例可以支撑接收和路由起每秒10GB的消息数据。Mozilla Service团队借鉴并延伸了 Logstash的想法将Heka打造成基于插件的系统。开发者可以通过构建定制的Input、Decoder、Filter比如数据处理以及Output插件进行快速和简洁的功能扩展。 所有4个类型的插件都可以用Go来实现但是管理这些插件需要修改配置文件并重启系统比如添加新的插件甚至是重新编译hekad binary。Heka还通过允许“Sandboxed Filters”提供了另一种选择这样你就可以使用Lua来代替Go。这样一来在一个运行中的Heka实例添加或者删除功能就不需要修改配置及重启服务器。Heka同样还提供了一些Lua APISandbox Filters可以使用这些API管理时间序列的环形缓冲区并生成曲线图报告这些报告将呈现在Heka的仪表盘上 点击查看大图 开源相关 Heka是项新的技术虽然已在Mozilla内部广泛使用但仍稍显粗糙。就像Mozilla每个产品一样Heka同样开源。了解更多详情可阅读相关资源 Heka v0.2 binariesIntro to HekaHTML presentation slidesHeka project documentationhekad daemon documentationHeka github projectHeka-build github projectServices devmailing list (for developer support)IRC: #heka channel on irc.mozilla.orgHeka python clientHeka node.js client原文链接 Introducing Heka 编译/仲浩 审校/王旭东 转载于:https://www.cnblogs.com/LCGIS/archive/2013/05/09/3069440.html
