Heka日志数据挖掘之Heka安装

  • Posted on: 17 May 2015
  • By: 似曾相识

Heka是Mozilla发布的一款开源的流处理软件系统,是大数据处理中“瑞士军刀”。在我的项目中主要应用其三点:

  • 实时性。对于业务中的曝光日志数据实时增量处理
  • 扩展性。可以用go或lua编写插件,go插件修改完修改再次编译,lua插件可以直接运行。
  • 高性能。使用Go语言编写,适合构建数据管道,并让数据管道同时占有快速和灵活两方面的优势。一个单hekad实例可以支撑(接收和路由)起每秒10GB的日志数据。

具体Heka安装如下:

回归原点

  • Posted on: 14 May 2015
  • By: 似曾相识

回归原点,找到初心。

Drupal用户联盟在近3年间用的是美国的VPS,由于墙的原因,国内用户一度访问不了。且本人没来得及续费,导致近3年的数据全部丢失。庆幸的是Drupal用户联盟最活跃的3年之前的数据全部有备份,留下了那些年的宝贵青春。不忍丢弃,在这里可以找到初心,找到那些曾经的小伙伴,找到我们的共同追求!

今天,顺利的将Drupal用户联盟迁移到香港的服务器,访问速度很快,能够更好的服务Drupal用户,更好的点滴记录我们的技术人生,更好的实现我们的技术理想!

回归原点,继续出发.....

页面