一些日志问题的处理总结

日志处理，如何利用庞大的日志产生商业价值？如今的淘宝 京东这种系统，你去买个鼠标 它就能给你推荐个键盘等周边外设， 那么它为啥不给你推荐个内衣内裤呢？ 想明白这些，你需要进一步学习， 大数据要来了。
        flume 日志处理 hadoop hive presto hdfs storm spark 大数据 流式计算 ，利用python语言来处理数据，因为处理数据，并不是java擅长的跨语言程序员了，
到了这个阶段，你要懂得jvm基本结构，要知道垃圾回收机制，常用垃圾回收算法，jvm简单调优参数；
数据库也是个重头戏，你要知道mysql事务隔离机制的实现，怎么优化sql ， 要知道springmvc流程 spring的原理 事务传播机制，mybatis流程原理， 乐观锁悲观锁什么情况用，你要学会考虑系统瓶颈，系统容灾，单点故障， 你要懂得一致性是怎么回事，cap理论 paxos算法 以及zookeeper干嘛用的，能解决什么问题？ 你要懂得soa架构，dubbo , 微服务 spring boot spring cloud 这些高级框架 尝试用一用，谷歌，开源社区 将要取代百度成为你解决问题的主要动力和前进的方向， 你会有种一览众山小的感觉，你会觉得弄个百万并发的系统其实并不难，难的是后续问题，日志处理 运维问题， 关于运维我给不了太多建议，可以了解下 zabbix 之类的 可以去学习下 docker 微服务加docker将是未来的趋势。