摘要：我们很荣幸地宣布，自7月26日起Databricks开始提供Apache Spark 2.0的下载，这个版本是基于社区在过去两年的经验总结而成，不但加入了用户喜爱的功能，也修复了之前的痛点。 本文总结了Spark 2.0的三大主题：更简单、更快速、更智能，另有Spark 2.0内容的文章汇总介绍了更 阅读全文

摘要：Apache Spark社区2015年9月9日发布了1.5版本，该版本由230+开发人员和80+机构参与，修复了1400多个补丁，该版本可以通过 http://spark.apache.org/downloads.html进行下载。Spark1.5中最主要的修改内容是为了提升Spark性能、可用性和... 阅读全文

摘要：客户需要对网站进行定期备份，并保留最近30天的文件，编写后以下脚本，通过Windows的任务计划进行调度对比手工和任务计划调度运行情况来看，手工运行中可直接调用RAR.exe和网络进行传输，但是任务计划调度则需要调用安装RAR的程序并且无法进行网络进行传输 1 :: 用于备份网站文件 2 rem ... 阅读全文

摘要：正反向数据库及生成设计报告最近使用Power Designer 12 越发觉得这个工具的强大，特此总结共享给大家。共享主要是经常正向、反向数据库，以及每次手工写数据库设计说明书的工作可以让Power Designer来实现，而且生成的类型丰富、格式可自定义。1.反向数据库这个工作一般是在没有E-R设计的数据库进行的，可以反向生成数据库的E-R设计。其步骤如下：1.1.设置当前操作数据库系统选择菜单Database->Change Current DBMS弹出如下窗口，选择Oracle10g（具体按实际情况），并确认。 1.2.设置ODBC数据源有两种方式可以设置ODBC数据源：(1)通过 阅读全文

摘要：Apache LRU算法问题分析解决UDL(United Data Load)是公司开发用于通用数据加载工具，支持抽取设置、作业定义并提供页面监控等功能，在某一项目中中多次出现了UDL作业调度出现问题，由于该问题隐藏得较深，分析解决花了较多的精力，现把经验总结共享给大家。1.问题现象问题一般是UDL运行3-5天才出现，出现错误现象是固定的，后台抛出如下异常(红色部分是下面分析的切入点)：12011-10-0801:05:00,078[]ERROR-作业：DELETE_F_TABLE_ALL_WORKID运行过程中发生不可预知的错误，当前作业在本次调度中终止运行,发生不可预知的错误，这通常是基础 阅读全文

摘要：最近制作报表制度时发现，Oracle和MS SQL SERVER的速度不在一个数量级，分析了一下是在Oracle中存在约束，执行以下sql可以生成禁止、启用、删除约束脚本，然后执行即可：禁用所有外键约束[代码]启用所有外键约束[代码]删除所有外键约束[代码] 阅读全文

摘要：我们在开发项目的时候，大多数模块都是逐字逐句敲打出来的，然而随着开源的蓬勃发展，涌现出了好多优秀的开源项目，这些项目不仅能加快开发应用，而且能给我们的开发带来灵感。如果开发人员能灵活应用好这些优秀的开源项目，那也是一笔丰厚的知识财富，下面是笔者整理的一些优秀的网站，相信能对开发人员有所帮助。代码搜索平台：SourceForge 一个非常优秀的有多年历史的老牌开源项目共享平台。CodePlex 微... 阅读全文