手把手教你估算深度神经网络的最优学习率（附代码&教程）

原标题：手把手教你估算深度神经网络的最优学习率（附代码&教程）

来源：机器之心；作者：Pavel Surmenok；

本文编辑转自：数据派THU ；编辑：黄继彦；校对：朱江华峰；

本文长度为2000字，建议阅读4分钟

学习率（learning rate）是调整深度神经网络最重要的超参数之一，本文作者Pavel Surmenok描述了一个简单而有效的办法来帮助你找寻合理的学习率。

我正在旧金山大学的 fast.ai 深度学习课程中学习相关知识。目前这门课程还没有对公众开放，但是现在网络上有去年的版本，且年末会在 course.fast.ai (http://course.fast.ai/) 上更新。

GitHub 链接：https://gist.github.com/surmenok

学习率如何影响训练？

深度学习模型通常由随机梯度下降算法进行训练。随机梯度下降算法有许多变形：例如 Adam、RMSPr

想读更多 ->

浅谈JVM原理

原标题：浅谈JVM原理

概念

虚拟机：指以软件的方式模拟具有完整硬件系统功能、运行在一个完全隔离环境中的完整计算机系统,是物理机的软件实现。JVM分类：VMWare ，Visual Box，JVM（其中VMWare和Visual Box都是使用软件模拟物理CPU的指令集 ，而JVM使用软件模拟Java 字节码的指令集）

运行机制

图1 jvm运行机制

基本架构

原标题：为什么许多公司不要培训机构出来的程序员？

2017 年，从微软、Oracle、IBM，到思科、思杰、HPE，再到 Etsy、Facebook、 Stack Overflow，无论是老牌科技公司还是创新型企业，似乎都呈现出一种颓势，裁员风波一浪高过一浪。而近观国内整体局势，继悟空单车等退出市场，酷骑单车、小蓝车先后倒闭后，近日小鸣单车也被曝裁员 99%，公司实控人“跑路”......国内外的互联网圈显得动荡不已，预想而知，一大批从业者也正面临失业的窘境，蜂拥至求职的队伍之中。

而在这波求职的浪潮下，不少企业招聘似乎都有一个基本的学历门槛，之前 CSDN 也曾发表过一篇《2017 机器学习调查报告》文章，其中就中国而言，AI 人才的硕士学位占比高达 40.5%，博士为 11.2%，而大部分的招聘至少也需要是本科学历。此外，在招聘中，很多 HR 还会有一种别样的态度，「不要

想读更多 ->

轻松学习 JavaScript——第 3 部分：函数中的默认参数

原标题：轻松学习 JavaScript——第 3 部分：函数中的默认参数

Java函数可以有默认参数值。通过默认函数参数，你可以初始化带有默认值的正式参数。如果不初始化具有某些值的参数，则该参数的默认值为undefined。

请看下列代码：

functionfoo(num1){ console.log(num1);}foo();

在调用函数foo时，你没有传递任何参数，因此变量num1的默认值设置为undefined。但是，有时你可能需要设置默认值而非undefined。过去，最好的策略是测试参数值undefined，然后分配一个值。所以，在上面的例子中，如果你想要将num1的默认值设置为9，那么你可以按照以下代码所示的方式做：

functionfoo(num1) { if(num1 === undefined) { num1 = 9; } console.log(num1);}foo();

ECMA 6引入了函数的默认参数。使用ECMA 2015的默认参数功能，你将不再需要检查未定义的参数值。现在，你可以将9设置为参数本身的默认值。你可以重写上述

想读更多 ->

用 Python 实现一个大数据搜索引擎

原标题：用 Python 实现一个大数据搜索引擎

搜索是大数据领域里常见的需求。Splunk和ELK分别是该领域在非开源和开源领域里的领导者。本文利用很少的Python代码实现了一个基本的数据搜索功能，试图让大家理解大数据搜索的基本原理。

布隆过滤器 （Bloom Filter）

第一步我们先要实现一个布隆过滤器。

布隆过滤器是大数据领域的一个常见算法，它的目的是过滤掉那些不是目标的元素。也就是说如果一个要搜索的词并不存在与我的数据中，那么它可以以很快的速度返回目标不存在。

让我们看看以下布隆过滤器的代码：

classBloomfilter(object):

"""

A Bloom filter is a probabilistic data-structure that trades space for accuracy

when determining if a value is in a set. It can tell you if a value was possibly

想读更多 ->

SEO视角下DIV+CSS网页布局优化研究

原标题：SEO视角下DIV+CSS网页布局优化研究

网站设计者都希望用户在搜索引擎上检索某一内容的相关网站时，自己的网站能够出现在搜索引擎结果页面比较靠前的位置。随着搜索引擎优化技术的不断发展，这种成本低而回报高的搜索引擎营销方式越来越受到网站设计者的喜爱和拥护。而DIV+CSS作为主流网页布局方式，不仅要考虑网站的美观性，还要考虑提高搜索引擎程序的爬行效率，使得搜索引擎能够抓取大量的关键信息。因此高效合理的网页布局在搜索引擎对网站评价排序时就显得尤为重要。

1 SEO介绍

1.1 SEO及工作原理

SEO是Search Engine Optimization的缩写，中文为搜索引擎优化。搜索引擎优化的主要任务之一就是提高网站的搜索引擎友好性，其每个环节都会与搜索引擎的工作流程存在必然的联系，研究SEO实际上就是对搜索引擎工作过程进行逆向推理。

SEO的工作原理主要基于页面收录、页面分析、页面排序及关键字查询四部分。搜索引擎首先通过Spider(蜘蛛程序)自动访问互联网，然后沿着网页中的超链接爬到其他网页上，并把爬行中经过的网页信息收集起来;其次通过对原始页面的索引快速

想读更多 ->

JavaScript 性能优化的小知识总结

原标题：JavaScript 性能优化的小知识总结

作者：静逸

出处：http://www.cnblogs.com/liyunhua

链接：http://www.cnblogs.com/liyunhua/p/4529086.html

一直在学习 java，也有看过《犀利开发 Jquery 内核详解与实践》，对这本书的评价只有两个字犀利，可能是对 java 理解的还不够透彻异或是自己太笨，更多的是自己不擅于思考懒得思考以至于里面说的一些精髓都没有太深入的理解。

鉴于想让自己有一个提升，进不了一个更加广阔的天地，总得找一个属于自己的居所好好生存，所以平时会有意无意的去积累一些使用 jQuerry 的常用知识，特别是对于性能要求这一块，总是会想是不是有更好的方式来实现。

想读更多 ->

一道题看清动态规划的前世今生 ( 二 )

原标题：一道题看清动态规划的前世今生 ( 二 )

来源：StormMa，

blog.stormma.me/2017/11/16/一道题看清动态规划的前世今生-二/

前言

接着上一篇一道题看清动态规划的前世今生(一)，这次我们会以同样的思路去分析经典的01整数背包问题，加深对动态规划的印象。

经典01背包问题

给定n种物品和一个背包。物品i的重量是w[i],其价值位v[i] ，背包的容量为W。问应该如何选择装入背包的物品，使得转入背包的物品的总价值为最大？

暴搜出奇迹

继续我们上一篇的套路来一步一步逼近我们要的动态规划的解法。

假设我们完成了暴搜的函数，我们只需返回结果！

java版

private int search(int idx, int[] w, int[] v, int n, int s, int W) {

...

}

/**

* @param w 物品重量

想读更多 ->

如何找到最优学习率？

原标题：如何找到最优学习率？

雷锋网按：本文作者Sherlock，本文首发于作者的知乎专栏《深度炼丹》， 雷锋网获其授权发布。

经过了大量炼丹的同学都知道，超参数是一个非常玄乎的东西，比如batch size，学习率等，这些东西的设定并没有什么规律和原因，论文中设定的超参数一般都是靠经验决定的。但是超参数往往又特别重要，比如学习率，如果设置了一个太大的学习率，那么loss就爆了，设置的学习率太小，需要等待的时间就特别长，那么我们是否有一个科学的办法来决定我们的初始学习率呢？

在这篇文章中，我会讲一种非常简单却有效的方法来确定合理的初始学习率。

学习率的重要性

目前深度学习使用的都是非常简单的一阶收敛算法，梯度下降法，不管有多少自适应的优化算法，本质上都是对梯度下降法的各种变形，所以初始学习率对深层网络的收敛起着决定性的作用，下面就是梯度下降法的公式

原标题：成为合格程序员的8种途径【重庆IT培训】

是时候开始认真考虑一下如何升级你的开发技术了。跟着重庆IT培训的老师来认真地学习一下吧。

给自己设定一个提高开发技术的目标很容易，但是“想成为一名伟大的程序员”却不是一个容易实现的目标。首先，说“我想变得更好”，是建立在你认识到“更好”的样子基础之上。另外，有太多的人追求进步而不知道如何去实现。

因此，让我分享八个可实际操作的指导方针，你可以把它们作为提高编程技能的流程图。这些智慧都是伴随着计算机35年的发展沉淀下来的。

1.时刻提醒自己：学习

学习某件事的第一步是承认你不知道。这听起来很正常，但经验丰富的程序员还记得要真正让自己承认这一点需要花多长时间。很多计算机科学专业的学生毕业的时候，都有一种很傲慢的态度，就是“我知

想读更多 ->