webpackでhtmlを出力する方法

webpackをつかって、html,css,jsを複数出力したいのですが、
html-loaderを使ってhtmlを出力すると、下記のコメントのようなものが出力されてしまいます。

/******/ (function(modules) { // webpackBootstrap
/******/ 	// The module cache
/******/ 	var installedModules = {};
/******/
/******/ 	// The require function
/******/ 	function __webpack_require__(moduleId) {
/******/
/******/ 		// Check if module is in cache
/******/ 		if(installedModules[moduleId]) {
/******/ 			return installedModules[moduleId].exports;
/******/ 		}
/******/ 		// Create a new module (and put it into the cache)
/******/ 		var module = installedModules[moduleId] = {
/******/ 			i: moduleId,
/******/ 			l: false,
/******/ 			exports: {}
.
.
.

html-loaderの代わりに、
file-loaderを使ってみたのですが、795dx8ew..htmlのような名称で別ファイルとして出力されてしまいました。
圧縮のあるなしに関わらず、下記のような形式でそのままindex.htmlとして出力したいのですが、どのようにすればできるのでしょうか？

<!DOCTYPE html>
<html lang="en">
<head>
  <meta charset="UTF-8">
  <title>Document</title>
</head>
<body>
  <div>hogehoge</div>
  <div>hogehoge</div>
  <div>hogehoge</div>
</body>
</html>

下記がwebpack.config.jsになります。

require('babel-polyfill');
var path = require('path');
var webpack = require('webpack');
var ExtractTextPlugin = require('extract-text-webpack-plugin');
var HtmlWebpackPlugin = require('html-webpack-plugin');
var autoprefixer = require('autoprefixer');
var path = require('path');
var glob = require('glob');


const all_entries = {}; // 全出力ファイルリスト


// html
const html_BasePath = path.resolve(__dirname, '../src/');
const html_targets = glob.sync(`${html_BasePath}/**/index.html`);
const html_entries = {};
html_targets.forEach(value => {
  const html_re = new RegExp(`${html_BasePath}/`);
  const html_key = value.replace(html_re, '');
  // html_entries[html_key] = value;
  all_entries[html_key] = value;
});
console.log(html_entries);


// js
const js_BasePath = path.resolve(__dirname, '../src/');
const js_targets = glob.sync(`${js_BasePath}/**/index.js`);
// const js_entries = {};
js_targets.forEach(value => {
  const js_re = new RegExp(`${js_BasePath}/`);
  const js_key = value.replace(js_re, '');
  // js_entries[js_key] = value;
  all_entries[js_key] = value;
});

// css
const css_BasePath = path.resolve(__dirname, '../src/');
const css_targets = glob.sync(`${css_BasePath}/**/index.scss`);
// const css_entries = {};
css_targets.forEach(value => {
  const css_re = new RegExp(`${css_BasePath}/`);
  const css_key = value.replace(css_re, '');
  const scss_extension = new RegExp('.scss');
  const css_extension = css_key.replace(scss_extension, '.css');
  all_entries[css_extension] = value;
});



module.exports = [{
  devtool: 'inline-source-map',
  context: __dirname,
  entry: all_entries,
  output: {
    path:  path.join(__dirname, '../dist'),
    filename: '[name]'
  },
  devServer: {
    contentBase: 'dist',
    port: 3333
  },
  module: {
    rules: [
      {
        test: /.html$/,
        use: 'html-loader' <== ここをfile-loaderにすると別ファイルになる
      },
      {
        test: /.js$/,
        exclude: /node_modules/,
        use: 'babel-loader'
      },
      {
        test: /.(scss|css)$/,
        use: ExtractTextPlugin.extract({
          fallback: 'style-loader',
          use: [
            'css-loader',
            'sass-loader'
          ]
        })
      },
      {
        test: /.(jpg|png|gif)$/,
        exclude: /node_modules/,
        use: [
          'file-loader',
          'url-loader'
        ]
      }
    ]
  },
  resolve: {
    extensions: ['*', '.html', '.js', '.css', '.scss']
  },
  plugins: [
    new webpack.optimize.UglifyJsPlugin(),
    new ExtractTextPlugin({
      filename: '[name]',
      ignoreOrder: true,
      allChunks: true
    }),
    new webpack.LoaderOptionsPlugin({
      options: {
        postcss: [autoprefixer({ browsers: ['> 1%'] })],
      }
    })
  ]
}]