こんな方法もある

  $arr = array();
  $arr += array("0" => "apple");
  $arr += array("1" => "orange");

Reference

  PHP-users ML - [PHP-users 13781] Re: array_pushで連想配列
  http://ns1.php.gr.jp/pipermail/php-users/2003-March/014313.html