drivers/net/netxen/netxen_nic_init.c

   1 /*
   2  * Copyright (C) 2003 - 2006 NetXen, Inc.
   3  * All rights reserved.
   4  *
   5  * This program is free software; you can redistribute it and/or
   6  * modify it under the terms of the GNU General Public License
   7  * as published by the Free Software Foundation; either version 2
   8  * of the License, or (at your option) any later version.
   9  *
  10  * This program is distributed in the hope that it will be useful, but
  11  * WITHOUT ANY WARRANTY; without even the implied warranty of
  12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  13  * GNU General Public License for more details.
  14  *
  15  * You should have received a copy of the GNU General Public License
  16  * along with this program; if not, write to the Free Software
  17  * Foundation, Inc., 59 Temple Place - Suite 330, Boston,
  18  * MA  02111-1307, USA.
  19  *
  20  * The full GNU General Public License is included in this distribution
  21  * in the file called LICENSE.
  22  *
  23  * Contact Information:
  24  *    info@netxen.com
  25  * NetXen,
  26  * 3965 Freedom Circle, Fourth floor,
  27  * Santa Clara, CA 95054
  28  *
  29  *
  30  * Source file for NIC routines to initialize the Phantom Hardware
  31  *
  32  */
  33
  34 #include <linux/netdevice.h>
  35 #include <linux/delay.h>
  36 #include "netxen_nic.h"
  37 #include "netxen_nic_hw.h"
  38 #include "netxen_nic_phan_reg.h"
  39
  40 struct crb_addr_pair {
  41         long addr;
  42         long data;
  43 };
  44
  45 #define NETXEN_MAX_CRB_XFORM 60
  46 static unsigned int crb_addr_xform[NETXEN_MAX_CRB_XFORM];
  47 #define NETXEN_ADDR_ERROR ((unsigned long ) 0xffffffff )
  48
  49 #define crb_addr_transform(name) \
  50         crb_addr_xform[NETXEN_HW_PX_MAP_CRB_##name] = \
  51         NETXEN_HW_CRB_HUB_AGT_ADR_##name << 20
  52
  53 #define NETXEN_NIC_XDMA_RESET 0x8000ff
  54
  55 static inline void
  56 netxen_nic_locked_write_reg(struct netxen_adapter *adapter,
  57                             unsigned long off, int *data)
  58 {
  59         void __iomem *addr = pci_base_offset(adapter, off);
  60         writel(*data, addr);
  61 }
  62
  63 static void crb_addr_transform_setup(void)
  64 {
  65         crb_addr_transform(XDMA);
  66         crb_addr_transform(TIMR);
  67         crb_addr_transform(SRE);
  68         crb_addr_transform(SQN3);
  69         crb_addr_transform(SQN2);
  70         crb_addr_transform(SQN1);
  71         crb_addr_transform(SQN0);
  72         crb_addr_transform(SQS3);
  73         crb_addr_transform(SQS2);
  74         crb_addr_transform(SQS1);
  75         crb_addr_transform(SQS0);
  76         crb_addr_transform(RPMX7);
  77         crb_addr_transform(RPMX6);
  78         crb_addr_transform(RPMX5);
  79         crb_addr_transform(RPMX4);
  80         crb_addr_transform(RPMX3);
  81         crb_addr_transform(RPMX2);
  82         crb_addr_transform(RPMX1);
  83         crb_addr_transform(RPMX0);
  84         crb_addr_transform(ROMUSB);
  85         crb_addr_transform(SN);
  86         crb_addr_transform(QMN);
  87         crb_addr_transform(QMS);
  88         crb_addr_transform(PGNI);
  89         crb_addr_transform(PGND);
  90         crb_addr_transform(PGN3);
  91         crb_addr_transform(PGN2);
  92         crb_addr_transform(PGN1);
  93         crb_addr_transform(PGN0);
  94         crb_addr_transform(PGSI);
  95         crb_addr_transform(PGSD);
  96         crb_addr_transform(PGS3);
  97         crb_addr_transform(PGS2);
  98         crb_addr_transform(PGS1);
  99         crb_addr_transform(PGS0);
 100         crb_addr_transform(PS);
 101         crb_addr_transform(PH);
 102         crb_addr_transform(NIU);
 103         crb_addr_transform(I2Q);
 104         crb_addr_transform(EG);
 105         crb_addr_transform(MN);
 106         crb_addr_transform(MS);
 107         crb_addr_transform(CAS2);
 108         crb_addr_transform(CAS1);
 109         crb_addr_transform(CAS0);
 110         crb_addr_transform(CAM);
 111         crb_addr_transform(C2C1);
 112         crb_addr_transform(C2C0);
 113         crb_addr_transform(SMB);
 114 }
 115
 116 int netxen_init_firmware(struct netxen_adapter *adapter)
 117 {
 118         u32 state = 0, loops = 0, err = 0;
 119
 120         /* Window 1 call */
 121         state = readl(NETXEN_CRB_NORMALIZE(adapter, CRB_CMDPEG_STATE));
 122
 123         if (state == PHAN_INITIALIZE_ACK)
 124                 return 0;
 125
 126         while (state != PHAN_INITIALIZE_COMPLETE && loops < 2000) {
 127                 udelay(100);
 128                 /* Window 1 call */
 129                 state = readl(NETXEN_CRB_NORMALIZE(adapter, CRB_CMDPEG_STATE));
 130
 131                 loops++;
 132         }
 133         if (loops >= 2000) {
 134                 printk(KERN_ERR "Cmd Peg initialization not complete:%x.\n",
 135                        state);
 136                 err = -EIO;
 137                 return err;
 138         }
 139         /* Window 1 call */
 140         writel(MPORT_SINGLE_FUNCTION_MODE,
 141                NETXEN_CRB_NORMALIZE(adapter, CRB_MPORT_MODE));
 142         writel(PHAN_INITIALIZE_ACK,
 143                NETXEN_CRB_NORMALIZE(adapter, CRB_CMDPEG_STATE));
 144
 145         return err;
 146 }
 147
 148 #define NETXEN_ADDR_LIMIT 0xffffffffULL
 149
 150 void *netxen_alloc(struct pci_dev *pdev, size_t sz, dma_addr_t * ptr,
 151                    struct pci_dev **used_dev)
 152 {
 153         void *addr;
 154
 155         addr = pci_alloc_consistent(pdev, sz, ptr);
 156         if ((unsigned long long)(*ptr) < NETXEN_ADDR_LIMIT) {
 157                 *used_dev = pdev;
 158                 return addr;
 159         }
 160         pci_free_consistent(pdev, sz, addr, *ptr);
 161         addr = pci_alloc_consistent(NULL, sz, ptr);
 162         *used_dev = NULL;
 163         return addr;
 164 }
 165
 166 void netxen_initialize_adapter_sw(struct netxen_adapter *adapter)
 167 {
 168         int ctxid, ring;
 169         u32 i;
 170         u32 num_rx_bufs = 0;
 171         struct netxen_rcv_desc_ctx *rcv_desc;
 172
 173         DPRINTK(INFO, "initializing some queues: %p\n", adapter);
 174         for (ctxid = 0; ctxid < MAX_RCV_CTX; ++ctxid) {
 175                 for (ring = 0; ring < NUM_RCV_DESC_RINGS; ring++) {
 176                         struct netxen_rx_buffer *rx_buf;
 177                         rcv_desc = &adapter->recv_ctx[ctxid].rcv_desc[ring];
 178                         rcv_desc->rcv_free = rcv_desc->max_rx_desc_count;
 179                         rcv_desc->begin_alloc = 0;
 180                         rx_buf = rcv_desc->rx_buf_arr;
 181                         num_rx_bufs = rcv_desc->max_rx_desc_count;
 182                         /*
 183                          * Now go through all of them, set reference handles
 184                          * and put them in the queues.
 185                          */
 186                         for (i = 0; i < num_rx_bufs; i++) {
 187                                 rx_buf->ref_handle = i;
 188                                 rx_buf->state = NETXEN_BUFFER_FREE;
 189                                 DPRINTK(INFO, "Rx buf:ctx%d i(%d) rx_buf:"
 190                                         "%p\n", ctxid, i, rx_buf);
 191                                 rx_buf++;
 192                         }
 193                 }
 194         }
 195 }
 196
 197 void netxen_initialize_adapter_hw(struct netxen_adapter *adapter)
 198 {
 199         int ports = 0;
 200         struct netxen_board_info *board_info = &(adapter->ahw.boardcfg);
 201
 202         if (netxen_nic_get_board_info(adapter) != 0)
 203                 printk("%s: Error getting board config info.\n",
 204                        netxen_nic_driver_name);
 205         get_brd_port_by_type(board_info->board_type, &ports);
 206         if (ports == 0)
 207                 printk(KERN_ERR "%s: Unknown board type\n",
 208                        netxen_nic_driver_name);
 209         adapter->ahw.max_ports = ports;
 210 }
 211
 212 void netxen_initialize_adapter_ops(struct netxen_adapter *adapter)
 213 {
 214         switch (adapter->ahw.board_type) {
 215         case NETXEN_NIC_GBE:
 216                 adapter->enable_phy_interrupts =
 217                     netxen_niu_gbe_enable_phy_interrupts;
 218                 adapter->disable_phy_interrupts =
 219                     netxen_niu_gbe_disable_phy_interrupts;
 220                 adapter->handle_phy_intr = netxen_nic_gbe_handle_phy_intr;
 221                 adapter->macaddr_set = netxen_niu_macaddr_set;
 222                 adapter->set_mtu = netxen_nic_set_mtu_gb;
 223                 adapter->set_promisc = netxen_niu_set_promiscuous_mode;
 224                 adapter->unset_promisc = netxen_niu_set_promiscuous_mode;
 225                 adapter->phy_read = netxen_niu_gbe_phy_read;
 226                 adapter->phy_write = netxen_niu_gbe_phy_write;
 227                 adapter->init_port = netxen_niu_gbe_init_port;
 228                 adapter->init_niu = netxen_nic_init_niu_gb;
 229                 adapter->stop_port = netxen_niu_disable_gbe_port;
 230                 break;
 231
 232         case NETXEN_NIC_XGBE:
 233                 adapter->enable_phy_interrupts =
 234                     netxen_niu_xgbe_enable_phy_interrupts;
 235                 adapter->disable_phy_interrupts =
 236                     netxen_niu_xgbe_disable_phy_interrupts;
 237                 adapter->handle_phy_intr = netxen_nic_xgbe_handle_phy_intr;
 238                 adapter->macaddr_set = netxen_niu_xg_macaddr_set;
 239                 adapter->set_mtu = netxen_nic_set_mtu_xgb;
 240                 adapter->init_port = netxen_niu_xg_init_port;
 241                 adapter->set_promisc = netxen_niu_xg_set_promiscuous_mode;
 242                 adapter->unset_promisc = netxen_niu_xg_set_promiscuous_mode;
 243                 adapter->stop_port = netxen_niu_disable_xg_port;
 244                 break;
 245
 246         default:
 247                 break;
 248         }
 249 }
 250
 251 /*
 252  * netxen_decode_crb_addr(0 - utility to translate from internal Phantom CRB
 253  * address to external PCI CRB address.
 254  */
 255 unsigned long netxen_decode_crb_addr(unsigned long addr)
 256 {
 257         int i;
 258         unsigned long base_addr, offset, pci_base;
 259
 260         crb_addr_transform_setup();
 261
 262         pci_base = NETXEN_ADDR_ERROR;
 263         base_addr = addr & 0xfff00000;
 264         offset = addr & 0x000fffff;
 265
 266         for (i = 0; i < NETXEN_MAX_CRB_XFORM; i++) {
 267                 if (crb_addr_xform[i] == base_addr) {
 268                         pci_base = i << 20;
 269                         break;
 270                 }
 271         }
 272         if (pci_base == NETXEN_ADDR_ERROR)
 273                 return pci_base;
 274         else
 275                 return (pci_base + offset);
 276 }
 277
 278 static long rom_max_timeout = 10000;
 279 static long rom_lock_timeout = 1000000;
 280 static long rom_write_timeout = 700;
 281
 282 static inline int rom_lock(struct netxen_adapter *adapter)
 283 {
 284         int iter;
 285         u32 done = 0;
 286         int timeout = 0;
 287
 288         while (!done) {
 289                 /* acquire semaphore2 from PCI HW block */
 290                 netxen_nic_read_w0(adapter, NETXEN_PCIE_REG(PCIE_SEM2_LOCK),
 291                                    &done);
 292                 if (done == 1)
 293                         break;
 294                 if (timeout >= rom_lock_timeout)
 295                         return -EIO;
 296
 297                 timeout++;
 298                 /*
 299                  * Yield CPU
 300                  */
 301                 if (!in_atomic())
 302                         schedule();
 303                 else {
 304                         for (iter = 0; iter < 20; iter++)
 305                                 cpu_relax();    /*This a nop instr on i386 */
 306                 }
 307         }
 308         netxen_nic_reg_write(adapter, NETXEN_ROM_LOCK_ID, ROM_LOCK_DRIVER);
 309         return 0;
 310 }
 311
 312 int netxen_wait_rom_done(struct netxen_adapter *adapter)
 313 {
 314         long timeout = 0;
 315         long done = 0;
 316
 317         while (done == 0) {
 318                 done = netxen_nic_reg_read(adapter, NETXEN_ROMUSB_GLB_STATUS);
 319                 done &= 2;
 320                 timeout++;
 321                 if (timeout >= rom_max_timeout) {
 322                         printk("Timeout reached  waiting for rom done");
 323                         return -EIO;
 324                 }
 325         }
 326         return 0;
 327 }
 328
 329 static inline int netxen_rom_wren(struct netxen_adapter *adapter)
 330 {
 331         /* Set write enable latch in ROM status register */
 332         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
 333         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE,
 334                              M25P_INSTR_WREN);
 335         if (netxen_wait_rom_done(adapter)) {
 336                 return -1;
 337         }
 338         return 0;
 339 }
 340
 341 static inline unsigned int netxen_rdcrbreg(struct netxen_adapter *adapter,
 342                                            unsigned int addr)
 343 {
 344         unsigned int data = 0xdeaddead;
 345         data = netxen_nic_reg_read(adapter, addr);
 346         return data;
 347 }
 348
 349 static inline int netxen_do_rom_rdsr(struct netxen_adapter *adapter)
 350 {
 351         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE,
 352                              M25P_INSTR_RDSR);
 353         if (netxen_wait_rom_done(adapter)) {
 354                 return -1;
 355         }
 356         return netxen_rdcrbreg(adapter, NETXEN_ROMUSB_ROM_RDATA);
 357 }
 358
 359 static inline void netxen_rom_unlock(struct netxen_adapter *adapter)
 360 {
 361         u32 val;
 362
 363         /* release semaphore2 */
 364         netxen_nic_read_w0(adapter, NETXEN_PCIE_REG(PCIE_SEM2_UNLOCK), &val);
 365
 366 }
 367
 368 int netxen_rom_wip_poll(struct netxen_adapter *adapter)
 369 {
 370         long timeout = 0;
 371         long wip = 1;
 372         int val;
 373         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
 374         while (wip != 0) {
 375                 val = netxen_do_rom_rdsr(adapter);
 376                 wip = val & 1;
 377                 timeout++;
 378                 if (timeout > rom_max_timeout) {
 379                         return -1;
 380                 }
 381         }
 382         return 0;
 383 }
 384
 385 static inline int do_rom_fast_write(struct netxen_adapter *adapter, int addr,
 386                                     int data)
 387 {
 388         if (netxen_rom_wren(adapter)) {
 389                 return -1;
 390         }
 391         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_WDATA, data);
 392         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ADDRESS, addr);
 393         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 3);
 394         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE,
 395                              M25P_INSTR_PP);
 396         if (netxen_wait_rom_done(adapter)) {
 397                 netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
 398                 return -1;
 399         }
 400
 401         return netxen_rom_wip_poll(adapter);
 402 }
 403
 404 static inline int
 405 do_rom_fast_read(struct netxen_adapter *adapter, int addr, int *valp)
 406 {
 407         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ADDRESS, addr);
 408         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 3);
 409         udelay(70);             /* prevent bursting on CRB */
 410         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_DUMMY_BYTE_CNT, 0);
 411         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE, 0xb);
 412         if (netxen_wait_rom_done(adapter)) {
 413                 printk("Error waiting for rom done\n");
 414                 return -EIO;
 415         }
 416         /* reset abyte_cnt and dummy_byte_cnt */
 417         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
 418         udelay(70);             /* prevent bursting on CRB */
 419         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_DUMMY_BYTE_CNT, 0);
 420
 421         *valp = netxen_nic_reg_read(adapter, NETXEN_ROMUSB_ROM_RDATA);
 422         return 0;
 423 }
 424
 425 static inline int
 426 do_rom_fast_read_words(struct netxen_adapter *adapter, int addr,
 427                         u8 *bytes, size_t size)
 428 {
 429         int addridx;
 430         int ret = 0;
 431
 432         for (addridx = addr; addridx < (addr + size); addridx += 4) {
 433                 ret = do_rom_fast_read(adapter, addridx, (int *)bytes);
 434                 if (ret != 0)
 435                         break;
 436                 bytes += 4;
 437         }
 438
 439         return ret;
 440 }
 441
 442 int
 443 netxen_rom_fast_read_words(struct netxen_adapter *adapter, int addr,
 444                                 u8 *bytes, size_t size)
 445 {
 446         int ret;
 447
 448         ret = rom_lock(adapter);
 449         if (ret < 0)
 450                 return ret;
 451
 452         ret = do_rom_fast_read_words(adapter, addr, bytes, size);
 453
 454         netxen_rom_unlock(adapter);
 455         return ret;
 456 }
 457
 458 int netxen_rom_fast_read(struct netxen_adapter *adapter, int addr, int *valp)
 459 {
 460         int ret;
 461
 462         if (rom_lock(adapter) != 0)
 463                 return -EIO;
 464
 465         ret = do_rom_fast_read(adapter, addr, valp);
 466         netxen_rom_unlock(adapter);
 467         return ret;
 468 }
 469
 470 int netxen_rom_fast_write(struct netxen_adapter *adapter, int addr, int data)
 471 {
 472         int ret = 0;
 473
 474         if (rom_lock(adapter) != 0) {
 475                 return -1;
 476         }
 477         ret = do_rom_fast_write(adapter, addr, data);
 478         netxen_rom_unlock(adapter);
 479         return ret;
 480 }
 481
 482 static inline int do_rom_fast_write_words(struct netxen_adapter *adapter,
 483                                                 int addr, u8 *bytes, size_t size)
 484 {
 485         int addridx = addr;
 486         int ret = 0;
 487
 488         while (addridx < (addr + size)) {
 489                 int last_attempt = 0;
 490                 int timeout = 0;
 491                 int data;
 492
 493                 data = *(u32*)bytes;
 494
 495                 ret = do_rom_fast_write(adapter, addridx, data);
 496                 if (ret < 0)
 497                         return ret;
 498
 499                 while(1) {
 500                         int data1;
 501
 502                         ret = do_rom_fast_read(adapter, addridx, &data1);
 503                         if (ret < 0)
 504                                 return ret;
 505
 506                         if (data1 == data)
 507                                 break;
 508
 509                         if (timeout++ >= rom_write_timeout) {
 510                                 if (last_attempt++ < 4) {
 511                                         ret = do_rom_fast_write(adapter,
 512                                                                 addridx, data);
 513                                         if (ret < 0)
 514                                                 return ret;
 515                                 }
 516                                 else {
 517                                         printk(KERN_INFO "Data write did not "
 518                                            "succeed at address 0x%x\n", addridx);
 519                                         break;
 520                                 }
 521                         }
 522                 }
 523
 524                 bytes += 4;
 525                 addridx += 4;
 526         }
 527
 528         return ret;
 529 }
 530
 531 int netxen_rom_fast_write_words(struct netxen_adapter *adapter, int addr,
 532                                         u8 *bytes, size_t size)
 533 {
 534         int ret = 0;
 535
 536         ret = rom_lock(adapter);
 537         if (ret < 0)
 538                 return ret;
 539
 540         ret = do_rom_fast_write_words(adapter, addr, bytes, size);
 541         netxen_rom_unlock(adapter);
 542
 543         return ret;
 544 }
 545
 546 int netxen_rom_wrsr(struct netxen_adapter *adapter, int data)
 547 {
 548         int ret;
 549
 550         ret = netxen_rom_wren(adapter);
 551         if (ret < 0)
 552                 return ret;
 553
 554         netxen_crb_writelit_adapter(adapter, NETXEN_ROMUSB_ROM_WDATA, data);
 555         netxen_crb_writelit_adapter(adapter,
 556                                         NETXEN_ROMUSB_ROM_INSTR_OPCODE, 0x1);
 557
 558         ret = netxen_wait_rom_done(adapter);
 559         if (ret < 0)
 560                 return ret;
 561
 562         return netxen_rom_wip_poll(adapter);
 563 }
 564
 565 int netxen_rom_rdsr(struct netxen_adapter *adapter)
 566 {
 567         int ret;
 568
 569         ret = rom_lock(adapter);
 570         if (ret < 0)
 571                 return ret;
 572
 573         ret = netxen_do_rom_rdsr(adapter);
 574         netxen_rom_unlock(adapter);
 575         return ret;
 576 }
 577
 578 int netxen_backup_crbinit(struct netxen_adapter *adapter)
 579 {
 580         int ret = FLASH_SUCCESS;
 581         int val;
 582         char *buffer = kmalloc(FLASH_SECTOR_SIZE, GFP_KERNEL);
 583
 584         if (!buffer)
 585                 return -ENOMEM;
 586         /* unlock sector 63 */
 587         val = netxen_rom_rdsr(adapter);
 588         val = val & 0xe3;
 589         ret = netxen_rom_wrsr(adapter, val);
 590         if (ret != FLASH_SUCCESS)
 591                 goto out_kfree;
 592
 593         ret = netxen_rom_wip_poll(adapter);
 594         if (ret != FLASH_SUCCESS)
 595                 goto out_kfree;
 596
 597         /* copy  sector 0 to sector 63 */
 598         ret = netxen_rom_fast_read_words(adapter, CRBINIT_START,
 599                                                 buffer, FLASH_SECTOR_SIZE);
 600         if (ret != FLASH_SUCCESS)
 601                 goto out_kfree;
 602
 603         ret = netxen_rom_fast_write_words(adapter, FIXED_START,
 604                                                 buffer, FLASH_SECTOR_SIZE);
 605         if (ret != FLASH_SUCCESS)
 606                 goto out_kfree;
 607
 608         /* lock sector 63 */
 609         val = netxen_rom_rdsr(adapter);
 610         if (!(val & 0x8)) {
 611                 val |= (0x1 << 2);
 612                 /* lock sector 63 */
 613                 if (netxen_rom_wrsr(adapter, val) == 0) {
 614                         ret = netxen_rom_wip_poll(adapter);
 615                         if (ret != FLASH_SUCCESS)
 616                                 goto out_kfree;
 617
 618                         /* lock SR writes */
 619                         ret = netxen_rom_wip_poll(adapter);
 620                         if (ret != FLASH_SUCCESS)
 621                                 goto out_kfree;
 622                 }
 623         }
 624
 625 out_kfree:
 626         kfree(buffer);
 627         return ret;
 628 }
 629
 630 int netxen_do_rom_se(struct netxen_adapter *adapter, int addr)
 631 {
 632         netxen_rom_wren(adapter);
 633         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ADDRESS, addr);
 634         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 3);
 635         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE,
 636                              M25P_INSTR_SE);
 637         if (netxen_wait_rom_done(adapter)) {
 638                 netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
 639                 return -1;
 640         }
 641         return netxen_rom_wip_poll(adapter);
 642 }
 643
 644 void check_erased_flash(struct netxen_adapter *adapter, int addr)
 645 {
 646         int i;
 647         int val;
 648         int count = 0, erased_errors = 0;
 649         int range;
 650
 651         range = (addr == USER_START) ? FIXED_START : addr + FLASH_SECTOR_SIZE;
 652
 653         for (i = addr; i < range; i += 4) {
 654                 netxen_rom_fast_read(adapter, i, &val);
 655                 if (val != 0xffffffff)
 656                         erased_errors++;
 657                 count++;
 658         }
 659
 660         if (erased_errors)
 661                 printk(KERN_INFO "0x%x out of 0x%x words fail to be erased "
 662                         "for sector address: %x\n", erased_errors, count, addr);
 663 }
 664
 665 int netxen_rom_se(struct netxen_adapter *adapter, int addr)
 666 {
 667         int ret = 0;
 668         if (rom_lock(adapter) != 0) {
 669                 return -1;
 670         }
 671         ret = netxen_do_rom_se(adapter, addr);
 672         netxen_rom_unlock(adapter);
 673         msleep(30);
 674         check_erased_flash(adapter, addr);
 675
 676         return ret;
 677 }
 678
 679 int
 680 netxen_flash_erase_sections(struct netxen_adapter *adapter, int start, int end)
 681 {
 682         int ret = FLASH_SUCCESS;
 683         int i;
 684
 685         for (i = start; i < end; i++) {
 686                 ret = netxen_rom_se(adapter, i * FLASH_SECTOR_SIZE);
 687                 if (ret)
 688                         break;
 689                 ret = netxen_rom_wip_poll(adapter);
 690                 if (ret < 0)
 691                         return ret;
 692         }
 693
 694         return ret;
 695 }
 696
 697 int
 698 netxen_flash_erase_secondary(struct netxen_adapter *adapter)
 699 {
 700         int ret = FLASH_SUCCESS;
 701         int start, end;
 702
 703         start = SECONDARY_START / FLASH_SECTOR_SIZE;
 704         end   = USER_START / FLASH_SECTOR_SIZE;
 705         ret = netxen_flash_erase_sections(adapter, start, end);
 706
 707         return ret;
 708 }
 709
 710 int
 711 netxen_flash_erase_primary(struct netxen_adapter *adapter)
 712 {
 713         int ret = FLASH_SUCCESS;
 714         int start, end;
 715
 716         start = PRIMARY_START / FLASH_SECTOR_SIZE;
 717         end   = SECONDARY_START / FLASH_SECTOR_SIZE;
 718         ret = netxen_flash_erase_sections(adapter, start, end);
 719
 720         return ret;
 721 }
 722
 723 void netxen_halt_pegs(struct netxen_adapter *adapter)
 724 {
 725          netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_0 + 0x3c, 1);
 726          netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_1 + 0x3c, 1);
 727          netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_2 + 0x3c, 1);
 728          netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_3 + 0x3c, 1);
 729 }
 730
 731 int netxen_flash_unlock(struct netxen_adapter *adapter)
 732 {
 733         int ret = 0;
 734
 735         ret = netxen_rom_wrsr(adapter, 0);
 736         if (ret < 0)
 737                 return ret;
 738
 739         ret = netxen_rom_wren(adapter);
 740         if (ret < 0)
 741                 return ret;
 742
 743         return ret;
 744 }
 745
 746 #define NETXEN_BOARDTYPE                0x4008
 747 #define NETXEN_BOARDNUM                 0x400c
 748 #define NETXEN_CHIPNUM                  0x4010
 749 #define NETXEN_ROMBUS_RESET             0xFFFFFFFF
 750 #define NETXEN_ROM_FIRST_BARRIER        0x800000000ULL
 751 #define NETXEN_ROM_FOUND_INIT           0x400
 752
 753 int netxen_pinit_from_rom(struct netxen_adapter *adapter, int verbose)
 754 {
 755         int addr, val, status;
 756         int n, i;
 757         int init_delay = 0;
 758         struct crb_addr_pair *buf;
 759         unsigned long off;
 760
 761         /* resetall */
 762         status = netxen_nic_get_board_info(adapter);
 763         if (status)
 764                 printk("%s: netxen_pinit_from_rom: Error getting board info\n",
 765                        netxen_nic_driver_name);
 766
 767         netxen_crb_writelit_adapter(adapter, NETXEN_ROMUSB_GLB_SW_RESET,
 768                                     NETXEN_ROMBUS_RESET);
 769
 770         if (verbose) {
 771                 int val;
 772                 if (netxen_rom_fast_read(adapter, NETXEN_BOARDTYPE, &val) == 0)
 773                         printk("P2 ROM board type: 0x%08x\n", val);
 774                 else
 775                         printk("Could not read board type\n");
 776                 if (netxen_rom_fast_read(adapter, NETXEN_BOARDNUM, &val) == 0)
 777                         printk("P2 ROM board  num: 0x%08x\n", val);
 778                 else
 779                         printk("Could not read board number\n");
 780                 if (netxen_rom_fast_read(adapter, NETXEN_CHIPNUM, &val) == 0)
 781                         printk("P2 ROM chip   num: 0x%08x\n", val);
 782                 else
 783                         printk("Could not read chip number\n");
 784         }
 785
 786         if (netxen_rom_fast_read(adapter, 0, &n) == 0
 787             && (n & NETXEN_ROM_FIRST_BARRIER)) {
 788                 n &= ~NETXEN_ROM_ROUNDUP;
 789                 if (n < NETXEN_ROM_FOUND_INIT) {
 790                         if (verbose)
 791                                 printk("%s: %d CRB init values found"
 792                                        " in ROM.\n", netxen_nic_driver_name, n);
 793                 } else {
 794                         printk("%s:n=0x%x Error! NetXen card flash not"
 795                                " initialized.\n", __FUNCTION__, n);
 796                         return -EIO;
 797                 }
 798                 buf = kcalloc(n, sizeof(struct crb_addr_pair), GFP_KERNEL);
 799                 if (buf == NULL) {
 800                         printk("%s: netxen_pinit_from_rom: Unable to calloc "
 801                                "memory.\n", netxen_nic_driver_name);
 802                         return -ENOMEM;
 803                 }
 804                 for (i = 0; i < n; i++) {
 805                         if (netxen_rom_fast_read(adapter, 8 * i + 4, &val) != 0
 806                             || netxen_rom_fast_read(adapter, 8 * i + 8,
 807                                                     &addr) != 0)
 808                                 return -EIO;
 809
 810                         buf[i].addr = addr;
 811                         buf[i].data = val;
 812
 813                         if (verbose)
 814                                 printk("%s: PCI:     0x%08x == 0x%08x\n",
 815                                        netxen_nic_driver_name, (unsigned int)
 816                                        netxen_decode_crb_addr((unsigned long)
 817                                                               addr), val);
 818                 }
 819                 for (i = 0; i < n; i++) {
 820
 821                         off = netxen_decode_crb_addr((unsigned long)buf[i].addr);
 822                         if (off == NETXEN_ADDR_ERROR) {
 823                                 printk(KERN_ERR"CRB init value out of range %lx\n",
 824                                         buf[i].addr);
 825                                 continue;
 826                         }
 827                         off += NETXEN_PCI_CRBSPACE;
 828                         /* skipping cold reboot MAGIC */
 829                         if (off == NETXEN_CAM_RAM(0x1fc))
 830                                 continue;
 831
 832                         /* After writing this register, HW needs time for CRB */
 833                         /* to quiet down (else crb_window returns 0xffffffff) */
 834                         if (off == NETXEN_ROMUSB_GLB_SW_RESET) {
 835                                 init_delay = 1;
 836                                 /* hold xdma in reset also */
 837                                 buf[i].data = NETXEN_NIC_XDMA_RESET;
 838                         }
 839
 840                         if (ADDR_IN_WINDOW1(off)) {
 841                                 writel(buf[i].data,
 842                                        NETXEN_CRB_NORMALIZE(adapter, off));
 843                         } else {
 844                                 netxen_nic_pci_change_crbwindow(adapter, 0);
 845                                 writel(buf[i].data,
 846                                        pci_base_offset(adapter, off));
 847
 848                                 netxen_nic_pci_change_crbwindow(adapter, 1);
 849                         }
 850                         if (init_delay == 1) {
 851                                 ssleep(1);
 852                                 init_delay = 0;
 853                         }
 854                         msleep(1);
 855                 }
 856                 kfree(buf);
 857
 858                 /* disable_peg_cache_all */
 859
 860                 /* unreset_net_cache */
 861                 netxen_nic_hw_read_wx(adapter, NETXEN_ROMUSB_GLB_SW_RESET, &val,
 862                                       4);
 863                 netxen_crb_writelit_adapter(adapter, NETXEN_ROMUSB_GLB_SW_RESET,
 864                                             (val & 0xffffff0f));
 865                 /* p2dn replyCount */
 866                 netxen_crb_writelit_adapter(adapter,
 867                                             NETXEN_CRB_PEG_NET_D + 0xec, 0x1e);
 868                 /* disable_peg_cache 0 */
 869                 netxen_crb_writelit_adapter(adapter,
 870                                             NETXEN_CRB_PEG_NET_D + 0x4c, 8);
 871                 /* disable_peg_cache 1 */
 872                 netxen_crb_writelit_adapter(adapter,
 873                                             NETXEN_CRB_PEG_NET_I + 0x4c, 8);
 874
 875                 /* peg_clr_all */
 876
 877                 /* peg_clr 0 */
 878                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_0 + 0x8,
 879                                             0);
 880                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_0 + 0xc,
 881                                             0);
 882                 /* peg_clr 1 */
 883                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_1 + 0x8,
 884                                             0);
 885                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_1 + 0xc,
 886                                             0);
 887                 /* peg_clr 2 */
 888                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_2 + 0x8,
 889                                             0);
 890                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_2 + 0xc,
 891                                             0);
 892                 /* peg_clr 3 */
 893                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_3 + 0x8,
 894                                             0);
 895                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_3 + 0xc,
 896                                             0);
 897         }
 898         return 0;
 899 }
 900
 901 int netxen_initialize_adapter_offload(struct netxen_adapter *adapter)
 902 {
 903         uint64_t addr;
 904         uint32_t hi;
 905         uint32_t lo;
 906
 907         adapter->dummy_dma.addr =
 908             pci_alloc_consistent(adapter->ahw.pdev,
 909                                  NETXEN_HOST_DUMMY_DMA_SIZE,
 910                                  &adapter->dummy_dma.phys_addr);
 911         if (adapter->dummy_dma.addr == NULL) {
 912                 printk("%s: ERROR: Could not allocate dummy DMA memory\n",
 913                        __FUNCTION__);
 914                 return -ENOMEM;
 915         }
 916
 917         addr = (uint64_t) adapter->dummy_dma.phys_addr;
 918         hi = (addr >> 32) & 0xffffffff;
 919         lo = addr & 0xffffffff;
 920
 921         writel(hi, NETXEN_CRB_NORMALIZE(adapter, CRB_HOST_DUMMY_BUF_ADDR_HI));
 922         writel(lo, NETXEN_CRB_NORMALIZE(adapter, CRB_HOST_DUMMY_BUF_ADDR_LO));
 923
 924         return 0;
 925 }
 926
 927 void netxen_free_adapter_offload(struct netxen_adapter *adapter)
 928 {
 929         if (adapter->dummy_dma.addr) {
 930                 pci_free_consistent(adapter->ahw.pdev,
 931                                     NETXEN_HOST_DUMMY_DMA_SIZE,
 932                                     adapter->dummy_dma.addr,
 933                                     adapter->dummy_dma.phys_addr);
 934                 adapter->dummy_dma.addr = NULL;
 935         }
 936 }
 937
 938 void netxen_phantom_init(struct netxen_adapter *adapter, int pegtune_val)
 939 {
 940         u32 val = 0;
 941         int loops = 0;
 942
 943         if (!pegtune_val) {
 944                 val = readl(NETXEN_CRB_NORMALIZE(adapter, CRB_CMDPEG_STATE));
 945                 while (val != PHAN_INITIALIZE_COMPLETE && loops < 200000) {
 946                         udelay(100);
 947                         schedule();
 948                         val =
 949                             readl(NETXEN_CRB_NORMALIZE
 950                                   (adapter, CRB_CMDPEG_STATE));
 951                         loops++;
 952                 }
 953                 if (val != PHAN_INITIALIZE_COMPLETE)
 954                         printk("WARNING: Initial boot wait loop failed...\n");
 955         }
 956 }
 957
 958 int netxen_nic_rx_has_work(struct netxen_adapter *adapter)
 959 {
 960         int ctx;
 961
 962         for (ctx = 0; ctx < MAX_RCV_CTX; ++ctx) {
 963                 struct netxen_recv_context *recv_ctx =
 964                     &(adapter->recv_ctx[ctx]);
 965                 u32 consumer;
 966                 struct status_desc *desc_head;
 967                 struct status_desc *desc;
 968
 969                 consumer = recv_ctx->status_rx_consumer;
 970                 desc_head = recv_ctx->rcv_status_desc_head;
 971                 desc = &desc_head[consumer];
 972
 973                 if (netxen_get_sts_owner(desc) & STATUS_OWNER_HOST)
 974                         return 1;
 975         }
 976
 977         return 0;
 978 }
 979
 980 static inline int netxen_nic_check_temp(struct netxen_adapter *adapter)
 981 {
 982         int port_num;
 983         struct netxen_port *port;
 984         struct net_device *netdev;
 985         uint32_t temp, temp_state, temp_val;
 986         int rv = 0;
 987
 988         temp = readl(NETXEN_CRB_NORMALIZE(adapter, CRB_TEMP_STATE));
 989
 990         temp_state = nx_get_temp_state(temp);
 991         temp_val = nx_get_temp_val(temp);
 992
 993         if (temp_state == NX_TEMP_PANIC) {
 994                 printk(KERN_ALERT
 995                        "%s: Device temperature %d degrees C exceeds"
 996                        " maximum allowed. Hardware has been shut down.\n",
 997                        netxen_nic_driver_name, temp_val);
 998                 for (port_num = 0; port_num < adapter->ahw.max_ports;
 999                      port_num++) {
1000                         port = adapter->port[port_num];
1001                         netdev = port->netdev;
1002
1003                         netif_carrier_off(netdev);
1004                         netif_stop_queue(netdev);
1005                 }
1006                 rv = 1;
1007         } else if (temp_state == NX_TEMP_WARN) {
1008                 if (adapter->temp == NX_TEMP_NORMAL) {
1009                         printk(KERN_ALERT
1010                                "%s: Device temperature %d degrees C "
1011                                "exceeds operating range."
1012                                " Immediate action needed.\n",
1013                                netxen_nic_driver_name, temp_val);
1014                 }
1015         } else {
1016                 if (adapter->temp == NX_TEMP_WARN) {
1017                         printk(KERN_INFO
1018                                "%s: Device temperature is now %d degrees C"
1019                                " in normal range.\n", netxen_nic_driver_name,
1020                                temp_val);
1021                 }
1022         }
1023         adapter->temp = temp_state;
1024         return rv;
1025 }
1026
1027 void netxen_watchdog_task(struct work_struct *work)
1028 {
1029         int port_num;
1030         struct netxen_port *port;
1031         struct net_device *netdev;
1032         struct netxen_adapter *adapter =
1033                 container_of(work, struct netxen_adapter, watchdog_task);
1034
1035         if (netxen_nic_check_temp(adapter))
1036                 return;
1037
1038         for (port_num = 0; port_num < adapter->ahw.max_ports; port_num++) {
1039                 port = adapter->port[port_num];
1040                 netdev = port->netdev;
1041
1042                 if ((netif_running(netdev)) && !netif_carrier_ok(netdev)) {
1043                         printk(KERN_INFO "%s port %d, %s carrier is now ok\n",
1044                                netxen_nic_driver_name, port_num, netdev->name);
1045                         netif_carrier_on(netdev);
1046                 }
1047
1048                 if (netif_queue_stopped(netdev))
1049                         netif_wake_queue(netdev);
1050         }
1051
1052         if (adapter->handle_phy_intr)
1053                 adapter->handle_phy_intr(adapter);
1054         mod_timer(&adapter->watchdog_timer, jiffies + 2 * HZ);
1055 }
1056
1057 /*
1058  * netxen_process_rcv() send the received packet to the protocol stack.
1059  * and if the number of receives exceeds RX_BUFFERS_REFILL, then we
1060  * invoke the routine to send more rx buffers to the Phantom...
1061  */
1062 void
1063 netxen_process_rcv(struct netxen_adapter *adapter, int ctxid,
1064                    struct status_desc *desc)
1065 {
1066         struct netxen_port *port = adapter->port[netxen_get_sts_port(desc)];
1067         struct pci_dev *pdev = port->pdev;
1068         struct net_device *netdev = port->netdev;
1069         int index = netxen_get_sts_refhandle(desc);
1070         struct netxen_recv_context *recv_ctx = &(adapter->recv_ctx[ctxid]);
1071         struct netxen_rx_buffer *buffer;
1072         struct sk_buff *skb;
1073         u32 length = netxen_get_sts_totallength(desc);
1074         u32 desc_ctx;
1075         struct netxen_rcv_desc_ctx *rcv_desc;
1076         int ret;
1077
1078         desc_ctx = netxen_get_sts_type(desc);
1079         if (unlikely(desc_ctx >= NUM_RCV_DESC_RINGS)) {
1080                 printk("%s: %s Bad Rcv descriptor ring\n",
1081                        netxen_nic_driver_name, netdev->name);
1082                 return;
1083         }
1084
1085         rcv_desc = &recv_ctx->rcv_desc[desc_ctx];
1086         if (unlikely(index > rcv_desc->max_rx_desc_count)) {
1087                 DPRINTK(ERR, "Got a buffer index:%x Max is %x\n",
1088                         index, rcv_desc->max_rx_desc_count);
1089                 return;
1090         }
1091         buffer = &rcv_desc->rx_buf_arr[index];
1092         if (desc_ctx == RCV_DESC_LRO_CTXID) {
1093                 buffer->lro_current_frags++;
1094                 if (netxen_get_sts_desc_lro_last_frag(desc)) {
1095                         buffer->lro_expected_frags =
1096                             netxen_get_sts_desc_lro_cnt(desc);
1097                         buffer->lro_length = length;
1098                 }
1099                 if (buffer->lro_current_frags != buffer->lro_expected_frags) {
1100                         if (buffer->lro_expected_frags != 0) {
1101                                 printk("LRO: (refhandle:%x) recv frag."
1102                                        "wait for last. flags: %x expected:%d"
1103                                        "have:%d\n", index,
1104                                        netxen_get_sts_desc_lro_last_frag(desc),
1105                                        buffer->lro_expected_frags,
1106                                        buffer->lro_current_frags);
1107                         }
1108                         return;
1109                 }
1110         }
1111
1112         pci_unmap_single(pdev, buffer->dma, rcv_desc->dma_size,
1113                          PCI_DMA_FROMDEVICE);
1114
1115         skb = (struct sk_buff *)buffer->skb;
1116
1117         if (likely(netxen_get_sts_status(desc) == STATUS_CKSUM_OK)) {
1118                 port->stats.csummed++;
1119                 skb->ip_summed = CHECKSUM_UNNECESSARY;
1120         }
1121         skb->dev = netdev;
1122         if (desc_ctx == RCV_DESC_LRO_CTXID) {
1123                 /* True length was only available on the last pkt */
1124                 skb_put(skb, buffer->lro_length);
1125         } else {
1126                 skb_put(skb, length);
1127         }
1128
1129         skb->protocol = eth_type_trans(skb, netdev);
1130
1131         ret = netif_receive_skb(skb);
1132
1133         /*
1134          * RH: Do we need these stats on a regular basis. Can we get it from
1135          * Linux stats.
1136          */
1137         switch (ret) {
1138         case NET_RX_SUCCESS:
1139                 port->stats.uphappy++;
1140                 break;
1141
1142         case NET_RX_CN_LOW:
1143                 port->stats.uplcong++;
1144                 break;
1145
1146         case NET_RX_CN_MOD:
1147                 port->stats.upmcong++;
1148                 break;
1149
1150         case NET_RX_CN_HIGH:
1151                 port->stats.uphcong++;
1152                 break;
1153
1154         case NET_RX_DROP:
1155                 port->stats.updropped++;
1156                 break;
1157
1158         default:
1159                 port->stats.updunno++;
1160                 break;
1161         }
1162
1163         netdev->last_rx = jiffies;
1164
1165         rcv_desc->rcv_free++;
1166         rcv_desc->rcv_pending--;
1167
1168         /*
1169          * We just consumed one buffer so post a buffer.
1170          */
1171         adapter->stats.post_called++;
1172         buffer->skb = NULL;
1173         buffer->state = NETXEN_BUFFER_FREE;
1174         buffer->lro_current_frags = 0;
1175         buffer->lro_expected_frags = 0;
1176
1177         port->stats.no_rcv++;
1178         port->stats.rxbytes += length;
1179 }
1180
1181 /* Process Receive status ring */
1182 u32 netxen_process_rcv_ring(struct netxen_adapter *adapter, int ctxid, int max)
1183 {
1184         struct netxen_recv_context *recv_ctx = &(adapter->recv_ctx[ctxid]);
1185         struct status_desc *desc_head = recv_ctx->rcv_status_desc_head;
1186         struct status_desc *desc;       /* used to read status desc here */
1187         u32 consumer = recv_ctx->status_rx_consumer;
1188         u32 producer = 0;
1189         int count = 0, ring;
1190
1191         DPRINTK(INFO, "procesing receive\n");
1192         /*
1193          * we assume in this case that there is only one port and that is
1194          * port #1...changes need to be done in firmware to indicate port
1195          * number as part of the descriptor. This way we will be able to get
1196          * the netdev which is associated with that device.
1197          */
1198         while (count < max) {
1199                 desc = &desc_head[consumer];
1200                 if (!(netxen_get_sts_owner(desc) & STATUS_OWNER_HOST)) {
1201                         DPRINTK(ERR, "desc %p ownedby %x\n", desc,
1202                                 netxen_get_sts_owner(desc));
1203                         break;
1204                 }
1205                 netxen_process_rcv(adapter, ctxid, desc);
1206                 netxen_clear_sts_owner(desc);
1207                 netxen_set_sts_owner(desc, STATUS_OWNER_PHANTOM);
1208                 consumer = (consumer + 1) & (adapter->max_rx_desc_count - 1);
1209                 count++;
1210         }
1211         if (count) {
1212                 for (ring = 0; ring < NUM_RCV_DESC_RINGS; ring++) {
1213                         netxen_post_rx_buffers_nodb(adapter, ctxid, ring);
1214                 }
1215         }
1216
1217         /* update the consumer index in phantom */
1218         if (count) {
1219                 adapter->stats.process_rcv++;
1220                 recv_ctx->status_rx_consumer = consumer;
1221                 recv_ctx->status_rx_producer = producer;
1222
1223                 /* Window = 1 */
1224                 writel(consumer,
1225                        NETXEN_CRB_NORMALIZE(adapter,
1226                                             recv_crb_registers[ctxid].
1227                                             crb_rcv_status_consumer));
1228         }
1229
1230         return count;
1231 }
1232
1233 /* Process Command status ring */
1234 int netxen_process_cmd_ring(unsigned long data)
1235 {
1236         u32 last_consumer;
1237         u32 consumer;
1238         struct netxen_adapter *adapter = (struct netxen_adapter *)data;
1239         int count1 = 0;
1240         int count2 = 0;
1241         struct netxen_cmd_buffer *buffer;
1242         struct netxen_port *port;       /* port #1 */
1243         struct netxen_port *nport;
1244         struct pci_dev *pdev;
1245         struct netxen_skb_frag *frag;
1246         u32 i;
1247         struct sk_buff *skb = NULL;
1248         int p;
1249         int done;
1250
1251         spin_lock(&adapter->tx_lock);
1252         last_consumer = adapter->last_cmd_consumer;
1253         DPRINTK(INFO, "procesing xmit complete\n");
1254         /* we assume in this case that there is only one port and that is
1255          * port #1...changes need to be done in firmware to indicate port
1256          * number as part of the descriptor. This way we will be able to get
1257          * the netdev which is associated with that device.
1258          */
1259
1260         consumer = le32_to_cpu(*(adapter->cmd_consumer));
1261         if (last_consumer == consumer) {        /* Ring is empty    */
1262                 DPRINTK(INFO, "last_consumer %d == consumer %d\n",
1263                         last_consumer, consumer);
1264                 spin_unlock(&adapter->tx_lock);
1265                 return 1;
1266         }
1267
1268         adapter->proc_cmd_buf_counter++;
1269         adapter->stats.process_xmit++;
1270         /*
1271          * Not needed - does not seem to be used anywhere.
1272          * adapter->cmd_consumer = consumer;
1273          */
1274         spin_unlock(&adapter->tx_lock);
1275
1276         while ((last_consumer != consumer) && (count1 < MAX_STATUS_HANDLE)) {
1277                 buffer = &adapter->cmd_buf_arr[last_consumer];
1278                 port = adapter->port[buffer->port];
1279                 pdev = port->pdev;
1280                 frag = &buffer->frag_array[0];
1281                 skb = buffer->skb;
1282                 if (skb && (cmpxchg(&buffer->skb, skb, 0) == skb)) {
1283                         pci_unmap_single(pdev, frag->dma, frag->length,
1284                                          PCI_DMA_TODEVICE);
1285                         for (i = 1; i < buffer->frag_count; i++) {
1286                                 DPRINTK(INFO, "getting fragment no %d\n", i);
1287                                 frag++; /* Get the next frag */
1288                                 pci_unmap_page(pdev, frag->dma, frag->length,
1289                                                PCI_DMA_TODEVICE);
1290                         }
1291
1292                         port->stats.skbfreed++;
1293                         dev_kfree_skb_any(skb);
1294                         skb = NULL;
1295                 } else if (adapter->proc_cmd_buf_counter == 1) {
1296                         port->stats.txnullskb++;
1297                 }
1298                 if (unlikely(netif_queue_stopped(port->netdev)
1299                              && netif_carrier_ok(port->netdev))
1300                     && ((jiffies - port->netdev->trans_start) >
1301                         port->netdev->watchdog_timeo)) {
1302                         SCHEDULE_WORK(&port->tx_timeout_task);
1303                 }
1304
1305                 last_consumer = get_next_index(last_consumer,
1306                                                adapter->max_tx_desc_count);
1307                 count1++;
1308         }
1309         adapter->stats.noxmitdone += count1;
1310
1311         count2 = 0;
1312         spin_lock(&adapter->tx_lock);
1313         if ((--adapter->proc_cmd_buf_counter) == 0) {
1314                 adapter->last_cmd_consumer = last_consumer;
1315                 while ((adapter->last_cmd_consumer != consumer)
1316                        && (count2 < MAX_STATUS_HANDLE)) {
1317                         buffer =
1318                             &adapter->cmd_buf_arr[adapter->last_cmd_consumer];
1319                         count2++;
1320                         if (buffer->skb)
1321                                 break;
1322                         else
1323                                 adapter->last_cmd_consumer =
1324                                     get_next_index(adapter->last_cmd_consumer,
1325                                                    adapter->max_tx_desc_count);
1326                 }
1327         }
1328         if (count1 || count2) {
1329                 for (p = 0; p < adapter->ahw.max_ports; p++) {
1330                         nport = adapter->port[p];
1331                         if (netif_queue_stopped(nport->netdev)
1332                             && (nport->flags & NETXEN_NETDEV_STATUS)) {
1333                                 netif_wake_queue(nport->netdev);
1334                                 nport->flags &= ~NETXEN_NETDEV_STATUS;
1335                         }
1336                 }
1337         }
1338         /*
1339          * If everything is freed up to consumer then check if the ring is full
1340          * If the ring is full then check if more needs to be freed and
1341          * schedule the call back again.
1342          *
1343          * This happens when there are 2 CPUs. One could be freeing and the
1344          * other filling it. If the ring is full when we get out of here and
1345          * the card has already interrupted the host then the host can miss the
1346          * interrupt.
1347          *
1348          * There is still a possible race condition and the host could miss an
1349          * interrupt. The card has to take care of this.
1350          */
1351         if (adapter->last_cmd_consumer == consumer &&
1352             (((adapter->cmd_producer + 1) %
1353               adapter->max_tx_desc_count) == adapter->last_cmd_consumer)) {
1354                 consumer = le32_to_cpu(*(adapter->cmd_consumer));
1355         }
1356         done = (adapter->last_cmd_consumer == consumer);
1357
1358         spin_unlock(&adapter->tx_lock);
1359         DPRINTK(INFO, "last consumer is %d in %s\n", last_consumer,
1360                 __FUNCTION__);
1361         return (done);
1362 }
1363
1364 /*
1365  * netxen_post_rx_buffers puts buffer in the Phantom memory
1366  */
1367 void netxen_post_rx_buffers(struct netxen_adapter *adapter, u32 ctx, u32 ringid)
1368 {
1369         struct pci_dev *pdev = adapter->ahw.pdev;
1370         struct sk_buff *skb;
1371         struct netxen_recv_context *recv_ctx = &(adapter->recv_ctx[ctx]);
1372         struct netxen_rcv_desc_ctx *rcv_desc = NULL;
1373         uint producer;
1374         struct rcv_desc *pdesc;
1375         struct netxen_rx_buffer *buffer;
1376         int count = 0;
1377         int index = 0;
1378         netxen_ctx_msg msg = 0;
1379         dma_addr_t dma;
1380
1381         adapter->stats.post_called++;
1382         rcv_desc = &recv_ctx->rcv_desc[ringid];
1383
1384         producer = rcv_desc->producer;
1385         index = rcv_desc->begin_alloc;
1386         buffer = &rcv_desc->rx_buf_arr[index];
1387         /* We can start writing rx descriptors into the phantom memory. */
1388         while (buffer->state == NETXEN_BUFFER_FREE) {
1389                 skb = dev_alloc_skb(rcv_desc->skb_size);
1390                 if (unlikely(!skb)) {
1391                         /*
1392                          * TODO
1393                          * We need to schedule the posting of buffers to the pegs.
1394                          */
1395                         rcv_desc->begin_alloc = index;
1396                         DPRINTK(ERR, "netxen_post_rx_buffers: "
1397                                 " allocated only %d buffers\n", count);
1398                         break;
1399                 }
1400
1401                 count++;        /* now there should be no failure */
1402                 pdesc = &rcv_desc->desc_head[producer];
1403
1404 #if defined(XGB_DEBUG)
1405                 *(unsigned long *)(skb->head) = 0xc0debabe;
1406                 if (skb_is_nonlinear(skb)) {
1407                         printk("Allocated SKB @%p is nonlinear\n");
1408                 }
1409 #endif
1410                 skb_reserve(skb, 2);
1411                 /* This will be setup when we receive the
1412                  * buffer after it has been filled  FSL  TBD TBD
1413                  * skb->dev = netdev;
1414                  */
1415                 dma = pci_map_single(pdev, skb->data, rcv_desc->dma_size,
1416                                      PCI_DMA_FROMDEVICE);
1417                 pdesc->addr_buffer = cpu_to_le64(dma);
1418                 buffer->skb = skb;
1419                 buffer->state = NETXEN_BUFFER_BUSY;
1420                 buffer->dma = dma;
1421                 /* make a rcv descriptor  */
1422                 pdesc->reference_handle = cpu_to_le16(buffer->ref_handle);
1423                 pdesc->buffer_length = cpu_to_le32(rcv_desc->dma_size);
1424                 DPRINTK(INFO, "done writing descripter\n");
1425                 producer =
1426                     get_next_index(producer, rcv_desc->max_rx_desc_count);
1427                 index = get_next_index(index, rcv_desc->max_rx_desc_count);
1428                 buffer = &rcv_desc->rx_buf_arr[index];
1429         }
1430         /* if we did allocate buffers, then write the count to Phantom */
1431         if (count) {
1432                 rcv_desc->begin_alloc = index;
1433                 rcv_desc->rcv_pending += count;
1434                 adapter->stats.lastposted = count;
1435                 adapter->stats.posted += count;
1436                 rcv_desc->producer = producer;
1437                 if (rcv_desc->rcv_free >= 32) {
1438                         rcv_desc->rcv_free = 0;
1439                         /* Window = 1 */
1440                         writel((producer - 1) &
1441                                (rcv_desc->max_rx_desc_count - 1),
1442                                NETXEN_CRB_NORMALIZE(adapter,
1443                                                     recv_crb_registers[0].
1444                                                     rcv_desc_crb[ringid].
1445                                                     crb_rcv_producer_offset));
1446                         /*
1447                          * Write a doorbell msg to tell phanmon of change in
1448                          * receive ring producer
1449                          */
1450                         netxen_set_msg_peg_id(msg, NETXEN_RCV_PEG_DB_ID);
1451                         netxen_set_msg_privid(msg);
1452                         netxen_set_msg_count(msg,
1453                                              ((producer -
1454                                                1) & (rcv_desc->
1455                                                      max_rx_desc_count - 1)));
1456                         netxen_set_msg_ctxid(msg, 0);
1457                         netxen_set_msg_opcode(msg, NETXEN_RCV_PRODUCER(ringid));
1458                         writel(msg,
1459                                DB_NORMALIZE(adapter,
1460                                             NETXEN_RCV_PRODUCER_OFFSET));
1461                 }
1462         }
1463 }
1464
1465 void netxen_post_rx_buffers_nodb(struct netxen_adapter *adapter, uint32_t ctx,
1466                                  uint32_t ringid)
1467 {
1468         struct pci_dev *pdev = adapter->ahw.pdev;
1469         struct sk_buff *skb;
1470         struct netxen_recv_context *recv_ctx = &(adapter->recv_ctx[ctx]);
1471         struct netxen_rcv_desc_ctx *rcv_desc = NULL;
1472         u32 producer;
1473         struct rcv_desc *pdesc;
1474         struct netxen_rx_buffer *buffer;
1475         int count = 0;
1476         int index = 0;
1477
1478         adapter->stats.post_called++;
1479         rcv_desc = &recv_ctx->rcv_desc[ringid];
1480
1481         producer = rcv_desc->producer;
1482         index = rcv_desc->begin_alloc;
1483         buffer = &rcv_desc->rx_buf_arr[index];
1484         /* We can start writing rx descriptors into the phantom memory. */
1485         while (buffer->state == NETXEN_BUFFER_FREE) {
1486                 skb = dev_alloc_skb(rcv_desc->skb_size);
1487                 if (unlikely(!skb)) {
1488                         /*
1489                          * We need to schedule the posting of buffers to the pegs.
1490                          */
1491                         rcv_desc->begin_alloc = index;
1492                         DPRINTK(ERR, "netxen_post_rx_buffers_nodb: "
1493                                 " allocated only %d buffers\n", count);
1494                         break;
1495                 }
1496                 count++;        /* now there should be no failure */
1497                 pdesc = &rcv_desc->desc_head[producer];
1498                 skb_reserve(skb, 2);
1499                 /*
1500                  * This will be setup when we receive the
1501                  * buffer after it has been filled
1502                  * skb->dev = netdev;
1503                  */
1504                 buffer->skb = skb;
1505                 buffer->state = NETXEN_BUFFER_BUSY;
1506                 buffer->dma = pci_map_single(pdev, skb->data,
1507                                              rcv_desc->dma_size,
1508                                              PCI_DMA_FROMDEVICE);
1509
1510                 /* make a rcv descriptor  */
1511                 pdesc->reference_handle = cpu_to_le16(buffer->ref_handle);
1512                 pdesc->buffer_length = cpu_to_le32(rcv_desc->dma_size);
1513                 pdesc->addr_buffer = cpu_to_le64(buffer->dma);
1514                 DPRINTK(INFO, "done writing descripter\n");
1515                 producer =
1516                     get_next_index(producer, rcv_desc->max_rx_desc_count);
1517                 index = get_next_index(index, rcv_desc->max_rx_desc_count);
1518                 buffer = &rcv_desc->rx_buf_arr[index];
1519         }
1520
1521         /* if we did allocate buffers, then write the count to Phantom */
1522         if (count) {
1523                 rcv_desc->begin_alloc = index;
1524                 rcv_desc->rcv_pending += count;
1525                 adapter->stats.lastposted = count;
1526                 adapter->stats.posted += count;
1527                 rcv_desc->producer = producer;
1528                 if (rcv_desc->rcv_free >= 32) {
1529                         rcv_desc->rcv_free = 0;
1530                         /* Window = 1 */
1531                         writel((producer - 1) &
1532                                (rcv_desc->max_rx_desc_count - 1),
1533                                NETXEN_CRB_NORMALIZE(adapter,
1534                                                     recv_crb_registers[0].
1535                                                     rcv_desc_crb[ringid].
1536                                                     crb_rcv_producer_offset));
1537                         wmb();
1538                 }
1539         }
1540 }
1541
1542 int netxen_nic_tx_has_work(struct netxen_adapter *adapter)
1543 {
1544         if (find_diff_among(adapter->last_cmd_consumer,
1545                             adapter->cmd_producer,
1546                             adapter->max_tx_desc_count) > 0)
1547                 return 1;
1548
1549         return 0;
1550 }
1551
1552
1553 void netxen_nic_clear_stats(struct netxen_adapter *adapter)
1554 {
1555         struct netxen_port *port;
1556         int port_num;
1557
1558         memset(&adapter->stats, 0, sizeof(adapter->stats));
1559         for (port_num = 0; port_num < adapter->ahw.max_ports; port_num++) {
1560                 port = adapter->port[port_num];
1561                 memset(&port->stats, 0, sizeof(port->stats));
1562         }
1563 }
1564