Merge branch 'for-linus' of git://git.kernel.org/pub/scm/linux/kernel/git/roland...
[safe/jmp/linux-2.6] / drivers / net / dl2k.c
1 /*  D-Link DL2000-based Gigabit Ethernet Adapter Linux driver */
2 /*
3     Copyright (c) 2001, 2002 by D-Link Corporation
4     Written by Edward Peng.<edward_peng@dlink.com.tw>
5     Created 03-May-2001, base on Linux' sundance.c.
6
7     This program is free software; you can redistribute it and/or modify
8     it under the terms of the GNU General Public License as published by
9     the Free Software Foundation; either version 2 of the License, or
10     (at your option) any later version.
11 */
12
13 #define DRV_NAME        "DL2000/TC902x-based linux driver"
14 #define DRV_VERSION     "v1.19"
15 #define DRV_RELDATE     "2007/08/12"
16 #include "dl2k.h"
17 #include <linux/dma-mapping.h>
18
19 static char version[] __devinitdata =
20       KERN_INFO DRV_NAME " " DRV_VERSION " " DRV_RELDATE "\n";
21 #define MAX_UNITS 8
22 static int mtu[MAX_UNITS];
23 static int vlan[MAX_UNITS];
24 static int jumbo[MAX_UNITS];
25 static char *media[MAX_UNITS];
26 static int tx_flow=-1;
27 static int rx_flow=-1;
28 static int copy_thresh;
29 static int rx_coalesce=10;      /* Rx frame count each interrupt */
30 static int rx_timeout=200;      /* Rx DMA wait time in 640ns increments */
31 static int tx_coalesce=16;      /* HW xmit count each TxDMAComplete */
32
33
34 MODULE_AUTHOR ("Edward Peng");
35 MODULE_DESCRIPTION ("D-Link DL2000-based Gigabit Ethernet Adapter");
36 MODULE_LICENSE("GPL");
37 module_param_array(mtu, int, NULL, 0);
38 module_param_array(media, charp, NULL, 0);
39 module_param_array(vlan, int, NULL, 0);
40 module_param_array(jumbo, int, NULL, 0);
41 module_param(tx_flow, int, 0);
42 module_param(rx_flow, int, 0);
43 module_param(copy_thresh, int, 0);
44 module_param(rx_coalesce, int, 0);      /* Rx frame count each interrupt */
45 module_param(rx_timeout, int, 0);       /* Rx DMA wait time in 64ns increments */
46 module_param(tx_coalesce, int, 0); /* HW xmit count each TxDMAComplete */
47
48
49 /* Enable the default interrupts */
50 #define DEFAULT_INTR (RxDMAComplete | HostError | IntRequested | TxDMAComplete| \
51        UpdateStats | LinkEvent)
52 #define EnableInt() \
53 writew(DEFAULT_INTR, ioaddr + IntEnable)
54
55 static const int max_intrloop = 50;
56 static const int multicast_filter_limit = 0x40;
57
58 static int rio_open (struct net_device *dev);
59 static void rio_timer (unsigned long data);
60 static void rio_tx_timeout (struct net_device *dev);
61 static void alloc_list (struct net_device *dev);
62 static netdev_tx_t start_xmit (struct sk_buff *skb, struct net_device *dev);
63 static irqreturn_t rio_interrupt (int irq, void *dev_instance);
64 static void rio_free_tx (struct net_device *dev, int irq);
65 static void tx_error (struct net_device *dev, int tx_status);
66 static int receive_packet (struct net_device *dev);
67 static void rio_error (struct net_device *dev, int int_status);
68 static int change_mtu (struct net_device *dev, int new_mtu);
69 static void set_multicast (struct net_device *dev);
70 static struct net_device_stats *get_stats (struct net_device *dev);
71 static int clear_stats (struct net_device *dev);
72 static int rio_ioctl (struct net_device *dev, struct ifreq *rq, int cmd);
73 static int rio_close (struct net_device *dev);
74 static int find_miiphy (struct net_device *dev);
75 static int parse_eeprom (struct net_device *dev);
76 static int read_eeprom (long ioaddr, int eep_addr);
77 static int mii_wait_link (struct net_device *dev, int wait);
78 static int mii_set_media (struct net_device *dev);
79 static int mii_get_media (struct net_device *dev);
80 static int mii_set_media_pcs (struct net_device *dev);
81 static int mii_get_media_pcs (struct net_device *dev);
82 static int mii_read (struct net_device *dev, int phy_addr, int reg_num);
83 static int mii_write (struct net_device *dev, int phy_addr, int reg_num,
84                       u16 data);
85
86 static const struct ethtool_ops ethtool_ops;
87
88 static const struct net_device_ops netdev_ops = {
89         .ndo_open               = rio_open,
90         .ndo_start_xmit = start_xmit,
91         .ndo_stop               = rio_close,
92         .ndo_get_stats          = get_stats,
93         .ndo_validate_addr      = eth_validate_addr,
94         .ndo_set_mac_address    = eth_mac_addr,
95         .ndo_set_multicast_list = set_multicast,
96         .ndo_do_ioctl           = rio_ioctl,
97         .ndo_tx_timeout         = rio_tx_timeout,
98         .ndo_change_mtu         = change_mtu,
99 };
100
101 static int __devinit
102 rio_probe1 (struct pci_dev *pdev, const struct pci_device_id *ent)
103 {
104         struct net_device *dev;
105         struct netdev_private *np;
106         static int card_idx;
107         int chip_idx = ent->driver_data;
108         int err, irq;
109         long ioaddr;
110         static int version_printed;
111         void *ring_space;
112         dma_addr_t ring_dma;
113
114         if (!version_printed++)
115                 printk ("%s", version);
116
117         err = pci_enable_device (pdev);
118         if (err)
119                 return err;
120
121         irq = pdev->irq;
122         err = pci_request_regions (pdev, "dl2k");
123         if (err)
124                 goto err_out_disable;
125
126         pci_set_master (pdev);
127         dev = alloc_etherdev (sizeof (*np));
128         if (!dev) {
129                 err = -ENOMEM;
130                 goto err_out_res;
131         }
132         SET_NETDEV_DEV(dev, &pdev->dev);
133
134 #ifdef MEM_MAPPING
135         ioaddr = pci_resource_start (pdev, 1);
136         ioaddr = (long) ioremap (ioaddr, RIO_IO_SIZE);
137         if (!ioaddr) {
138                 err = -ENOMEM;
139                 goto err_out_dev;
140         }
141 #else
142         ioaddr = pci_resource_start (pdev, 0);
143 #endif
144         dev->base_addr = ioaddr;
145         dev->irq = irq;
146         np = netdev_priv(dev);
147         np->chip_id = chip_idx;
148         np->pdev = pdev;
149         spin_lock_init (&np->tx_lock);
150         spin_lock_init (&np->rx_lock);
151
152         /* Parse manual configuration */
153         np->an_enable = 1;
154         np->tx_coalesce = 1;
155         if (card_idx < MAX_UNITS) {
156                 if (media[card_idx] != NULL) {
157                         np->an_enable = 0;
158                         if (strcmp (media[card_idx], "auto") == 0 ||
159                             strcmp (media[card_idx], "autosense") == 0 ||
160                             strcmp (media[card_idx], "0") == 0 ) {
161                                 np->an_enable = 2;
162                         } else if (strcmp (media[card_idx], "100mbps_fd") == 0 ||
163                             strcmp (media[card_idx], "4") == 0) {
164                                 np->speed = 100;
165                                 np->full_duplex = 1;
166                         } else if (strcmp (media[card_idx], "100mbps_hd") == 0 ||
167                                    strcmp (media[card_idx], "3") == 0) {
168                                 np->speed = 100;
169                                 np->full_duplex = 0;
170                         } else if (strcmp (media[card_idx], "10mbps_fd") == 0 ||
171                                    strcmp (media[card_idx], "2") == 0) {
172                                 np->speed = 10;
173                                 np->full_duplex = 1;
174                         } else if (strcmp (media[card_idx], "10mbps_hd") == 0 ||
175                                    strcmp (media[card_idx], "1") == 0) {
176                                 np->speed = 10;
177                                 np->full_duplex = 0;
178                         } else if (strcmp (media[card_idx], "1000mbps_fd") == 0 ||
179                                  strcmp (media[card_idx], "6") == 0) {
180                                 np->speed=1000;
181                                 np->full_duplex=1;
182                         } else if (strcmp (media[card_idx], "1000mbps_hd") == 0 ||
183                                  strcmp (media[card_idx], "5") == 0) {
184                                 np->speed = 1000;
185                                 np->full_duplex = 0;
186                         } else {
187                                 np->an_enable = 1;
188                         }
189                 }
190                 if (jumbo[card_idx] != 0) {
191                         np->jumbo = 1;
192                         dev->mtu = MAX_JUMBO;
193                 } else {
194                         np->jumbo = 0;
195                         if (mtu[card_idx] > 0 && mtu[card_idx] < PACKET_SIZE)
196                                 dev->mtu = mtu[card_idx];
197                 }
198                 np->vlan = (vlan[card_idx] > 0 && vlan[card_idx] < 4096) ?
199                     vlan[card_idx] : 0;
200                 if (rx_coalesce > 0 && rx_timeout > 0) {
201                         np->rx_coalesce = rx_coalesce;
202                         np->rx_timeout = rx_timeout;
203                         np->coalesce = 1;
204                 }
205                 np->tx_flow = (tx_flow == 0) ? 0 : 1;
206                 np->rx_flow = (rx_flow == 0) ? 0 : 1;
207
208                 if (tx_coalesce < 1)
209                         tx_coalesce = 1;
210                 else if (tx_coalesce > TX_RING_SIZE-1)
211                         tx_coalesce = TX_RING_SIZE - 1;
212         }
213         dev->netdev_ops = &netdev_ops;
214         dev->watchdog_timeo = TX_TIMEOUT;
215         SET_ETHTOOL_OPS(dev, &ethtool_ops);
216 #if 0
217         dev->features = NETIF_F_IP_CSUM;
218 #endif
219         pci_set_drvdata (pdev, dev);
220
221         ring_space = pci_alloc_consistent (pdev, TX_TOTAL_SIZE, &ring_dma);
222         if (!ring_space)
223                 goto err_out_iounmap;
224         np->tx_ring = (struct netdev_desc *) ring_space;
225         np->tx_ring_dma = ring_dma;
226
227         ring_space = pci_alloc_consistent (pdev, RX_TOTAL_SIZE, &ring_dma);
228         if (!ring_space)
229                 goto err_out_unmap_tx;
230         np->rx_ring = (struct netdev_desc *) ring_space;
231         np->rx_ring_dma = ring_dma;
232
233         /* Parse eeprom data */
234         parse_eeprom (dev);
235
236         /* Find PHY address */
237         err = find_miiphy (dev);
238         if (err)
239                 goto err_out_unmap_rx;
240
241         /* Fiber device? */
242         np->phy_media = (readw(ioaddr + ASICCtrl) & PhyMedia) ? 1 : 0;
243         np->link_status = 0;
244         /* Set media and reset PHY */
245         if (np->phy_media) {
246                 /* default Auto-Negotiation for fiber deivices */
247                 if (np->an_enable == 2) {
248                         np->an_enable = 1;
249                 }
250                 mii_set_media_pcs (dev);
251         } else {
252                 /* Auto-Negotiation is mandatory for 1000BASE-T,
253                    IEEE 802.3ab Annex 28D page 14 */
254                 if (np->speed == 1000)
255                         np->an_enable = 1;
256                 mii_set_media (dev);
257         }
258
259         err = register_netdev (dev);
260         if (err)
261                 goto err_out_unmap_rx;
262
263         card_idx++;
264
265         printk (KERN_INFO "%s: %s, %pM, IRQ %d\n",
266                 dev->name, np->name, dev->dev_addr, irq);
267         if (tx_coalesce > 1)
268                 printk(KERN_INFO "tx_coalesce:\t%d packets\n",
269                                 tx_coalesce);
270         if (np->coalesce)
271                 printk(KERN_INFO
272                        "rx_coalesce:\t%d packets\n"
273                        "rx_timeout: \t%d ns\n",
274                                 np->rx_coalesce, np->rx_timeout*640);
275         if (np->vlan)
276                 printk(KERN_INFO "vlan(id):\t%d\n", np->vlan);
277         return 0;
278
279       err_out_unmap_rx:
280         pci_free_consistent (pdev, RX_TOTAL_SIZE, np->rx_ring, np->rx_ring_dma);
281       err_out_unmap_tx:
282         pci_free_consistent (pdev, TX_TOTAL_SIZE, np->tx_ring, np->tx_ring_dma);
283       err_out_iounmap:
284 #ifdef MEM_MAPPING
285         iounmap ((void *) ioaddr);
286
287       err_out_dev:
288 #endif
289         free_netdev (dev);
290
291       err_out_res:
292         pci_release_regions (pdev);
293
294       err_out_disable:
295         pci_disable_device (pdev);
296         return err;
297 }
298
299 static int
300 find_miiphy (struct net_device *dev)
301 {
302         int i, phy_found = 0;
303         struct netdev_private *np;
304         long ioaddr;
305         np = netdev_priv(dev);
306         ioaddr = dev->base_addr;
307         np->phy_addr = 1;
308
309         for (i = 31; i >= 0; i--) {
310                 int mii_status = mii_read (dev, i, 1);
311                 if (mii_status != 0xffff && mii_status != 0x0000) {
312                         np->phy_addr = i;
313                         phy_found++;
314                 }
315         }
316         if (!phy_found) {
317                 printk (KERN_ERR "%s: No MII PHY found!\n", dev->name);
318                 return -ENODEV;
319         }
320         return 0;
321 }
322
323 static int
324 parse_eeprom (struct net_device *dev)
325 {
326         int i, j;
327         long ioaddr = dev->base_addr;
328         u8 sromdata[256];
329         u8 *psib;
330         u32 crc;
331         PSROM_t psrom = (PSROM_t) sromdata;
332         struct netdev_private *np = netdev_priv(dev);
333
334         int cid, next;
335
336 #ifdef  MEM_MAPPING
337         ioaddr = pci_resource_start (np->pdev, 0);
338 #endif
339         /* Read eeprom */
340         for (i = 0; i < 128; i++) {
341                 ((__le16 *) sromdata)[i] = cpu_to_le16(read_eeprom (ioaddr, i));
342         }
343 #ifdef  MEM_MAPPING
344         ioaddr = dev->base_addr;
345 #endif
346         if (np->pdev->vendor == PCI_VENDOR_ID_DLINK) {  /* D-Link Only */
347                 /* Check CRC */
348                 crc = ~ether_crc_le (256 - 4, sromdata);
349                 if (psrom->crc != crc) {
350                         printk (KERN_ERR "%s: EEPROM data CRC error.\n",
351                                         dev->name);
352                         return -1;
353                 }
354         }
355
356         /* Set MAC address */
357         for (i = 0; i < 6; i++)
358                 dev->dev_addr[i] = psrom->mac_addr[i];
359
360         if (np->pdev->vendor != PCI_VENDOR_ID_DLINK) {
361                 return 0;
362         }
363
364         /* Parse Software Information Block */
365         i = 0x30;
366         psib = (u8 *) sromdata;
367         do {
368                 cid = psib[i++];
369                 next = psib[i++];
370                 if ((cid == 0 && next == 0) || (cid == 0xff && next == 0xff)) {
371                         printk (KERN_ERR "Cell data error\n");
372                         return -1;
373                 }
374                 switch (cid) {
375                 case 0: /* Format version */
376                         break;
377                 case 1: /* End of cell */
378                         return 0;
379                 case 2: /* Duplex Polarity */
380                         np->duplex_polarity = psib[i];
381                         writeb (readb (ioaddr + PhyCtrl) | psib[i],
382                                 ioaddr + PhyCtrl);
383                         break;
384                 case 3: /* Wake Polarity */
385                         np->wake_polarity = psib[i];
386                         break;
387                 case 9: /* Adapter description */
388                         j = (next - i > 255) ? 255 : next - i;
389                         memcpy (np->name, &(psib[i]), j);
390                         break;
391                 case 4:
392                 case 5:
393                 case 6:
394                 case 7:
395                 case 8: /* Reversed */
396                         break;
397                 default:        /* Unknown cell */
398                         return -1;
399                 }
400                 i = next;
401         } while (1);
402
403         return 0;
404 }
405
406 static int
407 rio_open (struct net_device *dev)
408 {
409         struct netdev_private *np = netdev_priv(dev);
410         long ioaddr = dev->base_addr;
411         int i;
412         u16 macctrl;
413
414         i = request_irq (dev->irq, rio_interrupt, IRQF_SHARED, dev->name, dev);
415         if (i)
416                 return i;
417
418         /* Reset all logic functions */
419         writew (GlobalReset | DMAReset | FIFOReset | NetworkReset | HostReset,
420                 ioaddr + ASICCtrl + 2);
421         mdelay(10);
422
423         /* DebugCtrl bit 4, 5, 9 must set */
424         writel (readl (ioaddr + DebugCtrl) | 0x0230, ioaddr + DebugCtrl);
425
426         /* Jumbo frame */
427         if (np->jumbo != 0)
428                 writew (MAX_JUMBO+14, ioaddr + MaxFrameSize);
429
430         alloc_list (dev);
431
432         /* Get station address */
433         for (i = 0; i < 6; i++)
434                 writeb (dev->dev_addr[i], ioaddr + StationAddr0 + i);
435
436         set_multicast (dev);
437         if (np->coalesce) {
438                 writel (np->rx_coalesce | np->rx_timeout << 16,
439                         ioaddr + RxDMAIntCtrl);
440         }
441         /* Set RIO to poll every N*320nsec. */
442         writeb (0x20, ioaddr + RxDMAPollPeriod);
443         writeb (0xff, ioaddr + TxDMAPollPeriod);
444         writeb (0x30, ioaddr + RxDMABurstThresh);
445         writeb (0x30, ioaddr + RxDMAUrgentThresh);
446         writel (0x0007ffff, ioaddr + RmonStatMask);
447         /* clear statistics */
448         clear_stats (dev);
449
450         /* VLAN supported */
451         if (np->vlan) {
452                 /* priority field in RxDMAIntCtrl  */
453                 writel (readl(ioaddr + RxDMAIntCtrl) | 0x7 << 10,
454                         ioaddr + RxDMAIntCtrl);
455                 /* VLANId */
456                 writew (np->vlan, ioaddr + VLANId);
457                 /* Length/Type should be 0x8100 */
458                 writel (0x8100 << 16 | np->vlan, ioaddr + VLANTag);
459                 /* Enable AutoVLANuntagging, but disable AutoVLANtagging.
460                    VLAN information tagged by TFC' VID, CFI fields. */
461                 writel (readl (ioaddr + MACCtrl) | AutoVLANuntagging,
462                         ioaddr + MACCtrl);
463         }
464
465         init_timer (&np->timer);
466         np->timer.expires = jiffies + 1*HZ;
467         np->timer.data = (unsigned long) dev;
468         np->timer.function = &rio_timer;
469         add_timer (&np->timer);
470
471         /* Start Tx/Rx */
472         writel (readl (ioaddr + MACCtrl) | StatsEnable | RxEnable | TxEnable,
473                         ioaddr + MACCtrl);
474
475         macctrl = 0;
476         macctrl |= (np->vlan) ? AutoVLANuntagging : 0;
477         macctrl |= (np->full_duplex) ? DuplexSelect : 0;
478         macctrl |= (np->tx_flow) ? TxFlowControlEnable : 0;
479         macctrl |= (np->rx_flow) ? RxFlowControlEnable : 0;
480         writew(macctrl, ioaddr + MACCtrl);
481
482         netif_start_queue (dev);
483
484         /* Enable default interrupts */
485         EnableInt ();
486         return 0;
487 }
488
489 static void
490 rio_timer (unsigned long data)
491 {
492         struct net_device *dev = (struct net_device *)data;
493         struct netdev_private *np = netdev_priv(dev);
494         unsigned int entry;
495         int next_tick = 1*HZ;
496         unsigned long flags;
497
498         spin_lock_irqsave(&np->rx_lock, flags);
499         /* Recover rx ring exhausted error */
500         if (np->cur_rx - np->old_rx >= RX_RING_SIZE) {
501                 printk(KERN_INFO "Try to recover rx ring exhausted...\n");
502                 /* Re-allocate skbuffs to fill the descriptor ring */
503                 for (; np->cur_rx - np->old_rx > 0; np->old_rx++) {
504                         struct sk_buff *skb;
505                         entry = np->old_rx % RX_RING_SIZE;
506                         /* Dropped packets don't need to re-allocate */
507                         if (np->rx_skbuff[entry] == NULL) {
508                                 skb = netdev_alloc_skb_ip_align(dev,
509                                                                 np->rx_buf_sz);
510                                 if (skb == NULL) {
511                                         np->rx_ring[entry].fraginfo = 0;
512                                         printk (KERN_INFO
513                                                 "%s: Still unable to re-allocate Rx skbuff.#%d\n",
514                                                 dev->name, entry);
515                                         break;
516                                 }
517                                 np->rx_skbuff[entry] = skb;
518                                 np->rx_ring[entry].fraginfo =
519                                     cpu_to_le64 (pci_map_single
520                                          (np->pdev, skb->data, np->rx_buf_sz,
521                                           PCI_DMA_FROMDEVICE));
522                         }
523                         np->rx_ring[entry].fraginfo |=
524                             cpu_to_le64((u64)np->rx_buf_sz << 48);
525                         np->rx_ring[entry].status = 0;
526                 } /* end for */
527         } /* end if */
528         spin_unlock_irqrestore (&np->rx_lock, flags);
529         np->timer.expires = jiffies + next_tick;
530         add_timer(&np->timer);
531 }
532
533 static void
534 rio_tx_timeout (struct net_device *dev)
535 {
536         long ioaddr = dev->base_addr;
537
538         printk (KERN_INFO "%s: Tx timed out (%4.4x), is buffer full?\n",
539                 dev->name, readl (ioaddr + TxStatus));
540         rio_free_tx(dev, 0);
541         dev->if_port = 0;
542         dev->trans_start = jiffies; /* prevent tx timeout */
543 }
544
545  /* allocate and initialize Tx and Rx descriptors */
546 static void
547 alloc_list (struct net_device *dev)
548 {
549         struct netdev_private *np = netdev_priv(dev);
550         int i;
551
552         np->cur_rx = np->cur_tx = 0;
553         np->old_rx = np->old_tx = 0;
554         np->rx_buf_sz = (dev->mtu <= 1500 ? PACKET_SIZE : dev->mtu + 32);
555
556         /* Initialize Tx descriptors, TFDListPtr leaves in start_xmit(). */
557         for (i = 0; i < TX_RING_SIZE; i++) {
558                 np->tx_skbuff[i] = NULL;
559                 np->tx_ring[i].status = cpu_to_le64 (TFDDone);
560                 np->tx_ring[i].next_desc = cpu_to_le64 (np->tx_ring_dma +
561                                               ((i+1)%TX_RING_SIZE) *
562                                               sizeof (struct netdev_desc));
563         }
564
565         /* Initialize Rx descriptors */
566         for (i = 0; i < RX_RING_SIZE; i++) {
567                 np->rx_ring[i].next_desc = cpu_to_le64 (np->rx_ring_dma +
568                                                 ((i + 1) % RX_RING_SIZE) *
569                                                 sizeof (struct netdev_desc));
570                 np->rx_ring[i].status = 0;
571                 np->rx_ring[i].fraginfo = 0;
572                 np->rx_skbuff[i] = NULL;
573         }
574
575         /* Allocate the rx buffers */
576         for (i = 0; i < RX_RING_SIZE; i++) {
577                 /* Allocated fixed size of skbuff */
578                 struct sk_buff *skb;
579
580                 skb = netdev_alloc_skb_ip_align(dev, np->rx_buf_sz);
581                 np->rx_skbuff[i] = skb;
582                 if (skb == NULL) {
583                         printk (KERN_ERR
584                                 "%s: alloc_list: allocate Rx buffer error! ",
585                                 dev->name);
586                         break;
587                 }
588                 /* Rubicon now supports 40 bits of addressing space. */
589                 np->rx_ring[i].fraginfo =
590                     cpu_to_le64 ( pci_map_single (
591                                   np->pdev, skb->data, np->rx_buf_sz,
592                                   PCI_DMA_FROMDEVICE));
593                 np->rx_ring[i].fraginfo |= cpu_to_le64((u64)np->rx_buf_sz << 48);
594         }
595
596         /* Set RFDListPtr */
597         writel (np->rx_ring_dma, dev->base_addr + RFDListPtr0);
598         writel (0, dev->base_addr + RFDListPtr1);
599
600         return;
601 }
602
603 static netdev_tx_t
604 start_xmit (struct sk_buff *skb, struct net_device *dev)
605 {
606         struct netdev_private *np = netdev_priv(dev);
607         struct netdev_desc *txdesc;
608         unsigned entry;
609         u32 ioaddr;
610         u64 tfc_vlan_tag = 0;
611
612         if (np->link_status == 0) {     /* Link Down */
613                 dev_kfree_skb(skb);
614                 return NETDEV_TX_OK;
615         }
616         ioaddr = dev->base_addr;
617         entry = np->cur_tx % TX_RING_SIZE;
618         np->tx_skbuff[entry] = skb;
619         txdesc = &np->tx_ring[entry];
620
621 #if 0
622         if (skb->ip_summed == CHECKSUM_PARTIAL) {
623                 txdesc->status |=
624                     cpu_to_le64 (TCPChecksumEnable | UDPChecksumEnable |
625                                  IPChecksumEnable);
626         }
627 #endif
628         if (np->vlan) {
629                 tfc_vlan_tag = VLANTagInsert |
630                     ((u64)np->vlan << 32) |
631                     ((u64)skb->priority << 45);
632         }
633         txdesc->fraginfo = cpu_to_le64 (pci_map_single (np->pdev, skb->data,
634                                                         skb->len,
635                                                         PCI_DMA_TODEVICE));
636         txdesc->fraginfo |= cpu_to_le64((u64)skb->len << 48);
637
638         /* DL2K bug: DMA fails to get next descriptor ptr in 10Mbps mode
639          * Work around: Always use 1 descriptor in 10Mbps mode */
640         if (entry % np->tx_coalesce == 0 || np->speed == 10)
641                 txdesc->status = cpu_to_le64 (entry | tfc_vlan_tag |
642                                               WordAlignDisable |
643                                               TxDMAIndicate |
644                                               (1 << FragCountShift));
645         else
646                 txdesc->status = cpu_to_le64 (entry | tfc_vlan_tag |
647                                               WordAlignDisable |
648                                               (1 << FragCountShift));
649
650         /* TxDMAPollNow */
651         writel (readl (ioaddr + DMACtrl) | 0x00001000, ioaddr + DMACtrl);
652         /* Schedule ISR */
653         writel(10000, ioaddr + CountDown);
654         np->cur_tx = (np->cur_tx + 1) % TX_RING_SIZE;
655         if ((np->cur_tx - np->old_tx + TX_RING_SIZE) % TX_RING_SIZE
656                         < TX_QUEUE_LEN - 1 && np->speed != 10) {
657                 /* do nothing */
658         } else if (!netif_queue_stopped(dev)) {
659                 netif_stop_queue (dev);
660         }
661
662         /* The first TFDListPtr */
663         if (readl (dev->base_addr + TFDListPtr0) == 0) {
664                 writel (np->tx_ring_dma + entry * sizeof (struct netdev_desc),
665                         dev->base_addr + TFDListPtr0);
666                 writel (0, dev->base_addr + TFDListPtr1);
667         }
668
669         return NETDEV_TX_OK;
670 }
671
672 static irqreturn_t
673 rio_interrupt (int irq, void *dev_instance)
674 {
675         struct net_device *dev = dev_instance;
676         struct netdev_private *np;
677         unsigned int_status;
678         long ioaddr;
679         int cnt = max_intrloop;
680         int handled = 0;
681
682         ioaddr = dev->base_addr;
683         np = netdev_priv(dev);
684         while (1) {
685                 int_status = readw (ioaddr + IntStatus);
686                 writew (int_status, ioaddr + IntStatus);
687                 int_status &= DEFAULT_INTR;
688                 if (int_status == 0 || --cnt < 0)
689                         break;
690                 handled = 1;
691                 /* Processing received packets */
692                 if (int_status & RxDMAComplete)
693                         receive_packet (dev);
694                 /* TxDMAComplete interrupt */
695                 if ((int_status & (TxDMAComplete|IntRequested))) {
696                         int tx_status;
697                         tx_status = readl (ioaddr + TxStatus);
698                         if (tx_status & 0x01)
699                                 tx_error (dev, tx_status);
700                         /* Free used tx skbuffs */
701                         rio_free_tx (dev, 1);
702                 }
703
704                 /* Handle uncommon events */
705                 if (int_status &
706                     (HostError | LinkEvent | UpdateStats))
707                         rio_error (dev, int_status);
708         }
709         if (np->cur_tx != np->old_tx)
710                 writel (100, ioaddr + CountDown);
711         return IRQ_RETVAL(handled);
712 }
713
714 static inline dma_addr_t desc_to_dma(struct netdev_desc *desc)
715 {
716         return le64_to_cpu(desc->fraginfo) & DMA_BIT_MASK(48);
717 }
718
719 static void
720 rio_free_tx (struct net_device *dev, int irq)
721 {
722         struct netdev_private *np = netdev_priv(dev);
723         int entry = np->old_tx % TX_RING_SIZE;
724         int tx_use = 0;
725         unsigned long flag = 0;
726
727         if (irq)
728                 spin_lock(&np->tx_lock);
729         else
730                 spin_lock_irqsave(&np->tx_lock, flag);
731
732         /* Free used tx skbuffs */
733         while (entry != np->cur_tx) {
734                 struct sk_buff *skb;
735
736                 if (!(np->tx_ring[entry].status & cpu_to_le64(TFDDone)))
737                         break;
738                 skb = np->tx_skbuff[entry];
739                 pci_unmap_single (np->pdev,
740                                   desc_to_dma(&np->tx_ring[entry]),
741                                   skb->len, PCI_DMA_TODEVICE);
742                 if (irq)
743                         dev_kfree_skb_irq (skb);
744                 else
745                         dev_kfree_skb (skb);
746
747                 np->tx_skbuff[entry] = NULL;
748                 entry = (entry + 1) % TX_RING_SIZE;
749                 tx_use++;
750         }
751         if (irq)
752                 spin_unlock(&np->tx_lock);
753         else
754                 spin_unlock_irqrestore(&np->tx_lock, flag);
755         np->old_tx = entry;
756
757         /* If the ring is no longer full, clear tx_full and
758            call netif_wake_queue() */
759
760         if (netif_queue_stopped(dev) &&
761             ((np->cur_tx - np->old_tx + TX_RING_SIZE) % TX_RING_SIZE
762             < TX_QUEUE_LEN - 1 || np->speed == 10)) {
763                 netif_wake_queue (dev);
764         }
765 }
766
767 static void
768 tx_error (struct net_device *dev, int tx_status)
769 {
770         struct netdev_private *np;
771         long ioaddr = dev->base_addr;
772         int frame_id;
773         int i;
774
775         np = netdev_priv(dev);
776
777         frame_id = (tx_status & 0xffff0000);
778         printk (KERN_ERR "%s: Transmit error, TxStatus %4.4x, FrameId %d.\n",
779                 dev->name, tx_status, frame_id);
780         np->stats.tx_errors++;
781         /* Ttransmit Underrun */
782         if (tx_status & 0x10) {
783                 np->stats.tx_fifo_errors++;
784                 writew (readw (ioaddr + TxStartThresh) + 0x10,
785                         ioaddr + TxStartThresh);
786                 /* Transmit Underrun need to set TxReset, DMARest, FIFOReset */
787                 writew (TxReset | DMAReset | FIFOReset | NetworkReset,
788                         ioaddr + ASICCtrl + 2);
789                 /* Wait for ResetBusy bit clear */
790                 for (i = 50; i > 0; i--) {
791                         if ((readw (ioaddr + ASICCtrl + 2) & ResetBusy) == 0)
792                                 break;
793                         mdelay (1);
794                 }
795                 rio_free_tx (dev, 1);
796                 /* Reset TFDListPtr */
797                 writel (np->tx_ring_dma +
798                         np->old_tx * sizeof (struct netdev_desc),
799                         dev->base_addr + TFDListPtr0);
800                 writel (0, dev->base_addr + TFDListPtr1);
801
802                 /* Let TxStartThresh stay default value */
803         }
804         /* Late Collision */
805         if (tx_status & 0x04) {
806                 np->stats.tx_fifo_errors++;
807                 /* TxReset and clear FIFO */
808                 writew (TxReset | FIFOReset, ioaddr + ASICCtrl + 2);
809                 /* Wait reset done */
810                 for (i = 50; i > 0; i--) {
811                         if ((readw (ioaddr + ASICCtrl + 2) & ResetBusy) == 0)
812                                 break;
813                         mdelay (1);
814                 }
815                 /* Let TxStartThresh stay default value */
816         }
817         /* Maximum Collisions */
818 #ifdef ETHER_STATS
819         if (tx_status & 0x08)
820                 np->stats.collisions16++;
821 #else
822         if (tx_status & 0x08)
823                 np->stats.collisions++;
824 #endif
825         /* Restart the Tx */
826         writel (readw (dev->base_addr + MACCtrl) | TxEnable, ioaddr + MACCtrl);
827 }
828
829 static int
830 receive_packet (struct net_device *dev)
831 {
832         struct netdev_private *np = netdev_priv(dev);
833         int entry = np->cur_rx % RX_RING_SIZE;
834         int cnt = 30;
835
836         /* If RFDDone, FrameStart and FrameEnd set, there is a new packet in. */
837         while (1) {
838                 struct netdev_desc *desc = &np->rx_ring[entry];
839                 int pkt_len;
840                 u64 frame_status;
841
842                 if (!(desc->status & cpu_to_le64(RFDDone)) ||
843                     !(desc->status & cpu_to_le64(FrameStart)) ||
844                     !(desc->status & cpu_to_le64(FrameEnd)))
845                         break;
846
847                 /* Chip omits the CRC. */
848                 frame_status = le64_to_cpu(desc->status);
849                 pkt_len = frame_status & 0xffff;
850                 if (--cnt < 0)
851                         break;
852                 /* Update rx error statistics, drop packet. */
853                 if (frame_status & RFS_Errors) {
854                         np->stats.rx_errors++;
855                         if (frame_status & (RxRuntFrame | RxLengthError))
856                                 np->stats.rx_length_errors++;
857                         if (frame_status & RxFCSError)
858                                 np->stats.rx_crc_errors++;
859                         if (frame_status & RxAlignmentError && np->speed != 1000)
860                                 np->stats.rx_frame_errors++;
861                         if (frame_status & RxFIFOOverrun)
862                                 np->stats.rx_fifo_errors++;
863                 } else {
864                         struct sk_buff *skb;
865
866                         /* Small skbuffs for short packets */
867                         if (pkt_len > copy_thresh) {
868                                 pci_unmap_single (np->pdev,
869                                                   desc_to_dma(desc),
870                                                   np->rx_buf_sz,
871                                                   PCI_DMA_FROMDEVICE);
872                                 skb_put (skb = np->rx_skbuff[entry], pkt_len);
873                                 np->rx_skbuff[entry] = NULL;
874                         } else if ((skb = netdev_alloc_skb_ip_align(dev, pkt_len))) {
875                                 pci_dma_sync_single_for_cpu(np->pdev,
876                                                             desc_to_dma(desc),
877                                                             np->rx_buf_sz,
878                                                             PCI_DMA_FROMDEVICE);
879                                 skb_copy_to_linear_data (skb,
880                                                   np->rx_skbuff[entry]->data,
881                                                   pkt_len);
882                                 skb_put (skb, pkt_len);
883                                 pci_dma_sync_single_for_device(np->pdev,
884                                                                desc_to_dma(desc),
885                                                                np->rx_buf_sz,
886                                                                PCI_DMA_FROMDEVICE);
887                         }
888                         skb->protocol = eth_type_trans (skb, dev);
889 #if 0
890                         /* Checksum done by hw, but csum value unavailable. */
891                         if (np->pdev->pci_rev_id >= 0x0c &&
892                                 !(frame_status & (TCPError | UDPError | IPError))) {
893                                 skb->ip_summed = CHECKSUM_UNNECESSARY;
894                         }
895 #endif
896                         netif_rx (skb);
897                 }
898                 entry = (entry + 1) % RX_RING_SIZE;
899         }
900         spin_lock(&np->rx_lock);
901         np->cur_rx = entry;
902         /* Re-allocate skbuffs to fill the descriptor ring */
903         entry = np->old_rx;
904         while (entry != np->cur_rx) {
905                 struct sk_buff *skb;
906                 /* Dropped packets don't need to re-allocate */
907                 if (np->rx_skbuff[entry] == NULL) {
908                         skb = netdev_alloc_skb_ip_align(dev, np->rx_buf_sz);
909                         if (skb == NULL) {
910                                 np->rx_ring[entry].fraginfo = 0;
911                                 printk (KERN_INFO
912                                         "%s: receive_packet: "
913                                         "Unable to re-allocate Rx skbuff.#%d\n",
914                                         dev->name, entry);
915                                 break;
916                         }
917                         np->rx_skbuff[entry] = skb;
918                         np->rx_ring[entry].fraginfo =
919                             cpu_to_le64 (pci_map_single
920                                          (np->pdev, skb->data, np->rx_buf_sz,
921                                           PCI_DMA_FROMDEVICE));
922                 }
923                 np->rx_ring[entry].fraginfo |=
924                     cpu_to_le64((u64)np->rx_buf_sz << 48);
925                 np->rx_ring[entry].status = 0;
926                 entry = (entry + 1) % RX_RING_SIZE;
927         }
928         np->old_rx = entry;
929         spin_unlock(&np->rx_lock);
930         return 0;
931 }
932
933 static void
934 rio_error (struct net_device *dev, int int_status)
935 {
936         long ioaddr = dev->base_addr;
937         struct netdev_private *np = netdev_priv(dev);
938         u16 macctrl;
939
940         /* Link change event */
941         if (int_status & LinkEvent) {
942                 if (mii_wait_link (dev, 10) == 0) {
943                         printk (KERN_INFO "%s: Link up\n", dev->name);
944                         if (np->phy_media)
945                                 mii_get_media_pcs (dev);
946                         else
947                                 mii_get_media (dev);
948                         if (np->speed == 1000)
949                                 np->tx_coalesce = tx_coalesce;
950                         else
951                                 np->tx_coalesce = 1;
952                         macctrl = 0;
953                         macctrl |= (np->vlan) ? AutoVLANuntagging : 0;
954                         macctrl |= (np->full_duplex) ? DuplexSelect : 0;
955                         macctrl |= (np->tx_flow) ?
956                                 TxFlowControlEnable : 0;
957                         macctrl |= (np->rx_flow) ?
958                                 RxFlowControlEnable : 0;
959                         writew(macctrl, ioaddr + MACCtrl);
960                         np->link_status = 1;
961                         netif_carrier_on(dev);
962                 } else {
963                         printk (KERN_INFO "%s: Link off\n", dev->name);
964                         np->link_status = 0;
965                         netif_carrier_off(dev);
966                 }
967         }
968
969         /* UpdateStats statistics registers */
970         if (int_status & UpdateStats) {
971                 get_stats (dev);
972         }
973
974         /* PCI Error, a catastronphic error related to the bus interface
975            occurs, set GlobalReset and HostReset to reset. */
976         if (int_status & HostError) {
977                 printk (KERN_ERR "%s: HostError! IntStatus %4.4x.\n",
978                         dev->name, int_status);
979                 writew (GlobalReset | HostReset, ioaddr + ASICCtrl + 2);
980                 mdelay (500);
981         }
982 }
983
984 static struct net_device_stats *
985 get_stats (struct net_device *dev)
986 {
987         long ioaddr = dev->base_addr;
988         struct netdev_private *np = netdev_priv(dev);
989 #ifdef MEM_MAPPING
990         int i;
991 #endif
992         unsigned int stat_reg;
993
994         /* All statistics registers need to be acknowledged,
995            else statistic overflow could cause problems */
996
997         np->stats.rx_packets += readl (ioaddr + FramesRcvOk);
998         np->stats.tx_packets += readl (ioaddr + FramesXmtOk);
999         np->stats.rx_bytes += readl (ioaddr + OctetRcvOk);
1000         np->stats.tx_bytes += readl (ioaddr + OctetXmtOk);
1001
1002         np->stats.multicast = readl (ioaddr + McstFramesRcvdOk);
1003         np->stats.collisions += readl (ioaddr + SingleColFrames)
1004                              +  readl (ioaddr + MultiColFrames);
1005
1006         /* detailed tx errors */
1007         stat_reg = readw (ioaddr + FramesAbortXSColls);
1008         np->stats.tx_aborted_errors += stat_reg;
1009         np->stats.tx_errors += stat_reg;
1010
1011         stat_reg = readw (ioaddr + CarrierSenseErrors);
1012         np->stats.tx_carrier_errors += stat_reg;
1013         np->stats.tx_errors += stat_reg;
1014
1015         /* Clear all other statistic register. */
1016         readl (ioaddr + McstOctetXmtOk);
1017         readw (ioaddr + BcstFramesXmtdOk);
1018         readl (ioaddr + McstFramesXmtdOk);
1019         readw (ioaddr + BcstFramesRcvdOk);
1020         readw (ioaddr + MacControlFramesRcvd);
1021         readw (ioaddr + FrameTooLongErrors);
1022         readw (ioaddr + InRangeLengthErrors);
1023         readw (ioaddr + FramesCheckSeqErrors);
1024         readw (ioaddr + FramesLostRxErrors);
1025         readl (ioaddr + McstOctetXmtOk);
1026         readl (ioaddr + BcstOctetXmtOk);
1027         readl (ioaddr + McstFramesXmtdOk);
1028         readl (ioaddr + FramesWDeferredXmt);
1029         readl (ioaddr + LateCollisions);
1030         readw (ioaddr + BcstFramesXmtdOk);
1031         readw (ioaddr + MacControlFramesXmtd);
1032         readw (ioaddr + FramesWEXDeferal);
1033
1034 #ifdef MEM_MAPPING
1035         for (i = 0x100; i <= 0x150; i += 4)
1036                 readl (ioaddr + i);
1037 #endif
1038         readw (ioaddr + TxJumboFrames);
1039         readw (ioaddr + RxJumboFrames);
1040         readw (ioaddr + TCPCheckSumErrors);
1041         readw (ioaddr + UDPCheckSumErrors);
1042         readw (ioaddr + IPCheckSumErrors);
1043         return &np->stats;
1044 }
1045
1046 static int
1047 clear_stats (struct net_device *dev)
1048 {
1049         long ioaddr = dev->base_addr;
1050 #ifdef MEM_MAPPING
1051         int i;
1052 #endif
1053
1054         /* All statistics registers need to be acknowledged,
1055            else statistic overflow could cause problems */
1056         readl (ioaddr + FramesRcvOk);
1057         readl (ioaddr + FramesXmtOk);
1058         readl (ioaddr + OctetRcvOk);
1059         readl (ioaddr + OctetXmtOk);
1060
1061         readl (ioaddr + McstFramesRcvdOk);
1062         readl (ioaddr + SingleColFrames);
1063         readl (ioaddr + MultiColFrames);
1064         readl (ioaddr + LateCollisions);
1065         /* detailed rx errors */
1066         readw (ioaddr + FrameTooLongErrors);
1067         readw (ioaddr + InRangeLengthErrors);
1068         readw (ioaddr + FramesCheckSeqErrors);
1069         readw (ioaddr + FramesLostRxErrors);
1070
1071         /* detailed tx errors */
1072         readw (ioaddr + FramesAbortXSColls);
1073         readw (ioaddr + CarrierSenseErrors);
1074
1075         /* Clear all other statistic register. */
1076         readl (ioaddr + McstOctetXmtOk);
1077         readw (ioaddr + BcstFramesXmtdOk);
1078         readl (ioaddr + McstFramesXmtdOk);
1079         readw (ioaddr + BcstFramesRcvdOk);
1080         readw (ioaddr + MacControlFramesRcvd);
1081         readl (ioaddr + McstOctetXmtOk);
1082         readl (ioaddr + BcstOctetXmtOk);
1083         readl (ioaddr + McstFramesXmtdOk);
1084         readl (ioaddr + FramesWDeferredXmt);
1085         readw (ioaddr + BcstFramesXmtdOk);
1086         readw (ioaddr + MacControlFramesXmtd);
1087         readw (ioaddr + FramesWEXDeferal);
1088 #ifdef MEM_MAPPING
1089         for (i = 0x100; i <= 0x150; i += 4)
1090                 readl (ioaddr + i);
1091 #endif
1092         readw (ioaddr + TxJumboFrames);
1093         readw (ioaddr + RxJumboFrames);
1094         readw (ioaddr + TCPCheckSumErrors);
1095         readw (ioaddr + UDPCheckSumErrors);
1096         readw (ioaddr + IPCheckSumErrors);
1097         return 0;
1098 }
1099
1100
1101 static int
1102 change_mtu (struct net_device *dev, int new_mtu)
1103 {
1104         struct netdev_private *np = netdev_priv(dev);
1105         int max = (np->jumbo) ? MAX_JUMBO : 1536;
1106
1107         if ((new_mtu < 68) || (new_mtu > max)) {
1108                 return -EINVAL;
1109         }
1110
1111         dev->mtu = new_mtu;
1112
1113         return 0;
1114 }
1115
1116 static void
1117 set_multicast (struct net_device *dev)
1118 {
1119         long ioaddr = dev->base_addr;
1120         u32 hash_table[2];
1121         u16 rx_mode = 0;
1122         struct netdev_private *np = netdev_priv(dev);
1123
1124         hash_table[0] = hash_table[1] = 0;
1125         /* RxFlowcontrol DA: 01-80-C2-00-00-01. Hash index=0x39 */
1126         hash_table[1] |= 0x02000000;
1127         if (dev->flags & IFF_PROMISC) {
1128                 /* Receive all frames promiscuously. */
1129                 rx_mode = ReceiveAllFrames;
1130         } else if ((dev->flags & IFF_ALLMULTI) ||
1131                         (netdev_mc_count(dev) > multicast_filter_limit)) {
1132                 /* Receive broadcast and multicast frames */
1133                 rx_mode = ReceiveBroadcast | ReceiveMulticast | ReceiveUnicast;
1134         } else if (!netdev_mc_empty(dev)) {
1135                 struct dev_mc_list *mclist;
1136                 /* Receive broadcast frames and multicast frames filtering
1137                    by Hashtable */
1138                 rx_mode =
1139                     ReceiveBroadcast | ReceiveMulticastHash | ReceiveUnicast;
1140                 netdev_for_each_mc_addr(mclist, dev) {
1141                         int bit, index = 0;
1142                         int crc = ether_crc_le (ETH_ALEN, mclist->dmi_addr);
1143                         /* The inverted high significant 6 bits of CRC are
1144                            used as an index to hashtable */
1145                         for (bit = 0; bit < 6; bit++)
1146                                 if (crc & (1 << (31 - bit)))
1147                                         index |= (1 << bit);
1148                         hash_table[index / 32] |= (1 << (index % 32));
1149                 }
1150         } else {
1151                 rx_mode = ReceiveBroadcast | ReceiveUnicast;
1152         }
1153         if (np->vlan) {
1154                 /* ReceiveVLANMatch field in ReceiveMode */
1155                 rx_mode |= ReceiveVLANMatch;
1156         }
1157
1158         writel (hash_table[0], ioaddr + HashTable0);
1159         writel (hash_table[1], ioaddr + HashTable1);
1160         writew (rx_mode, ioaddr + ReceiveMode);
1161 }
1162
1163 static void rio_get_drvinfo(struct net_device *dev, struct ethtool_drvinfo *info)
1164 {
1165         struct netdev_private *np = netdev_priv(dev);
1166         strcpy(info->driver, "dl2k");
1167         strcpy(info->version, DRV_VERSION);
1168         strcpy(info->bus_info, pci_name(np->pdev));
1169 }
1170
1171 static int rio_get_settings(struct net_device *dev, struct ethtool_cmd *cmd)
1172 {
1173         struct netdev_private *np = netdev_priv(dev);
1174         if (np->phy_media) {
1175                 /* fiber device */
1176                 cmd->supported = SUPPORTED_Autoneg | SUPPORTED_FIBRE;
1177                 cmd->advertising= ADVERTISED_Autoneg | ADVERTISED_FIBRE;
1178                 cmd->port = PORT_FIBRE;
1179                 cmd->transceiver = XCVR_INTERNAL;
1180         } else {
1181                 /* copper device */
1182                 cmd->supported = SUPPORTED_10baseT_Half |
1183                         SUPPORTED_10baseT_Full | SUPPORTED_100baseT_Half
1184                         | SUPPORTED_100baseT_Full | SUPPORTED_1000baseT_Full |
1185                         SUPPORTED_Autoneg | SUPPORTED_MII;
1186                 cmd->advertising = ADVERTISED_10baseT_Half |
1187                         ADVERTISED_10baseT_Full | ADVERTISED_100baseT_Half |
1188                         ADVERTISED_100baseT_Full | ADVERTISED_1000baseT_Full|
1189                         ADVERTISED_Autoneg | ADVERTISED_MII;
1190                 cmd->port = PORT_MII;
1191                 cmd->transceiver = XCVR_INTERNAL;
1192         }
1193         if ( np->link_status ) {
1194                 cmd->speed = np->speed;
1195                 cmd->duplex = np->full_duplex ? DUPLEX_FULL : DUPLEX_HALF;
1196         } else {
1197                 cmd->speed = -1;
1198                 cmd->duplex = -1;
1199         }
1200         if ( np->an_enable)
1201                 cmd->autoneg = AUTONEG_ENABLE;
1202         else
1203                 cmd->autoneg = AUTONEG_DISABLE;
1204
1205         cmd->phy_address = np->phy_addr;
1206         return 0;
1207 }
1208
1209 static int rio_set_settings(struct net_device *dev, struct ethtool_cmd *cmd)
1210 {
1211         struct netdev_private *np = netdev_priv(dev);
1212         netif_carrier_off(dev);
1213         if (cmd->autoneg == AUTONEG_ENABLE) {
1214                 if (np->an_enable)
1215                         return 0;
1216                 else {
1217                         np->an_enable = 1;
1218                         mii_set_media(dev);
1219                         return 0;
1220                 }
1221         } else {
1222                 np->an_enable = 0;
1223                 if (np->speed == 1000) {
1224                         cmd->speed = SPEED_100;
1225                         cmd->duplex = DUPLEX_FULL;
1226                         printk("Warning!! Can't disable Auto negotiation in 1000Mbps, change to Manual 100Mbps, Full duplex.\n");
1227                 }
1228                 switch(cmd->speed + cmd->duplex) {
1229
1230                 case SPEED_10 + DUPLEX_HALF:
1231                         np->speed = 10;
1232                         np->full_duplex = 0;
1233                         break;
1234
1235                 case SPEED_10 + DUPLEX_FULL:
1236                         np->speed = 10;
1237                         np->full_duplex = 1;
1238                         break;
1239                 case SPEED_100 + DUPLEX_HALF:
1240                         np->speed = 100;
1241                         np->full_duplex = 0;
1242                         break;
1243                 case SPEED_100 + DUPLEX_FULL:
1244                         np->speed = 100;
1245                         np->full_duplex = 1;
1246                         break;
1247                 case SPEED_1000 + DUPLEX_HALF:/* not supported */
1248                 case SPEED_1000 + DUPLEX_FULL:/* not supported */
1249                 default:
1250                         return -EINVAL;
1251                 }
1252                 mii_set_media(dev);
1253         }
1254         return 0;
1255 }
1256
1257 static u32 rio_get_link(struct net_device *dev)
1258 {
1259         struct netdev_private *np = netdev_priv(dev);
1260         return np->link_status;
1261 }
1262
1263 static const struct ethtool_ops ethtool_ops = {
1264         .get_drvinfo = rio_get_drvinfo,
1265         .get_settings = rio_get_settings,
1266         .set_settings = rio_set_settings,
1267         .get_link = rio_get_link,
1268 };
1269
1270 static int
1271 rio_ioctl (struct net_device *dev, struct ifreq *rq, int cmd)
1272 {
1273         int phy_addr;
1274         struct netdev_private *np = netdev_priv(dev);
1275         struct mii_data *miidata = (struct mii_data *) &rq->ifr_ifru;
1276
1277         struct netdev_desc *desc;
1278         int i;
1279
1280         phy_addr = np->phy_addr;
1281         switch (cmd) {
1282         case SIOCDEVPRIVATE:
1283                 break;
1284
1285         case SIOCDEVPRIVATE + 1:
1286                 miidata->out_value = mii_read (dev, phy_addr, miidata->reg_num);
1287                 break;
1288         case SIOCDEVPRIVATE + 2:
1289                 mii_write (dev, phy_addr, miidata->reg_num, miidata->in_value);
1290                 break;
1291         case SIOCDEVPRIVATE + 3:
1292                 break;
1293         case SIOCDEVPRIVATE + 4:
1294                 break;
1295         case SIOCDEVPRIVATE + 5:
1296                 netif_stop_queue (dev);
1297                 break;
1298         case SIOCDEVPRIVATE + 6:
1299                 netif_wake_queue (dev);
1300                 break;
1301         case SIOCDEVPRIVATE + 7:
1302                 printk
1303                     ("tx_full=%x cur_tx=%lx old_tx=%lx cur_rx=%lx old_rx=%lx\n",
1304                      netif_queue_stopped(dev), np->cur_tx, np->old_tx, np->cur_rx,
1305                      np->old_rx);
1306                 break;
1307         case SIOCDEVPRIVATE + 8:
1308                 printk("TX ring:\n");
1309                 for (i = 0; i < TX_RING_SIZE; i++) {
1310                         desc = &np->tx_ring[i];
1311                         printk
1312                             ("%02x:cur:%08x next:%08x status:%08x frag1:%08x frag0:%08x",
1313                              i,
1314                              (u32) (np->tx_ring_dma + i * sizeof (*desc)),
1315                              (u32)le64_to_cpu(desc->next_desc),
1316                              (u32)le64_to_cpu(desc->status),
1317                              (u32)(le64_to_cpu(desc->fraginfo) >> 32),
1318                              (u32)le64_to_cpu(desc->fraginfo));
1319                         printk ("\n");
1320                 }
1321                 printk ("\n");
1322                 break;
1323
1324         default:
1325                 return -EOPNOTSUPP;
1326         }
1327         return 0;
1328 }
1329
1330 #define EEP_READ 0x0200
1331 #define EEP_BUSY 0x8000
1332 /* Read the EEPROM word */
1333 /* We use I/O instruction to read/write eeprom to avoid fail on some machines */
1334 static int
1335 read_eeprom (long ioaddr, int eep_addr)
1336 {
1337         int i = 1000;
1338         outw (EEP_READ | (eep_addr & 0xff), ioaddr + EepromCtrl);
1339         while (i-- > 0) {
1340                 if (!(inw (ioaddr + EepromCtrl) & EEP_BUSY)) {
1341                         return inw (ioaddr + EepromData);
1342                 }
1343         }
1344         return 0;
1345 }
1346
1347 enum phy_ctrl_bits {
1348         MII_READ = 0x00, MII_CLK = 0x01, MII_DATA1 = 0x02, MII_WRITE = 0x04,
1349         MII_DUPLEX = 0x08,
1350 };
1351
1352 #define mii_delay() readb(ioaddr)
1353 static void
1354 mii_sendbit (struct net_device *dev, u32 data)
1355 {
1356         long ioaddr = dev->base_addr + PhyCtrl;
1357         data = (data) ? MII_DATA1 : 0;
1358         data |= MII_WRITE;
1359         data |= (readb (ioaddr) & 0xf8) | MII_WRITE;
1360         writeb (data, ioaddr);
1361         mii_delay ();
1362         writeb (data | MII_CLK, ioaddr);
1363         mii_delay ();
1364 }
1365
1366 static int
1367 mii_getbit (struct net_device *dev)
1368 {
1369         long ioaddr = dev->base_addr + PhyCtrl;
1370         u8 data;
1371
1372         data = (readb (ioaddr) & 0xf8) | MII_READ;
1373         writeb (data, ioaddr);
1374         mii_delay ();
1375         writeb (data | MII_CLK, ioaddr);
1376         mii_delay ();
1377         return ((readb (ioaddr) >> 1) & 1);
1378 }
1379
1380 static void
1381 mii_send_bits (struct net_device *dev, u32 data, int len)
1382 {
1383         int i;
1384         for (i = len - 1; i >= 0; i--) {
1385                 mii_sendbit (dev, data & (1 << i));
1386         }
1387 }
1388
1389 static int
1390 mii_read (struct net_device *dev, int phy_addr, int reg_num)
1391 {
1392         u32 cmd;
1393         int i;
1394         u32 retval = 0;
1395
1396         /* Preamble */
1397         mii_send_bits (dev, 0xffffffff, 32);
1398         /* ST(2), OP(2), ADDR(5), REG#(5), TA(2), Data(16) total 32 bits */
1399         /* ST,OP = 0110'b for read operation */
1400         cmd = (0x06 << 10 | phy_addr << 5 | reg_num);
1401         mii_send_bits (dev, cmd, 14);
1402         /* Turnaround */
1403         if (mii_getbit (dev))
1404                 goto err_out;
1405         /* Read data */
1406         for (i = 0; i < 16; i++) {
1407                 retval |= mii_getbit (dev);
1408                 retval <<= 1;
1409         }
1410         /* End cycle */
1411         mii_getbit (dev);
1412         return (retval >> 1) & 0xffff;
1413
1414       err_out:
1415         return 0;
1416 }
1417 static int
1418 mii_write (struct net_device *dev, int phy_addr, int reg_num, u16 data)
1419 {
1420         u32 cmd;
1421
1422         /* Preamble */
1423         mii_send_bits (dev, 0xffffffff, 32);
1424         /* ST(2), OP(2), ADDR(5), REG#(5), TA(2), Data(16) total 32 bits */
1425         /* ST,OP,AAAAA,RRRRR,TA = 0101xxxxxxxxxx10'b = 0x5002 for write */
1426         cmd = (0x5002 << 16) | (phy_addr << 23) | (reg_num << 18) | data;
1427         mii_send_bits (dev, cmd, 32);
1428         /* End cycle */
1429         mii_getbit (dev);
1430         return 0;
1431 }
1432 static int
1433 mii_wait_link (struct net_device *dev, int wait)
1434 {
1435         __u16 bmsr;
1436         int phy_addr;
1437         struct netdev_private *np;
1438
1439         np = netdev_priv(dev);
1440         phy_addr = np->phy_addr;
1441
1442         do {
1443                 bmsr = mii_read (dev, phy_addr, MII_BMSR);
1444                 if (bmsr & MII_BMSR_LINK_STATUS)
1445                         return 0;
1446                 mdelay (1);
1447         } while (--wait > 0);
1448         return -1;
1449 }
1450 static int
1451 mii_get_media (struct net_device *dev)
1452 {
1453         __u16 negotiate;
1454         __u16 bmsr;
1455         __u16 mscr;
1456         __u16 mssr;
1457         int phy_addr;
1458         struct netdev_private *np;
1459
1460         np = netdev_priv(dev);
1461         phy_addr = np->phy_addr;
1462
1463         bmsr = mii_read (dev, phy_addr, MII_BMSR);
1464         if (np->an_enable) {
1465                 if (!(bmsr & MII_BMSR_AN_COMPLETE)) {
1466                         /* Auto-Negotiation not completed */
1467                         return -1;
1468                 }
1469                 negotiate = mii_read (dev, phy_addr, MII_ANAR) &
1470                         mii_read (dev, phy_addr, MII_ANLPAR);
1471                 mscr = mii_read (dev, phy_addr, MII_MSCR);
1472                 mssr = mii_read (dev, phy_addr, MII_MSSR);
1473                 if (mscr & MII_MSCR_1000BT_FD && mssr & MII_MSSR_LP_1000BT_FD) {
1474                         np->speed = 1000;
1475                         np->full_duplex = 1;
1476                         printk (KERN_INFO "Auto 1000 Mbps, Full duplex\n");
1477                 } else if (mscr & MII_MSCR_1000BT_HD && mssr & MII_MSSR_LP_1000BT_HD) {
1478                         np->speed = 1000;
1479                         np->full_duplex = 0;
1480                         printk (KERN_INFO "Auto 1000 Mbps, Half duplex\n");
1481                 } else if (negotiate & MII_ANAR_100BX_FD) {
1482                         np->speed = 100;
1483                         np->full_duplex = 1;
1484                         printk (KERN_INFO "Auto 100 Mbps, Full duplex\n");
1485                 } else if (negotiate & MII_ANAR_100BX_HD) {
1486                         np->speed = 100;
1487                         np->full_duplex = 0;
1488                         printk (KERN_INFO "Auto 100 Mbps, Half duplex\n");
1489                 } else if (negotiate & MII_ANAR_10BT_FD) {
1490                         np->speed = 10;
1491                         np->full_duplex = 1;
1492                         printk (KERN_INFO "Auto 10 Mbps, Full duplex\n");
1493                 } else if (negotiate & MII_ANAR_10BT_HD) {
1494                         np->speed = 10;
1495                         np->full_duplex = 0;
1496                         printk (KERN_INFO "Auto 10 Mbps, Half duplex\n");
1497                 }
1498                 if (negotiate & MII_ANAR_PAUSE) {
1499                         np->tx_flow &= 1;
1500                         np->rx_flow &= 1;
1501                 } else if (negotiate & MII_ANAR_ASYMMETRIC) {
1502                         np->tx_flow = 0;
1503                         np->rx_flow &= 1;
1504                 }
1505                 /* else tx_flow, rx_flow = user select  */
1506         } else {
1507                 __u16 bmcr = mii_read (dev, phy_addr, MII_BMCR);
1508                 switch (bmcr & (MII_BMCR_SPEED_100 | MII_BMCR_SPEED_1000)) {
1509                 case MII_BMCR_SPEED_1000:
1510                         printk (KERN_INFO "Operating at 1000 Mbps, ");
1511                         break;
1512                 case MII_BMCR_SPEED_100:
1513                         printk (KERN_INFO "Operating at 100 Mbps, ");
1514                         break;
1515                 case 0:
1516                         printk (KERN_INFO "Operating at 10 Mbps, ");
1517                 }
1518                 if (bmcr & MII_BMCR_DUPLEX_MODE) {
1519                         printk (KERN_CONT "Full duplex\n");
1520                 } else {
1521                         printk (KERN_CONT "Half duplex\n");
1522                 }
1523         }
1524         if (np->tx_flow)
1525                 printk(KERN_INFO "Enable Tx Flow Control\n");
1526         else
1527                 printk(KERN_INFO "Disable Tx Flow Control\n");
1528         if (np->rx_flow)
1529                 printk(KERN_INFO "Enable Rx Flow Control\n");
1530         else
1531                 printk(KERN_INFO "Disable Rx Flow Control\n");
1532
1533         return 0;
1534 }
1535
1536 static int
1537 mii_set_media (struct net_device *dev)
1538 {
1539         __u16 pscr;
1540         __u16 bmcr;
1541         __u16 bmsr;
1542         __u16 anar;
1543         int phy_addr;
1544         struct netdev_private *np;
1545         np = netdev_priv(dev);
1546         phy_addr = np->phy_addr;
1547
1548         /* Does user set speed? */
1549         if (np->an_enable) {
1550                 /* Advertise capabilities */
1551                 bmsr = mii_read (dev, phy_addr, MII_BMSR);
1552                 anar = mii_read (dev, phy_addr, MII_ANAR) &
1553                              ~MII_ANAR_100BX_FD &
1554                              ~MII_ANAR_100BX_HD &
1555                              ~MII_ANAR_100BT4 &
1556                              ~MII_ANAR_10BT_FD &
1557                              ~MII_ANAR_10BT_HD;
1558                 if (bmsr & MII_BMSR_100BX_FD)
1559                         anar |= MII_ANAR_100BX_FD;
1560                 if (bmsr & MII_BMSR_100BX_HD)
1561                         anar |= MII_ANAR_100BX_HD;
1562                 if (bmsr & MII_BMSR_100BT4)
1563                         anar |= MII_ANAR_100BT4;
1564                 if (bmsr & MII_BMSR_10BT_FD)
1565                         anar |= MII_ANAR_10BT_FD;
1566                 if (bmsr & MII_BMSR_10BT_HD)
1567                         anar |= MII_ANAR_10BT_HD;
1568                 anar |= MII_ANAR_PAUSE | MII_ANAR_ASYMMETRIC;
1569                 mii_write (dev, phy_addr, MII_ANAR, anar);
1570
1571                 /* Enable Auto crossover */
1572                 pscr = mii_read (dev, phy_addr, MII_PHY_SCR);
1573                 pscr |= 3 << 5; /* 11'b */
1574                 mii_write (dev, phy_addr, MII_PHY_SCR, pscr);
1575
1576                 /* Soft reset PHY */
1577                 mii_write (dev, phy_addr, MII_BMCR, MII_BMCR_RESET);
1578                 bmcr = MII_BMCR_AN_ENABLE | MII_BMCR_RESTART_AN | MII_BMCR_RESET;
1579                 mii_write (dev, phy_addr, MII_BMCR, bmcr);
1580                 mdelay(1);
1581         } else {
1582                 /* Force speed setting */
1583                 /* 1) Disable Auto crossover */
1584                 pscr = mii_read (dev, phy_addr, MII_PHY_SCR);
1585                 pscr &= ~(3 << 5);
1586                 mii_write (dev, phy_addr, MII_PHY_SCR, pscr);
1587
1588                 /* 2) PHY Reset */
1589                 bmcr = mii_read (dev, phy_addr, MII_BMCR);
1590                 bmcr |= MII_BMCR_RESET;
1591                 mii_write (dev, phy_addr, MII_BMCR, bmcr);
1592
1593                 /* 3) Power Down */
1594                 bmcr = 0x1940;  /* must be 0x1940 */
1595                 mii_write (dev, phy_addr, MII_BMCR, bmcr);
1596                 mdelay (100);   /* wait a certain time */
1597
1598                 /* 4) Advertise nothing */
1599                 mii_write (dev, phy_addr, MII_ANAR, 0);
1600
1601                 /* 5) Set media and Power Up */
1602                 bmcr = MII_BMCR_POWER_DOWN;
1603                 if (np->speed == 100) {
1604                         bmcr |= MII_BMCR_SPEED_100;
1605                         printk (KERN_INFO "Manual 100 Mbps, ");
1606                 } else if (np->speed == 10) {
1607                         printk (KERN_INFO "Manual 10 Mbps, ");
1608                 }
1609                 if (np->full_duplex) {
1610                         bmcr |= MII_BMCR_DUPLEX_MODE;
1611                         printk (KERN_CONT "Full duplex\n");
1612                 } else {
1613                         printk (KERN_CONT "Half duplex\n");
1614                 }
1615 #if 0
1616                 /* Set 1000BaseT Master/Slave setting */
1617                 mscr = mii_read (dev, phy_addr, MII_MSCR);
1618                 mscr |= MII_MSCR_CFG_ENABLE;
1619                 mscr &= ~MII_MSCR_CFG_VALUE = 0;
1620 #endif
1621                 mii_write (dev, phy_addr, MII_BMCR, bmcr);
1622                 mdelay(10);
1623         }
1624         return 0;
1625 }
1626
1627 static int
1628 mii_get_media_pcs (struct net_device *dev)
1629 {
1630         __u16 negotiate;
1631         __u16 bmsr;
1632         int phy_addr;
1633         struct netdev_private *np;
1634
1635         np = netdev_priv(dev);
1636         phy_addr = np->phy_addr;
1637
1638         bmsr = mii_read (dev, phy_addr, PCS_BMSR);
1639         if (np->an_enable) {
1640                 if (!(bmsr & MII_BMSR_AN_COMPLETE)) {
1641                         /* Auto-Negotiation not completed */
1642                         return -1;
1643                 }
1644                 negotiate = mii_read (dev, phy_addr, PCS_ANAR) &
1645                         mii_read (dev, phy_addr, PCS_ANLPAR);
1646                 np->speed = 1000;
1647                 if (negotiate & PCS_ANAR_FULL_DUPLEX) {
1648                         printk (KERN_INFO "Auto 1000 Mbps, Full duplex\n");
1649                         np->full_duplex = 1;
1650                 } else {
1651                         printk (KERN_INFO "Auto 1000 Mbps, half duplex\n");
1652                         np->full_duplex = 0;
1653                 }
1654                 if (negotiate & PCS_ANAR_PAUSE) {
1655                         np->tx_flow &= 1;
1656                         np->rx_flow &= 1;
1657                 } else if (negotiate & PCS_ANAR_ASYMMETRIC) {
1658                         np->tx_flow = 0;
1659                         np->rx_flow &= 1;
1660                 }
1661                 /* else tx_flow, rx_flow = user select  */
1662         } else {
1663                 __u16 bmcr = mii_read (dev, phy_addr, PCS_BMCR);
1664                 printk (KERN_INFO "Operating at 1000 Mbps, ");
1665                 if (bmcr & MII_BMCR_DUPLEX_MODE) {
1666                         printk (KERN_CONT "Full duplex\n");
1667                 } else {
1668                         printk (KERN_CONT "Half duplex\n");
1669                 }
1670         }
1671         if (np->tx_flow)
1672                 printk(KERN_INFO "Enable Tx Flow Control\n");
1673         else
1674                 printk(KERN_INFO "Disable Tx Flow Control\n");
1675         if (np->rx_flow)
1676                 printk(KERN_INFO "Enable Rx Flow Control\n");
1677         else
1678                 printk(KERN_INFO "Disable Rx Flow Control\n");
1679
1680         return 0;
1681 }
1682
1683 static int
1684 mii_set_media_pcs (struct net_device *dev)
1685 {
1686         __u16 bmcr;
1687         __u16 esr;
1688         __u16 anar;
1689         int phy_addr;
1690         struct netdev_private *np;
1691         np = netdev_priv(dev);
1692         phy_addr = np->phy_addr;
1693
1694         /* Auto-Negotiation? */
1695         if (np->an_enable) {
1696                 /* Advertise capabilities */
1697                 esr = mii_read (dev, phy_addr, PCS_ESR);
1698                 anar = mii_read (dev, phy_addr, MII_ANAR) &
1699                         ~PCS_ANAR_HALF_DUPLEX &
1700                         ~PCS_ANAR_FULL_DUPLEX;
1701                 if (esr & (MII_ESR_1000BT_HD | MII_ESR_1000BX_HD))
1702                         anar |= PCS_ANAR_HALF_DUPLEX;
1703                 if (esr & (MII_ESR_1000BT_FD | MII_ESR_1000BX_FD))
1704                         anar |= PCS_ANAR_FULL_DUPLEX;
1705                 anar |= PCS_ANAR_PAUSE | PCS_ANAR_ASYMMETRIC;
1706                 mii_write (dev, phy_addr, MII_ANAR, anar);
1707
1708                 /* Soft reset PHY */
1709                 mii_write (dev, phy_addr, MII_BMCR, MII_BMCR_RESET);
1710                 bmcr = MII_BMCR_AN_ENABLE | MII_BMCR_RESTART_AN |
1711                        MII_BMCR_RESET;
1712                 mii_write (dev, phy_addr, MII_BMCR, bmcr);
1713                 mdelay(1);
1714         } else {
1715                 /* Force speed setting */
1716                 /* PHY Reset */
1717                 bmcr = MII_BMCR_RESET;
1718                 mii_write (dev, phy_addr, MII_BMCR, bmcr);
1719                 mdelay(10);
1720                 if (np->full_duplex) {
1721                         bmcr = MII_BMCR_DUPLEX_MODE;
1722                         printk (KERN_INFO "Manual full duplex\n");
1723                 } else {
1724                         bmcr = 0;
1725                         printk (KERN_INFO "Manual half duplex\n");
1726                 }
1727                 mii_write (dev, phy_addr, MII_BMCR, bmcr);
1728                 mdelay(10);
1729
1730                 /*  Advertise nothing */
1731                 mii_write (dev, phy_addr, MII_ANAR, 0);
1732         }
1733         return 0;
1734 }
1735
1736
1737 static int
1738 rio_close (struct net_device *dev)
1739 {
1740         long ioaddr = dev->base_addr;
1741         struct netdev_private *np = netdev_priv(dev);
1742         struct sk_buff *skb;
1743         int i;
1744
1745         netif_stop_queue (dev);
1746
1747         /* Disable interrupts */
1748         writew (0, ioaddr + IntEnable);
1749
1750         /* Stop Tx and Rx logics */
1751         writel (TxDisable | RxDisable | StatsDisable, ioaddr + MACCtrl);
1752
1753         free_irq (dev->irq, dev);
1754         del_timer_sync (&np->timer);
1755
1756         /* Free all the skbuffs in the queue. */
1757         for (i = 0; i < RX_RING_SIZE; i++) {
1758                 np->rx_ring[i].status = 0;
1759                 np->rx_ring[i].fraginfo = 0;
1760                 skb = np->rx_skbuff[i];
1761                 if (skb) {
1762                         pci_unmap_single(np->pdev,
1763                                          desc_to_dma(&np->rx_ring[i]),
1764                                          skb->len, PCI_DMA_FROMDEVICE);
1765                         dev_kfree_skb (skb);
1766                         np->rx_skbuff[i] = NULL;
1767                 }
1768         }
1769         for (i = 0; i < TX_RING_SIZE; i++) {
1770                 skb = np->tx_skbuff[i];
1771                 if (skb) {
1772                         pci_unmap_single(np->pdev,
1773                                          desc_to_dma(&np->tx_ring[i]),
1774                                          skb->len, PCI_DMA_TODEVICE);
1775                         dev_kfree_skb (skb);
1776                         np->tx_skbuff[i] = NULL;
1777                 }
1778         }
1779
1780         return 0;
1781 }
1782
1783 static void __devexit
1784 rio_remove1 (struct pci_dev *pdev)
1785 {
1786         struct net_device *dev = pci_get_drvdata (pdev);
1787
1788         if (dev) {
1789                 struct netdev_private *np = netdev_priv(dev);
1790
1791                 unregister_netdev (dev);
1792                 pci_free_consistent (pdev, RX_TOTAL_SIZE, np->rx_ring,
1793                                      np->rx_ring_dma);
1794                 pci_free_consistent (pdev, TX_TOTAL_SIZE, np->tx_ring,
1795                                      np->tx_ring_dma);
1796 #ifdef MEM_MAPPING
1797                 iounmap ((char *) (dev->base_addr));
1798 #endif
1799                 free_netdev (dev);
1800                 pci_release_regions (pdev);
1801                 pci_disable_device (pdev);
1802         }
1803         pci_set_drvdata (pdev, NULL);
1804 }
1805
1806 static struct pci_driver rio_driver = {
1807         .name           = "dl2k",
1808         .id_table       = rio_pci_tbl,
1809         .probe          = rio_probe1,
1810         .remove         = __devexit_p(rio_remove1),
1811 };
1812
1813 static int __init
1814 rio_init (void)
1815 {
1816         return pci_register_driver(&rio_driver);
1817 }
1818
1819 static void __exit
1820 rio_exit (void)
1821 {
1822         pci_unregister_driver (&rio_driver);
1823 }
1824
1825 module_init (rio_init);
1826 module_exit (rio_exit);
1827
1828 /*
1829
1830 Compile command:
1831
1832 gcc -D__KERNEL__ -DMODULE -I/usr/src/linux/include -Wall -Wstrict-prototypes -O2 -c dl2k.c
1833
1834 Read Documentation/networking/dl2k.txt for details.
1835
1836 */
1837