spidernet: separate hardware state from driver state.
[safe/jmp/linux-2.6] / drivers / net / spider_net.c
1 /*
2  * Network device driver for Cell Processor-Based Blade and Celleb platform
3  *
4  * (C) Copyright IBM Corp. 2005
5  * (C) Copyright 2006 TOSHIBA CORPORATION
6  *
7  * Authors : Utz Bacher <utz.bacher@de.ibm.com>
8  *           Jens Osterkamp <Jens.Osterkamp@de.ibm.com>
9  *
10  * This program is free software; you can redistribute it and/or modify
11  * it under the terms of the GNU General Public License as published by
12  * the Free Software Foundation; either version 2, or (at your option)
13  * any later version.
14  *
15  * This program is distributed in the hope that it will be useful,
16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
18  * GNU General Public License for more details.
19  *
20  * You should have received a copy of the GNU General Public License
21  * along with this program; if not, write to the Free Software
22  * Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
23  */
24
25 #include <linux/compiler.h>
26 #include <linux/crc32.h>
27 #include <linux/delay.h>
28 #include <linux/etherdevice.h>
29 #include <linux/ethtool.h>
30 #include <linux/firmware.h>
31 #include <linux/if_vlan.h>
32 #include <linux/in.h>
33 #include <linux/init.h>
34 #include <linux/ioport.h>
35 #include <linux/ip.h>
36 #include <linux/kernel.h>
37 #include <linux/mii.h>
38 #include <linux/module.h>
39 #include <linux/netdevice.h>
40 #include <linux/device.h>
41 #include <linux/pci.h>
42 #include <linux/skbuff.h>
43 #include <linux/slab.h>
44 #include <linux/tcp.h>
45 #include <linux/types.h>
46 #include <linux/vmalloc.h>
47 #include <linux/wait.h>
48 #include <linux/workqueue.h>
49 #include <asm/bitops.h>
50 #include <asm/pci-bridge.h>
51 #include <net/checksum.h>
52
53 #include "spider_net.h"
54
55 MODULE_AUTHOR("Utz Bacher <utz.bacher@de.ibm.com> and Jens Osterkamp " \
56               "<Jens.Osterkamp@de.ibm.com>");
57 MODULE_DESCRIPTION("Spider Southbridge Gigabit Ethernet driver");
58 MODULE_LICENSE("GPL");
59 MODULE_VERSION(VERSION);
60
61 static int rx_descriptors = SPIDER_NET_RX_DESCRIPTORS_DEFAULT;
62 static int tx_descriptors = SPIDER_NET_TX_DESCRIPTORS_DEFAULT;
63
64 module_param(rx_descriptors, int, 0444);
65 module_param(tx_descriptors, int, 0444);
66
67 MODULE_PARM_DESC(rx_descriptors, "number of descriptors used " \
68                  "in rx chains");
69 MODULE_PARM_DESC(tx_descriptors, "number of descriptors used " \
70                  "in tx chain");
71
72 char spider_net_driver_name[] = "spidernet";
73
74 static struct pci_device_id spider_net_pci_tbl[] = {
75         { PCI_VENDOR_ID_TOSHIBA_2, PCI_DEVICE_ID_TOSHIBA_SPIDER_NET,
76           PCI_ANY_ID, PCI_ANY_ID, 0, 0, 0UL },
77         { 0, }
78 };
79
80 MODULE_DEVICE_TABLE(pci, spider_net_pci_tbl);
81
82 /**
83  * spider_net_read_reg - reads an SMMIO register of a card
84  * @card: device structure
85  * @reg: register to read from
86  *
87  * returns the content of the specified SMMIO register.
88  */
89 static inline u32
90 spider_net_read_reg(struct spider_net_card *card, u32 reg)
91 {
92         /* We use the powerpc specific variants instead of readl_be() because
93          * we know spidernet is not a real PCI device and we can thus avoid the
94          * performance hit caused by the PCI workarounds.
95          */
96         return in_be32(card->regs + reg);
97 }
98
99 /**
100  * spider_net_write_reg - writes to an SMMIO register of a card
101  * @card: device structure
102  * @reg: register to write to
103  * @value: value to write into the specified SMMIO register
104  */
105 static inline void
106 spider_net_write_reg(struct spider_net_card *card, u32 reg, u32 value)
107 {
108         /* We use the powerpc specific variants instead of writel_be() because
109          * we know spidernet is not a real PCI device and we can thus avoid the
110          * performance hit caused by the PCI workarounds.
111          */
112         out_be32(card->regs + reg, value);
113 }
114
115 /** spider_net_write_phy - write to phy register
116  * @netdev: adapter to be written to
117  * @mii_id: id of MII
118  * @reg: PHY register
119  * @val: value to be written to phy register
120  *
121  * spider_net_write_phy_register writes to an arbitrary PHY
122  * register via the spider GPCWOPCMD register. We assume the queue does
123  * not run full (not more than 15 commands outstanding).
124  **/
125 static void
126 spider_net_write_phy(struct net_device *netdev, int mii_id,
127                      int reg, int val)
128 {
129         struct spider_net_card *card = netdev_priv(netdev);
130         u32 writevalue;
131
132         writevalue = ((u32)mii_id << 21) |
133                 ((u32)reg << 16) | ((u32)val);
134
135         spider_net_write_reg(card, SPIDER_NET_GPCWOPCMD, writevalue);
136 }
137
138 /** spider_net_read_phy - read from phy register
139  * @netdev: network device to be read from
140  * @mii_id: id of MII
141  * @reg: PHY register
142  *
143  * Returns value read from PHY register
144  *
145  * spider_net_write_phy reads from an arbitrary PHY
146  * register via the spider GPCROPCMD register
147  **/
148 static int
149 spider_net_read_phy(struct net_device *netdev, int mii_id, int reg)
150 {
151         struct spider_net_card *card = netdev_priv(netdev);
152         u32 readvalue;
153
154         readvalue = ((u32)mii_id << 21) | ((u32)reg << 16);
155         spider_net_write_reg(card, SPIDER_NET_GPCROPCMD, readvalue);
156
157         /* we don't use semaphores to wait for an SPIDER_NET_GPROPCMPINT
158          * interrupt, as we poll for the completion of the read operation
159          * in spider_net_read_phy. Should take about 50 us */
160         do {
161                 readvalue = spider_net_read_reg(card, SPIDER_NET_GPCROPCMD);
162         } while (readvalue & SPIDER_NET_GPREXEC);
163
164         readvalue &= SPIDER_NET_GPRDAT_MASK;
165
166         return readvalue;
167 }
168
169 /**
170  * spider_net_setup_aneg - initial auto-negotiation setup
171  * @card: device structure
172  **/
173 static void
174 spider_net_setup_aneg(struct spider_net_card *card)
175 {
176         struct mii_phy *phy = &card->phy;
177         u32 advertise = 0;
178         u16 bmcr, bmsr, stat1000, estat;
179
180         bmcr     = spider_net_read_phy(card->netdev, phy->mii_id, MII_BMCR);
181         bmsr     = spider_net_read_phy(card->netdev, phy->mii_id, MII_BMSR);
182         stat1000 = spider_net_read_phy(card->netdev, phy->mii_id, MII_STAT1000);
183         estat    = spider_net_read_phy(card->netdev, phy->mii_id, MII_ESTATUS);
184
185         if (bmsr & BMSR_10HALF)
186                 advertise |= ADVERTISED_10baseT_Half;
187         if (bmsr & BMSR_10FULL)
188                 advertise |= ADVERTISED_10baseT_Full;
189         if (bmsr & BMSR_100HALF)
190                 advertise |= ADVERTISED_100baseT_Half;
191         if (bmsr & BMSR_100FULL)
192                 advertise |= ADVERTISED_100baseT_Full;
193
194         if ((bmsr & BMSR_ESTATEN) && (estat & ESTATUS_1000_TFULL))
195                 advertise |= SUPPORTED_1000baseT_Full;
196         if ((bmsr & BMSR_ESTATEN) && (estat & ESTATUS_1000_THALF))
197                 advertise |= SUPPORTED_1000baseT_Half;
198
199         mii_phy_probe(phy, phy->mii_id);
200         phy->def->ops->setup_aneg(phy, advertise);
201
202 }
203
204 /**
205  * spider_net_rx_irq_off - switch off rx irq on this spider card
206  * @card: device structure
207  *
208  * switches off rx irq by masking them out in the GHIINTnMSK register
209  */
210 static void
211 spider_net_rx_irq_off(struct spider_net_card *card)
212 {
213         u32 regvalue;
214
215         regvalue = SPIDER_NET_INT0_MASK_VALUE & (~SPIDER_NET_RXINT);
216         spider_net_write_reg(card, SPIDER_NET_GHIINT0MSK, regvalue);
217 }
218
219 /**
220  * spider_net_rx_irq_on - switch on rx irq on this spider card
221  * @card: device structure
222  *
223  * switches on rx irq by enabling them in the GHIINTnMSK register
224  */
225 static void
226 spider_net_rx_irq_on(struct spider_net_card *card)
227 {
228         u32 regvalue;
229
230         regvalue = SPIDER_NET_INT0_MASK_VALUE | SPIDER_NET_RXINT;
231         spider_net_write_reg(card, SPIDER_NET_GHIINT0MSK, regvalue);
232 }
233
234 /**
235  * spider_net_set_promisc - sets the unicast address or the promiscuous mode
236  * @card: card structure
237  *
238  * spider_net_set_promisc sets the unicast destination address filter and
239  * thus either allows for non-promisc mode or promisc mode
240  */
241 static void
242 spider_net_set_promisc(struct spider_net_card *card)
243 {
244         u32 macu, macl;
245         struct net_device *netdev = card->netdev;
246
247         if (netdev->flags & IFF_PROMISC) {
248                 /* clear destination entry 0 */
249                 spider_net_write_reg(card, SPIDER_NET_GMRUAFILnR, 0);
250                 spider_net_write_reg(card, SPIDER_NET_GMRUAFILnR + 0x04, 0);
251                 spider_net_write_reg(card, SPIDER_NET_GMRUA0FIL15R,
252                                      SPIDER_NET_PROMISC_VALUE);
253         } else {
254                 macu = netdev->dev_addr[0];
255                 macu <<= 8;
256                 macu |= netdev->dev_addr[1];
257                 memcpy(&macl, &netdev->dev_addr[2], sizeof(macl));
258
259                 macu |= SPIDER_NET_UA_DESCR_VALUE;
260                 spider_net_write_reg(card, SPIDER_NET_GMRUAFILnR, macu);
261                 spider_net_write_reg(card, SPIDER_NET_GMRUAFILnR + 0x04, macl);
262                 spider_net_write_reg(card, SPIDER_NET_GMRUA0FIL15R,
263                                      SPIDER_NET_NONPROMISC_VALUE);
264         }
265 }
266
267 /**
268  * spider_net_get_mac_address - read mac address from spider card
269  * @card: device structure
270  *
271  * reads MAC address from GMACUNIMACU and GMACUNIMACL registers
272  */
273 static int
274 spider_net_get_mac_address(struct net_device *netdev)
275 {
276         struct spider_net_card *card = netdev_priv(netdev);
277         u32 macl, macu;
278
279         macl = spider_net_read_reg(card, SPIDER_NET_GMACUNIMACL);
280         macu = spider_net_read_reg(card, SPIDER_NET_GMACUNIMACU);
281
282         netdev->dev_addr[0] = (macu >> 24) & 0xff;
283         netdev->dev_addr[1] = (macu >> 16) & 0xff;
284         netdev->dev_addr[2] = (macu >> 8) & 0xff;
285         netdev->dev_addr[3] = macu & 0xff;
286         netdev->dev_addr[4] = (macl >> 8) & 0xff;
287         netdev->dev_addr[5] = macl & 0xff;
288
289         if (!is_valid_ether_addr(&netdev->dev_addr[0]))
290                 return -EINVAL;
291
292         return 0;
293 }
294
295 /**
296  * spider_net_get_descr_status -- returns the status of a descriptor
297  * @descr: descriptor to look at
298  *
299  * returns the status as in the dmac_cmd_status field of the descriptor
300  */
301 static inline int
302 spider_net_get_descr_status(struct spider_net_hw_descr *hwdescr)
303 {
304         return hwdescr->dmac_cmd_status & SPIDER_NET_DESCR_IND_PROC_MASK;
305 }
306
307 /**
308  * spider_net_free_chain - free descriptor chain
309  * @card: card structure
310  * @chain: address of chain
311  *
312  */
313 static void
314 spider_net_free_chain(struct spider_net_card *card,
315                       struct spider_net_descr_chain *chain)
316 {
317         struct spider_net_descr *descr;
318
319         descr = chain->ring;
320         do {
321                 descr->bus_addr = 0;
322                 descr->hwdescr->next_descr_addr = 0;
323                 descr = descr->next;
324         } while (descr != chain->ring);
325
326         dma_free_coherent(&card->pdev->dev, chain->num_desc,
327             chain->hwring, chain->dma_addr);
328 }
329
330 /**
331  * spider_net_init_chain - alloc and link descriptor chain
332  * @card: card structure
333  * @chain: address of chain
334  *
335  * We manage a circular list that mirrors the hardware structure,
336  * except that the hardware uses bus addresses.
337  *
338  * Returns 0 on success, <0 on failure
339  */
340 static int
341 spider_net_init_chain(struct spider_net_card *card,
342                        struct spider_net_descr_chain *chain)
343 {
344         int i;
345         struct spider_net_descr *descr;
346         struct spider_net_hw_descr *hwdescr;
347         dma_addr_t buf;
348         size_t alloc_size;
349
350         alloc_size = chain->num_desc * sizeof(struct spider_net_hw_descr);
351
352         chain->hwring = dma_alloc_coherent(&card->pdev->dev, alloc_size,
353                 &chain->dma_addr, GFP_KERNEL);
354
355         if (!chain->hwring)
356                 return -ENOMEM;
357
358         memset(chain->ring, 0, chain->num_desc * sizeof(struct spider_net_descr));
359
360         /* Set up the hardware pointers in each descriptor */
361         descr = chain->ring;
362         hwdescr = chain->hwring;
363         buf = chain->dma_addr;
364         for (i=0; i < chain->num_desc; i++, descr++, hwdescr++) {
365                 hwdescr->dmac_cmd_status = SPIDER_NET_DESCR_NOT_IN_USE;
366                 hwdescr->next_descr_addr = 0;
367
368                 descr->hwdescr = hwdescr;
369                 descr->bus_addr = buf;
370                 descr->next = descr + 1;
371                 descr->prev = descr - 1;
372
373                 buf += sizeof(struct spider_net_hw_descr);
374         }
375         /* do actual circular list */
376         (descr-1)->next = chain->ring;
377         chain->ring->prev = descr-1;
378
379         spin_lock_init(&chain->lock);
380         chain->head = chain->ring;
381         chain->tail = chain->ring;
382         return 0;
383 }
384
385 /**
386  * spider_net_free_rx_chain_contents - frees descr contents in rx chain
387  * @card: card structure
388  *
389  * returns 0 on success, <0 on failure
390  */
391 static void
392 spider_net_free_rx_chain_contents(struct spider_net_card *card)
393 {
394         struct spider_net_descr *descr;
395
396         descr = card->rx_chain.head;
397         do {
398                 if (descr->skb) {
399                         dev_kfree_skb(descr->skb);
400                         pci_unmap_single(card->pdev, descr->hwdescr->buf_addr,
401                                          SPIDER_NET_MAX_FRAME,
402                                          PCI_DMA_BIDIRECTIONAL);
403                 }
404                 descr = descr->next;
405         } while (descr != card->rx_chain.head);
406 }
407
408 /**
409  * spider_net_prepare_rx_descr - Reinitialize RX descriptor
410  * @card: card structure
411  * @descr: descriptor to re-init
412  *
413  * Return 0 on succes, <0 on failure.
414  *
415  * Allocates a new rx skb, iommu-maps it and attaches it to the
416  * descriptor. Mark the descriptor as activated, ready-to-use.
417  */
418 static int
419 spider_net_prepare_rx_descr(struct spider_net_card *card,
420                             struct spider_net_descr *descr)
421 {
422         struct spider_net_hw_descr *hwdescr = descr->hwdescr;
423         dma_addr_t buf;
424         int offset;
425         int bufsize;
426
427         /* we need to round up the buffer size to a multiple of 128 */
428         bufsize = (SPIDER_NET_MAX_FRAME + SPIDER_NET_RXBUF_ALIGN - 1) &
429                 (~(SPIDER_NET_RXBUF_ALIGN - 1));
430
431         /* and we need to have it 128 byte aligned, therefore we allocate a
432          * bit more */
433         /* allocate an skb */
434         descr->skb = dev_alloc_skb(bufsize + SPIDER_NET_RXBUF_ALIGN - 1);
435         if (!descr->skb) {
436                 if (netif_msg_rx_err(card) && net_ratelimit())
437                         pr_err("Not enough memory to allocate rx buffer\n");
438                 card->spider_stats.alloc_rx_skb_error++;
439                 return -ENOMEM;
440         }
441         hwdescr->buf_size = bufsize;
442         hwdescr->result_size = 0;
443         hwdescr->valid_size = 0;
444         hwdescr->data_status = 0;
445         hwdescr->data_error = 0;
446
447         offset = ((unsigned long)descr->skb->data) &
448                 (SPIDER_NET_RXBUF_ALIGN - 1);
449         if (offset)
450                 skb_reserve(descr->skb, SPIDER_NET_RXBUF_ALIGN - offset);
451         /* iommu-map the skb */
452         buf = pci_map_single(card->pdev, descr->skb->data,
453                         SPIDER_NET_MAX_FRAME, PCI_DMA_FROMDEVICE);
454         if (pci_dma_mapping_error(buf)) {
455                 dev_kfree_skb_any(descr->skb);
456                 if (netif_msg_rx_err(card) && net_ratelimit())
457                         pr_err("Could not iommu-map rx buffer\n");
458                 card->spider_stats.rx_iommu_map_error++;
459                 hwdescr->dmac_cmd_status = SPIDER_NET_DESCR_NOT_IN_USE;
460         } else {
461                 hwdescr->buf_addr = buf;
462                 hwdescr->next_descr_addr = 0;
463                 wmb();
464                 hwdescr->dmac_cmd_status = SPIDER_NET_DESCR_CARDOWNED |
465                                          SPIDER_NET_DMAC_NOINTR_COMPLETE;
466
467                 wmb();
468                 descr->prev->hwdescr->next_descr_addr = descr->bus_addr;
469         }
470
471         return 0;
472 }
473
474 /**
475  * spider_net_enable_rxchtails - sets RX dmac chain tail addresses
476  * @card: card structure
477  *
478  * spider_net_enable_rxchtails sets the RX DMAC chain tail adresses in the
479  * chip by writing to the appropriate register. DMA is enabled in
480  * spider_net_enable_rxdmac.
481  */
482 static inline void
483 spider_net_enable_rxchtails(struct spider_net_card *card)
484 {
485         /* assume chain is aligned correctly */
486         spider_net_write_reg(card, SPIDER_NET_GDADCHA ,
487                              card->rx_chain.tail->bus_addr);
488 }
489
490 /**
491  * spider_net_enable_rxdmac - enables a receive DMA controller
492  * @card: card structure
493  *
494  * spider_net_enable_rxdmac enables the DMA controller by setting RX_DMA_EN
495  * in the GDADMACCNTR register
496  */
497 static inline void
498 spider_net_enable_rxdmac(struct spider_net_card *card)
499 {
500         wmb();
501         spider_net_write_reg(card, SPIDER_NET_GDADMACCNTR,
502                              SPIDER_NET_DMA_RX_VALUE);
503 }
504
505 /**
506  * spider_net_refill_rx_chain - refills descriptors/skbs in the rx chains
507  * @card: card structure
508  *
509  * refills descriptors in the rx chain: allocates skbs and iommu-maps them.
510  */
511 static void
512 spider_net_refill_rx_chain(struct spider_net_card *card)
513 {
514         struct spider_net_descr_chain *chain = &card->rx_chain;
515         unsigned long flags;
516
517         /* one context doing the refill (and a second context seeing that
518          * and omitting it) is ok. If called by NAPI, we'll be called again
519          * as spider_net_decode_one_descr is called several times. If some
520          * interrupt calls us, the NAPI is about to clean up anyway. */
521         if (!spin_trylock_irqsave(&chain->lock, flags))
522                 return;
523
524         while (spider_net_get_descr_status(chain->head->hwdescr) ==
525                         SPIDER_NET_DESCR_NOT_IN_USE) {
526                 if (spider_net_prepare_rx_descr(card, chain->head))
527                         break;
528                 chain->head = chain->head->next;
529         }
530
531         spin_unlock_irqrestore(&chain->lock, flags);
532 }
533
534 /**
535  * spider_net_alloc_rx_skbs - Allocates rx skbs in rx descriptor chains
536  * @card: card structure
537  *
538  * Returns 0 on success, <0 on failure.
539  */
540 static int
541 spider_net_alloc_rx_skbs(struct spider_net_card *card)
542 {
543         int result;
544         struct spider_net_descr_chain *chain;
545
546         result = -ENOMEM;
547
548         chain = &card->rx_chain;
549         /* Put at least one buffer into the chain. if this fails,
550          * we've got a problem. If not, spider_net_refill_rx_chain
551          * will do the rest at the end of this function. */
552         if (spider_net_prepare_rx_descr(card, chain->head))
553                 goto error;
554         else
555                 chain->head = chain->head->next;
556
557         /* This will allocate the rest of the rx buffers;
558          * if not, it's business as usual later on. */
559         spider_net_refill_rx_chain(card);
560         spider_net_enable_rxdmac(card);
561         return 0;
562
563 error:
564         spider_net_free_rx_chain_contents(card);
565         return result;
566 }
567
568 /**
569  * spider_net_get_multicast_hash - generates hash for multicast filter table
570  * @addr: multicast address
571  *
572  * returns the hash value.
573  *
574  * spider_net_get_multicast_hash calculates a hash value for a given multicast
575  * address, that is used to set the multicast filter tables
576  */
577 static u8
578 spider_net_get_multicast_hash(struct net_device *netdev, __u8 *addr)
579 {
580         u32 crc;
581         u8 hash;
582         char addr_for_crc[ETH_ALEN] = { 0, };
583         int i, bit;
584
585         for (i = 0; i < ETH_ALEN * 8; i++) {
586                 bit = (addr[i / 8] >> (i % 8)) & 1;
587                 addr_for_crc[ETH_ALEN - 1 - i / 8] += bit << (7 - (i % 8));
588         }
589
590         crc = crc32_be(~0, addr_for_crc, netdev->addr_len);
591
592         hash = (crc >> 27);
593         hash <<= 3;
594         hash |= crc & 7;
595         hash &= 0xff;
596
597         return hash;
598 }
599
600 /**
601  * spider_net_set_multi - sets multicast addresses and promisc flags
602  * @netdev: interface device structure
603  *
604  * spider_net_set_multi configures multicast addresses as needed for the
605  * netdev interface. It also sets up multicast, allmulti and promisc
606  * flags appropriately
607  */
608 static void
609 spider_net_set_multi(struct net_device *netdev)
610 {
611         struct dev_mc_list *mc;
612         u8 hash;
613         int i;
614         u32 reg;
615         struct spider_net_card *card = netdev_priv(netdev);
616         unsigned long bitmask[SPIDER_NET_MULTICAST_HASHES / BITS_PER_LONG] =
617                 {0, };
618
619         spider_net_set_promisc(card);
620
621         if (netdev->flags & IFF_ALLMULTI) {
622                 for (i = 0; i < SPIDER_NET_MULTICAST_HASHES; i++) {
623                         set_bit(i, bitmask);
624                 }
625                 goto write_hash;
626         }
627
628         /* well, we know, what the broadcast hash value is: it's xfd
629         hash = spider_net_get_multicast_hash(netdev, netdev->broadcast); */
630         set_bit(0xfd, bitmask);
631
632         for (mc = netdev->mc_list; mc; mc = mc->next) {
633                 hash = spider_net_get_multicast_hash(netdev, mc->dmi_addr);
634                 set_bit(hash, bitmask);
635         }
636
637 write_hash:
638         for (i = 0; i < SPIDER_NET_MULTICAST_HASHES / 4; i++) {
639                 reg = 0;
640                 if (test_bit(i * 4, bitmask))
641                         reg += 0x08;
642                 reg <<= 8;
643                 if (test_bit(i * 4 + 1, bitmask))
644                         reg += 0x08;
645                 reg <<= 8;
646                 if (test_bit(i * 4 + 2, bitmask))
647                         reg += 0x08;
648                 reg <<= 8;
649                 if (test_bit(i * 4 + 3, bitmask))
650                         reg += 0x08;
651
652                 spider_net_write_reg(card, SPIDER_NET_GMRMHFILnR + i * 4, reg);
653         }
654 }
655
656 /**
657  * spider_net_disable_rxdmac - disables the receive DMA controller
658  * @card: card structure
659  *
660  * spider_net_disable_rxdmac terminates processing on the DMA controller by
661  * turing off DMA and issueing a force end
662  */
663 static void
664 spider_net_disable_rxdmac(struct spider_net_card *card)
665 {
666         spider_net_write_reg(card, SPIDER_NET_GDADMACCNTR,
667                              SPIDER_NET_DMA_RX_FEND_VALUE);
668 }
669
670 /**
671  * spider_net_prepare_tx_descr - fill tx descriptor with skb data
672  * @card: card structure
673  * @descr: descriptor structure to fill out
674  * @skb: packet to use
675  *
676  * returns 0 on success, <0 on failure.
677  *
678  * fills out the descriptor structure with skb data and len. Copies data,
679  * if needed (32bit DMA!)
680  */
681 static int
682 spider_net_prepare_tx_descr(struct spider_net_card *card,
683                             struct sk_buff *skb)
684 {
685         struct spider_net_descr *descr;
686         struct spider_net_hw_descr *hwdescr;
687         dma_addr_t buf;
688         unsigned long flags;
689
690         buf = pci_map_single(card->pdev, skb->data, skb->len, PCI_DMA_TODEVICE);
691         if (pci_dma_mapping_error(buf)) {
692                 if (netif_msg_tx_err(card) && net_ratelimit())
693                         pr_err("could not iommu-map packet (%p, %i). "
694                                   "Dropping packet\n", skb->data, skb->len);
695                 card->spider_stats.tx_iommu_map_error++;
696                 return -ENOMEM;
697         }
698
699         spin_lock_irqsave(&card->tx_chain.lock, flags);
700         descr = card->tx_chain.head;
701         hwdescr = descr->hwdescr;
702         card->tx_chain.head = descr->next;
703
704         descr->skb = skb;
705         hwdescr->buf_addr = buf;
706         hwdescr->buf_size = skb->len;
707         hwdescr->next_descr_addr = 0;
708         hwdescr->data_status = 0;
709
710         hwdescr->dmac_cmd_status =
711                         SPIDER_NET_DESCR_CARDOWNED | SPIDER_NET_DMAC_NOCS;
712         spin_unlock_irqrestore(&card->tx_chain.lock, flags);
713
714         if (skb->protocol == htons(ETH_P_IP))
715                 switch (skb->nh.iph->protocol) {
716                 case IPPROTO_TCP:
717                         hwdescr->dmac_cmd_status |= SPIDER_NET_DMAC_TCP;
718                         break;
719                 case IPPROTO_UDP:
720                         hwdescr->dmac_cmd_status |= SPIDER_NET_DMAC_UDP;
721                         break;
722                 }
723
724         /* Chain the bus address, so that the DMA engine finds this descr. */
725         wmb();
726         descr->prev->hwdescr->next_descr_addr = descr->bus_addr;
727
728         card->netdev->trans_start = jiffies; /* set netdev watchdog timer */
729         return 0;
730 }
731
732 static int
733 spider_net_set_low_watermark(struct spider_net_card *card)
734 {
735         struct spider_net_descr *descr = card->tx_chain.tail;
736         struct spider_net_hw_descr *hwdescr;
737         unsigned long flags;
738         int status;
739         int cnt=0;
740         int i;
741
742         /* Measure the length of the queue. Measurement does not
743          * need to be precise -- does not need a lock. */
744         while (descr != card->tx_chain.head) {
745                 status = descr->hwdescr->dmac_cmd_status & SPIDER_NET_DESCR_NOT_IN_USE;
746                 if (status == SPIDER_NET_DESCR_NOT_IN_USE)
747                         break;
748                 descr = descr->next;
749                 cnt++;
750         }
751
752         /* If TX queue is short, don't even bother with interrupts */
753         if (cnt < card->tx_chain.num_desc/4)
754                 return cnt;
755
756         /* Set low-watermark 3/4th's of the way into the queue. */
757         descr = card->tx_chain.tail;
758         cnt = (cnt*3)/4;
759         for (i=0;i<cnt; i++)
760                 descr = descr->next;
761
762         /* Set the new watermark, clear the old watermark */
763         spin_lock_irqsave(&card->tx_chain.lock, flags);
764         descr->hwdescr->dmac_cmd_status |= SPIDER_NET_DESCR_TXDESFLG;
765         if (card->low_watermark && card->low_watermark != descr) {
766                 hwdescr = card->low_watermark->hwdescr;
767                 hwdescr->dmac_cmd_status =
768                      hwdescr->dmac_cmd_status & ~SPIDER_NET_DESCR_TXDESFLG;
769         }
770         card->low_watermark = descr;
771         spin_unlock_irqrestore(&card->tx_chain.lock, flags);
772         return cnt;
773 }
774
775 /**
776  * spider_net_release_tx_chain - processes sent tx descriptors
777  * @card: adapter structure
778  * @brutal: if set, don't care about whether descriptor seems to be in use
779  *
780  * returns 0 if the tx ring is empty, otherwise 1.
781  *
782  * spider_net_release_tx_chain releases the tx descriptors that spider has
783  * finished with (if non-brutal) or simply release tx descriptors (if brutal).
784  * If some other context is calling this function, we return 1 so that we're
785  * scheduled again (if we were scheduled) and will not loose initiative.
786  */
787 static int
788 spider_net_release_tx_chain(struct spider_net_card *card, int brutal)
789 {
790         struct spider_net_descr_chain *chain = &card->tx_chain;
791         struct spider_net_descr *descr;
792         struct spider_net_hw_descr *hwdescr;
793         struct sk_buff *skb;
794         u32 buf_addr;
795         unsigned long flags;
796         int status;
797
798         while (chain->tail != chain->head) {
799                 spin_lock_irqsave(&chain->lock, flags);
800                 descr = chain->tail;
801                 hwdescr = descr->hwdescr;
802
803                 status = spider_net_get_descr_status(hwdescr);
804                 switch (status) {
805                 case SPIDER_NET_DESCR_COMPLETE:
806                         card->netdev_stats.tx_packets++;
807                         card->netdev_stats.tx_bytes += descr->skb->len;
808                         break;
809
810                 case SPIDER_NET_DESCR_CARDOWNED:
811                         if (!brutal) {
812                                 spin_unlock_irqrestore(&chain->lock, flags);
813                                 return 1;
814                         }
815
816                         /* fallthrough, if we release the descriptors
817                          * brutally (then we don't care about
818                          * SPIDER_NET_DESCR_CARDOWNED) */
819
820                 case SPIDER_NET_DESCR_RESPONSE_ERROR:
821                 case SPIDER_NET_DESCR_PROTECTION_ERROR:
822                 case SPIDER_NET_DESCR_FORCE_END:
823                         if (netif_msg_tx_err(card))
824                                 pr_err("%s: forcing end of tx descriptor "
825                                        "with status x%02x\n",
826                                        card->netdev->name, status);
827                         card->netdev_stats.tx_errors++;
828                         break;
829
830                 default:
831                         card->netdev_stats.tx_dropped++;
832                         if (!brutal) {
833                                 spin_unlock_irqrestore(&chain->lock, flags);
834                                 return 1;
835                         }
836                 }
837
838                 chain->tail = descr->next;
839                 hwdescr->dmac_cmd_status |= SPIDER_NET_DESCR_NOT_IN_USE;
840                 skb = descr->skb;
841                 buf_addr = hwdescr->buf_addr;
842                 spin_unlock_irqrestore(&chain->lock, flags);
843
844                 /* unmap the skb */
845                 if (skb) {
846                         pci_unmap_single(card->pdev, buf_addr, skb->len,
847                                         PCI_DMA_TODEVICE);
848                         dev_kfree_skb(skb);
849                 }
850         }
851         return 0;
852 }
853
854 /**
855  * spider_net_kick_tx_dma - enables TX DMA processing
856  * @card: card structure
857  * @descr: descriptor address to enable TX processing at
858  *
859  * This routine will start the transmit DMA running if
860  * it is not already running. This routine ned only be
861  * called when queueing a new packet to an empty tx queue.
862  * Writes the current tx chain head as start address
863  * of the tx descriptor chain and enables the transmission
864  * DMA engine.
865  */
866 static inline void
867 spider_net_kick_tx_dma(struct spider_net_card *card)
868 {
869         struct spider_net_descr *descr;
870
871         if (spider_net_read_reg(card, SPIDER_NET_GDTDMACCNTR) &
872                         SPIDER_NET_TX_DMA_EN)
873                 goto out;
874
875         descr = card->tx_chain.tail;
876         for (;;) {
877                 if (spider_net_get_descr_status(descr->hwdescr) ==
878                                 SPIDER_NET_DESCR_CARDOWNED) {
879                         spider_net_write_reg(card, SPIDER_NET_GDTDCHA,
880                                         descr->bus_addr);
881                         spider_net_write_reg(card, SPIDER_NET_GDTDMACCNTR,
882                                         SPIDER_NET_DMA_TX_VALUE);
883                         break;
884                 }
885                 if (descr == card->tx_chain.head)
886                         break;
887                 descr = descr->next;
888         }
889
890 out:
891         mod_timer(&card->tx_timer, jiffies + SPIDER_NET_TX_TIMER);
892 }
893
894 /**
895  * spider_net_xmit - transmits a frame over the device
896  * @skb: packet to send out
897  * @netdev: interface device structure
898  *
899  * returns 0 on success, !0 on failure
900  */
901 static int
902 spider_net_xmit(struct sk_buff *skb, struct net_device *netdev)
903 {
904         int cnt;
905         struct spider_net_card *card = netdev_priv(netdev);
906         struct spider_net_descr_chain *chain = &card->tx_chain;
907
908         spider_net_release_tx_chain(card, 0);
909
910         if ((chain->head->next == chain->tail->prev) ||
911            (spider_net_prepare_tx_descr(card, skb) != 0)) {
912
913                 card->netdev_stats.tx_dropped++;
914                 netif_stop_queue(netdev);
915                 return NETDEV_TX_BUSY;
916         }
917
918         cnt = spider_net_set_low_watermark(card);
919         if (cnt < 5)
920                 spider_net_kick_tx_dma(card);
921         return NETDEV_TX_OK;
922 }
923
924 /**
925  * spider_net_cleanup_tx_ring - cleans up the TX ring
926  * @card: card structure
927  *
928  * spider_net_cleanup_tx_ring is called by either the tx_timer
929  * or from the NAPI polling routine.
930  * This routine releases resources associted with transmitted
931  * packets, including updating the queue tail pointer.
932  */
933 static void
934 spider_net_cleanup_tx_ring(struct spider_net_card *card)
935 {
936         if ((spider_net_release_tx_chain(card, 0) != 0) &&
937             (card->netdev->flags & IFF_UP)) {
938                 spider_net_kick_tx_dma(card);
939                 netif_wake_queue(card->netdev);
940         }
941 }
942
943 /**
944  * spider_net_do_ioctl - called for device ioctls
945  * @netdev: interface device structure
946  * @ifr: request parameter structure for ioctl
947  * @cmd: command code for ioctl
948  *
949  * returns 0 on success, <0 on failure. Currently, we have no special ioctls.
950  * -EOPNOTSUPP is returned, if an unknown ioctl was requested
951  */
952 static int
953 spider_net_do_ioctl(struct net_device *netdev, struct ifreq *ifr, int cmd)
954 {
955         switch (cmd) {
956         default:
957                 return -EOPNOTSUPP;
958         }
959 }
960
961 /**
962  * spider_net_pass_skb_up - takes an skb from a descriptor and passes it on
963  * @descr: descriptor to process
964  * @card: card structure
965  *
966  * Fills out skb structure and passes the data to the stack.
967  * The descriptor state is not changed.
968  */
969 static void
970 spider_net_pass_skb_up(struct spider_net_descr *descr,
971                        struct spider_net_card *card)
972 {
973         struct spider_net_hw_descr *hwdescr= descr->hwdescr;
974         struct sk_buff *skb;
975         struct net_device *netdev;
976         u32 data_status, data_error;
977
978         data_status = hwdescr->data_status;
979         data_error = hwdescr->data_error;
980         netdev = card->netdev;
981
982         skb = descr->skb;
983         skb->dev = netdev;
984         skb_put(skb, hwdescr->valid_size);
985
986         /* the card seems to add 2 bytes of junk in front
987          * of the ethernet frame */
988 #define SPIDER_MISALIGN         2
989         skb_pull(skb, SPIDER_MISALIGN);
990         skb->protocol = eth_type_trans(skb, netdev);
991
992         /* checksum offload */
993         if (card->options.rx_csum) {
994                 if ( ( (data_status & SPIDER_NET_DATA_STATUS_CKSUM_MASK) ==
995                        SPIDER_NET_DATA_STATUS_CKSUM_MASK) &&
996                      !(data_error & SPIDER_NET_DATA_ERR_CKSUM_MASK))
997                         skb->ip_summed = CHECKSUM_UNNECESSARY;
998                 else
999                         skb->ip_summed = CHECKSUM_NONE;
1000         } else
1001                 skb->ip_summed = CHECKSUM_NONE;
1002
1003         if (data_status & SPIDER_NET_VLAN_PACKET) {
1004                 /* further enhancements: HW-accel VLAN
1005                  * vlan_hwaccel_receive_skb
1006                  */
1007         }
1008
1009         /* pass skb up to stack */
1010         netif_receive_skb(skb);
1011
1012         /* update netdevice statistics */
1013         card->netdev_stats.rx_packets++;
1014         card->netdev_stats.rx_bytes += skb->len;
1015 }
1016
1017 #ifdef DEBUG
1018 static void show_rx_chain(struct spider_net_card *card)
1019 {
1020         struct spider_net_descr_chain *chain = &card->rx_chain;
1021         struct spider_net_descr *start= chain->tail;
1022         struct spider_net_descr *descr= start;
1023         int status;
1024
1025         int cnt = 0;
1026         int cstat = spider_net_get_descr_status(descr);
1027         printk(KERN_INFO "RX chain tail at descr=%ld\n",
1028              (start - card->descr) - card->tx_chain.num_desc);
1029         status = cstat;
1030         do
1031         {
1032                 status = spider_net_get_descr_status(descr);
1033                 if (cstat != status) {
1034                         printk(KERN_INFO "Have %d descrs with stat=x%08x\n", cnt, cstat);
1035                         cstat = status;
1036                         cnt = 0;
1037                 }
1038                 cnt ++;
1039                 descr = descr->next;
1040         } while (descr != start);
1041         printk(KERN_INFO "Last %d descrs with stat=x%08x\n", cnt, cstat);
1042 }
1043 #endif
1044
1045 /**
1046  * spider_net_decode_one_descr - processes an rx descriptor
1047  * @card: card structure
1048  *
1049  * Returns 1 if a packet has been sent to the stack, otherwise 0
1050  *
1051  * Processes an rx descriptor by iommu-unmapping the data buffer and passing
1052  * the packet up to the stack. This function is called in softirq
1053  * context, e.g. either bottom half from interrupt or NAPI polling context
1054  */
1055 static int
1056 spider_net_decode_one_descr(struct spider_net_card *card)
1057 {
1058         struct spider_net_descr_chain *chain = &card->rx_chain;
1059         struct spider_net_descr *descr = chain->tail;
1060         struct spider_net_hw_descr *hwdescr = descr->hwdescr;
1061         int status;
1062
1063         status = spider_net_get_descr_status(hwdescr);
1064
1065         /* Nothing in the descriptor, or ring must be empty */
1066         if ((status == SPIDER_NET_DESCR_CARDOWNED) ||
1067             (status == SPIDER_NET_DESCR_NOT_IN_USE))
1068                 return 0;
1069
1070         /* descriptor definitively used -- move on tail */
1071         chain->tail = descr->next;
1072
1073         /* unmap descriptor */
1074         pci_unmap_single(card->pdev, hwdescr->buf_addr,
1075                         SPIDER_NET_MAX_FRAME, PCI_DMA_FROMDEVICE);
1076
1077         if ( (status == SPIDER_NET_DESCR_RESPONSE_ERROR) ||
1078              (status == SPIDER_NET_DESCR_PROTECTION_ERROR) ||
1079              (status == SPIDER_NET_DESCR_FORCE_END) ) {
1080                 if (netif_msg_rx_err(card))
1081                         pr_err("%s: dropping RX descriptor with state %d\n",
1082                                card->netdev->name, status);
1083                 card->netdev_stats.rx_dropped++;
1084                 goto bad_desc;
1085         }
1086
1087         if ( (status != SPIDER_NET_DESCR_COMPLETE) &&
1088              (status != SPIDER_NET_DESCR_FRAME_END) ) {
1089                 if (netif_msg_rx_err(card))
1090                         pr_err("%s: RX descriptor with unkown state %d\n",
1091                                card->netdev->name, status);
1092                 card->spider_stats.rx_desc_unk_state++;
1093                 goto bad_desc;
1094         }
1095
1096         /* The cases we'll throw away the packet immediately */
1097         if (hwdescr->data_error & SPIDER_NET_DESTROY_RX_FLAGS) {
1098                 if (netif_msg_rx_err(card))
1099                         pr_err("%s: error in received descriptor found, "
1100                                "data_status=x%08x, data_error=x%08x\n",
1101                                card->netdev->name,
1102                                hwdescr->data_status, hwdescr->data_error);
1103                 goto bad_desc;
1104         }
1105
1106         if (hwdescr->dmac_cmd_status & 0xfefe) {
1107                 pr_err("%s: bad status, cmd_status=x%08x\n",
1108                                card->netdev->name,
1109                                hwdescr->dmac_cmd_status);
1110                 pr_err("buf_addr=x%08x\n", hwdescr->buf_addr);
1111                 pr_err("buf_size=x%08x\n", hwdescr->buf_size);
1112                 pr_err("next_descr_addr=x%08x\n", hwdescr->next_descr_addr);
1113                 pr_err("result_size=x%08x\n", hwdescr->result_size);
1114                 pr_err("valid_size=x%08x\n", hwdescr->valid_size);
1115                 pr_err("data_status=x%08x\n", hwdescr->data_status);
1116                 pr_err("data_error=x%08x\n", hwdescr->data_error);
1117                 pr_err("which=%ld\n", descr - card->rx_chain.ring);
1118
1119                 card->spider_stats.rx_desc_error++;
1120                 goto bad_desc;
1121         }
1122
1123         /* Ok, we've got a packet in descr */
1124         spider_net_pass_skb_up(descr, card);
1125         hwdescr->dmac_cmd_status = SPIDER_NET_DESCR_NOT_IN_USE;
1126         return 1;
1127
1128 bad_desc:
1129         dev_kfree_skb_irq(descr->skb);
1130         hwdescr->dmac_cmd_status = SPIDER_NET_DESCR_NOT_IN_USE;
1131         return 0;
1132 }
1133
1134 /**
1135  * spider_net_poll - NAPI poll function called by the stack to return packets
1136  * @netdev: interface device structure
1137  * @budget: number of packets we can pass to the stack at most
1138  *
1139  * returns 0 if no more packets available to the driver/stack. Returns 1,
1140  * if the quota is exceeded, but the driver has still packets.
1141  *
1142  * spider_net_poll returns all packets from the rx descriptors to the stack
1143  * (using netif_receive_skb). If all/enough packets are up, the driver
1144  * reenables interrupts and returns 0. If not, 1 is returned.
1145  */
1146 static int
1147 spider_net_poll(struct net_device *netdev, int *budget)
1148 {
1149         struct spider_net_card *card = netdev_priv(netdev);
1150         int packets_to_do, packets_done = 0;
1151         int no_more_packets = 0;
1152
1153         spider_net_cleanup_tx_ring(card);
1154         packets_to_do = min(*budget, netdev->quota);
1155
1156         while (packets_to_do) {
1157                 if (spider_net_decode_one_descr(card)) {
1158                         packets_done++;
1159                         packets_to_do--;
1160                 } else {
1161                         /* no more packets for the stack */
1162                         no_more_packets = 1;
1163                         break;
1164                 }
1165         }
1166
1167         netdev->quota -= packets_done;
1168         *budget -= packets_done;
1169         spider_net_refill_rx_chain(card);
1170         spider_net_enable_rxdmac(card);
1171
1172         /* if all packets are in the stack, enable interrupts and return 0 */
1173         /* if not, return 1 */
1174         if (no_more_packets) {
1175                 netif_rx_complete(netdev);
1176                 spider_net_rx_irq_on(card);
1177                 return 0;
1178         }
1179
1180         return 1;
1181 }
1182
1183 /**
1184  * spider_net_vlan_rx_reg - initializes VLAN structures in the driver and card
1185  * @netdev: interface device structure
1186  * @grp: vlan_group structure that is registered (NULL on destroying interface)
1187  */
1188 static void
1189 spider_net_vlan_rx_reg(struct net_device *netdev, struct vlan_group *grp)
1190 {
1191         /* further enhancement... yet to do */
1192         return;
1193 }
1194
1195 /**
1196  * spider_net_vlan_rx_add - adds VLAN id to the card filter
1197  * @netdev: interface device structure
1198  * @vid: VLAN id to add
1199  */
1200 static void
1201 spider_net_vlan_rx_add(struct net_device *netdev, uint16_t vid)
1202 {
1203         /* further enhancement... yet to do */
1204         /* add vid to card's VLAN filter table */
1205         return;
1206 }
1207
1208 /**
1209  * spider_net_vlan_rx_kill - removes VLAN id to the card filter
1210  * @netdev: interface device structure
1211  * @vid: VLAN id to remove
1212  */
1213 static void
1214 spider_net_vlan_rx_kill(struct net_device *netdev, uint16_t vid)
1215 {
1216         /* further enhancement... yet to do */
1217         /* remove vid from card's VLAN filter table */
1218 }
1219
1220 /**
1221  * spider_net_get_stats - get interface statistics
1222  * @netdev: interface device structure
1223  *
1224  * returns the interface statistics residing in the spider_net_card struct
1225  */
1226 static struct net_device_stats *
1227 spider_net_get_stats(struct net_device *netdev)
1228 {
1229         struct spider_net_card *card = netdev_priv(netdev);
1230         struct net_device_stats *stats = &card->netdev_stats;
1231         return stats;
1232 }
1233
1234 /**
1235  * spider_net_change_mtu - changes the MTU of an interface
1236  * @netdev: interface device structure
1237  * @new_mtu: new MTU value
1238  *
1239  * returns 0 on success, <0 on failure
1240  */
1241 static int
1242 spider_net_change_mtu(struct net_device *netdev, int new_mtu)
1243 {
1244         /* no need to re-alloc skbs or so -- the max mtu is about 2.3k
1245          * and mtu is outbound only anyway */
1246         if ( (new_mtu < SPIDER_NET_MIN_MTU ) ||
1247                 (new_mtu > SPIDER_NET_MAX_MTU) )
1248                 return -EINVAL;
1249         netdev->mtu = new_mtu;
1250         return 0;
1251 }
1252
1253 /**
1254  * spider_net_set_mac - sets the MAC of an interface
1255  * @netdev: interface device structure
1256  * @ptr: pointer to new MAC address
1257  *
1258  * Returns 0 on success, <0 on failure. Currently, we don't support this
1259  * and will always return EOPNOTSUPP.
1260  */
1261 static int
1262 spider_net_set_mac(struct net_device *netdev, void *p)
1263 {
1264         struct spider_net_card *card = netdev_priv(netdev);
1265         u32 macl, macu, regvalue;
1266         struct sockaddr *addr = p;
1267
1268         if (!is_valid_ether_addr(addr->sa_data))
1269                 return -EADDRNOTAVAIL;
1270
1271         /* switch off GMACTPE and GMACRPE */
1272         regvalue = spider_net_read_reg(card, SPIDER_NET_GMACOPEMD);
1273         regvalue &= ~((1 << 5) | (1 << 6));
1274         spider_net_write_reg(card, SPIDER_NET_GMACOPEMD, regvalue);
1275
1276         /* write mac */
1277         macu = (addr->sa_data[0]<<24) + (addr->sa_data[1]<<16) +
1278                 (addr->sa_data[2]<<8) + (addr->sa_data[3]);
1279         macl = (addr->sa_data[4]<<8) + (addr->sa_data[5]);
1280         spider_net_write_reg(card, SPIDER_NET_GMACUNIMACU, macu);
1281         spider_net_write_reg(card, SPIDER_NET_GMACUNIMACL, macl);
1282
1283         /* switch GMACTPE and GMACRPE back on */
1284         regvalue = spider_net_read_reg(card, SPIDER_NET_GMACOPEMD);
1285         regvalue |= ((1 << 5) | (1 << 6));
1286         spider_net_write_reg(card, SPIDER_NET_GMACOPEMD, regvalue);
1287
1288         spider_net_set_promisc(card);
1289
1290         /* look up, whether we have been successful */
1291         if (spider_net_get_mac_address(netdev))
1292                 return -EADDRNOTAVAIL;
1293         if (memcmp(netdev->dev_addr,addr->sa_data,netdev->addr_len))
1294                 return -EADDRNOTAVAIL;
1295
1296         return 0;
1297 }
1298
1299 /**
1300  * spider_net_link_reset
1301  * @netdev: net device structure
1302  *
1303  * This is called when the PHY_LINK signal is asserted. For the blade this is
1304  * not connected so we should never get here.
1305  *
1306  */
1307 static void
1308 spider_net_link_reset(struct net_device *netdev)
1309 {
1310
1311         struct spider_net_card *card = netdev_priv(netdev);
1312
1313         del_timer_sync(&card->aneg_timer);
1314
1315         /* clear interrupt, block further interrupts */
1316         spider_net_write_reg(card, SPIDER_NET_GMACST,
1317                              spider_net_read_reg(card, SPIDER_NET_GMACST));
1318         spider_net_write_reg(card, SPIDER_NET_GMACINTEN, 0);
1319
1320         /* reset phy and setup aneg */
1321         spider_net_setup_aneg(card);
1322         mod_timer(&card->aneg_timer, jiffies + SPIDER_NET_ANEG_TIMER);
1323
1324 }
1325
1326 /**
1327  * spider_net_handle_error_irq - handles errors raised by an interrupt
1328  * @card: card structure
1329  * @status_reg: interrupt status register 0 (GHIINT0STS)
1330  *
1331  * spider_net_handle_error_irq treats or ignores all error conditions
1332  * found when an interrupt is presented
1333  */
1334 static void
1335 spider_net_handle_error_irq(struct spider_net_card *card, u32 status_reg)
1336 {
1337         u32 error_reg1, error_reg2;
1338         u32 i;
1339         int show_error = 1;
1340
1341         error_reg1 = spider_net_read_reg(card, SPIDER_NET_GHIINT1STS);
1342         error_reg2 = spider_net_read_reg(card, SPIDER_NET_GHIINT2STS);
1343
1344         /* check GHIINT0STS ************************************/
1345         if (status_reg)
1346                 for (i = 0; i < 32; i++)
1347                         if (status_reg & (1<<i))
1348                                 switch (i)
1349         {
1350         /* let error_reg1 and error_reg2 evaluation decide, what to do
1351         case SPIDER_NET_PHYINT:
1352         case SPIDER_NET_GMAC2INT:
1353         case SPIDER_NET_GMAC1INT:
1354         case SPIDER_NET_GFIFOINT:
1355         case SPIDER_NET_DMACINT:
1356         case SPIDER_NET_GSYSINT:
1357                 break; */
1358
1359         case SPIDER_NET_GIPSINT:
1360                 show_error = 0;
1361                 break;
1362
1363         case SPIDER_NET_GPWOPCMPINT:
1364                 /* PHY write operation completed */
1365                 show_error = 0;
1366                 break;
1367         case SPIDER_NET_GPROPCMPINT:
1368                 /* PHY read operation completed */
1369                 /* we don't use semaphores, as we poll for the completion
1370                  * of the read operation in spider_net_read_phy. Should take
1371                  * about 50 us */
1372                 show_error = 0;
1373                 break;
1374         case SPIDER_NET_GPWFFINT:
1375                 /* PHY command queue full */
1376                 if (netif_msg_intr(card))
1377                         pr_err("PHY write queue full\n");
1378                 show_error = 0;
1379                 break;
1380
1381         /* case SPIDER_NET_GRMDADRINT: not used. print a message */
1382         /* case SPIDER_NET_GRMARPINT: not used. print a message */
1383         /* case SPIDER_NET_GRMMPINT: not used. print a message */
1384
1385         case SPIDER_NET_GDTDEN0INT:
1386                 /* someone has set TX_DMA_EN to 0 */
1387                 show_error = 0;
1388                 break;
1389
1390         case SPIDER_NET_GDDDEN0INT: /* fallthrough */
1391         case SPIDER_NET_GDCDEN0INT: /* fallthrough */
1392         case SPIDER_NET_GDBDEN0INT: /* fallthrough */
1393         case SPIDER_NET_GDADEN0INT:
1394                 /* someone has set RX_DMA_EN to 0 */
1395                 show_error = 0;
1396                 break;
1397
1398         /* RX interrupts */
1399         case SPIDER_NET_GDDFDCINT:
1400         case SPIDER_NET_GDCFDCINT:
1401         case SPIDER_NET_GDBFDCINT:
1402         case SPIDER_NET_GDAFDCINT:
1403         /* case SPIDER_NET_GDNMINT: not used. print a message */
1404         /* case SPIDER_NET_GCNMINT: not used. print a message */
1405         /* case SPIDER_NET_GBNMINT: not used. print a message */
1406         /* case SPIDER_NET_GANMINT: not used. print a message */
1407         /* case SPIDER_NET_GRFNMINT: not used. print a message */
1408                 show_error = 0;
1409                 break;
1410
1411         /* TX interrupts */
1412         case SPIDER_NET_GDTFDCINT:
1413                 show_error = 0;
1414                 break;
1415         case SPIDER_NET_GTTEDINT:
1416                 show_error = 0;
1417                 break;
1418         case SPIDER_NET_GDTDCEINT:
1419                 /* chain end. If a descriptor should be sent, kick off
1420                  * tx dma
1421                 if (card->tx_chain.tail != card->tx_chain.head)
1422                         spider_net_kick_tx_dma(card);
1423                 */
1424                 show_error = 0;
1425                 break;
1426
1427         /* case SPIDER_NET_G1TMCNTINT: not used. print a message */
1428         /* case SPIDER_NET_GFREECNTINT: not used. print a message */
1429         }
1430
1431         /* check GHIINT1STS ************************************/
1432         if (error_reg1)
1433                 for (i = 0; i < 32; i++)
1434                         if (error_reg1 & (1<<i))
1435                                 switch (i)
1436         {
1437         case SPIDER_NET_GTMFLLINT:
1438                 /* TX RAM full may happen on a usual case.
1439                  * Logging is not needed. */
1440                 show_error = 0;
1441                 break;
1442         case SPIDER_NET_GRFDFLLINT: /* fallthrough */
1443         case SPIDER_NET_GRFCFLLINT: /* fallthrough */
1444         case SPIDER_NET_GRFBFLLINT: /* fallthrough */
1445         case SPIDER_NET_GRFAFLLINT: /* fallthrough */
1446         case SPIDER_NET_GRMFLLINT:
1447                 if (netif_msg_intr(card) && net_ratelimit())
1448                         pr_err("Spider RX RAM full, incoming packets "
1449                                "might be discarded!\n");
1450                 spider_net_rx_irq_off(card);
1451                 netif_rx_schedule(card->netdev);
1452                 show_error = 0;
1453                 break;
1454
1455         /* case SPIDER_NET_GTMSHTINT: problem, print a message */
1456         case SPIDER_NET_GDTINVDINT:
1457                 /* allrighty. tx from previous descr ok */
1458                 show_error = 0;
1459                 break;
1460
1461         /* chain end */
1462         case SPIDER_NET_GDDDCEINT: /* fallthrough */
1463         case SPIDER_NET_GDCDCEINT: /* fallthrough */
1464         case SPIDER_NET_GDBDCEINT: /* fallthrough */
1465         case SPIDER_NET_GDADCEINT:
1466                 if (netif_msg_intr(card) && net_ratelimit())
1467                         pr_err("got descriptor chain end interrupt, "
1468                                "restarting DMAC %c.\n",
1469                                'D'-(i-SPIDER_NET_GDDDCEINT)/3);
1470                 spider_net_refill_rx_chain(card);
1471                 spider_net_enable_rxdmac(card);
1472                 show_error = 0;
1473                 break;
1474
1475         /* invalid descriptor */
1476         case SPIDER_NET_GDDINVDINT: /* fallthrough */
1477         case SPIDER_NET_GDCINVDINT: /* fallthrough */
1478         case SPIDER_NET_GDBINVDINT: /* fallthrough */
1479         case SPIDER_NET_GDAINVDINT:
1480                 /* could happen when rx chain is full */
1481                 spider_net_refill_rx_chain(card);
1482                 spider_net_enable_rxdmac(card);
1483                 show_error = 0;
1484                 break;
1485
1486         /* case SPIDER_NET_GDTRSERINT: problem, print a message */
1487         /* case SPIDER_NET_GDDRSERINT: problem, print a message */
1488         /* case SPIDER_NET_GDCRSERINT: problem, print a message */
1489         /* case SPIDER_NET_GDBRSERINT: problem, print a message */
1490         /* case SPIDER_NET_GDARSERINT: problem, print a message */
1491         /* case SPIDER_NET_GDSERINT: problem, print a message */
1492         /* case SPIDER_NET_GDTPTERINT: problem, print a message */
1493         /* case SPIDER_NET_GDDPTERINT: problem, print a message */
1494         /* case SPIDER_NET_GDCPTERINT: problem, print a message */
1495         /* case SPIDER_NET_GDBPTERINT: problem, print a message */
1496         /* case SPIDER_NET_GDAPTERINT: problem, print a message */
1497         default:
1498                 show_error = 1;
1499                 break;
1500         }
1501
1502         /* check GHIINT2STS ************************************/
1503         if (error_reg2)
1504                 for (i = 0; i < 32; i++)
1505                         if (error_reg2 & (1<<i))
1506                                 switch (i)
1507         {
1508         /* there is nothing we can (want  to) do at this time. Log a
1509          * message, we can switch on and off the specific values later on
1510         case SPIDER_NET_GPROPERINT:
1511         case SPIDER_NET_GMCTCRSNGINT:
1512         case SPIDER_NET_GMCTLCOLINT:
1513         case SPIDER_NET_GMCTTMOTINT:
1514         case SPIDER_NET_GMCRCAERINT:
1515         case SPIDER_NET_GMCRCALERINT:
1516         case SPIDER_NET_GMCRALNERINT:
1517         case SPIDER_NET_GMCROVRINT:
1518         case SPIDER_NET_GMCRRNTINT:
1519         case SPIDER_NET_GMCRRXERINT:
1520         case SPIDER_NET_GTITCSERINT:
1521         case SPIDER_NET_GTIFMTERINT:
1522         case SPIDER_NET_GTIPKTRVKINT:
1523         case SPIDER_NET_GTISPINGINT:
1524         case SPIDER_NET_GTISADNGINT:
1525         case SPIDER_NET_GTISPDNGINT:
1526         case SPIDER_NET_GRIFMTERINT:
1527         case SPIDER_NET_GRIPKTRVKINT:
1528         case SPIDER_NET_GRISPINGINT:
1529         case SPIDER_NET_GRISADNGINT:
1530         case SPIDER_NET_GRISPDNGINT:
1531                 break;
1532         */
1533                 default:
1534                         break;
1535         }
1536
1537         if ((show_error) && (netif_msg_intr(card)) && net_ratelimit())
1538                 pr_err("Got error interrupt on %s, GHIINT0STS = 0x%08x, "
1539                        "GHIINT1STS = 0x%08x, GHIINT2STS = 0x%08x\n",
1540                        card->netdev->name,
1541                        status_reg, error_reg1, error_reg2);
1542
1543         /* clear interrupt sources */
1544         spider_net_write_reg(card, SPIDER_NET_GHIINT1STS, error_reg1);
1545         spider_net_write_reg(card, SPIDER_NET_GHIINT2STS, error_reg2);
1546 }
1547
1548 /**
1549  * spider_net_interrupt - interrupt handler for spider_net
1550  * @irq: interupt number
1551  * @ptr: pointer to net_device
1552  * @regs: PU registers
1553  *
1554  * returns IRQ_HANDLED, if interrupt was for driver, or IRQ_NONE, if no
1555  * interrupt found raised by card.
1556  *
1557  * This is the interrupt handler, that turns off
1558  * interrupts for this device and makes the stack poll the driver
1559  */
1560 static irqreturn_t
1561 spider_net_interrupt(int irq, void *ptr)
1562 {
1563         struct net_device *netdev = ptr;
1564         struct spider_net_card *card = netdev_priv(netdev);
1565         u32 status_reg;
1566
1567         status_reg = spider_net_read_reg(card, SPIDER_NET_GHIINT0STS);
1568
1569         if (!status_reg)
1570                 return IRQ_NONE;
1571
1572         if (status_reg & SPIDER_NET_RXINT ) {
1573                 spider_net_rx_irq_off(card);
1574                 netif_rx_schedule(netdev);
1575         }
1576         if (status_reg & SPIDER_NET_TXINT)
1577                 netif_rx_schedule(netdev);
1578
1579         if (status_reg & SPIDER_NET_LINKINT)
1580                 spider_net_link_reset(netdev);
1581
1582         if (status_reg & SPIDER_NET_ERRINT )
1583                 spider_net_handle_error_irq(card, status_reg);
1584
1585         /* clear interrupt sources */
1586         spider_net_write_reg(card, SPIDER_NET_GHIINT0STS, status_reg);
1587
1588         return IRQ_HANDLED;
1589 }
1590
1591 #ifdef CONFIG_NET_POLL_CONTROLLER
1592 /**
1593  * spider_net_poll_controller - artificial interrupt for netconsole etc.
1594  * @netdev: interface device structure
1595  *
1596  * see Documentation/networking/netconsole.txt
1597  */
1598 static void
1599 spider_net_poll_controller(struct net_device *netdev)
1600 {
1601         disable_irq(netdev->irq);
1602         spider_net_interrupt(netdev->irq, netdev);
1603         enable_irq(netdev->irq);
1604 }
1605 #endif /* CONFIG_NET_POLL_CONTROLLER */
1606
1607 /**
1608  * spider_net_init_card - initializes the card
1609  * @card: card structure
1610  *
1611  * spider_net_init_card initializes the card so that other registers can
1612  * be used
1613  */
1614 static void
1615 spider_net_init_card(struct spider_net_card *card)
1616 {
1617         spider_net_write_reg(card, SPIDER_NET_CKRCTRL,
1618                              SPIDER_NET_CKRCTRL_STOP_VALUE);
1619
1620         spider_net_write_reg(card, SPIDER_NET_CKRCTRL,
1621                              SPIDER_NET_CKRCTRL_RUN_VALUE);
1622
1623         /* trigger ETOMOD signal */
1624         spider_net_write_reg(card, SPIDER_NET_GMACOPEMD,
1625                 spider_net_read_reg(card, SPIDER_NET_GMACOPEMD) | 0x4);
1626
1627 }
1628
1629 /**
1630  * spider_net_enable_card - enables the card by setting all kinds of regs
1631  * @card: card structure
1632  *
1633  * spider_net_enable_card sets a lot of SMMIO registers to enable the device
1634  */
1635 static void
1636 spider_net_enable_card(struct spider_net_card *card)
1637 {
1638         int i;
1639         /* the following array consists of (register),(value) pairs
1640          * that are set in this function. A register of 0 ends the list */
1641         u32 regs[][2] = {
1642                 { SPIDER_NET_GRESUMINTNUM, 0 },
1643                 { SPIDER_NET_GREINTNUM, 0 },
1644
1645                 /* set interrupt frame number registers */
1646                 /* clear the single DMA engine registers first */
1647                 { SPIDER_NET_GFAFRMNUM, SPIDER_NET_GFXFRAMES_VALUE },
1648                 { SPIDER_NET_GFBFRMNUM, SPIDER_NET_GFXFRAMES_VALUE },
1649                 { SPIDER_NET_GFCFRMNUM, SPIDER_NET_GFXFRAMES_VALUE },
1650                 { SPIDER_NET_GFDFRMNUM, SPIDER_NET_GFXFRAMES_VALUE },
1651                 /* then set, what we really need */
1652                 { SPIDER_NET_GFFRMNUM, SPIDER_NET_FRAMENUM_VALUE },
1653
1654                 /* timer counter registers and stuff */
1655                 { SPIDER_NET_GFREECNNUM, 0 },
1656                 { SPIDER_NET_GONETIMENUM, 0 },
1657                 { SPIDER_NET_GTOUTFRMNUM, 0 },
1658
1659                 /* RX mode setting */
1660                 { SPIDER_NET_GRXMDSET, SPIDER_NET_RXMODE_VALUE },
1661                 /* TX mode setting */
1662                 { SPIDER_NET_GTXMDSET, SPIDER_NET_TXMODE_VALUE },
1663                 /* IPSEC mode setting */
1664                 { SPIDER_NET_GIPSECINIT, SPIDER_NET_IPSECINIT_VALUE },
1665
1666                 { SPIDER_NET_GFTRESTRT, SPIDER_NET_RESTART_VALUE },
1667
1668                 { SPIDER_NET_GMRWOLCTRL, 0 },
1669                 { SPIDER_NET_GTESTMD, 0x10000000 },
1670                 { SPIDER_NET_GTTQMSK, 0x00400040 },
1671
1672                 { SPIDER_NET_GMACINTEN, 0 },
1673
1674                 /* flow control stuff */
1675                 { SPIDER_NET_GMACAPAUSE, SPIDER_NET_MACAPAUSE_VALUE },
1676                 { SPIDER_NET_GMACTXPAUSE, SPIDER_NET_TXPAUSE_VALUE },
1677
1678                 { SPIDER_NET_GMACBSTLMT, SPIDER_NET_BURSTLMT_VALUE },
1679                 { 0, 0}
1680         };
1681
1682         i = 0;
1683         while (regs[i][0]) {
1684                 spider_net_write_reg(card, regs[i][0], regs[i][1]);
1685                 i++;
1686         }
1687
1688         /* clear unicast filter table entries 1 to 14 */
1689         for (i = 1; i <= 14; i++) {
1690                 spider_net_write_reg(card,
1691                                      SPIDER_NET_GMRUAFILnR + i * 8,
1692                                      0x00080000);
1693                 spider_net_write_reg(card,
1694                                      SPIDER_NET_GMRUAFILnR + i * 8 + 4,
1695                                      0x00000000);
1696         }
1697
1698         spider_net_write_reg(card, SPIDER_NET_GMRUA0FIL15R, 0x08080000);
1699
1700         spider_net_write_reg(card, SPIDER_NET_ECMODE, SPIDER_NET_ECMODE_VALUE);
1701
1702         /* set chain tail adress for RX chains and
1703          * enable DMA */
1704         spider_net_enable_rxchtails(card);
1705         spider_net_enable_rxdmac(card);
1706
1707         spider_net_write_reg(card, SPIDER_NET_GRXDMAEN, SPIDER_NET_WOL_VALUE);
1708
1709         spider_net_write_reg(card, SPIDER_NET_GMACLENLMT,
1710                              SPIDER_NET_LENLMT_VALUE);
1711         spider_net_write_reg(card, SPIDER_NET_GMACOPEMD,
1712                              SPIDER_NET_OPMODE_VALUE);
1713
1714         /* set interrupt mask registers */
1715         spider_net_write_reg(card, SPIDER_NET_GHIINT0MSK,
1716                              SPIDER_NET_INT0_MASK_VALUE);
1717         spider_net_write_reg(card, SPIDER_NET_GHIINT1MSK,
1718                              SPIDER_NET_INT1_MASK_VALUE);
1719         spider_net_write_reg(card, SPIDER_NET_GHIINT2MSK,
1720                              SPIDER_NET_INT2_MASK_VALUE);
1721
1722         spider_net_write_reg(card, SPIDER_NET_GDTDMACCNTR,
1723                              SPIDER_NET_GDTBSTA);
1724 }
1725
1726 /**
1727  * spider_net_download_firmware - loads firmware into the adapter
1728  * @card: card structure
1729  * @firmware_ptr: pointer to firmware data
1730  *
1731  * spider_net_download_firmware loads the firmware data into the
1732  * adapter. It assumes the length etc. to be allright.
1733  */
1734 static int
1735 spider_net_download_firmware(struct spider_net_card *card,
1736                              const void *firmware_ptr)
1737 {
1738         int sequencer, i;
1739         const u32 *fw_ptr = firmware_ptr;
1740
1741         /* stop sequencers */
1742         spider_net_write_reg(card, SPIDER_NET_GSINIT,
1743                              SPIDER_NET_STOP_SEQ_VALUE);
1744
1745         for (sequencer = 0; sequencer < SPIDER_NET_FIRMWARE_SEQS;
1746              sequencer++) {
1747                 spider_net_write_reg(card,
1748                                      SPIDER_NET_GSnPRGADR + sequencer * 8, 0);
1749                 for (i = 0; i < SPIDER_NET_FIRMWARE_SEQWORDS; i++) {
1750                         spider_net_write_reg(card, SPIDER_NET_GSnPRGDAT +
1751                                              sequencer * 8, *fw_ptr);
1752                         fw_ptr++;
1753                 }
1754         }
1755
1756         if (spider_net_read_reg(card, SPIDER_NET_GSINIT))
1757                 return -EIO;
1758
1759         spider_net_write_reg(card, SPIDER_NET_GSINIT,
1760                              SPIDER_NET_RUN_SEQ_VALUE);
1761
1762         return 0;
1763 }
1764
1765 /**
1766  * spider_net_init_firmware - reads in firmware parts
1767  * @card: card structure
1768  *
1769  * Returns 0 on success, <0 on failure
1770  *
1771  * spider_net_init_firmware opens the sequencer firmware and does some basic
1772  * checks. This function opens and releases the firmware structure. A call
1773  * to download the firmware is performed before the release.
1774  *
1775  * Firmware format
1776  * ===============
1777  * spider_fw.bin is expected to be a file containing 6*1024*4 bytes, 4k being
1778  * the program for each sequencer. Use the command
1779  *    tail -q -n +2 Seq_code1_0x088.txt Seq_code2_0x090.txt              \
1780  *         Seq_code3_0x098.txt Seq_code4_0x0A0.txt Seq_code5_0x0A8.txt   \
1781  *         Seq_code6_0x0B0.txt | xxd -r -p -c4 > spider_fw.bin
1782  *
1783  * to generate spider_fw.bin, if you have sequencer programs with something
1784  * like the following contents for each sequencer:
1785  *    <ONE LINE COMMENT>
1786  *    <FIRST 4-BYTES-WORD FOR SEQUENCER>
1787  *    <SECOND 4-BYTES-WORD FOR SEQUENCER>
1788  *     ...
1789  *    <1024th 4-BYTES-WORD FOR SEQUENCER>
1790  */
1791 static int
1792 spider_net_init_firmware(struct spider_net_card *card)
1793 {
1794         struct firmware *firmware = NULL;
1795         struct device_node *dn;
1796         const u8 *fw_prop = NULL;
1797         int err = -ENOENT;
1798         int fw_size;
1799
1800         if (request_firmware((const struct firmware **)&firmware,
1801                              SPIDER_NET_FIRMWARE_NAME, &card->pdev->dev) == 0) {
1802                 if ( (firmware->size != SPIDER_NET_FIRMWARE_LEN) &&
1803                      netif_msg_probe(card) ) {
1804                         pr_err("Incorrect size of spidernet firmware in " \
1805                                "filesystem. Looking in host firmware...\n");
1806                         goto try_host_fw;
1807                 }
1808                 err = spider_net_download_firmware(card, firmware->data);
1809
1810                 release_firmware(firmware);
1811                 if (err)
1812                         goto try_host_fw;
1813
1814                 goto done;
1815         }
1816
1817 try_host_fw:
1818         dn = pci_device_to_OF_node(card->pdev);
1819         if (!dn)
1820                 goto out_err;
1821
1822         fw_prop = get_property(dn, "firmware", &fw_size);
1823         if (!fw_prop)
1824                 goto out_err;
1825
1826         if ( (fw_size != SPIDER_NET_FIRMWARE_LEN) &&
1827              netif_msg_probe(card) ) {
1828                 pr_err("Incorrect size of spidernet firmware in " \
1829                        "host firmware\n");
1830                 goto done;
1831         }
1832
1833         err = spider_net_download_firmware(card, fw_prop);
1834
1835 done:
1836         return err;
1837 out_err:
1838         if (netif_msg_probe(card))
1839                 pr_err("Couldn't find spidernet firmware in filesystem " \
1840                        "or host firmware\n");
1841         return err;
1842 }
1843
1844 /**
1845  * spider_net_open - called upon ifonfig up
1846  * @netdev: interface device structure
1847  *
1848  * returns 0 on success, <0 on failure
1849  *
1850  * spider_net_open allocates all the descriptors and memory needed for
1851  * operation, sets up multicast list and enables interrupts
1852  */
1853 int
1854 spider_net_open(struct net_device *netdev)
1855 {
1856         struct spider_net_card *card = netdev_priv(netdev);
1857         int result;
1858
1859         result = spider_net_init_firmware(card);
1860         if (result)
1861                 goto init_firmware_failed;
1862
1863         /* start probing with copper */
1864         spider_net_setup_aneg(card);
1865         if (card->phy.def->phy_id)
1866                 mod_timer(&card->aneg_timer, jiffies + SPIDER_NET_ANEG_TIMER);
1867
1868         result = spider_net_init_chain(card, &card->tx_chain);
1869         if (result)
1870                 goto alloc_tx_failed;
1871         card->low_watermark = NULL;
1872
1873         result = spider_net_init_chain(card, &card->rx_chain);
1874         if (result)
1875                 goto alloc_rx_failed;
1876
1877         /* Allocate rx skbs */
1878         if (spider_net_alloc_rx_skbs(card))
1879                 goto alloc_skbs_failed;
1880
1881         spider_net_set_multi(netdev);
1882
1883         /* further enhancement: setup hw vlan, if needed */
1884
1885         result = -EBUSY;
1886         if (request_irq(netdev->irq, spider_net_interrupt,
1887                              IRQF_SHARED, netdev->name, netdev))
1888                 goto register_int_failed;
1889
1890         spider_net_enable_card(card);
1891
1892         netif_start_queue(netdev);
1893         netif_carrier_on(netdev);
1894         netif_poll_enable(netdev);
1895
1896         return 0;
1897
1898 register_int_failed:
1899         spider_net_free_rx_chain_contents(card);
1900 alloc_skbs_failed:
1901         spider_net_free_chain(card, &card->rx_chain);
1902 alloc_rx_failed:
1903         spider_net_free_chain(card, &card->tx_chain);
1904 alloc_tx_failed:
1905         del_timer_sync(&card->aneg_timer);
1906 init_firmware_failed:
1907         return result;
1908 }
1909
1910 /**
1911  * spider_net_link_phy
1912  * @data: used for pointer to card structure
1913  *
1914  */
1915 static void spider_net_link_phy(unsigned long data)
1916 {
1917         struct spider_net_card *card = (struct spider_net_card *)data;
1918         struct mii_phy *phy = &card->phy;
1919
1920         /* if link didn't come up after SPIDER_NET_ANEG_TIMEOUT tries, setup phy again */
1921         if (card->aneg_count > SPIDER_NET_ANEG_TIMEOUT) {
1922
1923                 pr_info("%s: link is down trying to bring it up\n", card->netdev->name);
1924
1925                 switch (card->medium) {
1926                 case BCM54XX_COPPER:
1927                         /* enable fiber with autonegotiation first */
1928                         if (phy->def->ops->enable_fiber)
1929                                 phy->def->ops->enable_fiber(phy, 1);
1930                         card->medium = BCM54XX_FIBER;
1931                         break;
1932
1933                 case BCM54XX_FIBER:
1934                         /* fiber didn't come up, try to disable fiber autoneg */
1935                         if (phy->def->ops->enable_fiber)
1936                                 phy->def->ops->enable_fiber(phy, 0);
1937                         card->medium = BCM54XX_UNKNOWN;
1938                         break;
1939
1940                 case BCM54XX_UNKNOWN:
1941                         /* copper, fiber with and without failed,
1942                          * retry from beginning */
1943                         spider_net_setup_aneg(card);
1944                         card->medium = BCM54XX_COPPER;
1945                         break;
1946                 }
1947
1948                 card->aneg_count = 0;
1949                 mod_timer(&card->aneg_timer, jiffies + SPIDER_NET_ANEG_TIMER);
1950                 return;
1951         }
1952
1953         /* link still not up, try again later */
1954         if (!(phy->def->ops->poll_link(phy))) {
1955                 card->aneg_count++;
1956                 mod_timer(&card->aneg_timer, jiffies + SPIDER_NET_ANEG_TIMER);
1957                 return;
1958         }
1959
1960         /* link came up, get abilities */
1961         phy->def->ops->read_link(phy);
1962
1963         spider_net_write_reg(card, SPIDER_NET_GMACST,
1964                              spider_net_read_reg(card, SPIDER_NET_GMACST));
1965         spider_net_write_reg(card, SPIDER_NET_GMACINTEN, 0x4);
1966
1967         if (phy->speed == 1000)
1968                 spider_net_write_reg(card, SPIDER_NET_GMACMODE, 0x00000001);
1969         else
1970                 spider_net_write_reg(card, SPIDER_NET_GMACMODE, 0);
1971
1972         card->aneg_count = 0;
1973
1974         pr_debug("Found %s with %i Mbps, %s-duplex %sautoneg.\n",
1975                 phy->def->name, phy->speed, phy->duplex==1 ? "Full" : "Half",
1976                 phy->autoneg==1 ? "" : "no ");
1977
1978         return;
1979 }
1980
1981 /**
1982  * spider_net_setup_phy - setup PHY
1983  * @card: card structure
1984  *
1985  * returns 0 on success, <0 on failure
1986  *
1987  * spider_net_setup_phy is used as part of spider_net_probe.
1988  **/
1989 static int
1990 spider_net_setup_phy(struct spider_net_card *card)
1991 {
1992         struct mii_phy *phy = &card->phy;
1993
1994         spider_net_write_reg(card, SPIDER_NET_GDTDMASEL,
1995                              SPIDER_NET_DMASEL_VALUE);
1996         spider_net_write_reg(card, SPIDER_NET_GPCCTRL,
1997                              SPIDER_NET_PHY_CTRL_VALUE);
1998
1999         phy->dev = card->netdev;
2000         phy->mdio_read = spider_net_read_phy;
2001         phy->mdio_write = spider_net_write_phy;
2002
2003         for (phy->mii_id = 1; phy->mii_id <= 31; phy->mii_id++) {
2004                 unsigned short id;
2005                 id = spider_net_read_phy(card->netdev, phy->mii_id, MII_BMSR);
2006                 if (id != 0x0000 && id != 0xffff) {
2007                         if (!mii_phy_probe(phy, phy->mii_id)) {
2008                                 pr_info("Found %s.\n", phy->def->name);
2009                                 break;
2010                         }
2011                 }
2012         }
2013
2014         return 0;
2015 }
2016
2017 /**
2018  * spider_net_workaround_rxramfull - work around firmware bug
2019  * @card: card structure
2020  *
2021  * no return value
2022  **/
2023 static void
2024 spider_net_workaround_rxramfull(struct spider_net_card *card)
2025 {
2026         int i, sequencer = 0;
2027
2028         /* cancel reset */
2029         spider_net_write_reg(card, SPIDER_NET_CKRCTRL,
2030                              SPIDER_NET_CKRCTRL_RUN_VALUE);
2031
2032         /* empty sequencer data */
2033         for (sequencer = 0; sequencer < SPIDER_NET_FIRMWARE_SEQS;
2034              sequencer++) {
2035                 spider_net_write_reg(card, SPIDER_NET_GSnPRGADR +
2036                                      sequencer * 8, 0x0);
2037                 for (i = 0; i < SPIDER_NET_FIRMWARE_SEQWORDS; i++) {
2038                         spider_net_write_reg(card, SPIDER_NET_GSnPRGDAT +
2039                                              sequencer * 8, 0x0);
2040                 }
2041         }
2042
2043         /* set sequencer operation */
2044         spider_net_write_reg(card, SPIDER_NET_GSINIT, 0x000000fe);
2045
2046         /* reset */
2047         spider_net_write_reg(card, SPIDER_NET_CKRCTRL,
2048                              SPIDER_NET_CKRCTRL_STOP_VALUE);
2049 }
2050
2051 /**
2052  * spider_net_stop - called upon ifconfig down
2053  * @netdev: interface device structure
2054  *
2055  * always returns 0
2056  */
2057 int
2058 spider_net_stop(struct net_device *netdev)
2059 {
2060         struct spider_net_card *card = netdev_priv(netdev);
2061
2062         netif_poll_disable(netdev);
2063         netif_carrier_off(netdev);
2064         netif_stop_queue(netdev);
2065         del_timer_sync(&card->tx_timer);
2066         del_timer_sync(&card->aneg_timer);
2067
2068         /* disable/mask all interrupts */
2069         spider_net_write_reg(card, SPIDER_NET_GHIINT0MSK, 0);
2070         spider_net_write_reg(card, SPIDER_NET_GHIINT1MSK, 0);
2071         spider_net_write_reg(card, SPIDER_NET_GHIINT2MSK, 0);
2072         spider_net_write_reg(card, SPIDER_NET_GMACINTEN, 0);
2073
2074         free_irq(netdev->irq, netdev);
2075
2076         spider_net_write_reg(card, SPIDER_NET_GDTDMACCNTR,
2077                              SPIDER_NET_DMA_TX_FEND_VALUE);
2078
2079         /* turn off DMA, force end */
2080         spider_net_disable_rxdmac(card);
2081
2082         /* release chains */
2083         spider_net_release_tx_chain(card, 1);
2084         spider_net_free_rx_chain_contents(card);
2085
2086         spider_net_free_chain(card, &card->tx_chain);
2087         spider_net_free_chain(card, &card->rx_chain);
2088
2089         return 0;
2090 }
2091
2092 /**
2093  * spider_net_tx_timeout_task - task scheduled by the watchdog timeout
2094  * function (to be called not under interrupt status)
2095  * @data: data, is interface device structure
2096  *
2097  * called as task when tx hangs, resets interface (if interface is up)
2098  */
2099 static void
2100 spider_net_tx_timeout_task(struct work_struct *work)
2101 {
2102         struct spider_net_card *card =
2103                 container_of(work, struct spider_net_card, tx_timeout_task);
2104         struct net_device *netdev = card->netdev;
2105
2106         if (!(netdev->flags & IFF_UP))
2107                 goto out;
2108
2109         netif_device_detach(netdev);
2110         spider_net_stop(netdev);
2111
2112         spider_net_workaround_rxramfull(card);
2113         spider_net_init_card(card);
2114
2115         if (spider_net_setup_phy(card))
2116                 goto out;
2117
2118         spider_net_open(netdev);
2119         spider_net_kick_tx_dma(card);
2120         netif_device_attach(netdev);
2121
2122 out:
2123         atomic_dec(&card->tx_timeout_task_counter);
2124 }
2125
2126 /**
2127  * spider_net_tx_timeout - called when the tx timeout watchdog kicks in.
2128  * @netdev: interface device structure
2129  *
2130  * called, if tx hangs. Schedules a task that resets the interface
2131  */
2132 static void
2133 spider_net_tx_timeout(struct net_device *netdev)
2134 {
2135         struct spider_net_card *card;
2136
2137         card = netdev_priv(netdev);
2138         atomic_inc(&card->tx_timeout_task_counter);
2139         if (netdev->flags & IFF_UP)
2140                 schedule_work(&card->tx_timeout_task);
2141         else
2142                 atomic_dec(&card->tx_timeout_task_counter);
2143         card->spider_stats.tx_timeouts++;
2144 }
2145
2146 /**
2147  * spider_net_setup_netdev_ops - initialization of net_device operations
2148  * @netdev: net_device structure
2149  *
2150  * fills out function pointers in the net_device structure
2151  */
2152 static void
2153 spider_net_setup_netdev_ops(struct net_device *netdev)
2154 {
2155         netdev->open = &spider_net_open;
2156         netdev->stop = &spider_net_stop;
2157         netdev->hard_start_xmit = &spider_net_xmit;
2158         netdev->get_stats = &spider_net_get_stats;
2159         netdev->set_multicast_list = &spider_net_set_multi;
2160         netdev->set_mac_address = &spider_net_set_mac;
2161         netdev->change_mtu = &spider_net_change_mtu;
2162         netdev->do_ioctl = &spider_net_do_ioctl;
2163         /* tx watchdog */
2164         netdev->tx_timeout = &spider_net_tx_timeout;
2165         netdev->watchdog_timeo = SPIDER_NET_WATCHDOG_TIMEOUT;
2166         /* NAPI */
2167         netdev->poll = &spider_net_poll;
2168         netdev->weight = SPIDER_NET_NAPI_WEIGHT;
2169         /* HW VLAN */
2170         netdev->vlan_rx_register = &spider_net_vlan_rx_reg;
2171         netdev->vlan_rx_add_vid = &spider_net_vlan_rx_add;
2172         netdev->vlan_rx_kill_vid = &spider_net_vlan_rx_kill;
2173 #ifdef CONFIG_NET_POLL_CONTROLLER
2174         /* poll controller */
2175         netdev->poll_controller = &spider_net_poll_controller;
2176 #endif /* CONFIG_NET_POLL_CONTROLLER */
2177         /* ethtool ops */
2178         netdev->ethtool_ops = &spider_net_ethtool_ops;
2179 }
2180
2181 /**
2182  * spider_net_setup_netdev - initialization of net_device
2183  * @card: card structure
2184  *
2185  * Returns 0 on success or <0 on failure
2186  *
2187  * spider_net_setup_netdev initializes the net_device structure
2188  **/
2189 static int
2190 spider_net_setup_netdev(struct spider_net_card *card)
2191 {
2192         int result;
2193         struct net_device *netdev = card->netdev;
2194         struct device_node *dn;
2195         struct sockaddr addr;
2196         const u8 *mac;
2197
2198         SET_MODULE_OWNER(netdev);
2199         SET_NETDEV_DEV(netdev, &card->pdev->dev);
2200
2201         pci_set_drvdata(card->pdev, netdev);
2202
2203         init_timer(&card->tx_timer);
2204         card->tx_timer.function =
2205                 (void (*)(unsigned long)) spider_net_cleanup_tx_ring;
2206         card->tx_timer.data = (unsigned long) card;
2207         netdev->irq = card->pdev->irq;
2208
2209         card->aneg_count = 0;
2210         init_timer(&card->aneg_timer);
2211         card->aneg_timer.function = spider_net_link_phy;
2212         card->aneg_timer.data = (unsigned long) card;
2213
2214         card->options.rx_csum = SPIDER_NET_RX_CSUM_DEFAULT;
2215
2216         spider_net_setup_netdev_ops(netdev);
2217
2218         netdev->features = NETIF_F_HW_CSUM | NETIF_F_LLTX;
2219         /* some time: NETIF_F_HW_VLAN_TX | NETIF_F_HW_VLAN_RX |
2220          *              NETIF_F_HW_VLAN_FILTER */
2221
2222         netdev->irq = card->pdev->irq;
2223
2224         dn = pci_device_to_OF_node(card->pdev);
2225         if (!dn)
2226                 return -EIO;
2227
2228         mac = get_property(dn, "local-mac-address", NULL);
2229         if (!mac)
2230                 return -EIO;
2231         memcpy(addr.sa_data, mac, ETH_ALEN);
2232
2233         result = spider_net_set_mac(netdev, &addr);
2234         if ((result) && (netif_msg_probe(card)))
2235                 pr_err("Failed to set MAC address: %i\n", result);
2236
2237         result = register_netdev(netdev);
2238         if (result) {
2239                 if (netif_msg_probe(card))
2240                         pr_err("Couldn't register net_device: %i\n",
2241                                   result);
2242                 return result;
2243         }
2244
2245         if (netif_msg_probe(card))
2246                 pr_info("Initialized device %s.\n", netdev->name);
2247
2248         return 0;
2249 }
2250
2251 /**
2252  * spider_net_alloc_card - allocates net_device and card structure
2253  *
2254  * returns the card structure or NULL in case of errors
2255  *
2256  * the card and net_device structures are linked to each other
2257  */
2258 static struct spider_net_card *
2259 spider_net_alloc_card(void)
2260 {
2261         struct net_device *netdev;
2262         struct spider_net_card *card;
2263         size_t alloc_size;
2264
2265         alloc_size = sizeof(struct spider_net_card) +
2266            (tx_descriptors + rx_descriptors) * sizeof(struct spider_net_descr);
2267         netdev = alloc_etherdev(alloc_size);
2268         if (!netdev)
2269                 return NULL;
2270
2271         card = netdev_priv(netdev);
2272         card->netdev = netdev;
2273         card->msg_enable = SPIDER_NET_DEFAULT_MSG;
2274         INIT_WORK(&card->tx_timeout_task, spider_net_tx_timeout_task);
2275         init_waitqueue_head(&card->waitq);
2276         atomic_set(&card->tx_timeout_task_counter, 0);
2277
2278         card->rx_chain.num_desc = rx_descriptors;
2279         card->rx_chain.ring = card->darray;
2280         card->tx_chain.num_desc = tx_descriptors;
2281         card->tx_chain.ring = card->darray + rx_descriptors;
2282
2283         return card;
2284 }
2285
2286 /**
2287  * spider_net_undo_pci_setup - releases PCI ressources
2288  * @card: card structure
2289  *
2290  * spider_net_undo_pci_setup releases the mapped regions
2291  */
2292 static void
2293 spider_net_undo_pci_setup(struct spider_net_card *card)
2294 {
2295         iounmap(card->regs);
2296         pci_release_regions(card->pdev);
2297 }
2298
2299 /**
2300  * spider_net_setup_pci_dev - sets up the device in terms of PCI operations
2301  * @card: card structure
2302  * @pdev: PCI device
2303  *
2304  * Returns the card structure or NULL if any errors occur
2305  *
2306  * spider_net_setup_pci_dev initializes pdev and together with the
2307  * functions called in spider_net_open configures the device so that
2308  * data can be transferred over it
2309  * The net_device structure is attached to the card structure, if the
2310  * function returns without error.
2311  **/
2312 static struct spider_net_card *
2313 spider_net_setup_pci_dev(struct pci_dev *pdev)
2314 {
2315         struct spider_net_card *card;
2316         unsigned long mmio_start, mmio_len;
2317
2318         if (pci_enable_device(pdev)) {
2319                 pr_err("Couldn't enable PCI device\n");
2320                 return NULL;
2321         }
2322
2323         if (!(pci_resource_flags(pdev, 0) & IORESOURCE_MEM)) {
2324                 pr_err("Couldn't find proper PCI device base address.\n");
2325                 goto out_disable_dev;
2326         }
2327
2328         if (pci_request_regions(pdev, spider_net_driver_name)) {
2329                 pr_err("Couldn't obtain PCI resources, aborting.\n");
2330                 goto out_disable_dev;
2331         }
2332
2333         pci_set_master(pdev);
2334
2335         card = spider_net_alloc_card();
2336         if (!card) {
2337                 pr_err("Couldn't allocate net_device structure, "
2338                           "aborting.\n");
2339                 goto out_release_regions;
2340         }
2341         card->pdev = pdev;
2342
2343         /* fetch base address and length of first resource */
2344         mmio_start = pci_resource_start(pdev, 0);
2345         mmio_len = pci_resource_len(pdev, 0);
2346
2347         card->netdev->mem_start = mmio_start;
2348         card->netdev->mem_end = mmio_start + mmio_len;
2349         card->regs = ioremap(mmio_start, mmio_len);
2350
2351         if (!card->regs) {
2352                 pr_err("Couldn't obtain PCI resources, aborting.\n");
2353                 goto out_release_regions;
2354         }
2355
2356         return card;
2357
2358 out_release_regions:
2359         pci_release_regions(pdev);
2360 out_disable_dev:
2361         pci_disable_device(pdev);
2362         pci_set_drvdata(pdev, NULL);
2363         return NULL;
2364 }
2365
2366 /**
2367  * spider_net_probe - initialization of a device
2368  * @pdev: PCI device
2369  * @ent: entry in the device id list
2370  *
2371  * Returns 0 on success, <0 on failure
2372  *
2373  * spider_net_probe initializes pdev and registers a net_device
2374  * structure for it. After that, the device can be ifconfig'ed up
2375  **/
2376 static int __devinit
2377 spider_net_probe(struct pci_dev *pdev, const struct pci_device_id *ent)
2378 {
2379         int err = -EIO;
2380         struct spider_net_card *card;
2381
2382         card = spider_net_setup_pci_dev(pdev);
2383         if (!card)
2384                 goto out;
2385
2386         spider_net_workaround_rxramfull(card);
2387         spider_net_init_card(card);
2388
2389         err = spider_net_setup_phy(card);
2390         if (err)
2391                 goto out_undo_pci;
2392
2393         err = spider_net_setup_netdev(card);
2394         if (err)
2395                 goto out_undo_pci;
2396
2397         return 0;
2398
2399 out_undo_pci:
2400         spider_net_undo_pci_setup(card);
2401         free_netdev(card->netdev);
2402 out:
2403         return err;
2404 }
2405
2406 /**
2407  * spider_net_remove - removal of a device
2408  * @pdev: PCI device
2409  *
2410  * Returns 0 on success, <0 on failure
2411  *
2412  * spider_net_remove is called to remove the device and unregisters the
2413  * net_device
2414  **/
2415 static void __devexit
2416 spider_net_remove(struct pci_dev *pdev)
2417 {
2418         struct net_device *netdev;
2419         struct spider_net_card *card;
2420
2421         netdev = pci_get_drvdata(pdev);
2422         card = netdev_priv(netdev);
2423
2424         wait_event(card->waitq,
2425                    atomic_read(&card->tx_timeout_task_counter) == 0);
2426
2427         unregister_netdev(netdev);
2428
2429         /* switch off card */
2430         spider_net_write_reg(card, SPIDER_NET_CKRCTRL,
2431                              SPIDER_NET_CKRCTRL_STOP_VALUE);
2432         spider_net_write_reg(card, SPIDER_NET_CKRCTRL,
2433                              SPIDER_NET_CKRCTRL_RUN_VALUE);
2434
2435         spider_net_undo_pci_setup(card);
2436         free_netdev(netdev);
2437 }
2438
2439 static struct pci_driver spider_net_driver = {
2440         .name           = spider_net_driver_name,
2441         .id_table       = spider_net_pci_tbl,
2442         .probe          = spider_net_probe,
2443         .remove         = __devexit_p(spider_net_remove)
2444 };
2445
2446 /**
2447  * spider_net_init - init function when the driver is loaded
2448  *
2449  * spider_net_init registers the device driver
2450  */
2451 static int __init spider_net_init(void)
2452 {
2453         printk(KERN_INFO "Spidernet version %s.\n", VERSION);
2454
2455         if (rx_descriptors < SPIDER_NET_RX_DESCRIPTORS_MIN) {
2456                 rx_descriptors = SPIDER_NET_RX_DESCRIPTORS_MIN;
2457                 pr_info("adjusting rx descriptors to %i.\n", rx_descriptors);
2458         }
2459         if (rx_descriptors > SPIDER_NET_RX_DESCRIPTORS_MAX) {
2460                 rx_descriptors = SPIDER_NET_RX_DESCRIPTORS_MAX;
2461                 pr_info("adjusting rx descriptors to %i.\n", rx_descriptors);
2462         }
2463         if (tx_descriptors < SPIDER_NET_TX_DESCRIPTORS_MIN) {
2464                 tx_descriptors = SPIDER_NET_TX_DESCRIPTORS_MIN;
2465                 pr_info("adjusting tx descriptors to %i.\n", tx_descriptors);
2466         }
2467         if (tx_descriptors > SPIDER_NET_TX_DESCRIPTORS_MAX) {
2468                 tx_descriptors = SPIDER_NET_TX_DESCRIPTORS_MAX;
2469                 pr_info("adjusting tx descriptors to %i.\n", tx_descriptors);
2470         }
2471
2472         return pci_register_driver(&spider_net_driver);
2473 }
2474
2475 /**
2476  * spider_net_cleanup - exit function when driver is unloaded
2477  *
2478  * spider_net_cleanup unregisters the device driver
2479  */
2480 static void __exit spider_net_cleanup(void)
2481 {
2482         pci_unregister_driver(&spider_net_driver);
2483 }
2484
2485 module_init(spider_net_init);
2486 module_exit(spider_net_cleanup);