[suse-isdn] SuSE 9.3:Fritz!Card DSL Prob. mit vielen Verbindungen
Hallo Liste! Vor einem Monat hatte ich folgendes Problem: ____________ Bei vielen gleichzeitigen Verbindungen (wie z.B. bei p2p, ab > 20 Verbindungen) friert der Rechner ein. Dieses Problem trat auch unter Suse 9.2 sowie mit verschiedenen Treiberversionen auf (auch der aktuellsten 03.11.07). Es spielt dabei keine Rolle ob der Traffic direkt auf dem Server oder vom Netzwerk (auf dem Server als Gateway) erzeugt wird. Die Zeitdauer bis zum Eintreten des Problems ist sporadisch von 20 min bis 2 Tagen. Der Rechner verfügt über das aktuellste Bios, verschiedene Bios-Optionen PCI betreffend wurden durchprobiert, die Karte wurde in verschiedenen PCI Slots ausprobiert. Getestete Bios Optionen: Delay Transaction enabled/disabled, Plug and Play OS yes/no. Weiter Bios Optionen: Interrupt Mode: APIC, PCI Latency Timer: 32, Slot 1 ... 6 IRQ: AUTO, Chipset ist i845. Problem tritt bei Einwahl über DSL auf, Provider Arcor mit DSL2000. Zusätzliche Hardware im Rechner: Netzwerkadapter Allied Telesyn International AT-2500TX/ACPI, AGP Grafikkarte TNT 2. Rechner läuft absolut stabil wird nur bei Internetverbindung + vielen offenen Verbindungen instabil. Motherboard ist ASUS P4B. Beim normalen surfen (ist Gateway für mehrer Nutzer) läuft er ebenfalls stabil. Habe auch schon verschiedene P2P ausprobiert und die Anzahl der max. Verbindungen auf unter 20 gestellt. Der Rechner hat keinen Monitor, ich kann also nicht beobachten was genau beim "einfrieren" passiert. Der AVM Support konnte mir nicht weiterhelfen. Kernel: Linux version 2.6.11.4-21.9-default (geeko@buildhost) (gcc version 3.3.5 20050117 (prerelease) (SUSE Linux)) #1 Fri Aug 19 11:58:59 UTC 2005 ____________ Folgende Tipps habe ich bekommen: Von Karsten Keil die Speicherauslastung beobachten. Hier konnte ich in meinen Augen nichts auffälliges feststellen. Die 512MB werden selten ausgelastet, wenn die Swap genutzt wird dann nur ein paar MB. Von Holger Krull den Kernel mit APIC starten und Netzwerkkarten Offloading deaktivieren. Habe mit APIC gestartet, die IRQs sind endlich entzerrt. Die Netzwerkkarte unterstützt ohnehin kein Offloading (ethtool -k meldet "not supported"). Danke für eure Tipps! Ich habe mittlerweile noch eine andere Netzwerkkarte eingebaut (Intel Pro 100) und nochmals die PCI Slots von der AVM Karte und der Netzwerkkarte gewechselt. Leider besteht das Problem immernoch. Ich habe nochmals alle Log-Files durchforstet: folgende Module sind geladen: subfs 7296 1 - Live 0xe1297000 ipt_tos 1664 2 - Live 0xe12ab000 ipt_length 1792 1 - Live 0xe12a9000 ipt_MARK 2560 6 - Live 0xe0802000 cls_fw 4736 2 - Live 0xe129c000 sch_htb 17792 1 - Live 0xe12b0000 ipt_TCPMSS 4480 1 - Live 0xe12a6000 ipt_LOG 6912 1 - Live 0xe128b000 ipt_limit 2432 1 - Live 0xe1291000 ipt_MASQUERADE 3328 1 - Live 0xe129a000 ipt_pkttype 1792 1 - Live 0xe1295000 ppp_synctty 9472 1 - Live 0xe1285000 ppp_generic 28180 5 ppp_synctty, Live 0xe1894000 thermal 14088 0 - Live 0xe18a4000 processor 23736 1 thermal, Live 0xe189d000 fan 4868 0 - Live 0xe1891000 button 7056 0 - Live 0xe186e000 battery 10116 0 - Live 0xe17dc000 ac 5252 0 - Live 0xe1851000 evdev 8832 0 - Live 0xe184d000 joydev 9664 0 - Live 0xe1849000 sg 36256 0 - Live 0xe1860000 st 37788 0 - Live 0xe1855000 sd_mod 17936 0 - Live 0xe1812000 sr_mod 16548 0 - Live 0xe1818000 scsi_mod 125384 4 sg,st,sd_mod,sr_mod, Live 0xe1871000 nvram 8200 0 - Live 0xe180e000 capidrv 28852 2 - Live 0xe1840000 isdn 133484 2 capidrv, Live 0xe181e000 slhc 7424 2 ppp_generic,isdn, Live 0xe17e0000 fcdsl 935396 12 - Live 0xe18d0000 capi 17600 20 - Live 0xe17e3000 capifs 5768 2 capi, Live 0xe17cb000 kernelcapi 45856 3 capidrv,fcdsl,capi, Live 0xe17e9000 edd 10080 0 - Live 0xe17b2000 ipt_state 2048 32 - Live 0xe17d4000 ip6t_REJECT 6784 3 - Live 0xe17d1000 ipt_REJECT 6656 3 - Live 0xe17ce000 iptable_mangle 2816 1 - Live 0xe1699000 iptable_filter 2944 1 - Live 0xe16fc000 ip6table_mangle 2432 0 - Live 0xe16e1000 ip_nat_ftp 3072 0 - Live 0xe1697000 iptable_nat 22236 3 ipt_MASQUERADE,ip_nat_ftp, Live 0xe17b8000 ip_conntrack_ftp 72592 1 ip_nat_ftp, Live 0xe16e9000 ip_conntrack 42168 5 ipt_MASQUERADE,ipt_state,ip_nat_ftp,iptable_nat,ip_conntrack_ftp, Live 0xe17a4000 e100 35968 0 - Live 0xe179a000 ip_tables 20352 13 ipt_tos,ipt_length,ipt_MARK,ipt_TCPMSS,ipt_LOG,ipt_limit,ipt_MASQUERADE,ipt_pkttype,ipt_state,ipt_REJECT,iptable_mangle,iptable_filter,iptable_nat, Live 0xe16e3000 mii 4864 1 e100, Live 0xe16d8000 ip6table_filter 2816 1 - Live 0xe1558000 ip6_tables 18304 3 ip6t_REJECT,ip6table_mangle,ip6table_filter, Live 0xe169f000 i2c_i801 8588 0 - Live 0xe169b000 i2c_core 21776 1 i2c_i801, Live 0xe16d1000 intel_agp 21532 1 - Live 0xe16b9000 agpgart 32296 1 intel_agp, Live 0xe16b0000 parport_pc 38212 0 - Live 0xe16a5000 lp 11076 0 - Live 0xe1554000 parport 33864 2 parport_pc,lp, Live 0xe168d000 ipv6 236672 26 ip6t_REJECT, Live 0xe175f000 capability 3256 0 - Live 0xe154d000 reiser4 391572 1 - Live 0xe16fe000 dm_mod 56316 0 - Live 0xe153b000 reiserfs 243056 1 - Live 0xe155b000 ide_cd 37892 0 - Live 0xe150c000 cdrom 36640 2 sr_mod,ide_cd, Live 0xe1502000 ide_disk 16640 4 - Live 0xe0827000 piix 9988 0 [permanent], Live 0xe081d000 ide_core 120020 3 ide_cd,ide_disk,piix, Live 0xe0860000 Die neue Interrupt Belegung: 0: 49594431 IO-APIC-edge timer 8: 2 IO-APIC-edge rtc 14: 20959 IO-APIC-edge ide0 15: 445681 IO-APIC-edge ide1 169: 273863 IO-APIC-level acpi, eth0 177: 6613766 IO-APIC-level fcdsl NMI: 0 LOC: 49595621 ERR: 0 MIS: 0 Einträge kurz vor dem Einfrieren: firewall.log Dec 9 23:22:24 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=80.60.203.68 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=42731 DF PROTO=TCP SPT=4662 DPT=3510 WINDOW=5808 RES=0x00 ACK FIN URGP=0 Dec 9 23:23:20 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=84.222.37.106 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=44430 DF PROTO=TCP SPT=4662 DPT=1534 WINDOW=5808 RES=0x00 ACK FIN URGP=0 Dec 9 23:23:27 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=200.127.242.242 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=56359 DF PROTO=TCP SPT=4662 DPT=1748 WINDOW=5808 RES=0x00 ACK FIN URGP=0 Dec 9 23:23:27 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=84.160.192.62 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=12792 DF PROTO=TCP SPT=4662 DPT=3300 WINDOW=5760 RES=0x00 ACK FIN URGP=0 Dec 9 23:23:42 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=80.182.113.209 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=14054 DF PROTO=TCP SPT=4662 DPT=1707 WINDOW=5808 RES=0x00 ACK FIN URGP=0 Dec 9 23:24:09 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=84.170.219.123 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=51602 DF PROTO=TCP SPT=9981 DPT=4662 WINDOW=1452 RES=0x00 ACK FIN URGP=0 Dec 9 23:24:46 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=84.222.37.106 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=44432 DF PROTO=TCP SPT=4662 DPT=1534 WINDOW=5808 RES=0x00 ACK FIN URGP=0 Dec 9 23:25:14 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=200.127.242.242 LEN=162 TOS=0x00 PREC=0x00 TTL=64 ID=45367 DF PROTO=TCP SPT=4662 DPT=1921 WINDOW=5808 RES=0x00 ACK PSH FIN URGP=0 Dec 9 23:25:44 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=84.170.219.123 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=51604 DF PROTO=TCP SPT=9981 DPT=4662 WINDOW=1452 RES=0x00 ACK FIN URGP=0 Dec 9 23:26:40 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=85.182.76.147 LEN=52 TOS=0x00 PREC=0x00 TTL=64 ID=15665 DF PROTO=TCP SPT=13665 DPT=4662 WINDOW=1452 RES=0x00 ACK FIN URGP=0 OPT (0101080A023BEB5000088372) Dec 9 23:27:47 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=84.94.120.22 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=38423 DF PROTO=TCP SPT=4662 DPT=2137 WINDOW=5808 RES=0x00 ACK FIN URGP=0 Dec 9 23:27:59 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=84.10.5.100 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=28421 DF PROTO=TCP SPT=4662 DPT=3628 WINDOW=14520 RES=0x00 ACK FIN URGP=0 Dec 9 23:28:17 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=83.166.19.133 LEN=52 TOS=0x00 PREC=0x00 TTL=64 ID=13457 DF PROTO=TCP SPT=20491 DPT=4662 WINDOW=2880 RES=0x00 ACK FIN URGP=0 OPT (0101080A023D659800094234) Dec 9 23:28:18 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=83.166.19.133 LEN=52 TOS=0x00 PREC=0x00 TTL=64 ID=13459 DF PROTO=TCP SPT=20491 DPT=4662 WINDOW=2880 RES=0x00 ACK FIN URGP=0 OPT (0101080A023D6AA300094234) Dec 9 23:28:43 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=219.137.247.59 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=44352 DF PROTO=TCP SPT=4662 DPT=34571 WINDOW=32767 RES=0x00 ACK FIN URGP=0 Dec 9 23:29:10 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=84.181.70.85 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=750 DF PROTO=TCP SPT=4662 DPT=3365 WINDOW=13068 RES=0x00 ACK RST URGP=0 Dec 9 23:29:40 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=80.35.37.200 LEN=71 TOS=0x00 PREC=0x00 TTL=64 ID=36626 DF PROTO=TCP SPT=4662 DPT=12122 WINDOW=6432 RES=0x00 ACK PSH FIN URGP=0 Dec 9 23:30:18 Umslocker kernel: SFW2-OUT-ERROR IN= OUT=dsl0 SRC=84.57.21.2 DST=219.137.247.59 LEN=40 TOS=0x00 PREC=0x00 TTL=64 ID=44358 DF PROTO=TCP SPT=4662 DPT=34571 WINDOW=32767 RES=0x00 ACK FIN URGP=0 Diese Einträge tauchen nur auf wenn p2p läuft, und obwohl ich FW_SERVICES_DROP_EXT="0/0,udp,4662" FW_LOG_DROP_CRIT="no" FW_LOG_DROP_ALL="no" FW_LOG_ACCEPT_CRIT="no" FW_LOG_ACCEPT_ALL="no" FW_LOG_LIMIT="2/minute" in /etc/sysconfig/SuSEfirewall2 gesetzt habe. Weitere Einträge kurz vor dem Absturz: messages.log Dec 9 23:28:49 Umslocker kernel: capilib_new_ncci: kcapi: appl 1 ncci 0x20201 up Dec 9 23:28:49 Umslocker kernel: capidrv-1: chan 0 up with ncci 0x20201 Dec 9 23:28:59 Umslocker kernel: kcapi: appl 1 ncci 0x20201 down Dec 9 23:29:00 Umslocker kernel: capidrv-1: DISCONNECT_IND reason 0x3490 (Normal call clearing) for plci 0x201 Dec 9 23:29:15 Umslocker smbd[7725]: [2005/12/09 23:29:15, 0] printing/print_cups.c:cups_cache_reload(85) Dec 9 23:29:15 Umslocker smbd[7725]: Unable to connect to CUPS server localhost - Connection refused Dec 9 23:29:15 Umslocker smbd[7725]: [2005/12/09 23:29:15, 0] printing/print_cups.c:cups_cache_reload(85) Dec 9 23:29:15 Umslocker smbd[7725]: Unable to connect to CUPS server localhost - Connection refused warn.log Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40421 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40422 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40420 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40423 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40424 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40424 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40424 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40424 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40438 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40440 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40441 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40466 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40467 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40471 ncci 0x10102 not on queue Dec 9 22:55:25 Umslocker kernel: kcapi: msgid 40475 ncci 0x10102 not on queue Dec 9 22:55:26 Umslocker kernel: kcapi: msgid 40588 ncci 0x10102 not on queue Dec 9 22:55:26 Umslocker kernel: kcapi: msgid 40589 ncci 0x10102 not on queue Dec 9 22:55:26 Umslocker kernel: kcapi: msgid 40676 ncci 0x10102 not on queue Dec 9 22:55:26 Umslocker kernel: kcapi: msgid 40679 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40758 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40759 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40760 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40761 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40762 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40763 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40763 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40763 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40763 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40763 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40772 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40773 ncci 0x10102 not on queue Dec 9 22:55:27 Umslocker kernel: kcapi: msgid 40774 ncci 0x10102 not on queue Dec 9 23:03:55 Umslocker smbd[7725]: [2005/12/09 23:03:55, 0] printing/print_cups.c:cups_cache_reload(85) Dec 9 23:03:55 Umslocker smbd[7725]: Unable to connect to CUPS server localhost - Connection refused Dec 9 23:03:55 Umslocker smbd[7725]: [2005/12/09 23:03:55, 0] printing/print_cups.c:cups_cache_reload(85) Dec 9 23:03:55 Umslocker smbd[7725]: Unable to connect to CUPS server localhost - Connection refused Dec 9 23:06:16 Umslocker kernel: kcapi: msgid 33290 ncci 0x10102 not on queue Dec 9 23:16:35 Umslocker smbd[7725]: [2005/12/09 23:16:35, 0] printing/print_cups.c:cups_cache_reload(85) Dec 9 23:16:35 Umslocker smbd[7725]: Unable to connect to CUPS server localhost - Connection refused Dec 9 23:16:35 Umslocker smbd[7725]: [2005/12/09 23:16:35, 0] printing/print_cups.c:cups_cache_reload(85) Dec 9 23:16:35 Umslocker smbd[7725]: Unable to connect to CUPS server localhost - Connection refused Dec 9 23:26:21 Umslocker smbd[5471]: [2005/12/09 23:26:21, 0] printing/print_cups.c:cups_cache_reload(85) Dec 9 23:26:21 Umslocker smbd[5471]: Unable to connect to CUPS server localhost - Connection refused Dec 9 23:26:21 Umslocker smbd[5471]: [2005/12/09 23:26:21, 0] printing/print_cups.c:cups_cache_reload(85) Dec 9 23:26:21 Umslocker smbd[5471]: Unable to connect to CUPS server localhost - Connection refused Dec 9 23:29:15 Umslocker smbd[7725]: [2005/12/09 23:29:15, 0] printing/print_cups.c:cups_cache_reload(85) Dec 9 23:29:15 Umslocker smbd[7725]: Unable to connect to CUPS server localhost - Connection refused Dec 9 23:29:15 Umslocker smbd[7725]: [2005/12/09 23:29:15, 0] printing/print_cups.c:cups_cache_reload(85) Dec 9 23:29:15 Umslocker smbd[7725]: Unable to connect to CUPS server localhost - Connection refused Dieses msgid macht mich etwas stutzig, obwohl ich woanders gelesen habe es würde keine Probleme verursachen. Vielleicht fällt euch ja noch etwas ein was ich ausprobieren könnte. Auf dem Rechner läuft noch Squid und auch bei intensivem surfen von mehreren Nutzern läuft er absolut stabil (habe auch schon kernel im loop kompiliert um Stabilität zu testen), aber wenn eine p2p software läuft wirder er instabil. Vielen Dank für eure Zeit! Gruß Paul -- Telefonieren Sie schon oder sparen Sie noch? NEU: GMX Phone_Flat http://www.gmx.net/de/go/telefonie
Paul Günther schrieb:
Internetverbindung + vielen offenen Verbindungen instabil. Motherboard ist ASUS P4B. Beim normalen surfen (ist Gateway für mehrer Nutzer) läuft er ebenfalls stabil.
Habe auch schon verschiedene P2P ausprobiert und die Anzahl der max. Verbindungen auf unter 20 gestellt. Der Rechner hat keinen Monitor, ich kann also nicht beobachten was genau beim "einfrieren" passiert. Der AVM Support konnte mir nicht weiterhelfen.
Da kann man nur weiter rumraten. Vielleicht IPV6 abschalten, man braucht es eh nicht. Mit netio mal so richtig Last auf der Netzwerkkarte erzeugen um zu sehen ob es daran liegt.
PCI Latency Timer: 32 Das hat zwar wohl nichts mit dem Problem zu tun, aber meiner IDE Karte ist das zuwenig, steht deshalb auf hier auf 64.
Am Ende bleibt wohl nur noch der Test mit einem externen DSL Modem.
Paul Günther schrieb:
Bei vielen gleichzeitigen Verbindungen (wie z.B. bei p2p, ab > 20 Verbindungen) friert der Rechner ein. Dieses Problem trat auch unter Suse 9.2 sowie mit verschiedenen Treiberversionen auf (auch der aktuellsten 03.11.07). Es spielt dabei keine Rolle ob der Traffic direkt auf dem Server oder vom Netzwerk (auf dem Server als Gateway) erzeugt wird. Die Zeitdauer bis zum Eintreten des Problems ist sporadisch von 20 min bis 2 Tagen. [...]
Genau diesen Effekt hatte ich einmal auch. Das war, glaube ich, noch Version 8.1 und der Rechner hatte auch kein DSL, ISDN oder sonst so etwas. Aber er fror eben sporadisch ein. Ich habe damals auch alles möglich probiert. Was dann half, war ein Wechsel des Motherboards (anderer Hersteller). Jochen -- SPL Spindel und Präzisionslager GmbH Am Gewerbegebiet 7, D-04720 Ebersbach bei Döbeln Telefon: +49 3431 6784-20 Fax: +49 3431 6784-52 Internet: http://www.spl-spindel.de
participants (3)
-
"Paul Günther"
-
Holger Krull
-
Jochen Roedenbeck