1. 7 Years of PuppetHorror StoriesKris Buytaert@krisbuytaert

2. KKrriiss BBuuyyttaaeerrtt II uusseedd ttoo bbee aa DDeevv,, TThheenn BBeeccaammee aann OOpp CChhiieeff TTrroolllliinngg OOffffiicceerr aanndd OOppeenn SSoouurrcceeCCoonnssuullttaanntt @@iinnuuiittss..eeuu EEvveerryytthhiinngg iiss aann eeffffiinngg DDNNSS PPrroobblleemm BBuuiillddiinngg CClloouuddss ssiinnccee bbeeffoorree tthhee bbooookkssttoorree SSoommee bbooookkss,, ssoommee ppaappeerrss,, ssoommee bbllooggss EEvvaannggeelliizziinngg ddeevvooppss 3. SSeettttiinngg tthhee SSttaaggee [[rroooott@@xxeenn ~~]]## rrppmm --qqaa || ggrreepp ppuuppppeettppuuppppeett--00..2233..22--1..eell55 --rrwwxxrr--xxrr--xx 1 rroooott rroooott 4880099 AAuugg 2222 22000077//uussrr//bbiinn//ppuuppppeett CCoonnssuullttiinngg @@ ddiiffffeerreenntt ccuussttoommeerrss.. TTeelllliinngg mmyy wwaarr ssttoorriieess,, ssoo yyoouu ddoonn''tt hhaavvee ttoo 4. DDeebbuuggggiinngg IInnffrraassttrruuccttuurreessEverything is a Funky DNS ProblemNo really, Everything is a Funky DNS ProblemIf it's not a funky DNS Problem ..It's an arp problemIf it's not an arp problem...It's a Full Filesystem ProblemIf your filesystem isn't fullIt's a Spanning Tree problemIf it's not a spanning Tree problem...It's a USB problemIf it's not a USB ProblemIt might be an ntp problemIf it's not an ntp problemIt's a sharing IRQ ProblemIf it's not a sharing IRQ ProblemBut most often .. its a Freaking Dns Problem !Or someone playing tricks on youJan 2006 5. Chapter 1:: DDeeppllooyyiinngg aa PPuuppppeettmmaasstteerr 6. CChhiicckkeenn aanndd EEggggss PPllaattffoorrmm == RRaacckk ffuullll 22xx ppxxee,, yyuumm,, ddhhccppdd,, ppuuppppeettmmaasstteerr RReeiinnssttaalllliinngg tthhee ppllaattffoorrmm SSccrraattcchh tthhee cceennttrraall bbooxx SSccrraattcchh tthhee ootthheerr bbooxxeenn 7. WWoorrkkss iinn DDeevv,, FFaaiillss iinn PPrrooddPPrroodd == sshhiippppeedd ppllaattffoorrmm oonn ootthheerr ccoonnttiinneenntt PPllaattffoorrmm wwoorrkkss,, lleettss rreeddeeppllooyy.. TTaakkee ddoowwnn PPuuppppeettMMaasstteerr.. RReebboooottssttrraapp BBoooossttrraapp ffiirrsstt ccoouuppllee ooff nnooddeess,, ssuucccceessss MMoorree nnooddeess.... ffaaiilluurree ssttaarrtt hhaappppeenniinngg 8. IItt''ss nnoott yyoouurr ccooddee SSttrriipp oouutt ccooddee,, RRuunnss wwoorrkk ssoommeettiimmeess oonn aallmmoosstt eemmppttyyccaattaallooggss RReeeennaabbllee ccooddee RRuunn sseerrvveerr iinn ddeebbuugg,, pprroobblleemm ggeettss wwoorrsseeAAbboouutt ttoo rreennaammee tthhee ppuuppppeettmmaasstteerr ttoosscchhrrooddiinnggeerr 9. 224 hhoouurrss aanndd aa VVPPNN FFaaiilluurree llaatteerr 10. TThhee CCrruullppiitt :: PPaarrttiiaall ffaaiilliinngg MMaannaaggeedd PPoowweerrssuuppppllyy 66 bbooxxeenn wweerree nnoott ppoowweerreedd ooffff UUssuuaallllyy wwee ppoowweerreedd ooffff aallll tthhee ootthheerr bbooxxeenn BBrreeaakkiinngg wweebbrriicckk ,, WWiitthh oolldd ssssll rreeqquueessttss 11. Chapter 2: Hoonnoouurr yyoouurr ppaarreennttss oorr yyoouurr ddiisskkss wwiillllfflloooodd 12. ##MMoonniittoorriinnggSSuucckkss PPuuppppeettrruunnss bbrreeaakk oouurr IIcciinnggaa bbooxxeenn BBaaddllyy FFrreeqquueennttllyy 13. SSttoorreedd CCoonnffiiggss 14. EExxppoorrttiinngg aanndd CCoolllleeccttiinngg 15. IItt aaiinn''tt bboorrkkeenn SSuucccceessssffuull ppuuppppeett rruunn SSuucccceessssffuull IIcciinnggaa rreeccoonnffiigguurree DDiisskk uussaaggee ggrroowwss FFaasstt 16. AA PPuuppppeett BBuugg 17. CChhaapptteerr 33:: RReelleeaassee MMaannaaggeemmeenntt 18. IItt wwoorrkkss,, iitt ddooeessnn''tt wwoorrkk IImmaaggiinnee aa wwoorrkkiinngg ppuuppppeett sseettuupp AAtt ddiiffffeerreenntt ccuussttoommeerrss UUppssttrreeaamm VVeennddoorr rreelleeaasseess nneeww ssooffttwwaarree HHaallff ooff tthhee ccuussttoommeerrss ccaallll ccrryyiinngg tthhaatt tthheeiirrppllaattffoorrmm iiss bbrrookkeenn 19. AA bbrrookkeenn mmccoolllleeccttiivvee CCuussttoommeerrss wwiitthh sseellff mmaannaaggeedd ((ppaacckkaaggee)) rreeppoossaarree hhaappppyy CCuussttoommeerrss uussiinngg uuppssttrreeaamm rreeppooss aarree iinn ppaaiinn 20. RReeppoossiittoorryy MMaannaaggeemmeenntt PPuullpp PPrroo :: MMiirrrroorriinnggLLoovvee CCoonn :: MMoonnggoo,, SSttaabbiilliittyy,, ..ddeebb,, ffoorrggee PPRRMM YYuumm RReeppoo SSeerrvveerr bbyy IISS2244 21. RReeppoossiittoorryy MMaannaaggeemmeenntt 22. VVeerrssiioonn vvss LLaatteesstt VVeerrssiioonn yyoouurr rreeppooss ??eennssuurree ==>> llaatteessttss LLaatteesstt yyoouurr eennvviirroonnmmeennttss ?? SSttrriicctt vveerrssiioonniinngg iinn ccoonnffiigg ??EEnnssuurree ==>> ''00..998..44''UUssee HHiieerraa 23. CChhaapptteerr 44:: WWee aarree aallll ddeevvss nnooww 24. NNoo mmoorree ppuuppppeett rruunnss ::(( PPuuppppeett iiss ccrroonnnneedd DDaasshhbbooaarrdd sshhoowwss nnoo ssuucccceessssffuull rruunnss ffoorr hhoouurrss ppuuppppeett aaggeenntt --tt ssttaarrttss ,, tthheenn eexxiittss wwiitthh nnoo eerrrroorr 25. WWee ddiiddnn''tt cchhaannggee aa tthhiinngg !! QQuuiicckk ggiitt lloogg sshhoowweedd nnoo rreelleevvaanntt cchhaannggeess oonntthhee ccooddee bbaassee.. 26. LLeett''ss ddeebbuugg PPuutt aaggeenntt iinn vveerrbboossee PPuutt mmaasstteerr iinn vveerrbboossee 27. LLeett''ss ddeebbuugg PPuutt aaggeenntt iinn vveerrbboossee PPuutt mmaasstteerr iinn vveerrbboossee TTrryy ddiiffffeerreenntt eennvviirroonnmmeennttss 28. LLeett''ss ddeebbuugg PPuutt aaggeenntt iinn vveerrbboossee PPuutt mmaasstteerr iinn vveerrbboossee TTrryy ddiiffffeerreenntt eennvviirroonnmmeennttss ((iitt wwoorrkkss iinn 11)) UUppggrraaddee ppuuppppeettmmaasstteerr UUppggrraaddee ppuuppppeett aaggeenntt 29. LLeett''ss ddeebbuugg PPuutt aaggeenntt iinn vveerrbboossee PPuutt mmaasstteerr iinn vveerrbboossee TTrryy ddiiffffeerreenntt eennvviirroonnmmeennttss UUppggrraaddee ppuuppppeettmmaasstteerr UUppggrraaddee ppuuppppeett aaggeenntt MMooddiiffyy //eettcc//hhoossttss 30. LLeett''ss ddeebbuugg PPuutt aaggeenntt iinn vveerrbboossee PPuutt mmaasstteerr iinn vveerrbboossee TTrryy ddiiffffeerreenntt eennvviirroonnmmeennttss UUppggrraaddee ppuuppppeettmmaasstteerr UUppggrraaddee ppuuppppeett aaggeenntt MMooddiiffyy //eettcc//hhoossttss CClleeaann SSSSLL CCeerrttss 31. CCaalllleedd iinn tthhee ttrrooooppss II''vvee nneevveerr sseeeenn ssoommeetthhiinngg lliikkee tthhiiss bbeeffoorree TThheeyy ccoouullddnn''tt ffiinndd aa tthhiinngg eeiitthheerr .... WWee''vvee nneevveerr sseeeenn ssoommeetthhiinngg lliikkee tthhiiss bbeeffoorree.. 32. WWee ddiiddnn''tt cchhaannggee aa tthhiinngg ((22))!! QQuuiicckk ggiitt lloogg sshhoowweedd nnoo rreelleevvaanntt cchhaannggeess oonntthhee ccooddee bbaassee.. OOnn tthhee mmaanniiffeessttss iinncclluuddeedd iinn tthhee ppllaattffoorrmm wwhheerreetthhee ccooddee wwaass ffaaiilliinngg 9955%% LLiinnuuxx nnooddeess ffaaiilliinngg,, nnoo ccooddee cchhaannggee 33. EExxiitt ZZeerroo 55%% WWiinnddoowwss nnooddeess,, ccooddee cchhaannggeess iiggnnoorreedd==>> tthhaatt mmoodduullee iissnn''tt uusseedd oonn LLiinnuuxx rriigghhtt ?? 34. Chapter 55:: SSooffttwwaarree ddeeffiinneedd NNeettwwoorrkk 35. BBuussiinneessss aass uussuuaall FFuullllyy ppuuppppeettiizzeeddppllaattffoorrmm DDeeppllooyyeedd 55++iinnssttaanncceess ooff ppllaattffoorrmm IIPPSSeecc TTuunnnneellss iinn aallllddiirreeccttiioonnss .. 36. OOnnee MMoorrnniinngg PPuuppppeettrruunnss ssttaarrtt ffaaiilliinngg PPeerrffeecctt aacccceessss ttoo nneeww ccuussttoommeerr ppllaattffoorrmm MMoonniittoorriinngg ssaayyss eevveerryytthhiinngg iiss ffiinnee.. BBooxxeenn ccaann ppiinngg ppuuppppeettmmaasstteerr PPuuppppeettmmaasstteerr ccaann ppiinngg bbooxxeenn 37. EEvveerryytthhiinngg iiss aa FFuunnkkyy DDNNSSPPrroobblleemm RReevveerrssee DDNNSS wwaass bbrrookkeenn FFiixxeedd RReevveerrssee DDNNSS ffoorr nneeww ppllaattffoorrmm HHeeyy .... tthhiiss llooookkss bbeetttteerr 38. BBuutt iitt''ss nnoott ffiixxeedd yyeett IItt''ss ssssll ?? LLeett''ss cclleeaarr ssoommee CCeerrttss.. NNooppee nnoott SSSSLL 39. II ccaann ccoonnnneecctt !! II ccaann ppiinngg tthhee ppuuppppeettmmaasstteerr II ccaann tteellnneett ttoo ppoorrtt 88114400 oonn tthhee ppuuppppeettmmaasstteerr TThhee ppuuppppeettmmaasstteerr ccaann ppiinngg mmee IItt aallll wwoorrkkss 40. BBuutt II ccaann''tt wwggeett ffrroomm tthhee ppuuppppeettmmaasstteerr IItt mmuusstt bbee nneettwwoorrkkiinngg IIss iitt aa nnaatt rruullee oonn tthhee vvppnn ?? 41. HHaavvee yyoouu ttrriieedd ttuurrnniinngg iitt ooffaanndd oonn aaggaaiinn ?? BBrrookkeenn IIPPSSeecc sseettuupp RReessttaarrttiinngg ttuunnnneellssssoollvveedd iitt.. 42. CChhaapptteerr 77:: TThheerree''ss 33 hhaarrdd tthhiinnggss iinn IITT-- CCaacchhee IInnvvaalliiddaattiioonn-- SShhaarreedd MMeemmoorryy MMaannaaggeemmeenntt-- OOffff bbyy 11 eerrrroorrss-- NNaammiinngg tthhiinnggss 43. YYeett aannootthheerr bbrrookkeenn ppuuppppeettrruunneerrrr:: CCoouulldd nnoott rreettrriieevvee ccaattaalloogg ffrroomm rreemmootteesseerrvveerr:: EErrrroorr 440000 oonn SSEERRVVEERR:: AAnnootthheerr llooccaall oorriimmppoorrtteedd rreessoouurrccee eexxiissttss wwiitthh tthhee ttyyppee aanndd ttiittlleeAAppaacchhee::::VVhhoosstt[[ssoommeehhoosstt..ssoommeeccuusstteerroomm..eeuu__8800__pprrooxxyy]] oonn nnooddee pprrooxxyy..ssoommeewwhheerree..eeuuwwaarrnniinngg:: NNoott uussiinngg ccaacchhee oonn ffaaiilleedd ccaattaalloogg 44. BBuutt tthhaatt sshhoouullddnn''tt bbee tthheerree VVhhoosstt ddooeess nnoott ggeett eexxppoorrtteedd ttoo tthheerree BBooxx sshhoouulldd nnoott ccoolllleecctt tthhaatt 45. BBuutt tthhaatt sshhoouullddnn''tt bbee tthheerree VVhhoosstt ddooeess nnoott ggeett eexxppoorrtteedd ttoo tthheerree BBooxx sshhoouulldd nnoott ccoolllleecctt tthhaatt DDiiggggiinngg iinn ttoo eexxppoorrttss DDiiggggiinngg iinnttoo ppuuppppeettddbb ,, hhoowwss yyoouurr ppssqqll ?? 46. CCoolllleeccttiinnggAAppaacchhee::::VVhhoosstt