吴德芳当机立断，放弃金马分店的股权和管理权，集中精力管理金河广场多美的业务。在辛苦挨了大约两年后，因为压力越来越大，吴太太颜素华不得不丢下在马来西亚艺术学院当讲师的工作，负责管理和财务，及时协助丈夫的业务。此外，吴德芳在过去十多年所建立的信誉，在他处于最低潮的时候发挥了作用。一些过去与他有交往的供应商，并没有因为他的财务不佳而背离。相反，他们还大力地支持他。这几股力量使“多美”在1986年业务渐入佳境，转亏为盈。

　　从这次合伙人背信的教训中，吴德芳意识到应尽量不与人合股做生意，即使有，也坚持要拥有绝对股权，以确保能够掌握公司的决策权。但是，经过这一次的打击，吴德芳并没有愤世嫉俗，也没有责怪或者埋怨任何人，他说，因为每个人都有自己的理想，人往高处走是常理。

　　所以，吴德芳早期与他的三哥合作，后来自己出来创业，与3个朋友合股做生意，后因生意理念有别而各走各的路。事实上，吴德芳是在1986年才拥有自己独立的事业，经过30余年的耕耘，才发展到现有的规模。吴德芳目前是多美金钻珠宝机构有限公司董事主席，但现在已经不大管业务上的事，大部分都交给孩子。他笑说自己现在是半退休状态，如果孩子们需要什么点子，他会尽力为他们出；如果有什么问题，他也会尽力地设法去帮助他们解决。

　　弘扬中华、客家文化

　　吴德芳领导或担任重要职务的社团众多，他有一个“一以贯之”的着重点，那就是使这些社团领导参与文教活动，以提升华社成员的文化素质。

　　这与吴德芳本人的理念有很大关系。一是他对华人文化有“饮水思源”的感情。由于他出身贫寒而有机会受到完整的华文教育。吴德芳认为，华商应该摒弃纯为“在商言商”的旧观念。商人除了注重赚钱之外，还应该出钱出力照顾本身的文化。吴德芳所发起或领导的文化活动，横跨多个领域，包括：书法、绘画、舞蹈、金石篆刻、文学创作、辩论会、国际思想研讨会、文化节等等。

　　客家人是马来西亚华裔中的第二大族群，客家文化是中华传统文化的一个重要组成部分。吴德芳作为马来西亚客联会总会会长兼隆雪(隆雪即吉隆坡、雪兰莪)客家总会会长，发起和推动“第一届客家文化节”，于2004年9月18日至11月6日举行。按照计划，客家文化节每年举行一次，由客联会倡导，不同州属的客家社团轮流主办，以继续发扬及保存客家和中华文化。2000年11月，吴德芳率马来西亚客联会代表团参加在福建龙岩召开的世界客属第16届恳亲大会之后，和部分团员来到梅州。在参观梅州市华侨博物馆时发现尚无马来西亚展厅时，他当即向博物馆负责人作出承诺，由马来西亚客联会负责，在1年内筹办好马来西亚展厅。当下他就捐出4.5万令吉作为基金，回去后成立了工委会，展开筹款和文物资料收集工作。2001年12月9日，华侨博物馆马来西亚展厅举行了开幕礼。之后，由吴德芳发动的“马来西亚客家文物馆”，也于2004年8月26日在马来西亚槟城正式成立。吴德芳强调，提倡客家文化节并非搞个人文化主义或族群文化主义，而是张扬母语文化，向下一代灌输不要忘记自己的“根”。

　　功成名就的吴德芳对客籍社团的建设无私奉献，不落人后。在担任马来西亚客联会总会会长期间，成功组织和领导举办世界客属第十五届恳亲盛会，受到全球客属乡亲的好评，并趁此机会，广开门路集资，购置了新会馆。此外，对马来西亚的华文教育，不断巩固和发展，使华文成为该国通用语言，成为全球华教的样板，吴德芳立下了殊功。