]> git.bitcoin.ninja Git - rust-lightning/blob - lightning/src/ln/reorg_tests.rs
Merge pull request #2209 from TheBlueMatt/2023-04-better-discon-err-msg
[rust-lightning] / lightning / src / ln / reorg_tests.rs
1 // This file is Copyright its original authors, visible in version control
2 // history.
3 //
4 // This file is licensed under the Apache License, Version 2.0 <LICENSE-APACHE
5 // or http://www.apache.org/licenses/LICENSE-2.0> or the MIT license
6 // <LICENSE-MIT or http://opensource.org/licenses/MIT>, at your option.
7 // You may not use this file except in accordance with one or both of these
8 // licenses.
9
10 //! Further functional tests which test blockchain reorganizations.
11
12 use crate::chain::channelmonitor::{ANTI_REORG_DELAY, LATENCY_GRACE_PERIOD_BLOCKS};
13 use crate::chain::transaction::OutPoint;
14 use crate::chain::Confirm;
15 use crate::events::{Event, MessageSendEventsProvider, ClosureReason, HTLCDestination};
16 use crate::ln::channelmanager::ChannelManager;
17 use crate::ln::msgs::{ChannelMessageHandler, Init};
18 use crate::util::test_utils;
19 use crate::util::ser::Writeable;
20 use crate::util::string::UntrustedString;
21
22 use bitcoin::blockdata::block::{Block, BlockHeader};
23 use bitcoin::blockdata::script::Builder;
24 use bitcoin::blockdata::opcodes;
25 use bitcoin::secp256k1::Secp256k1;
26
27 use crate::prelude::*;
28 use bitcoin::hashes::Hash;
29 use bitcoin::TxMerkleNode;
30
31 use crate::ln::functional_test_utils::*;
32
33 fn do_test_onchain_htlc_reorg(local_commitment: bool, claim: bool) {
34         // Our on-chain HTLC-claim learning has a few properties worth testing:
35         //  * If an upstream HTLC is claimed with a preimage (both against our own commitment
36         //    transaction our counterparty's), we claim it backwards immediately.
37         //  * If an upstream HTLC is claimed with a timeout, we delay ANTI_REORG_DELAY before failing
38         //    it backwards to ensure our counterparty can't claim with a preimage in a reorg.
39         //
40         // Here we test both properties in any combination based on the two bools passed in as
41         // arguments.
42         //
43         // If local_commitment is set, we first broadcast a local commitment containing an offered HTLC
44         // and an HTLC-Timeout tx, otherwise we broadcast a remote commitment containing a received
45         // HTLC and a local HTLC-Timeout tx spending it.
46         //
47         // We then either allow these transactions to confirm (if !claim) or we wait until one block
48         // before they otherwise would and reorg them out, confirming an HTLC-Success tx instead.
49         let chanmon_cfgs = create_chanmon_cfgs(3);
50         let node_cfgs = create_node_cfgs(3, &chanmon_cfgs);
51         let node_chanmgrs = create_node_chanmgrs(3, &node_cfgs, &[None, None, None]);
52         let nodes = create_network(3, &node_cfgs, &node_chanmgrs);
53
54         create_announced_chan_between_nodes(&nodes, 0, 1);
55         let chan_2 = create_announced_chan_between_nodes(&nodes, 1, 2);
56
57         // Make sure all nodes are at the same starting height
58         connect_blocks(&nodes[0], 2*CHAN_CONFIRM_DEPTH + 1 - nodes[0].best_block_info().1);
59         connect_blocks(&nodes[1], 2*CHAN_CONFIRM_DEPTH + 1 - nodes[1].best_block_info().1);
60         connect_blocks(&nodes[2], 2*CHAN_CONFIRM_DEPTH + 1 - nodes[2].best_block_info().1);
61
62         let (our_payment_preimage, our_payment_hash, _) = route_payment(&nodes[0], &[&nodes[1], &nodes[2]], 1_000_000);
63
64         // Provide preimage to node 2 by claiming payment
65         nodes[2].node.claim_funds(our_payment_preimage);
66         expect_payment_claimed!(nodes[2], our_payment_hash, 1_000_000);
67         check_added_monitors!(nodes[2], 1);
68         get_htlc_update_msgs!(nodes[2], nodes[1].node.get_our_node_id());
69
70         let mut header = BlockHeader { version: 0x2000_0000, prev_blockhash: nodes[2].best_block_hash(), merkle_root: TxMerkleNode::all_zeros(), time: 42, bits: 42, nonce: 42 };
71         let claim_txn = if local_commitment {
72                 // Broadcast node 1 commitment txn to broadcast the HTLC-Timeout
73                 let node_1_commitment_txn = get_local_commitment_txn!(nodes[1], chan_2.2);
74                 assert_eq!(node_1_commitment_txn.len(), 2); // 1 local commitment tx, 1 Outbound HTLC-Timeout
75                 assert_eq!(node_1_commitment_txn[0].output.len(), 2); // to-self and Offered HTLC (to-remote/to-node-3 is dust)
76                 check_spends!(node_1_commitment_txn[0], chan_2.3);
77                 check_spends!(node_1_commitment_txn[1], node_1_commitment_txn[0]);
78
79                 // Give node 2 node 1's transactions and get its response (claiming the HTLC instead).
80                 connect_block(&nodes[2], &Block { header, txdata: node_1_commitment_txn.clone() });
81                 check_added_monitors!(nodes[2], 1);
82                 check_closed_broadcast!(nodes[2], true); // We should get a BroadcastChannelUpdate (and *only* a BroadcstChannelUpdate)
83                 check_closed_event!(nodes[2], 1, ClosureReason::CommitmentTxConfirmed);
84                 let node_2_commitment_txn = nodes[2].tx_broadcaster.txn_broadcasted.lock().unwrap().split_off(0);
85                 assert_eq!(node_2_commitment_txn.len(), 1); // ChannelMonitor: 1 offered HTLC-Claim
86                 check_spends!(node_2_commitment_txn[0], node_1_commitment_txn[0]);
87
88                 // Make sure node 1's height is the same as the !local_commitment case
89                 connect_blocks(&nodes[1], 1);
90                 // Confirm node 1's commitment txn (and HTLC-Timeout) on node 1
91                 header.prev_blockhash = nodes[1].best_block_hash();
92                 connect_block(&nodes[1], &Block { header, txdata: node_1_commitment_txn.clone() });
93
94                 // ...but return node 1's commitment tx in case claim is set and we're preparing to reorg
95                 vec![node_1_commitment_txn[0].clone(), node_2_commitment_txn[0].clone()]
96         } else {
97                 // Broadcast node 2 commitment txn
98                 let mut node_2_commitment_txn = get_local_commitment_txn!(nodes[2], chan_2.2);
99                 assert_eq!(node_2_commitment_txn.len(), 2); // 1 local commitment tx, 1 Received HTLC-Claim
100                 assert_eq!(node_2_commitment_txn[0].output.len(), 2); // to-remote and Received HTLC (to-self is dust)
101                 check_spends!(node_2_commitment_txn[0], chan_2.3);
102                 check_spends!(node_2_commitment_txn[1], node_2_commitment_txn[0]);
103
104                 // Give node 1 node 2's commitment transaction and get its response (timing the HTLC out)
105                 mine_transaction(&nodes[1], &node_2_commitment_txn[0]);
106                 connect_blocks(&nodes[1], TEST_FINAL_CLTV); // Confirm blocks until the HTLC expires
107                 let node_1_commitment_txn = nodes[1].tx_broadcaster.txn_broadcasted.lock().unwrap().clone();
108                 assert_eq!(node_1_commitment_txn.len(), 1); // ChannelMonitor: 1 offered HTLC-Timeout
109                 check_spends!(node_1_commitment_txn[0], node_2_commitment_txn[0]);
110
111                 // Confirm node 1's HTLC-Timeout on node 1
112                 mine_transaction(&nodes[1], &node_1_commitment_txn[0]);
113                 // ...but return node 2's commitment tx (and claim) in case claim is set and we're preparing to reorg
114                 vec![node_2_commitment_txn.pop().unwrap()]
115         };
116         check_added_monitors!(nodes[1], 1);
117         check_closed_broadcast!(nodes[1], true); // We should get a BroadcastChannelUpdate (and *only* a BroadcstChannelUpdate)
118         check_closed_event!(nodes[1], 1, ClosureReason::CommitmentTxConfirmed);
119         // Connect ANTI_REORG_DELAY - 2 blocks, giving us a confirmation count of ANTI_REORG_DELAY - 1.
120         connect_blocks(&nodes[1], ANTI_REORG_DELAY - 2);
121         check_added_monitors!(nodes[1], 0);
122         assert_eq!(nodes[1].node.get_and_clear_pending_events().len(), 0);
123
124         if claim {
125                 // Disconnect Node 1's HTLC-Timeout which was connected above
126                 disconnect_blocks(&nodes[1], ANTI_REORG_DELAY - 1);
127
128                 let block = Block {
129                         header: BlockHeader { version: 0x20000000, prev_blockhash: nodes[1].best_block_hash(), merkle_root: TxMerkleNode::all_zeros(), time: 42, bits: 42, nonce: 42 },
130                         txdata: claim_txn,
131                 };
132                 connect_block(&nodes[1], &block);
133
134                 // ChannelManager only polls chain::Watch::release_pending_monitor_events when we
135                 // probe it for events, so we probe non-message events here (which should just be the
136                 // PaymentForwarded event).
137                 expect_payment_forwarded!(nodes[1], nodes[0], nodes[2], Some(1000), true, true);
138         } else {
139                 // Confirm the timeout tx and check that we fail the HTLC backwards
140                 let block = Block {
141                         header: BlockHeader { version: 0x20000000, prev_blockhash: nodes[1].best_block_hash(), merkle_root: TxMerkleNode::all_zeros(), time: 42, bits: 42, nonce: 42 },
142                         txdata: vec![],
143                 };
144                 connect_block(&nodes[1], &block);
145                 expect_pending_htlcs_forwardable_and_htlc_handling_failed!(nodes[1], vec![HTLCDestination::NextHopChannel { node_id: Some(nodes[2].node.get_our_node_id()), channel_id: chan_2.2 }]);
146         }
147
148         check_added_monitors!(nodes[1], 1);
149         // Which should result in an immediate claim/fail of the HTLC:
150         let htlc_updates = get_htlc_update_msgs!(nodes[1], nodes[0].node.get_our_node_id());
151         if claim {
152                 assert_eq!(htlc_updates.update_fulfill_htlcs.len(), 1);
153                 nodes[0].node.handle_update_fulfill_htlc(&nodes[1].node.get_our_node_id(), &htlc_updates.update_fulfill_htlcs[0]);
154         } else {
155                 assert_eq!(htlc_updates.update_fail_htlcs.len(), 1);
156                 nodes[0].node.handle_update_fail_htlc(&nodes[1].node.get_our_node_id(), &htlc_updates.update_fail_htlcs[0]);
157         }
158         commitment_signed_dance!(nodes[0], nodes[1], htlc_updates.commitment_signed, false, true);
159         if claim {
160                 expect_payment_sent!(nodes[0], our_payment_preimage);
161         } else {
162                 expect_payment_failed_with_update!(nodes[0], our_payment_hash, false, chan_2.0.contents.short_channel_id, true);
163         }
164 }
165
166 #[test]
167 fn test_onchain_htlc_claim_reorg_local_commitment() {
168         do_test_onchain_htlc_reorg(true, true);
169 }
170 #[test]
171 fn test_onchain_htlc_timeout_delay_local_commitment() {
172         do_test_onchain_htlc_reorg(true, false);
173 }
174 #[test]
175 fn test_onchain_htlc_claim_reorg_remote_commitment() {
176         do_test_onchain_htlc_reorg(false, true);
177 }
178 #[test]
179 fn test_onchain_htlc_timeout_delay_remote_commitment() {
180         do_test_onchain_htlc_reorg(false, false);
181 }
182
183 #[test]
184 fn test_counterparty_revoked_reorg() {
185         // Test what happens when a revoked counterparty transaction is broadcast but then reorg'd out
186         // of the main chain. Specifically, HTLCs in the latest commitment transaction which are not
187         // included in the revoked commitment transaction should not be considered failed, and should
188         // still be claim-from-able after the reorg.
189         let chanmon_cfgs = create_chanmon_cfgs(2);
190         let node_cfgs = create_node_cfgs(2, &chanmon_cfgs);
191         let node_chanmgrs = create_node_chanmgrs(2, &node_cfgs, &[None, None]);
192         let nodes = create_network(2, &node_cfgs, &node_chanmgrs);
193
194         let chan = create_announced_chan_between_nodes_with_value(&nodes, 0, 1, 1_000_000, 500_000_000);
195
196         // Get the initial commitment transaction for broadcast, before any HTLCs are added at all.
197         let revoked_local_txn = get_local_commitment_txn!(nodes[0], chan.2);
198         assert_eq!(revoked_local_txn.len(), 1);
199
200         // Now add two HTLCs in each direction, one dust and one not.
201         route_payment(&nodes[0], &[&nodes[1]], 5_000_000);
202         route_payment(&nodes[0], &[&nodes[1]], 5_000);
203         let (payment_preimage_3, payment_hash_3, ..) = route_payment(&nodes[1], &[&nodes[0]], 4_000_000);
204         let payment_hash_4 = route_payment(&nodes[1], &[&nodes[0]], 4_000).1;
205
206         nodes[0].node.claim_funds(payment_preimage_3);
207         let _ = get_htlc_update_msgs!(nodes[0], nodes[1].node.get_our_node_id());
208         check_added_monitors!(nodes[0], 1);
209         expect_payment_claimed!(nodes[0], payment_hash_3, 4_000_000);
210
211         let mut unrevoked_local_txn = get_local_commitment_txn!(nodes[0], chan.2);
212         assert_eq!(unrevoked_local_txn.len(), 3); // commitment + 2 HTLC txn
213         // Sort the unrevoked transactions in reverse order, ie commitment tx, then HTLC 1 then HTLC 3
214         unrevoked_local_txn.sort_unstable_by_key(|tx| 1_000_000 - tx.output.iter().map(|outp| outp.value).sum::<u64>());
215
216         // Now mine A's old commitment transaction, which should close the channel, but take no action
217         // on any of the HTLCs, at least until we get six confirmations (which we won't get).
218         mine_transaction(&nodes[1], &revoked_local_txn[0]);
219         check_added_monitors!(nodes[1], 1);
220         check_closed_event!(nodes[1], 1, ClosureReason::CommitmentTxConfirmed);
221         check_closed_broadcast!(nodes[1], true);
222
223         // Connect up to one block before the revoked transaction would be considered final, then do a
224         // reorg that disconnects the full chain and goes up to the height at which the revoked
225         // transaction would be final.
226         let theoretical_conf_height = nodes[1].best_block_info().1 + ANTI_REORG_DELAY - 1;
227         connect_blocks(&nodes[1], ANTI_REORG_DELAY - 2);
228         assert!(nodes[1].node.get_and_clear_pending_msg_events().is_empty());
229         assert!(nodes[1].node.get_and_clear_pending_events().is_empty());
230
231         disconnect_all_blocks(&nodes[1]);
232         assert!(nodes[1].node.get_and_clear_pending_msg_events().is_empty());
233         assert!(nodes[1].node.get_and_clear_pending_events().is_empty());
234
235         connect_blocks(&nodes[1], theoretical_conf_height);
236         assert!(nodes[1].node.get_and_clear_pending_msg_events().is_empty());
237         assert!(nodes[1].node.get_and_clear_pending_events().is_empty());
238
239         // Now connect A's latest commitment transaction instead and resolve the HTLCs
240         mine_transaction(&nodes[1], &unrevoked_local_txn[0]);
241         assert!(nodes[1].node.get_and_clear_pending_msg_events().is_empty());
242         assert!(nodes[1].node.get_and_clear_pending_events().is_empty());
243
244         // Connect the HTLC claim transaction for HTLC 3
245         mine_transaction(&nodes[1], &unrevoked_local_txn[2]);
246         expect_payment_sent!(nodes[1], payment_preimage_3);
247         assert!(nodes[1].node.get_and_clear_pending_msg_events().is_empty());
248
249         // Connect blocks to confirm the unrevoked commitment transaction
250         connect_blocks(&nodes[1], ANTI_REORG_DELAY - 2);
251         expect_payment_failed!(nodes[1], payment_hash_4, false);
252 }
253
254 fn do_test_unconf_chan(reload_node: bool, reorg_after_reload: bool, use_funding_unconfirmed: bool, connect_style: ConnectStyle) {
255         // After creating a chan between nodes, we disconnect all blocks previously seen to force a
256         // channel close on nodes[0] side. We also use this to provide very basic testing of logic
257         // around freeing background events which store monitor updates during block_[dis]connected.
258         let chanmon_cfgs = create_chanmon_cfgs(2);
259         let node_cfgs = create_node_cfgs(2, &chanmon_cfgs);
260         let node_chanmgrs = create_node_chanmgrs(2, &node_cfgs, &[None, None]);
261         let persister: test_utils::TestPersister;
262         let new_chain_monitor: test_utils::TestChainMonitor;
263         let nodes_0_deserialized: ChannelManager<&test_utils::TestChainMonitor, &test_utils::TestBroadcaster, &test_utils::TestKeysInterface, &test_utils::TestKeysInterface, &test_utils::TestKeysInterface, &test_utils::TestFeeEstimator, &test_utils::TestRouter, &test_utils::TestLogger>;
264         let mut nodes = create_network(2, &node_cfgs, &node_chanmgrs);
265         *nodes[0].connect_style.borrow_mut() = connect_style;
266
267         let chan_conf_height = core::cmp::max(nodes[0].best_block_info().1 + 1, nodes[1].best_block_info().1 + 1);
268         let chan = create_announced_chan_between_nodes(&nodes, 0, 1);
269
270         {
271                 let per_peer_state = nodes[0].node.per_peer_state.read().unwrap();
272                 let peer_state = per_peer_state.get(&nodes[1].node.get_our_node_id()).unwrap().lock().unwrap();
273                 assert_eq!(peer_state.channel_by_id.len(), 1);
274                 assert_eq!(nodes[0].node.short_to_chan_info.read().unwrap().len(), 2);
275         }
276
277         assert_eq!(nodes[0].node.list_channels()[0].confirmations, Some(10));
278         assert_eq!(nodes[1].node.list_channels()[0].confirmations, Some(10));
279
280         if !reorg_after_reload {
281                 if use_funding_unconfirmed {
282                         let relevant_txids = nodes[0].node.get_relevant_txids();
283                         assert_eq!(relevant_txids.len(), 1);
284                         let block_hash_opt = relevant_txids[0].1;
285                         let expected_hash = nodes[0].get_block_header(chan_conf_height).block_hash();
286                         assert_eq!(block_hash_opt, Some(expected_hash));
287                         let txid = relevant_txids[0].0;
288                         assert_eq!(txid, chan.3.txid());
289                         nodes[0].node.transaction_unconfirmed(&txid);
290                         assert_eq!(nodes[0].node.list_usable_channels().len(), 0);
291                 } else if connect_style == ConnectStyle::FullBlockViaListen {
292                         disconnect_blocks(&nodes[0], CHAN_CONFIRM_DEPTH - 1);
293                         assert_eq!(nodes[0].node.list_usable_channels().len(), 1);
294                         assert_eq!(nodes[0].node.list_channels()[0].confirmations, Some(1));
295                         disconnect_blocks(&nodes[0], 1);
296                         assert_eq!(nodes[0].node.list_usable_channels().len(), 0);
297                 } else {
298                         disconnect_all_blocks(&nodes[0]);
299                         assert_eq!(nodes[0].node.list_usable_channels().len(), 0);
300                 }
301
302                 let relevant_txids = nodes[0].node.get_relevant_txids();
303                 assert_eq!(relevant_txids.len(), 0);
304
305                 handle_announce_close_broadcast_events(&nodes, 0, 1, true, "Channel closed because of an exception: Funding transaction was un-confirmed. Locked at 6 confs, now have 0 confs.");
306                 check_added_monitors!(nodes[1], 1);
307                 {
308                         let per_peer_state = nodes[0].node.per_peer_state.read().unwrap();
309                         let peer_state = per_peer_state.get(&nodes[1].node.get_our_node_id()).unwrap().lock().unwrap();
310                         assert_eq!(peer_state.channel_by_id.len(), 0);
311                         assert_eq!(nodes[0].node.short_to_chan_info.read().unwrap().len(), 0);
312                 }
313         }
314
315         if reload_node {
316                 // Since we currently have a background event pending, it's good to test that we survive a
317                 // serialization roundtrip. Further, this tests the somewhat awkward edge-case of dropping
318                 // the Channel object from the ChannelManager, but still having a monitor event pending for
319                 // it when we go to deserialize, and then use the ChannelManager.
320                 let nodes_0_serialized = nodes[0].node.encode();
321                 let chan_0_monitor_serialized = get_monitor!(nodes[0], chan.2).encode();
322
323                 reload_node!(nodes[0], *nodes[0].node.get_current_default_configuration(), &nodes_0_serialized, &[&chan_0_monitor_serialized], persister, new_chain_monitor, nodes_0_deserialized);
324                 assert!(nodes[0].tx_broadcaster.txn_broadcasted.lock().unwrap().is_empty());
325         }
326
327         if reorg_after_reload {
328                 if use_funding_unconfirmed {
329                         let relevant_txids = nodes[0].node.get_relevant_txids();
330                         assert_eq!(relevant_txids.len(), 1);
331                         let block_hash_opt = relevant_txids[0].1;
332                         let expected_hash = nodes[0].get_block_header(chan_conf_height).block_hash();
333                         assert_eq!(block_hash_opt, Some(expected_hash));
334                         let txid = relevant_txids[0].0;
335                         assert_eq!(txid, chan.3.txid());
336                         nodes[0].node.transaction_unconfirmed(&txid);
337                         assert_eq!(nodes[0].node.list_channels().len(), 0);
338                 } else if connect_style == ConnectStyle::FullBlockViaListen {
339                         disconnect_blocks(&nodes[0], CHAN_CONFIRM_DEPTH - 1);
340                         assert_eq!(nodes[0].node.list_channels().len(), 1);
341                         assert_eq!(nodes[0].node.list_channels()[0].confirmations, Some(1));
342                         disconnect_blocks(&nodes[0], 1);
343                         assert_eq!(nodes[0].node.list_usable_channels().len(), 0);
344                 } else {
345                         disconnect_all_blocks(&nodes[0]);
346                         assert_eq!(nodes[0].node.list_usable_channels().len(), 0);
347                 }
348
349                 let relevant_txids = nodes[0].node.get_relevant_txids();
350                 assert_eq!(relevant_txids.len(), 0);
351
352                 handle_announce_close_broadcast_events(&nodes, 0, 1, true, "Channel closed because of an exception: Funding transaction was un-confirmed. Locked at 6 confs, now have 0 confs.");
353                 check_added_monitors!(nodes[1], 1);
354                 {
355                         let per_peer_state = nodes[0].node.per_peer_state.read().unwrap();
356                         let peer_state = per_peer_state.get(&nodes[1].node.get_our_node_id()).unwrap().lock().unwrap();
357                         assert_eq!(peer_state.channel_by_id.len(), 0);
358                         assert_eq!(nodes[0].node.short_to_chan_info.read().unwrap().len(), 0);
359                 }
360         }
361         // With expect_channel_force_closed set the TestChainMonitor will enforce that the next update
362         // is a ChannelForcClosed on the right channel with should_broadcast set.
363         *nodes[0].chain_monitor.expect_channel_force_closed.lock().unwrap() = Some((chan.2, true));
364         nodes[0].node.test_process_background_events(); // Required to free the pending background monitor update
365         check_added_monitors!(nodes[0], 1);
366         let expected_err = "Funding transaction was un-confirmed. Locked at 6 confs, now have 0 confs.";
367         check_closed_event!(nodes[1], 1, ClosureReason::CounterpartyForceClosed { peer_msg: UntrustedString(format!("Channel closed because of an exception: {}", expected_err)) });
368         check_closed_event!(nodes[0], 1, ClosureReason::ProcessingError { err: expected_err.to_owned() });
369         assert_eq!(nodes[0].tx_broadcaster.txn_broadcasted.lock().unwrap().len(), 1);
370         nodes[0].tx_broadcaster.txn_broadcasted.lock().unwrap().clear();
371
372         // Now check that we can create a new channel
373         if reload_node && nodes[0].node.per_peer_state.read().unwrap().len() == 0 {
374                 // If we dropped the channel before reloading the node, nodes[1] was also dropped from
375                 // nodes[0] storage, and hence not connected again on startup. We therefore need to
376                 // reconnect to the node before attempting to create a new channel.
377                 nodes[0].node.peer_connected(&nodes[1].node.get_our_node_id(), &Init { features: nodes[1].node.init_features(), remote_network_address: None }, true).unwrap();
378         }
379         create_announced_chan_between_nodes(&nodes, 0, 1);
380         send_payment(&nodes[0], &[&nodes[1]], 8000000);
381 }
382
383 #[test]
384 fn test_unconf_chan() {
385         do_test_unconf_chan(true, true, false, ConnectStyle::BestBlockFirstSkippingBlocks);
386         do_test_unconf_chan(false, true, false, ConnectStyle::BestBlockFirstSkippingBlocks);
387         do_test_unconf_chan(true, false, false, ConnectStyle::BestBlockFirstSkippingBlocks);
388         do_test_unconf_chan(false, false, false, ConnectStyle::BestBlockFirstSkippingBlocks);
389
390         do_test_unconf_chan(true, true, false, ConnectStyle::BestBlockFirstReorgsOnlyTip);
391         do_test_unconf_chan(false, true, false, ConnectStyle::BestBlockFirstReorgsOnlyTip);
392         do_test_unconf_chan(true, false, false, ConnectStyle::BestBlockFirstReorgsOnlyTip);
393         do_test_unconf_chan(false, false, false, ConnectStyle::BestBlockFirstReorgsOnlyTip);
394 }
395
396 #[test]
397 fn test_unconf_chan_via_listen() {
398         do_test_unconf_chan(true, true, false, ConnectStyle::FullBlockViaListen);
399         do_test_unconf_chan(false, true, false, ConnectStyle::FullBlockViaListen);
400         do_test_unconf_chan(true, false, false, ConnectStyle::FullBlockViaListen);
401         do_test_unconf_chan(false, false, false, ConnectStyle::FullBlockViaListen);
402 }
403
404 #[test]
405 fn test_unconf_chan_via_funding_unconfirmed() {
406         do_test_unconf_chan(true, true, true, ConnectStyle::BestBlockFirstSkippingBlocks);
407         do_test_unconf_chan(false, true, true, ConnectStyle::BestBlockFirstSkippingBlocks);
408         do_test_unconf_chan(true, false, true, ConnectStyle::BestBlockFirstSkippingBlocks);
409         do_test_unconf_chan(false, false, true, ConnectStyle::BestBlockFirstSkippingBlocks);
410
411         do_test_unconf_chan(true, true, true, ConnectStyle::BestBlockFirstReorgsOnlyTip);
412         do_test_unconf_chan(false, true, true, ConnectStyle::BestBlockFirstReorgsOnlyTip);
413         do_test_unconf_chan(true, false, true, ConnectStyle::BestBlockFirstReorgsOnlyTip);
414         do_test_unconf_chan(false, false, true, ConnectStyle::BestBlockFirstReorgsOnlyTip);
415
416         do_test_unconf_chan(true, true, true, ConnectStyle::FullBlockViaListen);
417         do_test_unconf_chan(false, true, true, ConnectStyle::FullBlockViaListen);
418         do_test_unconf_chan(true, false, true, ConnectStyle::FullBlockViaListen);
419         do_test_unconf_chan(false, false, true, ConnectStyle::FullBlockViaListen);
420 }
421
422 #[test]
423 fn test_set_outpoints_partial_claiming() {
424         // - remote party claim tx, new bump tx
425         // - disconnect remote claiming tx, new bump
426         // - disconnect tx, see no tx anymore
427         let chanmon_cfgs = create_chanmon_cfgs(2);
428         let node_cfgs = create_node_cfgs(2, &chanmon_cfgs);
429         let node_chanmgrs = create_node_chanmgrs(2, &node_cfgs, &[None, None]);
430         let nodes = create_network(2, &node_cfgs, &node_chanmgrs);
431
432         let chan = create_announced_chan_between_nodes_with_value(&nodes, 0, 1, 1000000, 59000000);
433         let (payment_preimage_1, payment_hash_1, _) = route_payment(&nodes[1], &[&nodes[0]], 3_000_000);
434         let (payment_preimage_2, payment_hash_2, _) = route_payment(&nodes[1], &[&nodes[0]], 3_000_000);
435
436         // Remote commitment txn with 4 outputs: to_local, to_remote, 2 outgoing HTLC
437         let remote_txn = get_local_commitment_txn!(nodes[1], chan.2);
438         assert_eq!(remote_txn.len(), 3);
439         assert_eq!(remote_txn[0].output.len(), 4);
440         assert_eq!(remote_txn[0].input.len(), 1);
441         assert_eq!(remote_txn[0].input[0].previous_output.txid, chan.3.txid());
442         check_spends!(remote_txn[1], remote_txn[0]);
443         check_spends!(remote_txn[2], remote_txn[0]);
444
445         // Connect blocks on node A to advance height towards TEST_FINAL_CLTV
446         // Provide node A with both preimage
447         nodes[0].node.claim_funds(payment_preimage_1);
448         expect_payment_claimed!(nodes[0], payment_hash_1, 3_000_000);
449         nodes[0].node.claim_funds(payment_preimage_2);
450         expect_payment_claimed!(nodes[0], payment_hash_2, 3_000_000);
451         check_added_monitors!(nodes[0], 2);
452         nodes[0].node.get_and_clear_pending_msg_events();
453
454         // Connect blocks on node A commitment transaction
455         mine_transaction(&nodes[0], &remote_txn[0]);
456         check_closed_broadcast!(nodes[0], true);
457         check_closed_event!(nodes[0], 1, ClosureReason::CommitmentTxConfirmed);
458         check_added_monitors!(nodes[0], 1);
459         // Verify node A broadcast tx claiming both HTLCs
460         {
461                 let mut node_txn = nodes[0].tx_broadcaster.txn_broadcasted.lock().unwrap();
462                 // ChannelMonitor: claim tx
463                 assert_eq!(node_txn.len(), 1);
464                 check_spends!(node_txn[0], remote_txn[0]);
465                 assert_eq!(node_txn[0].input.len(), 2);
466                 node_txn.clear();
467         }
468
469         // Connect blocks on node B
470         connect_blocks(&nodes[1], TEST_FINAL_CLTV + LATENCY_GRACE_PERIOD_BLOCKS + 1);
471         check_closed_broadcast!(nodes[1], true);
472         check_closed_event!(nodes[1], 1, ClosureReason::CommitmentTxConfirmed);
473         check_added_monitors!(nodes[1], 1);
474         // Verify node B broadcast 2 HTLC-timeout txn
475         let partial_claim_tx = {
476                 let mut node_txn = nodes[1].tx_broadcaster.unique_txn_broadcast();
477                 assert_eq!(node_txn.len(), 3);
478                 check_spends!(node_txn[0], chan.3);
479                 check_spends!(node_txn[1], node_txn[0]);
480                 check_spends!(node_txn[2], node_txn[0]);
481                 assert_eq!(node_txn[1].input.len(), 1);
482                 assert_eq!(node_txn[2].input.len(), 1);
483                 assert_ne!(node_txn[1].input[0].previous_output, node_txn[2].input[0].previous_output);
484                 node_txn.remove(1)
485         };
486
487         // Broadcast partial claim on node A, should regenerate a claiming tx with HTLC dropped
488         mine_transaction(&nodes[0], &partial_claim_tx);
489         {
490                 let mut node_txn = nodes[0].tx_broadcaster.txn_broadcasted.lock().unwrap();
491                 assert_eq!(node_txn.len(), 1);
492                 check_spends!(node_txn[0], remote_txn[0]);
493                 assert_eq!(node_txn[0].input.len(), 1); //dropped HTLC
494                 node_txn.clear();
495         }
496         nodes[0].node.get_and_clear_pending_msg_events();
497
498         // Disconnect last block on node A, should regenerate a claiming tx with HTLC dropped
499         disconnect_blocks(&nodes[0], 1);
500         {
501                 let mut node_txn = nodes[0].tx_broadcaster.txn_broadcasted.lock().unwrap();
502                 assert_eq!(node_txn.len(), 1);
503                 check_spends!(node_txn[0], remote_txn[0]);
504                 assert_eq!(node_txn[0].input.len(), 2); //resurrected HTLC
505                 node_txn.clear();
506         }
507
508         //// Disconnect one more block and then reconnect multiple no transaction should be generated
509         disconnect_blocks(&nodes[0], 1);
510         connect_blocks(&nodes[0], 15);
511         {
512                 let mut node_txn = nodes[0].tx_broadcaster.txn_broadcasted.lock().unwrap();
513                 assert_eq!(node_txn.len(), 0);
514                 node_txn.clear();
515         }
516 }
517
518 fn do_test_to_remote_after_local_detection(style: ConnectStyle) {
519         // In previous code, detection of to_remote outputs in a counterparty commitment transaction
520         // was dependent on whether a local commitment transaction had been seen on-chain previously.
521         // This resulted in some edge cases around not being able to generate a SpendableOutput event
522         // after a reorg.
523         //
524         // Here, we test this by first confirming one set of commitment transactions, then
525         // disconnecting them and reconnecting another. We then confirm them and check that the correct
526         // SpendableOutput event is generated.
527         let chanmon_cfgs = create_chanmon_cfgs(2);
528         let node_cfgs = create_node_cfgs(2, &chanmon_cfgs);
529         let node_chanmgrs = create_node_chanmgrs(2, &node_cfgs, &[None, None]);
530         let mut nodes = create_network(2, &node_cfgs, &node_chanmgrs);
531
532         *nodes[0].connect_style.borrow_mut() = style;
533         *nodes[1].connect_style.borrow_mut() = style;
534
535         let (_, _, chan_id, funding_tx) =
536                 create_announced_chan_between_nodes_with_value(&nodes, 0, 1, 1_000_000, 100_000_000);
537         let funding_outpoint = OutPoint { txid: funding_tx.txid(), index: 0 };
538         assert_eq!(funding_outpoint.to_channel_id(), chan_id);
539
540         let remote_txn_a = get_local_commitment_txn!(nodes[0], chan_id);
541         let remote_txn_b = get_local_commitment_txn!(nodes[1], chan_id);
542
543         mine_transaction(&nodes[0], &remote_txn_a[0]);
544         mine_transaction(&nodes[1], &remote_txn_a[0]);
545
546         assert!(nodes[0].node.list_channels().is_empty());
547         check_closed_broadcast!(nodes[0], true);
548         check_added_monitors!(nodes[0], 1);
549         check_closed_event!(nodes[0], 1, ClosureReason::CommitmentTxConfirmed);
550         assert!(nodes[1].node.list_channels().is_empty());
551         check_closed_broadcast!(nodes[1], true);
552         check_added_monitors!(nodes[1], 1);
553         check_closed_event!(nodes[1], 1, ClosureReason::CommitmentTxConfirmed);
554
555         assert!(nodes[0].chain_monitor.chain_monitor.get_and_clear_pending_events().is_empty());
556         assert!(nodes[1].chain_monitor.chain_monitor.get_and_clear_pending_events().is_empty());
557
558         disconnect_blocks(&nodes[0], 1);
559         disconnect_blocks(&nodes[1], 1);
560
561         assert!(nodes[0].tx_broadcaster.txn_broadcasted.lock().unwrap().is_empty());
562         assert!(nodes[1].tx_broadcaster.txn_broadcasted.lock().unwrap().is_empty());
563         assert!(nodes[0].chain_monitor.chain_monitor.get_and_clear_pending_events().is_empty());
564         assert!(nodes[1].chain_monitor.chain_monitor.get_and_clear_pending_events().is_empty());
565
566         connect_blocks(&nodes[0], ANTI_REORG_DELAY - 1);
567         connect_blocks(&nodes[1], ANTI_REORG_DELAY - 1);
568
569         assert!(nodes[0].tx_broadcaster.txn_broadcasted.lock().unwrap().is_empty());
570         assert!(nodes[1].tx_broadcaster.txn_broadcasted.lock().unwrap().is_empty());
571         assert!(nodes[0].chain_monitor.chain_monitor.get_and_clear_pending_events().is_empty());
572         assert!(nodes[1].chain_monitor.chain_monitor.get_and_clear_pending_events().is_empty());
573
574         mine_transaction(&nodes[0], &remote_txn_b[0]);
575         mine_transaction(&nodes[1], &remote_txn_b[0]);
576
577         assert!(nodes[0].tx_broadcaster.txn_broadcasted.lock().unwrap().is_empty());
578         assert!(nodes[1].tx_broadcaster.txn_broadcasted.lock().unwrap().is_empty());
579         assert!(nodes[0].chain_monitor.chain_monitor.get_and_clear_pending_events().is_empty());
580         assert!(nodes[1].chain_monitor.chain_monitor.get_and_clear_pending_events().is_empty());
581
582         connect_blocks(&nodes[0], ANTI_REORG_DELAY - 1);
583         connect_blocks(&nodes[1], ANTI_REORG_DELAY - 1);
584
585         let mut node_a_spendable = nodes[0].chain_monitor.chain_monitor.get_and_clear_pending_events();
586         assert_eq!(node_a_spendable.len(), 1);
587         if let Event::SpendableOutputs { outputs } = node_a_spendable.pop().unwrap() {
588                 assert_eq!(outputs.len(), 1);
589                 let spend_tx = nodes[0].keys_manager.backing.spend_spendable_outputs(&[&outputs[0]], Vec::new(),
590                         Builder::new().push_opcode(opcodes::all::OP_RETURN).into_script(), 253, &Secp256k1::new()).unwrap();
591                 check_spends!(spend_tx, remote_txn_b[0]);
592         }
593
594         // nodes[1] is waiting for the to_self_delay to expire, which is many more than
595         // ANTI_REORG_DELAY. Instead, walk it back and confirm the original remote_txn_a commitment
596         // again and check that nodes[1] generates a similar spendable output.
597         // Technically a reorg of ANTI_REORG_DELAY violates our assumptions, so this is undefined by
598         // our API spec, but we currently handle this correctly and there's little reason we shouldn't
599         // in the future.
600         assert!(nodes[1].chain_monitor.chain_monitor.get_and_clear_pending_events().is_empty());
601         disconnect_blocks(&nodes[1], ANTI_REORG_DELAY);
602         mine_transaction(&nodes[1], &remote_txn_a[0]);
603         connect_blocks(&nodes[1], ANTI_REORG_DELAY - 1);
604
605         let mut node_b_spendable = nodes[1].chain_monitor.chain_monitor.get_and_clear_pending_events();
606         assert_eq!(node_b_spendable.len(), 1);
607         if let Event::SpendableOutputs { outputs } = node_b_spendable.pop().unwrap() {
608                 assert_eq!(outputs.len(), 1);
609                 let spend_tx = nodes[1].keys_manager.backing.spend_spendable_outputs(&[&outputs[0]], Vec::new(),
610                         Builder::new().push_opcode(opcodes::all::OP_RETURN).into_script(), 253, &Secp256k1::new()).unwrap();
611                 check_spends!(spend_tx, remote_txn_a[0]);
612         }
613 }
614
615 #[test]
616 fn test_to_remote_after_local_detection() {
617         do_test_to_remote_after_local_detection(ConnectStyle::BestBlockFirst);
618         do_test_to_remote_after_local_detection(ConnectStyle::BestBlockFirstSkippingBlocks);
619         do_test_to_remote_after_local_detection(ConnectStyle::BestBlockFirstReorgsOnlyTip);
620         do_test_to_remote_after_local_detection(ConnectStyle::TransactionsFirst);
621         do_test_to_remote_after_local_detection(ConnectStyle::TransactionsFirstSkippingBlocks);
622         do_test_to_remote_after_local_detection(ConnectStyle::TransactionsFirstReorgsOnlyTip);
623         do_test_to_remote_after_local_detection(ConnectStyle::FullBlockViaListen);
624 }